La construcció fou ordenada per Carles I després del saqueig del 1535 i construït des del 1555 per l’arquitecte italià Giambattista Calvi, però no s’acabà fins el 1608. Ben aviat sorgí davant els glacis del castell sa Raval de Sant Felip (o de Sant Felipet), actualment lligada a la vida i a la guarnició militars. El 1756 restà molt afectat per l’acció de set setmanes de setge per part dels francesos, en apoderar-se de l’illa; el 1763 els anglesos el referen. El 1781 constava de 4 forts, 4 baluards, 4 revellins, envoltat tot plegat per uns enormes valls. El castell fou enderrocat per ordre del govern borbònic en dues etapes, el 1782 i en 1803-05, després de la segona i la tercera dominacions britàniques, error que obligà a la substitució d’aquesta fortalesa pel castell o fort de la Mola, acabat el 1852.