Costruito, per volere di Federico IIm su un isolotto circondato dal mare tra il 1239 e il 1250 fu la principale opera militare della città e un importante cardine per la difesa delle coste. La lava dell'eruzione del 1669 lo raggiunse separandolo definitivamente dal mare. Successivamente subì forti danni dai terremoti del 1693 e del 1818. Nel 1837 venne trasformato in prigione. Oggi è sede del Museo Civico. L'edificio ha una pianta quadrata con un torrione di 30 metri ad ogni angolo e con torri semicilindriche situate a metà di ciascun lato permetrale. Sull'ingresso è visibile lo stemma Svevo: un'aquila che artiglia una lepre.