Il Castello Aragonese (1470), fatto costruire da Alfonso I, fu completamente modificato ad uso di caserma di cavalleria per volere di Carlo III di Borbone, nel 1750.

L’originaria struttura quattrocentesca venne così avvolta da una cortina muraria, cui furono aggiunti quattro corpi angolari, destinati ad ospitare le scale.

Ceduto al Ministero di Grazia e Giustizia, subì ulteriori trasformazioni per essere adibito, nel 1934, alla nuova funzione di Ospedale Psichiatrico Giudiziario.

Attualmente ospita una prestigiosa Scuola per Agenti di Polizia Penitenziaria.