Il Castello di Sant'Alessio è una fortezza saracena eretta nel XII secolo per volere di Alessio I Comneno, imperatore bizantino che lottò contro i Normanni e i Turchi. Fu costruito sul promontorio roccioso di Capo Sant'Alessio, in posizione altamente strategica; motivo per cui subì nel corso dei secoli diverse dominazioni, con i Normanni che lo ingrandirono e rafforzarono e con gli Inglesi che nell'Ottocento, per difendere la costa dagli attacchi dei Francesi, lo ristrutturarono costruendo la cinta muraria esterna. La collocazione del maniero a strapiombo sul mare è talmente suggestiva da aver ispirato numerosi politici e scrittori. Con il mutare dei secoli il castello perse piano piano ogni finalità difensiva e nel 1900 diventò proprietà di Giovanni Impellizzeri.