L’abbazia venne edificata, per volontà della famiglia Doria, nel XIII secolo sul fianco meridionale di una più antica costruzione di cui rimangono il chiostro e pochi altri elementi. Durante il corso della storia l'edificio subì diverse modifiche strutturali molto importanti quali l’aggiunta di un piano nel 1100. Nel XVI secolo venne invece edificato il torrione di avvistamento a forma di quadrato che svetta sulla baia. Particolarmente interessante è la cupola bizantina decorata con 17 piccole arcate in pietra e la grande torre ottagonale. L’abbazia fu in seguito abbandonata dai monaci e utilizzata come abitazione.