Su origen fue musulmán, siendo conquistado por el Cid en 1090. El monarca Jaime I le concedió el castillo al obispo de Tortosa en 1233, por la eficaz ayuda que recibió de éste durante la reconquista de Valencia. Fue abandonado en el siglo XVI. El castillo, situado en lo alto de un cerro, domina toda la costa de Cabanes; aunque actualmente se encuentra en ruinas, todavía conserva restos de muros y ruinas del poblado y varios arcos apuntados y de medio punto.