Sobre el recinto íbero-romano de Giribaile se levantó otro castillo fortaleza por los moros. En 1170 los almohades controlaban el castillo.

Fue construida en tiempos de la Reconquista bajo la advocación de Santo Domingo de Silos, redentor de cautivos, y fue la sede de la primitiva Parroquia Mayor de La Iruela.

Fechada su construcción entre los siglos VI - VII d. C.; lo conforman tres cuevas excavadas en la roca.