La ermita fue construida a mediados del siglo XVI en estilo gótico flamígero, gracias al impulso de la poderosa familia Borja, una de las más influyentes de la historia valenciana. En el edificio todavía se conservan elementos heráldicos relacionados con los Borja, la ciudad de Xàtiva y el antiguo Reino de Valencia.

Según la tradición popular, desde este monte el rey Jaume I contempló por primera vez el Castillo de Xàtiva antes de la conquista cristiana de la ciudad, una leyenda que ha contribuido a aumentar el valor simbólico del lugar.

Durante el siglo XX la ermita estuvo a punto de desaparecer para dar paso a una instalación de telecomunicaciones. La oposición vecinal y la presión social evitaron su demolición y permitieron que en la década de 1980 fuera restaurada y recuperara su aspecto original.