Enrique Cock, que viajó en el séquito de Felipe II, cuando vino este a cerrar las Cortes de Tarazona, dejó constancia en 1592 en “La jornada de Tarazona” de la siguiente impresión:

......A mí me cupo de yr a dormir en Los Fayos, pueblo pequeño y de poca vezindad, empero lugar de los más raros que yo ví en España,.....Tiene házia la parte del norte colgado encima del lugar un serro bien alto, y tan ygual como si fuesse desde arriba hasta abaxo cortado con un cuchillo, que paresce cosa de gran misterio, que si una sola piedrecita cae de arriba ha de dar sobre alguna casa,... y tiembla la persona abaxo en veer la altura, que para subir en lo alto, donde solía estar un castillo, y aun se veen las ruynas dél, tiene menester la persona media hora. Junto al lugar está una huerta hermossisima, y no lexos de la yglesia, en una casa particular, está una spelunca grande en la misma sierra, donde se sube con dificultad con una mala escalera, en la cual tienen los de esta comarca opinión que solía vivir el famoso pastor y ladrón Caco, que hurtó a Hercules sus bueyes...Sea lo que fuere paresce cosa antigua y meresce que cualquier curioso lo vea....”