La Casa del Ermitaño está situada en la calle Pedro Alcarria, número 8, junto a la Ermita de la Santísima Virgen del Castillo, Patrona local.
La actual vivienda del Ermitaño es una construcción del 1971, edificada sobre la anterior casa ya en ruinas. Es una edificación de una sola planta, con una superficie construida de ciento cuatro metros cuadrados y útil de noventa metros.
Se compone de cuatro dormitorios, comedor, cocina, baño y aseo con pequeño corral al fondo. Esta inscrita en el registro de la propiedad de chiva, T286: F159; Fnº 13308; I2ª
Esta casa está destinada para vivienda del ermitaño y su familia. El ermitaño tiene la misión de la acogida a los peregrinos y vecinos que se acercan al santuario de Ntra. Patrona. Así mismo, están encargados de la atención al Santuario de la Virgen, limpieza, cuidado, apertura y cierre del Santuario, así como atención a los sacerdotes en la preparación de los útiles de la liturgia o el toque de campanas para las celebraciones.