En el antiguo sitio de Almudèfer se encuentran todavía los restos del antiguo castillo con una torre de planta rectangular.

Al pie de la fortaleza se encuentra la iglesia de Santa Anna, con un ábside poligonal gótico del siglo XIV. De origen árabe, pasó a dominación cristiana tras la reconquista. De hecho, en el año 1280 el mando templario de Miravet concedió el cortijo de Mudèfer a dos vecinos de Horta para que lo repoblaran.

El castillo sufrió un incendio a mediados del siglo pasado, y en esa época el lugar todavía era habitado.