Se trata de un recinto fortificado sobre una formación rocosa que destaca sobre el horizonte. Los restos más antiguos datan del siglo IX, este castillo se sitúa irregularmente sobre un elevado espolón calizo, coronando la población, desde el que se domina un vado del Guadiato, inmediatamente después de su salida de Sierra Boyera.

La arquitectura militar del castillo data del siglo XIV dada la forma circular de sus torres de la cerca. El acceso a la fortaleza se produce en recodo defendido por una torre de albarrana. El castillo conserva hoy un aljibe con bóveda de cañón y una gran Torre del Homenaje que se desarrolla en dos plantas compartimentadas en varias salas, rematándose su cubierta en cuatro matacanes de los que hoy solo se pueden apreciar dos. La Torre del Homenaje estaba protegida en su acceso por una pequeña barbacana. El recinto tiene forma alargada. Existen algunos restos de edificaciones posteriores.

La subida al castillo se inicia en la calle Empinada, junto la ermita de la Virgen del Castillo, poco más arriba, se encuentra un arco reciente de rojiza piedra enmarcada, desde aquí ofrece el castillo mejor apariencia que visto de cerca: sus muros, jalonados por salientes torres cilíndricas, se asientan dominadoramente sobre la desnuda base de erosionadas rocas, que forman, arriba, una pared y luego descienden en rampa hasta los últimos tejados del pueblo.