El castillo está situado en la cumbre de una roca de forma ovalada, de unos 25 metros de longitud por 4 de anchura. Está compuesto por dos torres rectangulares, una en cada extremo del peñasco y unidas entre sí por dos muros paralelos levantados sobre los bordes de la roca. Ambas torres, que presentan similar aparejo de sillería, fueron construidas en la misma época. Sin embargo existen diferencias entre ellas. La torre orientada hacia el oeste, situada en un nivel más alto, tiene planta rectangular, de unos 6 por 4 metros. Su puerta de ingreso mira hacia la otra torre. Sobre ella hay una ventana con arco de medio punto y varias saeteras. La segunda torre es algo más robusta y tiene planta trapezoidal. La puerta está situada también en alto, frente a la otra torre.  En la base del lado norte quedan vestigios de un aljibe. Al pie de la peña, al lado del camino, quedan restos de construcciones, seguramente casas, de época incierta. También muy cercana está la ermita románica de Santa Quiteria, que formaba parte del mismo conjunto.