Les ruïnes del castell d'Olcaf es troben sobre la població, en un xicotet turó, actualment el castell està en ruïnes, però inclús conserva part de les seues torres i murs. Es tracta d'un castell tipus muntanyés i mitjà port, estret i llarg de planta irregular, posseïx dos recintes: un el que ho forma la torre prismàtica i l'aljub i l'altre la torre Principal. Està construït amb la mateixa pedra que la de la muntanya, i a penes s'observen les restes si un no s'acosta a la cima de la muntanya.