El castillo de la peña se encuentra en la cima del peñón que le da nombre, el cual está situado junto al núcleo urbano de Martos.