La planta del palacio es rectangular y en su centro se sitúa la vieja torre de los Sarmientos, puramente defensiva.