Fijan su asiento en San Clemente, en casas de artísticas portadas, rematadas por sus escudos de armas, las principales familias hidalgas de la comarca, cuyos apellidos han quedado reflejados en la "relación de pueblos del Obispado de Cuenca", entre los que cabe destacar a la familia Haro, cuyos importantes miembros dejaron muestra en varios edificios de su paso por la población.