Mantuvo una relación tirante con la esposa de Franco, Carmen Polo, debido a su insistencia en mostrarle el Madrid histórico de los Austrias y los Borbones en lugar de los hospitales públicos y los barrios obreros o «barrios de chabolas».