Tuvo que dimitir por su pasado nazi en que diseñó campos de concentración, no fue hasta 1966 que las acusaciones comenzaron a ser hecha por fuentes de la DDR que tenía por lo menos tenido conocimiento de la utilización de mano de obra esclava en sus proyectos; los planes de construcción que llevan su firma y que contienen bloques barracones del campo de concentración fueron avanzadas como prueba de su complicidad, pero estos fueron hechos fueron desmentidos en Occidente como la propaganda de Alemania Oriental [1] Sin embargo, el potencial escándalo amenazó con dañar la oficina del Presidente Federal.; en 1968 Lübke anunció que renunciaría al año siguiente, su dimisión en vigor tres meses antes del final programado de su mandato.