Speer estuvo implicado virtualmente en este proyecto desde el principio porque se le había encargado renovar el palacio Borsig en la esquina entre la "Voßstraße" y la "Wilhelmstraße" para servir como cuartel general de las "SA", las cuales iban a ser trasladadas desde Múnich a Berlín tras la purga de Ernst Röhm.