寛永17年(1640年)には約12,000坪(約40,000m2)の敷地に小杉御殿が建てなおされた。