Rolfsens sjefstid faller i stor grad sammen med hovedstadens store ekspansjonsperiode. I 1948 blei Oslo og Aker slått sammen, og de følgende tiåra blei prega av den store utbygginga av drabantbyene. I samme periode skjedde også svære endringer innen transporten, både med frislipp av bilsalget i 1960 og den store utbygginga av T-banenettet. Som sjef stod Rolfsen sentralt i utarbeidelsen av generalplanene for Oslo i 1950 og 1960. Fra 1948 til 1964 var han formann i byplanrådet, og fra 1950 til 1970 var han medlem av regionplankomiteen for Oslo og Akershus.