Bytårnet skole ble bygget i 1961. Moss realskole flyttet inn der og avlastet på den måten vår skole. Endringene i innhold førte også til en navneendring i 1964 til «Moss gymnas». Det ble også vedtatt å bygge ut skolen, og i 1965 sto midtbygget ferdig.