Die klassieke uitspraak van baron Van Imhoff in 1743, naamlik, dat hy diep geskok en besorg is oor die “grote sorgeloosheid en onwetendheid” van die Swartland se bevolking, was die groot dryfveer agter die groei en ontwikkeling van die onderwys hier.
Die seunskool se getalle neem sodanig toe dat die skool in 1909 tot ‘n hoërskool verklaar word met die naam “Hogerchool voor Jongens”. In 1912 word die huidige hoërskoolgebou in gebruik geneem en die naam van die skool het later verafrikaans tot Die Hoër Jongenskool.
Die meisieskool het aanvanklik net tot “School Higher” (graad 10) gegaan en dan moes die dogter na die seunskool gaan om hulle graad 12 sertifikaat te verwerf. In 1918 word die meisieskool ook ‘n volwaardige hoërskool.
Aan die begin van die veertigerjare kom daar al meer hoërskole in die omliggende dorpe tot stand, wat ‘n daling in beide skole se getalle veroorsaak. Die twee plaaslike skole amalgameer in 1944 en die hoërskool, wat bekend sou staan as die Hoërskool Swartland, sou die gebou van die seunskool gebruik. Die primêre skool, bekend onder die nuwe naam Laerskool Swartland, sou in die meisieskool gehuisves word.