Koninklijke Academie van Beeldende Kunsten
Vrolijk war anfangs Schüler seines Bruders Jacobus Adriaan Vrolijk (1834–1862), studierte an der Koninklijke Academie van Beeldende Kunsten in Den Haag und bei Pieter Stortenbeker (1828–1898).