De første tiårene ble Grafikk- og tegningsamlingen hovedsakelig bygget opp ved private samleres bidrag. Blant de viktigste bidragsyterne var blant andre Carl Melchior Stang, Sophus Larpent, Ludvig Wilhelm Dahl og Johan Ludvig Malthe. Senere betydelige bidrag har kommet inn ved blant andre Elias Fegerstehn og Arild Wahlstrøm.