Rustad var født i Kristiansand og tok i 1924. Han begynte opprinnelig på medisinerstudiet i Oslo og utdannet seg samtidig som musiker (cellist). Han ble ansatt som cellist i radioens første radioensemble og ble etterhvert ansvarlig for NRKs musikkavdeling.