Greven opptrådte etterhvert som mesén for teater og musikk, og i likhet med sin far og eldre søstre Magdalene Sibylle og Auguste Magdalene, prøvde han seg som salmedikter. Ernst Ludvig komponerte marsjer og spilte gambe. Hans kapellmester var Christoph Graupner. I 1723 søkte denne stilling som kantor ved Thomaskirken i Leipzig, men Ernst Ludvig lot ham ikke forlate stillingen.