Taskeblomst er utbredt i østlige Nord-Amerika fra Minnesota, Michigan, Ontario og Québec i nord til Texas og Florida i sør. Busken vokser som undervegetasjon i furu- og eikeskog og på prærie. Andre arter i denne undervegetasjonen er krypberglyng, nebbhassel, søtmispel, einstape, stripelønn, kvitmaure og arter i bjørnebær- og roseslektene.