I 1927 giftet hun seg med saksofonisten John Williams. Hun møtte ham på en forestilling i Cleveland hvor han var leder av sin gruppe, Syncopators, og flyttet med ham til Memphis, Tennessee. John satte sammen et band i Memphis, som inkluderte Mary på piano. I 1929 aksepterte John en invitasjon til å spille med Andy Kirks gruppe i Oklahoma City, og overlot til 19 år gamle Mary å lede hans band i Memphis de gjenværende konserter. Williams fulgte etterhvert med sin mann til Oklahoma City, men fikk ikke spille med bandet. Gruppen, som idag huskes som Andy Kirks Twelve Clouds of Joy, flyttet til Tulsa, Oklahoma, der Mary brukte deler av sin fritid på å transportere døde for et begravelsesbyrå for å spe på inntektene. Da Clouds of Joy fikk et langvarig oppdrag i Kansas City, Missouri, ble hun med mannen der og begynte å opptre med bandet, samt fungere som deres arrangør og komponist. Hun leverte Kirk sanger som «Walkin' and Swingin'», «Twinklin'», «Cloudy», «Little Joe from Chicago» med flere.