With the Beatles
1963年11月22日にパーロフォンから発売された『ウィズ・ザ・ビートルズ』に、「ドント・バザー・ミー」は「オール・マイ・ラヴィング」と「リトル・チャイルド」の間である4曲目に収録された。アメリカでは1964年1月20日にキャピトル・レコードから発売された『ミート・ザ・ビートルズ』のB面2曲目に収録された。音楽評論家のは、本作について「一般的に曲の評判は悪く、ハリスン自身もこの曲について否定的だ」と書いており、ハリスンは「良い曲だとは思わないし、そもそも『曲』と呼べるものですらないかもしれないけど、書き続けることが大事だということはわかった」と語っている。音楽評論家のは、本作について「ソングライティングのデビュー曲としては弱い」としたうえで、「欠陥があるにもかかわらず、グルーヴを見出したビートルズのグループとしての強さを示している曲」と評している。一方で、は本作を好意的に見ており、「『ウィズ・ザ・ビートルズ』の中で最高の楽曲」「期待できる初演」と評している。