920年代及1930年代与伦敦德里侯爵夫人的关系更在工党内有所非议，理由是伦敦德里侯爵是保守党阁揆，故麦克唐纳尤其不应与其夫人过从甚密。麦克唐纳的兴趣包括步行和高尔夫球，并曾经是马里高球会（Moray Golf Club）会员。可是，由于该会在第一次世界大战时认为麦克唐纳的反战立场对该会做成声誉受损，结果在1916年取消他的会籍。对于被逐出会一事，高球会内一直有会员感到遗憾，并在1924年发起特别大会，试图透过投票恢复其会籍，但不成功。在1929年，该会再次举行投票，决定恢复其会籍，但这次已第二度任相的