964年娶苏珊·爱伦·哈瑟利（Susan Ellen Hatherly）为妻，两人育有一子两女。麦若彬的妻子本身拥有西班牙语的学位，随夫到罗马工作期间，亦学会了意大利语，而他们的两名女儿也是在罗马出生。麦若彬的兴趣包括音乐和阅读，晚年也爱弄孙为乐。他是香港会和牛津及剑桥会的会员。