家庭.罗斯于1802年12月9日娶伊丽莎白·凯瑟琳·格拉斯科克（Elizabeth Catherine Glascock）为妻，两人十分恩爱。当他在负伤后，其妻只身一人从西班牙毕尔巴鄂出发，翻越白雪皑皑的比利牛斯山来到法国圣让德吕兹前来照顾。启程远征美国前，他曾向妻子保证这将是他打的最后一仗。罗斯夫妇都十分热衷音乐。在准备点火焚烧白宫时，他特意从里面抢救出一台钢琴，以便麦迪逊夫人能再次演奏。两人膝下有两个儿子和一个女儿长大成人。该家族的最后一位男性后裔是其孙约翰·福斯特·乔治·布