戴维斯为山缪·艾摩瑞·戴维斯（Samuel Emory Davis）与其妻珍（Jane）所生十个子女中排名最末者。其家族于美国历史中源远流长。戴维斯的祖父自威尔斯移民美国，曾居住于维吉尼亚州与马里兰州，担任公职人员。其父与其叔伯于美国独立战争中曾加入大陆军，与乔治亚骑兵作战，并于萨瓦那之围时担任步兵军官。其兄长亦曾入伍服役。于1812年战争中，他有三名哥哥与英军作战，其中两名为隶属安德鲁·杰克森麾下，因于纽奥良之役中作战英勇而获杰克森本人表扬。戴维斯幼时，全家曾迁移数次。1811年搬至路易西安那州的圣