家中长子。他父亲金洪祚和母亲朴富连在生下他后又添了两男五女，但两个儿子都因麻疹夭折。金泳三因此成为家中的独苗。金洪祚在外浦里有一个人工养殖场和十多条渔船。金泳三祖籍金宁，是新罗宗姓敬顺王第八代子孙金时兴的后裔。金泳三的祖父金东玉是村里最早信奉和传播基督教的人，自建有“新明教会”。外浦里离李舜臣朝鲜水师的大本营，以及昔日玉浦大捷的战场不远。金东玉经常给他讲李舜臣的故事，对他影响很大。
学生时代.金泳三5岁的时候被祖父送到私塾学习，后在外浦里小学和长木小学学习。小学毕业后，金泳三进