·卢托斯瓦夫斯基的父母是波兰的贵族，他们一家在波兰的波德拉谢省沃姆扎县的德罗佐沃村（Drozdowo）拥有庄园。他的父亲约瑟夫·卢托斯瓦夫斯基（Józef Lutosławski）参与了波兰的民族民主党（民族民主运动），而且他们一家与该党创始人之一罗曼·德莫夫斯基关系甚密，维托尔德·卢托斯瓦夫斯基就采用了创始人的名“罗曼”为中间名。1904年，约瑟夫在苏黎世读书时认识了玛丽亚·奥尔塞夫斯卡（Maria Olszewska），后来玛丽亚也成为了维托尔德·卢托斯瓦夫斯基的母亲。约瑟夫离开苏黎世后，在伦敦继续他的