Rory nació en la ciudad de Nueva York, hijo de Patricia Brentrup y Cristopher 'Kit' Culkin, como el más joven de siete hermanos; cuatro son hombres, Shane, Macaulay, Kieran y Christian, y sus dos hermanas son Dakota y Quinn; también es sobrino de Bonnie Bedelia.