Propuso matrimonio a las dos veces divorciada Betty White, a quien conoció en "Password", casándose con ella el 14 de junio de 1963, matrimonio que duró hasta el fallecimiento de Ludden.