Tras casarse y divorciarse en dos ocasiones de Joyce Mathews, una corista, Berle se casó en 1953 con Ruth Cosgrove, una antigua publicista, que falleció en 1989.