后，与前两位妻子离婚，与陈国容结婚。柯灵与前两位妻子有9个子女。
柯灵与张爱玲.1943-1944年，张爱玲的小说《心经》、《琉璃瓦》、《连环套》在柯灵主编的《万象》杂志发表。1945年，柯灵曾被日本宪兵队逮捕，为胡兰成、张爱玲夫妇营救。据张爱玲的自传小说《小团圆》指出，柯灵本来对她很好，而她们夫妻也曾在其被捕时营救他（胡兰成提过这件事，柯灵承认是自己）。但在胡兰成落难后张爱玲随之变为「汉奸的女人」时，柯灵却伺机于公车上对之性骚扰。1982年，柯灵写《遥寄张爱玲》。