劉孝綽の一族は、祖父の南朝宋の司空劉勔をはじめ、南朝において多くの高官を輩出した家柄であった。