越来越骄纵任性，另外也开始出现精神不稳定的症状，他的许多生理和心理上的痛苦可能是源自于哈布斯堡王室常见的近亲通婚。卡洛斯只有四个曾祖父母而非正常的八个，以及六个高祖父母而非十六个。1559年卡洛斯王子与法国公主伊莉莎白·德·瓦卢瓦联姻，她是法国国王亨利二世的长女。然而，由于政治因素的考量，1560年她后来改嫁给腓力二世。这时其他三位可能的联姻人选浮上台面竞争：苏格兰女王玛丽；亨利二世最小的女儿玛格丽特·德·瓦卢瓦；和腓力二世的表妹奥地利的安娜，她未来将成为腓力二世的第四任妻子。但在此之前皇帝马克西米利安