娥由皇太后降为皇后，居于昭信宫，称昭信皇后。九月，高殷被高演杀害，时年17岁。561年，高演逝世，高湛继位为武成帝，逼李祖娥与之相姦。高湛恐吓她：「如果妳敢不从，我就杀妳儿子。」李祖娥因害怕而答应他。关系安和，李家多受封赏。高洋第三子范阳王高绍义，冯世妇所生，高湛曾将其打挞二百杖，交付李祖娥宫中，李祖娥又命人打了高绍义二百杖。不久李祖娥就有了身孕。她怀孕的时候，儿子太原王高绍德到她的宫殿，李祖娥避不见面，高绍德便怒言：「妳当做儿子的不知道吗？您是因为肚子大了，所以才不见儿子吧。」李祖娥羞愧，于是不养