受安殿亲王宠爱，他却对已经三十岁却依然风韵犹存、倾国倾城的药子一见钟情，在当时她算是已经过了青春美貌的盛年，但依然风姿绰约，安殿亲王对女儿没兴趣，一开始让药子感到相当困惑，但她仍凭着妖艳美色私通安殿亲王，同时又有与藤原葛野麻吕通姦的传闻，得到这些消息的桓武天皇相当震怒，便将药子从东宫逐出。806年，桓武天皇驾崩，安殿亲王即位为平城天皇，再度将药子召回宫中，平城天皇此时已三十三、四岁，而药子已四十多岁了，虽然徐娘半老，却是容姿依旧，天皇任其为正三品官位的「尚侍」一职，也就是后宫女官之首，地位仅次于众后妃，