一直不理会，便迎娶相貌和母亲阿市极为相似的茶茶为妻（侧室），同时也有意广纳有身分地位的女子做侧室，以提高自己的地位层级。然而这个说法并没有强力的证据可以佐证，反而是由秀吉作媒，让阿市和柴田结连理的说法比较可信。她在伏见城时，被称为西之丸殿；后来到了大坂城，被称为二之丸殿。秀吉一直以无子为憾，而茶茶竟在1589年时生下鹤松，让秀吉欣喜若狂，便将山城国的送给她做奖励，她因此被称为淀夫人，但是鹤松在1591年时便夭折，让秀吉非常难过。1592年，秀吉带着淀夫人前往九州名护屋城，结果发现夫人怀孕