平助は、すぐれた医師として、また、その広い視野や高い見識で全国的に名が知られ、あや子の生まれ育ったころには、平助の私塾「晩功堂」には遠く長崎や松前からも弟子入りのため来訪した者が少なくなかった。蝦夷地（いまの北海道）からも裁判などで平助の知恵を借りようと頼る者が訪れ、平助は、彼らから北方事情や蝦夷地での交易の様子、ロシア勢力の南下等について詳細に知ることができた。また、長崎の吉雄耕牛やその縁者からは、オランダの文物が送り届けられることも多く、平助はそれを「蘭癖」大名や富裕な商人に販売して財をなした一方、ロシアも含めた西洋事情一般にも通じるようになった。藩邸外に居宅を構え、「方外の人」 でもあった平助は、各藩の事情や地方の事情、また、世界情勢にも明るく、あや子は、こうした特異な空間のなかで少女時代を送った。
奥女中奉公.
最初の結婚.
奥づとめを辞した彼女は浜町の借宅に帰った。当時の浜町は「遊んで暮らすには江戸一番」と呼ばれる土地柄で、周囲には名所旧跡が多かった。この家からは、しず子が津軽藩家臣雨森権市のもとに嫁している。
この結婚は惨憺たる結果であった。相手はかなりの老人であり、夫としてはじめて口にしたことばが「おれは高々五年ばかりも生きるなるべし。頼むはあとの事なり」だという。これが自分の一生を託す夫であり、自分ののこりの人生かと思うと情けなく、泣いてばかりいたあや子は結局実家に戻された。また、酒井家家中では、伊達騒動の因縁から仙台藩をわるく言いたがる風潮があり、それもあや子にとっては苦痛であった。さらに、縁談を勧める際の父平助の「先は老年と聞が、其方も年取しこと」の言葉も彼女を傷つけた。
数寄屋町での暮らし.
離縁したあや子が数寄屋町に戻ったころより次第に母が病いがちとなり、あや子は母になり代わって弟妹の世話をするようになった。
再婚.
かねてより平助は、源四郎元輔の後ろ盾として娘のうちのいずれかが仙台藩の大身の家に嫁することを希望しており、この頃より平助も体調が思わしくなくなったため、あや子は工藤家のため只野行義との結婚を承諾した。彼女は行義に、
という和歌を贈り、暗に行義側からの承諾をうながしている。
仙台行きと父の死.
の歌で言い表しており、父のことばであれば火中・水中に入ることも辞さなかったと詠っている。