福岡県嘉穂郡大谷村大字幸袋（現飯塚市）の伊藤邸は贅を尽くした大改築が行われ、燁子を迎えた。そこで燁子は、伊藤家の複雑な家族構成を知らされる。前妻との間に子供がいないと聞かされていた伝右衛門には、妾との間に小学6年生の実娘・静子がいた。養嗣子として妹の子供で大学生の金次、その弟で小学1年生の八郎がおり、父の伝六が妾に生ませた異母妹にあたる女学生の初枝や母方の従弟などもそこで暮らしていた。伝右衛門は若い頃の放蕩が過ぎて子供ができない身体であり、燁子は実子を持つことが出来ない不安定な立場で、大勢の使用人・女中・下男も暮らす複雑な大家族の女主人となる。燁子はまず家風の改革に取り組み、言葉遣いや家族間・使用人との間の呼び方を改め、朝食をパン食に切り替えた。自分なりの母の務めとして、静子と初枝には最先端の教育を受けさせるべく、自分の母校である東洋英和女学校へ編入学させ、婿を自分の縁続きから世話をした。八郎も後に燁子の縁者である冷泉家から妻を迎えている。夢見ていた女学校の経営については、伝右衛門の「金は出すが口は出さない」主義で叶えられることはなかった。それまで派手な女遍歴があった伝右衛門だったが、燁子との結婚にあたり、長年にわたる妾のつねと別れるなど身辺整理はしていた。しかし女中頭のサキは家中を切り回すために必要として家に置いており、妾の立場で家を取り仕切るサキと燁子は激しく対立する。この女中頭の問題はこじれにこじれ、東京で燁子をいったん実家へ預ける話合いが持たれるまで発展する。結局、サキを幸袋の家から出すことで決着となるが、すでに婿を迎えている柳原家に燁子が戻る場所はなく、伊藤の家を追い出されれば生活の術もない己の立場の弱さを思い知る出来事であった。また、遊郭に入り浸ることの多かった伝右衛門に病気をうつされたことも、気位の高い燁子に大きな屈辱となり、夫婦の間の亀裂は深まるばかりであった。伊藤家で孤立を深める燁子は、京都にいる伝右衛門の古くからの妾である野口さとに信頼を寄せ、その妹のおゆうを小間使いとして福岡幸袋に呼び寄せた。1年ほど経ってから、おゆうに伝右衛門の妾になることを懇願する。己の立場を守るために、自ら夫に妾をあてがい、同じ寝所で3人で枕を並べて寝たこともあったという。おゆうが病で京都に戻った後は、燁子の願いにより、再びさとが伝右衛門の妾を務めた。
マーティンズバーグはアメリカ独立戦争中の1778年に、ポトマック川上流にアダム・スティーブン将軍が設立したヨーロッパ系アメリカ人開拓地だった。スティーブンは、バージニア植民地の大土地所有者第6代フェアファックス・オブ・カメロン卿トマス・フェアファックスの甥トマス・ブライアン・マーティンにちなんで町の名前を付けた。ジョージア調の邸宅、アスペン・ホールは市内最古の家屋である。その一部は1745年にエドワード・ビーソンが建てており、その住人が地域の農業、宗教、交通、政治の歴史に重要な役割を果たしてきた。フレンチ・アンド・インディアン戦争、アメリカ独立戦争、南北戦争に関連して重要な出来事がこの敷地で起こって来た。最初の3棟の建物が今も残っており、その中にはメンデンホールの砦の珍しい小要塞もある。こういった影響もあり、民主党の影響力が強い地域としても知られる。現在のウェストバージニア州となっている領域では最初の郵便局が1792年に設立された。当時マーティンズバーグを含む広大な領土がバージニア州に属していた。ボルチモア・アンド・オハイオ鉄道 (B&O) が1842年にマーティンズバーグまで開通した。B&O機関車庫と駅複合施設が最初に建設されたのが1849年だった。「地下鉄道 (秘密結社)の設立者」であり、その歴史家でもあるウィリアム・スティルに拠れば、ロバート・ブラウン、別名トマス・ジョーンズが1856年クリスマスの夜にマーティンズバーグで奴隷の身分から逃亡した。ブラウンは馬で走り、凍っていたポトマック川を泳いで渡らせた。40マイルを駆けた後で、冷たく濡れた衣服のまま2日間歩き、ペンシルベニア州ハリスバーグに到着した。そこからは地下鉄道の支援を受け、列車でフィラデルフィアに行って、ペンシルベニア反奴隷制度協会のウィリアム・スティルの事務所に行った。ブラウンの妻と4人の子供たちは売り払われた。ブラウンは家族を見つける手伝いを求めた。妻の似顔絵を持っており、また家族それぞれの髪の房も持っていた。1854年、10歳のイザベル・ボイド、通称ベルが家族と共にマーティンズバーグに移って来た。彼女の父ベンジャミンが雑貨店を経営した。南北戦争が始まると、ベンジャミンはバージニア第2歩兵連隊に入隊した。この部隊は南軍の有名な将軍ストーンウォール・ジャクソンの旅団に入っていた。北軍のロバート・パターソン将軍の指揮する部隊がマーティンズバーグを占領したとき、ボイドの妻メアリーがその家に居た。北軍の兵士の集団がボイドの家に北軍の旗を掲げようとしたときに、メアリーがそれを拒んだ。フレデリック・マーティンという兵士がメアリーを脅すと、ベルがマーティンを銃で撃った。ベルは結局無罪となった。ベルは間もなく南軍のスパイとなり、北軍の情報をジャクソン将軍やJ・E・B・"ジェブ"・スチュアート将軍に提供したことで知られている。ボイド家には奴隷のエリザ・コージーがおり、ベルが読み書きを教えていたが、ベルはエリザの助けを得られることが多かった。1863年、ベルはマーティンズバーグで北軍に逮捕されて収監された。戦後はスパイの経験を題材に講演旅行を行った。ボイドのギリシャ復古調の家は、彼が1853年に建てて、1855年に売却したものだったが、長い間に所有者が何人も変わった。1992年、バークレー郡歴史協会がこの家を購入した。この協会が建物を改修し、現在はバークレー郡博物館として運営している。ベル・ボイド邸とも呼ばれている。ウェストバージニアの住人の大半はヨーマンと呼ばれる自作農であり、南北戦争中も北軍を支持し、バージニア州からの分離に賛成票を投じた。戦中に新しいウェストバージニア州が連邦への加盟を認められた。マーティンズバーグ市は1868年3月30日、ウェストバージニア州議会の法によって法人化された。マーティンズバーグは鉄道産業とその労働者の中心となった。1877年の鉄道大ストライキは1877年7月14日にマーティンズバーグ市で始まり、全国に広がった。1883年、マーティンズバーグ市で電話サービスが始まった。1889年、ニューヨークのエディソン製造会社に認められたフランチャイズの一部として、マーティンズバーグ市に電力が供給されるようになった。1891年、マーティンズバーグで織物工場が操業を始めた。この会社は世界最大の紳士用靴下メーカーとなった。「アポロ市民劇場」の建設が1913年に完成した。第一次世界大戦には、バークレー郡から1,000人以上の者が出征した。その中で41人が戦死し、21人が負傷した。これらの者に捧げる記念碑が1925年に建立された。第二次世界大戦では、マーティンズバーグのニュートン・D・ベイカー病院が数多い負傷兵の手当てを行った。1946年、この軍事病院はアメリカ合衆国退役軍人省の管轄に入った。現在も復員軍人局医療センターが退役兵の治療にあたっている。1940年代後半から1950年代に始まった構造改革により、マーティンズバーグの多くの工場が閉鎖され、経営を止めたので、地元経済に大きな打撃になった。就職先はディープサウスに移され、さらに海外に渡った。