越谷貯蓄銀行
当時の越ヶ谷町(現在の越谷市)には創立間もない鈴木銀行が営業していたが、1898年(明治31年)3月頃越谷貯蓄銀行と公益貯金銀行それぞれの銀行から大蔵省に宛てて設立届が提出された。大蔵省は同町に貯蓄銀行を2つ認可するのは多すぎると難色を示し、両行に宛てて両行の併合して越ヶ谷町内において貯蓄銀行の設置許可が下りた。事実上親銀行が鈴木銀行であった。そして両行合同で資本金3万円で設立した。創立事務所は鈴木銀行本店内においた。1903年(明治36年)12月末の主要勘定は資本金3万円(うち払込22,500円)積立金1320円、貯金43,095円、貸付金1,185円であった。
1907年(明治40年)2月ごろ、鈴木銀行の株式投機の失敗の報に衝撃を受けた預金者は越谷貯蓄銀行に殺到した。1911年(明治44年)7月31日に同県北足立郡大宮町(現在の埼玉県さいたま市)に移転し、同時に氷川貯蓄銀行と改称した。