西尾市立図書館
1976年(昭和51年)4月には田中清一が第3代図書館長兼郷土館長に就任した。1977年(昭和52年)4月には神谷伝兵衛が第4代図書館長兼郷土館長に就任した。同年7月には富田啓介を講師として「良い本の与え方」の講演会を行った。同年12月には開館時間を「9時-16時30分」に変更した。1979年(昭和54年)5月時点の蔵書数は岩瀬文庫が約10万冊であり、一般書が約3万冊だった。
1980年(昭和55年)には西尾市長の本多貫一が、施政方針演説で現行敷地内への新図書館の建設に言及し、図書費を増額すると発表した。1981年度・1982年度の2か年継続事業として新図書館の建設が行われている。1982年(昭和57年)1月8日に新図書館の起工式を行い、同年4月には第5代図書館長兼郷土館長に石川修が就任。1983年(昭和58年)3月20日には新図書館の建物が竣工し、6月には西尾市立図書館の設置及び管理に関する条例を改定した。
1983年(昭和58年)8月には西尾市初の本格的な図書館として西尾市立図書館が開館した。蔵書数は約6万冊。これによって岩瀬文庫は図書館としての役割を終えた。1985年(昭和60年)1月には館報「ふみくら」の発行を開始し、休館日・新着図書・イベントなどを利用者に知らせている。1986年(昭和61年)11月には岩瀬文庫児童館を西尾市立図書館おもちゃ館に改称してリニューアルオープンした。1991年(平成3年)4月には第6代図書館長に朝岡博が就任した。同年10月には猿舎が改築され、ニホンザル7匹に入れ替えられた。1992年度(平成4年度)末時点の蔵書数は183,213冊であり、うち116,677冊が開架に、66,536冊が閉架にあった。
1993年(平成5年)7月には愛知県図書館とオンラインで結ばれた。1993年度末の蔵書冊数は市民1人あたり1.5冊であり、貸出冊数は市民1人あたり2.6冊だった。西三河地方8市(岡崎市、碧南市、刈谷市、豊田市、安城市、西尾市、知立市、高浜市)の平均は蔵書冊数が1人あたり1.9冊、貸出冊数は1人あたり3.6冊であるため、西尾市立図書館は西三河の平均をやや下回っていた。
1994年(平成6年)4月には館外貸出の対象者を愛知県在住者に拡大した。またこの際には岩瀬文庫が文化振興課に移管されている。1995年(平成7年)4月には第7代図書館長に鈴木時寛が就任した。