本作品を語る場合に挿図の存在を見逃せない。平安期の上流階級の住まいである寝殿造の項に挿図があり、それが寝殿造りの概念を多くの人に伝える為に計り知れない役割をはたしている。明治以後の教科書等では、平安時代の公家の生活を説明する時には必ずといってもいいほど本書の挿図が使われた。『家屋雑考』の影響.太田静六は貴族の日記などをつぶさに分析し、東西の対は『家屋雑考』の図にあるような東西棟ではなく、南北棟であること、東西の中門廊の先にあるのは片や泉殿、片や釣殿ではなく、両方にあった場合には両方とも釣殿であることを指摘した。その少し後に堀口捨己も「書院造について」の中でこう書く。『源氏物語』のイメージ.一般的な寝殿造のイメージは『家屋雑考』のイメージをベースに寝殿や対を長方形にするなど若干修正したものである。一町四方の敷地に寝殿の南庭に舟が浮かべられるような池があり、寝殿の両脇には東西に寝殿と同レベルの対があって、寝殿を中心にその池を囲むようなコの字形の建物の配列とイメージされることが多い。太田静六は典型的な寝殿造の配置形式をこう説明する。その後太田静六は精力的に復元図を発表して『寝殿造の研究』でそれをまとめるが、東三条殿と堀河殿、鳥羽南殿寝殿以外は多分に想像による部分が多く、原史料に池の記載など無いにもかかわらず、復元図にそれを書いてしまうなど、太田静六の云う「正規寝殿造」イメージには同時代史料に基づく具体的な復元例がある訳ではないと批判される。舟が浮かべられるような池は鎌倉時代にもその例はあるが、先のランクで云えば「超大規模邸宅」と「大規模邸宅」の一部ぐらいである。「武家造」と「主殿造」.「武家造」も「主殿造」も『家屋雑考』の中に使われた用語では無いが、『家屋雑考』の解釈から生まれた用語である。『家屋雑考』が描いた『源氏物語』ベースの雅な建築様式が寝殿造と理解されたためか、かつては鎌倉時代から室町時代の武士の邸宅には、それとは別の「武家造」という建築様式が想定されていた。沢田名垂の『家屋雑考』「家作沿革」の中での説明を川本重雄はこう要約する。