飛鳥井家
江戸時代の家禄は928石であった。江戸時代の家臣に雑掌として市岡家、本多家、安田家があった。江戸時代初期の飛鳥井雅賢は慶長14年(1609年)に猪熊事件に連座し隠岐へ配流され同地で没した。
明治維新後の明治2年(1869年)に旧公家と旧大名が華族として統合された際に飛鳥井家も旧公家として華族に列し、明治17年(1884年)7月7日の華族令施行で華族が五爵制になると、大納言迄宣任の例多き旧堂上家として飛鳥井雅望が伯爵に叙せられた。
また、明治維新後に飛鳥井家は邸宅を東京に移転させたが、明治天皇はその邸宅跡に第75代崇徳天皇(後に第47代淳仁天皇も併祀)を祀った白峯神宮を新造、奉迎鎮座した。飛鳥井家が邸内で祀ってきた「精大明神」も祀られているが、飛鳥井家が蹴鞠の師範だったことから、この神は「鞠の守護神」とされ、現代ではサッカーなど球技全般の神と解釈され、日本サッカー協会をはじめ各種スポーツで使用された公式球が奉納されている。
飛鳥井伯爵家の邸宅は昭和前期に東京市渋谷区原宿にあった。