富士氏
家紋
家紋は「棕櫚（しゅろ）」であり、『羽継原合戦記』に「シュロノ丸ハ富士ノ大宮司」とある。また江戸幕府の裁許状の中では「棕櫚葉之紋」とある。この棕櫚紋は富士大宮司のみが用いるものであり、「公文富士能成等返答書控」「富士信安父子連署請書写」には棕櫚紋は古来より富士大宮司のみが使用してきたとある。このように、同じ富士家一族でも公文富士氏・案主富士氏は棕櫚紋を容易に使用できるものではなかった。
古文書
富士氏は国人領主であり、また今川氏・武田氏・後北条氏と関係が深い。それら中世を中心とする文書群の一部は現在「大宮司富士家文書」として保存されている。元は富士重本以後の富士家当主である富士高茂がこれら文書を保持しており、東京大学史料編纂所が明治時代と昭和時代にこれを採録するなどしている。また『静岡県史料』にも60通が収録された。後にこれら原本の文書は流出し、あるときはうち36通もの文書の売却が検討される状況に至った。これを危惧した村田正志が売却の保留を促し、静岡県の美術館が購入することとなった。現在は静岡県立中央図書館がその36通を保管しており、「富士山関係資料デジタルライブラリー」にて公開されている。
発祥
「富士大宮司系図」によると、始祖は孝昭天皇の後裔であり豪族の和邇部氏と伝えている。例えば寛正3年（1462年）の「後花園天皇袖判口宣案」に受給者として「右馬助和邇部忠時」とあるように、本姓として用いられていた。同系図によると、延暦14年（795年）に豊麿が駿河国富士郡を治める大領の地位に就いて以来、代々郡司を世襲したという。また異なる系譜を示す「和邇氏系図」によると、豊麿は「駿河掾」の任に就いていた和邇部宿禰宗人の子であるという。また延暦20年（802年）には浅間神社の祭祀を司るようになったとしている。11世紀頃には判官代・公文所に転身し、これらが富士家に連なるという系譜を示している。
富士直時の書状では、少なくとも14世紀には既に富士郡富士上方（現在の富士宮市一帯）を支配する氏族として存在していたことが分かる。他、富士上方の社寺に対して諸役免除を行うなど、富士郡領主として存在し続けた。
南北朝時代以降
南北朝時代には既に武家としての面が確立されていた。観応の擾乱の際には、観応2年（1351年）に上杉憲将により甲斐国への通路の警護を命ぜられている。
また駿河国守護である今川氏と富士氏を関係付ける早例の史料として、康安2年（1362年）に今川範氏が有度郡内の富士浅間宮領への乱入狼藉を停止する旨の書下状を富士大宮司に与えている例が挙げられる。これは今川氏と富士氏の主従関係ではなく室町幕府の意向を汲んだものであるとされる。また富士氏は一部交通を掌握していた。応永16年（1409年）には富士長永が根原の関所を領有しており、駿河国と甲斐国の国境を押さえていた。
駿河国守護である今川家当主今川範政亡き後、彦五郎（今川範忠）と千代秋丸両氏での家督争いが発生した。この家督争いに際し、富士氏は駿河国内の混乱を室町幕府に報告するなどしている。富士氏は彦五郎への家督相続に対して反対の立場を取り、範忠の駿河国下向に際して交戦状態となった。しかし室町幕府将軍である足利義教の裁定の影響は大きく、範忠が家督相続することで落ち着いた。情勢的には富士氏ら千代秋丸派は範忠から反逆者として追討されてもおかしくない運命であったが、折しも室町幕府と鎌倉府との対立が深刻化しており（永享の乱）、8月19日には幕府より今川氏への忠節を命じる文書が「富士大宮司」「富士右馬助」へと発給されている。
また享徳の乱の際は室町幕府将軍より袖判口宣案が出されており、幕府からも重要視されていた存在であった。同乱の際富士氏は扇谷上杉氏へ味方し、享徳4年（1455年）4月15日に上杉持朝から戦功を称されている。またこの戦功を三島合戦とする見方がある。
この時代の当主は富士忠時または富士親時であるが、このような動向から15世紀の富士氏は今川氏に従属していないと考えられている。一方、文正元年（1466年）の足利義政御内書には富士忠時に代わり富士親時へ大宮司職を申し付ける旨の内容があり、足利将軍家が富士大宮司職の任命権を保持していた。
寛正期の富士家は家督相続を巡る混乱期でもあり、瑞渓周鳳の日記である『臥雲日件録』には「駿州国人富士父子闘争之事」とあり、『親元日記』には「富士兵部大輔入道親子確執之儀」とある。
また富士氏は室町幕府の奉行衆であったことが確認されている。
戦国時代
戦国時代に入ると、今川氏と関係を密にしていく。大永元年（1521年）に今川方の軍が甲斐の河内に侵入した際、武田信虎が総攻撃を行った。その際富士氏は今川方の軍として戦い、信虎軍に破れている。戦国大名としての段階の今川氏と富士氏を関連付ける早例として、今川氏輝から富士氏当主の嫡子である富士宮若へ馬廻としての奉行を求める発給文書がある。この馬廻の登用については、城主を輩出する有力国衆のその当主の子弟等を意図的に任命し、身近に置いていたと考えられている。
天文5年（1536年）、今川氏の家督相続を争う花倉の乱が勃発し、栴岳承芳（後の今川義元）と玄広恵探とで争われた。富士氏は栴岳承芳に与し、天文5年（1536年）6月9日に義元は富士宮若の在陣を労っている。同乱は14日に玄広恵探の自害により終結している。
一方、富士氏の本拠である富士大宮は河東（富士川の東）に該当する地であるため国境に近接しており、政治情勢は不安定であった。そのような政治情勢下から富士家内部で一部分裂が生じるなどし、また『小田原衆所領役帳』によると北条幻庵知行分が富士氏に充てがわれていることが確認できるなど後北条氏との関係性を伺わせるが、その後は基本的に今川氏に属している。また河東の乱時に富士氏は今川方につき、義元より感状を与えられている。
その後桶狭間の戦いにて義元が戦死すると駿河国は動揺する。今川氏に対する離反が重なる中、富士氏は今川陣営として留まっている。次代の今川氏真により永禄4年（1561年）7月20日に信忠は大宮城城代に任命され、大宮城主として武田氏との戦いを繰り広げる（大宮城の戦いについては大宮城を参照）。また富士氏一族の富士又八郎は、謀反を起こした飯尾連竜討伐に参加するなどしている（飯田口合戦）。
永禄9年（1566年）4月3日には今川氏真が富士氏の本拠である富士大宮の六斉市（神田市）を楽市化している。またこの楽市令については、富士氏側の要請によって今川氏がその権力を背景に楽市化を行ったとする見方が多い。
しかし武田氏の駿河侵攻における大宮城の戦いにおいて、戦は本格化していくこととなる。この時期は緊張状態にあり、永禄12年（1569年）2月25日の北条氏康からの書状では「昼夜御辛労令職察候」とある。このようにこの時期の富士氏は後北条氏の援助を得ており、北条氏政は大宮城中の給人領地の安堵や新領を宛行う約束などを行っている他、富士氏に対し城中城外に関する具体的な指示を出している。
しかし武田信玄本隊の攻撃に耐えられず、穴山信君を通し富士城は開城することとなる。その後も富士氏は後北条氏方として蒲原城の戦いに参戦するなどしているが、その後は今川氏真より暇を与えられ、武田氏に付くことを決断し武田氏に帰順する。また帰順後、信忠は武田家家臣の鷹野氏の能通に富士姓を与え、富士家の公文職に迎えるなどしている（富士能通）。武田氏に帰順後は富士氏の軍事的側面に関わる文書は急減しており、武田氏は富士氏の神職としての側面を重視し、社人の再編成を行っている。また武田氏の駿河侵攻後の発給文書全体として寺社に対して行われたものが多く、浅間大社に宛てたものは有意に多い。
富士大宮司職については、元亀3年（1572年）に信玄が富士家の末子を富士大宮司職に補任することを命じている。武田家当主が変わり武田勝頼の代になると、勝頼より富士信通が改めて富士大宮司に任命されている。このように武田氏帰順後は社中の法度が定められるなど武人としての活動は制限され、富士大宮司としての活動が主となった。
祭祀・富士山支配
戦国時代における富士信忠の大宮城開城から武田氏による武力解除を経て、富士氏は神職のみの姿として統一されていた。近世に入ると富士氏は富士山を管理・支配する立場としても確立されていた。例えば徳川忠長が駿府藩主であった頃、「みくりや・すはしりの者共嶽へ上り、大宮司しはいの所へ入籠み、むさと勧進仕るに付て、大宮司迷惑の由申され候」といった文面の通達が忠長の家臣である朝倉宣正・鳥居成次から地方奉行に出されている。このように富士山本宮浅間大社が富士山頂の支配・管理を行なっており、その代表格である富士大宮司の支配の地として富士山麓周辺の地から認識されていた。
他に須走村の書付に、三か条の1つとして「富士山登道行合より八葉内、大宮町大宮司殿、宮内殿、民部殿、宝当院と申而四人之衆御支配二御座候」とある。これは行合（八合目）以上は浅間大社の神職（富士大宮司・公文富士氏・別当）および須走浅間神社の神職(民部殿）が支配する地という認識を示していることを意味し、このように富士氏が山頂においての権限を保持していた。
富士氏は富士山に関わる祭祀を司る身でもあり、例えば宝永4年（1707年）12月8日に富士氏は富士山祈祷を行っている。これは江戸幕府により発令されたものであった。富士氏の祭祀は本宮だけに留まらず富士上方・富士下方（静岡県富士市）の広くに及んでいた。本宮の東北に位置する山宮浅間神社でも祭祀が執り行われ、祭壇左側には富士大宮司席・公文富士氏・案主富士氏席が位置していた。
また慶安3年（1650年）「富士本宮年中祭礼之次第」に「垢離之後富士丘参詣大宮司殿庶子衆御祓役人正鎰取」とあり、『駿河志料』の富士塚の頁には「大宮司社人富士塚に参詣し」とある。富士下方に位置する富士丘に富士大宮司以下社人が参詣する記録であるが、この富士丘は富士市鈴川の富士塚に比定されており、また駿河志料の方は富士塚と記している。これら史料にあるように、祭祀のために駿河国富士郡各地へ赴いていた。
代々大宮司職は富士家により継がれていたが、明治3年以降宮司は内務省から直接任命される官選となり、以後富士氏が大宮司を務めることはなくなった。
近世の一族動向
中世を経て近世となると、本拠である富士大宮以外での富士氏一族の動向を示す史料が見出されている。寛政年間（1789年 - 1801年）に成立した『寛政重修諸家譜』は戦国期以降の系譜を「和邇氏系図」「富士大宮司系図」とは大きく異なる形で伝え、富士氏の一族が下総国の千葉郡および印旛郡の一部も支配していたとしている。また相模国の長尾台に知行を得ていた富士氏一族も伝えられ、富士信重が徳川家康により知行を宛行われている朱印状等が残る他、信重の子である富士信成の墓碑も長尾台に所在している。