建文年间，在应天府从事，后连坐戍守广东。后因茹常举荐恢复官职。朱棣攻入南京后，方宾与侍郎刘俊迎附，后晋升为兵部侍郎。永乐四年（1406年），因刘俊出征黎利，方宾负责兵部事宜。永乐七年（1409年），升兵部尚书，后掌管行在吏部事。次年，跟从朱棣北征，与学士胡广、金幼孜、杨荣，侍郎金纯共参与机务。永乐十九年（1421年），朝议亲征事情。尚书夏原吉、吴中、吕震与方宾共同商议，建议休兵养民。未奏时，朱棣召见，方宾称粮饷不足，召夏原吉，亦以不给对。朱棣大怒，遣夏原吉视察开平粮仓，旋即下狱。方宾刚提调灵济宫，从中官