工藤行政は文官として源頼朝に仕え、建久3年(1192年)11月25日に建立された永福寺(二階建ての仏堂があった)の周辺に邸宅を構えた為、二階堂氏を称したという。