世嗣断絶或违反幕府法令而被解散，因此也产生了众多牢人，但是同样也有否定这种说法的学说存在。进入江户时代后大名家普遍出现家臣数量过剩，因此很少征召牢人。同时，因为受到儒家的影响，等级制度被固定化，家臣叛脱主家的场合，其他大名家会收到阻止该家臣再度出仕名为奉公构的文书，而导致其无法投靠新主家。脱离黑田家的后藤基次就因为奉公构而导致无法再度出仕，最终选择在大坂冬之阵中投靠丰臣家。因为类似无法再度出仕的牢人激增，在大坂之役时，丰臣方聚集了10万牢人。虽然在大坂冬之阵及大坂夏之阵中，大量牢人被杀，但是因为之后幕府