江户时代中有家老和宿老等职位。以后家宰的权限渐渐缩小，纯粹变成了指挥家长的私事的役职，连称唿都变成广敷用人、用人、侧用人、家令、家扶长、执事 (日本)等。此等职权未必一样，因幕府和藩 (日本)而异。例如江户幕府的侧用人是代替老中成为家中第一家臣，将军家的大奥和微细的私事则是由广敷用人和侧众负责。