向联系的业务集中，例如认定幼稚园制度等，使得近年被批评有肥大化的倾向。内阁府成立当时设置六名特命担当大臣，现增至八名。第3次安倍内阁已规划「内阁重要政策综合调整等机能强化的国家行政组织法等法律修正案」。今后将把部分业务移转给各省厅。内阁府的组织多在东京都千代田区永田町一丁目6-1的内阁府厅舍与中央合同厅舍第8号馆。但有部分大臣官房、地方分权改革推进室、国际和平协力本部事务局是坐落在千代田区霞关三丁目1-1的中央合同厅舍第4号馆，而地域活性化推进室、公共服务改革推进室、事务局等则设在千代田区永田町一丁目1