会的控制进一步增强，导致吏胥数目大量激增。唐玄宗时期中央和地方有胥吏35万之众，杜牧担任黄州刺史，发现黄州胥吏“公取于民”、“侵窃十倍”。胥吏弄权在晚唐成为普遍现象。北宋元祐年间胥吏总数约在44万左右。《大学衍义补》卷九八《胥隶之役》下说：唐宋以后“上至朝廷，下至州县，每一职一司，官长不过数人，而胥吏不胜其众”。而且胥吏的专业更胜于官员。唐代赵匡在《选举议》说：士人读经书，诵疏文，不习政务，“及临人决事，取办胥吏之口而已”。牟顾相曰“唐宋以来，……吏胥日横”。胥吏在宋朝待遇稍高，苏轼说“胥吏行文书，治刑