肃宗时，李辅国以扈从灵武功，还京后拜殿中监，兼闲廐、五坊（鵰、鹘、鹰、鸡、狗为五坊）、宫院、营田、栽接总监、陇右群牧、京畿铸钱、长春宫等使；凡有刑狱，必诣取决，随意处分，皆称制敕。于是谮死建宁王倓（至德二），矫诏移上皇（玄宗）于西内（上元元），杀张后及越、兖二王（宝应元），以阉宦而官司空、中书令，渎秽朝纲甚矣。究其横行之由，则专掌禁兵实为之。
宠任宦官，汉、唐之弊政相同；汉以宦官典中书，是政权归之（汉初禁卫有南、北军，盖因方位而得名，与宦官无涉），唐以宦官典禁兵，则兵权归之，前者易制而后者难图。代宗身受辅国之逼，不能明正其罪而出以贼杀，既贼杀矣，犹复多方掩饰，追赠太傅，彼辈小人何惧而不作恶耶？程元振虽有翼戴功，然惩前毖后，假不再令专制禁兵，何至吐蕃入犯，诸道坐视，仓惶幸陕，府库荡空（广德元）。去一辅国，复养一元振，去一元振，复养一朝恩，宦官之害，遂根深蒂固，牢不可拔，故谓唐亡由于自杀，可也。
鱼朝恩初以观军容使莅九节度之师，卒致滏水（乾元二）、邙山（上元二）之败，宜若有所戒矣。及又令朝恩统神策军（本临洮西之军，禄山反后，卫伯玉率之赴陕）驻陕；只因陕州迎驾功1，代宗回銮后，遂超擢为天下观军容宣慰处置使，朝恩于是率神策军归禁中，自充将领，且收管好畤、麟游、普润、兴平、武功、扶风、天兴诸县，势力益盛。