化是非常可怕的事情，宪宗说：“我已经知道了，你们也应当尽心为我效劳。”彭时接着说有御史上疏请求减少京官俸薪，而武将们非常不满意，提出俸禄照旧，宪宗表示同意。
彭时还想继续说下去时，万安已经跪下叩头，口呼万岁就要告辞，彭时、商辂迫不得已，也只好叩头告退，这件事情于是成为笑谈，以至于宦官后来经常戏弄朝臣说：“你们经常说皇帝不召见你们，等到召见你们了，却只会口呼万岁而已。”从此，大家称这届内阁为“万岁阁老”，而宪宗从这件事以后就更不召见大臣了。
后来，尹直进入内阁，想求见皇上汇报政事，万安制止他说：“过去彭公请求皇上召见，一句话没有说对，就叩头口呼万岁而退，从此留下笑话。不如我们把事情处理好，让太监选择一些让皇帝看，如果皇上有不同意的地方，要比面对面好多了。”可见，万安多么善于把过错推给别人。
彭时已经死去，商辂受到大宦官汪直陷害，而被免官回家，所以当时的内阁成员主要是万安、刘珝、刘吉。万安作为首辅，和南方的官员结成朋党，刘珝与尚书尹旻、王越则和北方的官员结为朋党，双方争权夺利，互相倾轧，完全不顾国家利益。最后，万安联合李孜省、邓常和彭华等打败了刘珝等人，当时宪宗失德，崇信道教，不理朝政，而国家却到处在发生灾难。作为内阁大臣的他们却没有尽到责任，对皇帝加以规劝，反而听之任之，所以当时流传着“纸糊三阁老，泥塑六尚书”的说法，可以说是对他们形象的讽刺。
掌握西厂的大宦官汪直被东厂太监排挤驱逐，于是谏官请罢西厂，宪宗没有同意，万安再次上疏请罢西厂，结果皇帝同意，于是万安受到朝臣的称赞，被加授太子太傅，升为华盖殿大学士，后来又加少傅、太子太师头衔，再升为少师，可谓尊荣一时。
宪宗驾崩，朱佑樘即位，万安负责起草登极诏书，同时禁止谏官进言，使满朝官员一片哗然。御史汤鼐质问内阁，万安不动声色地说是皇帝的意思，于是汤鼐马上把他的话上奏皇上，揭发万安自己堵塞言路，却把责任推给皇帝，有失人臣之礼。
庶吉士邹智，御史文贵、姜洪等人也跟着弹劾万安，于是孝宗很不高兴。在此之前，有个叫倪进贤的人，读书不多，品行很坏，为了