少卿殷兆镛弹劾奕山，指责他未经圣旨同意，轻易地将大片领土拱手让人，并且一旦作出承诺，便无力改变局面。
五、晚年
奕山的晚年是在一系列官职升降中度过的。咸丰九年（1859年）五月，由于他在处理沙俄侵华问题上的失误，奕山受到了革职留任的处分，并很快被革去了御前大臣的职位，被召回京城。然而，随着沙俄强迫清政府签订《北京条约》，认可了之前与奕山签订的《瑷珲条约》，并且正式吞并了乌苏里江以东大约40万平方公里的土地，奕山的命运再次出现了转折。他被恢复了御前大臣的职位，并被任命为正红旗蒙古都统以及健锐营后扈大臣。
同治元年（1862年）十月，奕山被授予镶红旗总族长的职务，这表明他在满洲贵族中的地位依然稳固。同治三年（1864年），他被晋封为一等镇国将军，这不仅是对他过往功绩的认可，也显示了他在晚清政坛上的重要性。到了同治四年（1865年），奕山又被任命为总理行营事务大臣，随后在同年四月，他被授予正白旗领侍卫内大臣以及阅兵大臣的职位，这表明他在军政领域的影响力依旧强大。
然而，随着时光流逝，奕山的职务也在不断调整。同治十一年（1872年）五月，他被任命为内大臣，并获得特别恩赐，免去了御前大臣和其他所有差使，但仍保留了正红旗蒙古都统的职位。这表明虽然他的实际权力有所减少，但他仍然是皇室信任的重要人物之一。
到了同治十三年（1874年）六月，奕山被免去了内大臣和都统的职位，但仍保留了一等镇国将军的身份。这一系列的职务调整反映了晚清时期官僚体系的变动以及奕山自身在不同历史阶段的地位变迁。
最终，光绪四年（1878年）六月初一日，奕山在八十九岁的高龄去世，享有了较长的生命。他去世后，被追赠以“庄简”的谥号，这表明即便在他生命的最后阶段，他依然被视为一位有尊严的贵族和官员。