存留的必要，便说明皇上并不想在这件事上深究，也并不完全相信那些人的弹劾。而接下来，秦桧只需要专心的应付这些人的弹劾便可。
秦桧的反击很快便到来。九月十六日朝会上，秦党干将汤思退上奏朝廷，请求彻查李显忠当年效忠伪齐和金国以及西夏之事。汤思退的理由很简单，要查老底，咱们一起查。你说秦相是金人细作，那么你李显忠的屁股也不干净。当年你先是为伪齐效力，然后你又为大宋的敌人金国和西夏效力，那么你的行为说明了什么？你是不是为了某种目的投降大宋，你要秦相说清楚，你也要说清楚。
李显忠早年间确实为伪齐效力。后来伪齐被金人所飞，李显忠还曾短暂的在完颜宗弼帐下当过官，后来才同金人翻脸，投奔西夏。最后才南归宋朝。但是李显忠其实早在为伪齐效力期间便命人送信给大宋表示自己忠心向大宋的心意，后来又屡次送信到临安表达南归之意。后来在西夏，更是率四万大军投奔吴阶，立下大功。连‘显忠’这个名字都是赵构赐给他的。
而现在，汤思退等人居然拿这件事来说事，简直丧心病狂之极。更有甚者，居然有秦党党羽在堂上呼他为‘四姓家奴’，李显忠的火爆脾气一下子被点燃了。当着赵构的面，他将汤思退掀翻在地，连打了七八拳，差点没把汤思退打死。但这么做的结果是显而易见的，赵构怒斥李显忠无礼，不知自我约束。汤思退是什么人？那可是政事堂参政之职，乃是副宰相，他居然当堂行凶，实在不该。当然了，赵构也认为汤思退的弹劾有些过头了，李显忠的忠诚天下皆知，汤思退却拿这件事说事，似有挑衅之意。
两下权衡之后，赵构下旨贬李显忠为果州团练副使，让他离京自省。
李显忠被人抓住了性格的弱点，只一击，便自乱阵脚，自领责罚。他这一被贬不要紧，以他为首的正全力弹劾秦桧的一杆官员都傻了眼，不知道该如何是好了。
秦桧当然不肯罢休，起手下党羽连续发起对汪大圭，惠俊、刘纪中等人的弹劾。也不知他们从哪里挖到的料来，汪大圭年轻时停妻再娶的事情，刘纪中当年在湘南为官时母亲作寿收了当地富商几百两银子的事情等等，所有这些有的没的的事情统统被翻了出来。所有参与弹劾的官员人人有份，个个都被翻了旧账。正所谓人无完人，除非是圣人，否则哪有不犯错的。这些错误其实很多都无伤大雅，鲜少有拿的出手的。但是却被朝中百官当做是一些天大的不能容忍的错误一样给放大，加以渲染。
这些错误可不需要进行调查，因