挤走了夏言，严嵩仍不罢休，在宫中放出谣言称夏言离朝时愤愤不平，大骂嘉靖帝出尔反尔。谣言传到嘉靖帝耳朵里，嘉靖帝甚为恼怒。事有凑巧，嘉靖二十七年九月，俺答汗率军进扰宣府，直逼北京，嘉靖帝疑心这定是夏言、曾铣提出收复河套招来的报复，遂将曾铣打下监狱。曾经支持夏言、曾铣的官员或贬官，或夺俸，或廷杖，还要将夏言收监审理。