俗话说，树倒猢狲散。在李忠和生母刘氏离开东宫的时候，原来那些和他亲近的大臣们连前来送一送的勇气都没有。只有太子右庶子李安仁和李忠含泪相别。这个李安仁，原来只是梁王李忠手下的一个不知名的小官，他明知自己来送别会引起武后的不满，但他并不去在意这些，仍然执意相送，这让其他的大臣都暗暗地为他捏了一把汗。大家都没有想到，武则天得知后，在百官中赞美李安仁为人忠心，而且还请高宗多多提拔这样的忠心臣子。这让高宗对这位皇后佩服不已。
后来李安仁卒于恒州刺史任上，也算是善始善终了。
正月二十三日，高宗又亲临大慈恩寺，办无遮大会，召集五千名僧人为新太子设斋祈福。
几家欢乐几家愁，要知道，原太子李忠可是长孙无忌一手扶植起来的，现在太子被废，对于长孙无忌、韩瑗、来济等人来说可是重大的震撼。李忠到了梁州之后没多久，武则天便向高宗提出将李忠打发到房州（今天的湖北房县）做刺史。房州在当时是一个很荒凉的地方，这一贬再贬，便再也没有出头之日了。长孙无忌等人失去了一个可以操控的“潜力股”。
据说，直到李忠长大懂事以后，对废太子这个身份的可怕性才渐渐明白，所以平日里行事极为小心，甚至到了疑神疑鬼的程度。比如，李忠经常穿妇人衣服以防刺客，又迷信占卜，梦到自己为帝或化身菩萨，屡次派人到京城打听情况。这景况让人听来颇为伤感。
就在一切按着武则天的心意按部就班地进行的时候，李治突然患了头痛的毛病，这病一发起来，什么都做不了，对朝廷的许多大小事情也就没有了过问的心思。这时，武则天的政治才能又有了用武之地。她开始帮助高宗整饬朝纲，最重要的，是对关陇旧势力开始了动手整治。
当日，就在册封武则天为皇后的时候长孙无忌甩手而去，丝毫不给皇帝和新皇后面子，从此隐匿下来开始编撰《武德贞观二朝史》，他越发地感觉到武后力量的可怕，他决定，不惜一切代价要把武氏的力量削弱。
此时有两个人很重要，他们便是侍中韩瑗和中书令来济，这两个人也是关陇干将。长孙无忌让他俩首先向武氏施加压力，要求召回当初被罢免的褚遂良。
这一来，那些旧派的官员突然又恢复了勃勃生机，掀起了一股上书的热潮，纷纷向高宗言说褚遂良的功绩与政治才华，“无闻罪状”，为“谗谀相抵”才被放逐，现在如果再不召回，实在有违世道人心，大臣们的心都要凉了。不但如此，他们还拿褒姒、妲己等来旁敲侧击，遥指武则天。
