业，妲己倾覆殷朝，《诗经》说：‘赫赫宗周，褒姒灭之。’每次阅读古代的历史，常常为之叹息，没想到今天这样的事情竟然玷污了圣明的朝代。做事不遵循法度，后代子孙会怎么看待呢！希望陛下慎重考虑，不要被后人所嘲笑！如果我的话能对国家有益，即使被剁成肉酱，也是我分内之事！从前吴王不听从伍子胥的话，最终导致姑苏台被麋鹿出没。我担心天下百姓失望，宫廷中长满荆棘，宗庙不能再享受祭祀，这一天为期不远了！” 来济上表劝谏说：“帝王立皇后，上应乾坤之道，必须选择礼教名家、娴静贤淑的女子，以符合天下百姓的期望，满足神明的意愿。因此周文王造船迎接太姒，从而兴起《关雎》所倡导的教化，百姓蒙受福祉；汉成帝放纵私欲，立婢女为皇后，导致皇统断绝，社稷倾覆。周朝的兴盛如此，汉朝的灾祸又如此，希望陛下仔细审察！” 高宗都不采纳。

    有一天，李积入宫拜见，高宗询问他说：“朕想要立武昭仪为皇后，褚遂良固执地认为不可以。褚遂良是顾命大臣，这件事应当就此作罢吗？” 李积回答说：“这是陛下的家事，何必再询问外人呢！” 高宗的心意于是决定。许敬宗在朝廷上宣扬说：“农夫多收了十斛麦子，尚且想要更换妻子；更何况天子想要立一位皇后，与其他人有什么关系，竟然妄加议论！” 武昭仪让身边的人将这些话告诉高宗。庚午日，将褚遂良贬为潭州都督。