如果说杨轶时间只是让陈子昂与李泽宇之间的关系出现了裂痕，那么接下来发生的事情就让君臣二人的关系彻底降到了冰点。
天佑四年十二月八日，李泽宇居住的皇宫失火，李泽宇趁机提出翻盖皇宫。
李克几在位时，除了皇后金大璐，后宫并没有妃嫔。子嗣方面也只有李泽宇一人，所以皇宫的面积不大。
可是李泽宇登基后，为了稳固皇权，李泽宇先后迎娶赵氏，杨氏，又选了几名大臣之女充实后宫，原来的皇宫已经容纳不下这么多人。
考虑到以后还有更多的子嗣与妃嫔，所以李泽宇想趁机重新翻盖皇宫。
李泽宇一提出自己的想法，陈子昂第一个提出了反对。
“陛下，如今边疆战事吃紧，国家的收入都用来铸造火器，修建战舰，已没有多余的钱来为皇上翻盖皇宫了。”
“可是爱卿，朕的皇宫如今已经人满为患，很多妃嫔都是两个人一个寝宫。如果将来朕再有子嗣，你让他们住在何处？”
可以听的出，李泽宇心中已经对陈子昂有些不满。
“陛下，先帝在时，与陛下住的是同一座宫殿，修建宫殿一事，陛下还是再往后顺延些时日比较好。”
陈子昂的这一番话彻底激怒了李泽宇。
“先帝，先帝，你眼中只有先帝。先帝在时，只有我母后一人和朕一个子嗣，可是如今朕的后宫人数比先帝在时多的多，你叫朕如何安排？”
说罢，李泽宇拂袖而去。
陈子昂愣在当场。他从未想过一向对他言听计从的李泽宇有一天会在大庭广众之下让他如此难堪。
李泽宇并未听从陈子昂的提议，而是一意孤行，将修建军舰的钱挪用，为自己修建一座漂亮的宫殿。
此后，陈子昂又多次遭到李泽宇的斥责，在许多政务上，陈子昂的提议都不被李泽宇采纳。
君臣二人的关系彻底破裂。
心灰意冷的陈子昂终于知道，是到了自己功成身退的时候了。
天佑五年三月初，陈子昂借口家中父亲年迈，向李泽宇提出致仕回家。
李泽宇假意挽留一番，无奈陈子昂去意已决，三月中旬，陈子昂正式卸任宰相一职。
三月底，陈子昂离开西京返回达安。临行之前，朝中很多大臣都赶来送行。其中蒋仲文的到来让陈子昂十分意外。
“子昂，你我同科进士出身，一直以来我都将你作为我的假想敌，希望有朝一日能登上相位。可是你在相位的这几年，我是真心佩服。如果没有你，欣朝不会有这么快的发展。”
“仲文，你这么说我很高兴。你我之间，私交一般，可这不妨碍你我精诚合作，为国出力。我走后，希望仲文能一如既往，为国效力。”
自此两人相逢一笑泯恩仇。
送走了事事与自己唱反调的陈子昂，李泽宇终于体会到了大权独揽的滋味。在他心中，虽然陈子昂忠君为国，可是毕竟与自己事事掣肘，实在是留着给自己添堵。
陈子昂走后，李泽宇便将丞相之位束之高阁，并对外宣称有朝一日要请陈子昂回来继续担任宰相之位。
李泽宇是一个有野心的年轻天子，他梦想能成就一番伟业，但相权对他来说完全是一种限制。
朕要做的是古往今来的第一明君，所以朕要将权力牢牢的控制在自己的手上。
可是，李泽宇还是过于年轻。朝廷中事千头万绪，仅凭他自己怎么能处理明白？
由于没有了陈子昂的从旁协助，朝廷中的所有事情全部需要李泽宇一个人来批复处理，久而久之，李泽宇不胜其扰。
可是毕竟是自己亲自答应陈子昂致仕的请求，所以只好咬牙坚持。
在此期间，屏州前线不断遭到敌人的骚扰，由于没有足够多的火器防守，敌舰如入无人之境，防线屡屡被敌人突破。