交趾被呼延平等人打了下来，赵颜在深水港又停留了几天，安排了一下接管交趾的任务，另外还选派了一些官员到各地任职，加强对交趾各地的统治，另外还有就是安排修路的事，毕竟想要长久的统治交趾，交通就是其中最大的一个问题，只要把路修好了，那么无论是交趾还是占城都再无反叛的可能。
好不容易把交趾这边的事情安排完，赵颜这才乘船离开深水港，本来他还打算去琼州那里找苏颂盘桓几天，可是却没想到他的船刚离开深水港，刚巧遇到从广州前来报信的船只，从对方那里得知了一个让赵颜十分震惊的消息，这也使得他根本顾不上再去找苏颂，越过琼州飞速的赶往广州。
刚一回到广州，赵颜立刻找到代他主持事务的王师约，刚一见面就立刻开口问道：“姐夫，王安石真的辞相了吗？”
“不错，之前王雱病死，王安石经历丧子之痛，再加上变法之事又毫无寸进，所以他也有些心灰意冷，之前几次提出辞官都没有被陛下同意，但这次陛下也不好再阻拦，所以只得同意了，现在王安石已经运送着王雱的灵柩离开京城了。”王师约这时也是叹了口气道，谁能想到当初轰轰烈烈的变法，现在竟然以这种结局而收场。
赵颜之前接到的消息只是说王安石辞相，并不知道王雱死的消息。所以他听到这里也是一愣，想到当初自己也算是与王雱有过几面之缘，虽然对方给他留下的印象不怎么好。但也算是熟人，甚至赵颜也知道王雱在历史上早逝的事，却没想到他死的竟然这么早。
“王安石辞相了，朝中有什么反应？”赵颜接着再次问道，之前他就预料到王安石复相之后肯定不会长久，所以对于王安石离开朝堂也并不感到意外，只是他现在担心在王安石离开后。大宋朝堂上会发生什么变局。
“对于王安石的离开，以司马光为首的旧党自然都是欢呼雀跃。毕竟之前王安石复相对他们也造成不小的压力，至于变法派依然是分成两部分，有些人极力劝说王安石留下来，比如韩绛等人。有些人则暗中欣喜，比如吕惠卿等人，不过随着王安石的离开，朝堂上肯定需要有人接替王安石的位子，这肯定会引发新旧两党的再次一争斗，所以接下来朝堂上肯定会十分热闹。”王师约再次开口回答道，同时也加入了一些自己的看法。
“驸马说的不错，而且更加不妙的是，下官认为吕惠卿夺得相位的机会要比任何人都大！”正在这时。与王师约站在一起的苏辙忽然开口道，蔡京离任广州知州这后，原来的通判升任知州。结果通判一职也就空缺出来，于是赵颜就奏请赵顼，让苏辙担任通判一职，也算是对他的锻炼，另外他还担任着赵颜在政务方面的幕僚，所以一些重要的事赵颜也会把他叫来一起帮忙商议。毕竟他在政治上的眼光和能力可比苏轼要强多了。
听到苏辙的判断，赵颜也赞同的点了点头。本来在原来的历史上，王安石再次拜相之后，第一个就把背叛他的吕惠卿给收拾了，从此之后吕惠卿一直在外为官，再也没有机会重掌大权，可是现在的历史却因为赵颜的影响，使得吕惠卿竟然取得赵顼的信任，这也让王安石对吕惠卿无可奈何，以现在朝中的情况，以及赵顼对吕惠卿的信任，恐怕王安石离开后的位子很可能会被吕惠卿继承。
“吕惠卿此人虽然有些才能，但却一心谄媚今上，之前就劝说陛下向辽国动兵，若是他这次得到相位，恐怕很可能再次劝说陛下对辽国用兵，到时可就糟了。”这时随同赵颜一起回来的徐元也一脸担心的开口道，他的话也正是赵颜最为担心的。
接下来的一段时间里，赵颜也一直关注着朝堂上的动态，其实不仅仅是他，估计整个大宋的官员都在关注着王安石离开后的朝堂，结果不出赵颜他们所料，就在王安石辞相后不久，赵顼宣布任命吕惠卿为相，另外也许是为了平衡政局，也为了安慰一下旧党，赵顼将司马光也拜为宰相，再加上原来的曾公亮和陈升之，这样大宋的朝堂上就有了四位相公。
对于吕惠卿的拜相，赵颜虽然早有预料，不过接下来吕惠卿的动作却让他再次担心起来，因为吕惠卿上任后的第一件事就是把韩绛给贬到了外地，接着变法派中一些与他政见不合的人也纷纷被贬，司马光虽然看不起吕惠卿，但是对于变法派内部的这种争斗，他也乐得清闲，甚至还主动在背后推波助澜，结果使得吕惠卿很快就把变法派清理了一遍，这虽然让变法派的实力大损，但却使得吕惠卿手中掌握的力量增强了许多。