但祸事也因此而起，某日郡守姜桂到他家中饮宴，看上了他的娇妻乌雉，于是借口塞北有警调王攀出塞。
王攀不知是计，一去大半年，姜桂趁虚而入强占了乌雉。
此后不久，姜桂升其为讨虏校尉，打发他长驻塞上，一年也不准他回家两趟。
后来终于有人将姜桂霸占乌雉的事告诉了王攀。
王攀是个铁血男儿，那容得头顶染绿，一怒回城，就公堂上逮着姜桂一顿好打。
“那老小子的门牙被我打落三颗，着实是痛快啊！”
虽然事情过去一年，但提到自己当堂痛打姜桂的事，王攀仍然觉得顺气。
关于姜桂给王攀头顶染绿这件事，李轨在幽州的时候曾托人打听过，事情的真相并不是如王攀所说，他的贤妻乌雉可不是被郡守姜桂霸占的，而是她主动勾引姜桂，二人私下通奸，因恐被王攀发现，才把他打发出塞。
而那个向王攀告密的家伙，据说是公孙瓒派在渔阳的细作。
公孙瓒觊觎渔阳已久，苦于找不大机会，若是王攀一顿拳头打死姜桂，渔阳这一乱他正好可以趁虚而入。
这些情况王攀一丁点都不知道，他因殴伤上官被革职查办，有人在他家里搜出了大量金银，因此污他受贿，他被打入死牢，等候秋后问斩。
好在王攀人缘不错，有部下冒死劫狱。
王攀也觉得自己委屈，便决定去幽州向郭勋告状，到了幽州才知道郭勋已经失势，于是他转而进京告御状，结果在安次县境内盘缠被小偷偷走。
他饿的实在受不了就去吃霸王餐，却被捕快拿住。
他哪敢吐露身份，打死也不说。
捕快见他骨头这么硬，怀疑他是江洋大盗，就给他上了重刑，若非李轨阴差阳错闯进安次县大牢救人，估计这会儿王攀不被打死，也被押回渔阳斩首。
所以他深感李轨的恩德，发誓以死报效。
至于过去的辉煌，那都过去了，浮云一般，还提他作甚。
李轨告诉他自己准备重用他为内军营指挥，王攀感动的直掉眼泪。
内军营是将领贴身卫队，把如此重要的位置交给他，这是李轨对他的绝大信任啊。