兴平二年（公元195年）底，鲜于辅率幽、冀、乌桓、鲜卑联合部队，向公孙瓒发动大举进攻。公孙瓒在鲍丘河迎战联军，被杀得大败，弃尸两万。此役成为公孙瓒军事生涯的转折点，他的势力从此一落千丈，直至灭亡。
公孙瓒的倒行逆施，原本就引起幽州人的强烈不满，只是在他高压统治下，大家敢怒不敢言。如今树倒猢狲散，代郡、广阳、上谷、右北平诸郡，纷纷起兵，杀死公孙瓒任用的官员，与他划清界限，响应鲜于辅。
怎么会是这样的结果呢？公孙瓒想不明白。
他可能永远也不会明白。
公孙瓒吃不消了，蓟城保不住，要去哪儿呢？
当时流传有一句童谣，是这么说的：“燕南垂，赵北际，中央不合大如砺，唯有此中可避世。”公孙瓒不有个会算命的兄弟吗？他把兄弟请来算了一卦，在燕之南、赵之北找了个唤作易县的地方，把大本营迁到了那里。
此时公孙瓒已经谈不上有什么雄心壮志，能保住自己的一亩三分地就知足了。他大力营造易县的防御工事，几乎可以称得上坚不可摧。在易县周围，挖掘十道堑壕，堑壕边上修筑许多大土丘，每座都有五六丈高，在土丘上建碉堡。最大的堡垒建在中心土丘之上，高十余丈，公孙瓒就住在这里。由于不得人心，公孙瓒总担心遭到暗杀，便在堡垒入口处安了铁门，连左右侍从都不得进入铁门。能进到城堡的人，除了大老婆小老婆之外，只有七岁以下的小男孩。