因为朝中有很多奸臣不喜欢忠臣王彦，就为王彦捏造了莫须有的罪名。当时宋高宗下令八字军迅速回朝，但王彦回到宋高宗询问原因时，却被收回了手中的兵权，使他成了一个几乎没有实权的小官，这让王彦对自己的野心之心十分恼火，但宋高宗已经下令他只能服从，所以他做了几年小官后，落得郁郁寡欢，所以他可以。

王彦小时候很喜欢读《孙子兵法》，经常和父亲一起骑马射箭。宋高宗继位后，王彦受到重用，建立了八字军。当时金人悬赏重金希望有人能杀他，但王彦并不担心此事，而是担心手下兵变。当时他的手下为了让王彦放心，在脸上纹了字以示忠心。

当时王彦凭借有利的地形带兵到了晋国，因此很受附近百姓的爱戴。当时王彦掌管着十几万人。据史料记载，即使是八字军也要提前选好位置，因为人数众多，当时休息的地方需要数百里。但当时朝中有奸臣认为现在王彦的功劳太大，可能会对高震有所贡献，于是开始阻挠他攻打徐金国。

那些奸臣告诉宋高宗一些捏造的罪名。宋高宗非常生气，命令王彦立即返回朝鲜。他回来后，把他的兵权拿走，让他做了小官。然而，王彦的野心没有得到回报，他不想过闲职生活，但宋高宗下令，所以他在几年后死于抑郁症。