这一点奸臣王钦若看得分明，就在人人为寇准吹嘘的时候，他悄悄走进了皇宫。
王钦若：“皇上敬重寇准，是因为他对国家有功吗？”
宋真宗：“这个还用说么，我爹都打不赢的辽国，我打赢了，这都是寇准的功劳。”
王钦若：“我想不到皇上竟有这样的看法。澶渊之役，皇上不以为耻，反而说寇准有功。”
宋真宗：“你这话是什么意思？”
王钦若：“《春秋》—书都把城下之盟当作一种耻辱。澶渊之盟实际上是城下之盟，皇上不以为耻吗？皇上听说过赌博吧。那些赌徒在钱快要输完时，就尽其所有押了上去，输赢在此一着，这就叫‘孤注一掷’。皇上在澶州时就是寇准用来赌博的，现在想想还真是后怕。”
后面的话，历史没有记载。但我们应该说王钦若的这一番话算是说到了点子上。
当初主张迁都的大臣们曾经被寇准说是“罪可斩首”，因此对寇准十分记恨，便趁机在真宗面前搬弄是非，说寇准的坏话，真宗对寇准就日渐疏远了。
自此宋真宗开始冷落寇准。
很快，各种流言蜚语都有，说他勾结敌人，有人说他是一代权臣，总之说什么的都有。
终于，寇准被罢官了。
没有了真宗的信任，寇准在朝中更加势微，在景德三年时就被免去了宰相的官职，发配到陕州去任知州，之后几年又辗转在几个小地方当了地方官，与当年一人之下，万人之上的宰相简直是云泥之别。
天禧三年时，奸臣丁谓突然主动要求寇准回朝继续当人宰相，俗话所：“无事献殷勤，非奸即盗。”丁谓此举看似将寇准迎回了朝堂，其实是另有图谋。他希望寇准能够支持他，那么他就可以借助寇准的声望，进一步掌控朝廷。
寇准如此刚直，又怎么会接受丁谓的拉拢。丁谓恼羞成怒，对寇准进行攻击，污蔑他密谋企图造反，造反的罪名可不是什么小罪，这使得寇准又一次被罢相，含冤受屈被驱逐出京。后来丁谓得势，成了宰相，对寇准更是一贬再贬。
公元1022年，寇准又被贬到雷州担任官职，到了之后，发现连个可以居住的地方都没有，好在当地百姓敬仰寇准为人，为他盖了一座屋子，供他居住。
次年，寇准因为忧思深重，卧病在床，没过多久，就病死在了雷州、
寇准的妻子希望他落叶归根，能够带着他的尸骨回到故乡，可是路途遥远，走到洛阳巩县时就没有了盘缠，只好将寇准安葬在了洛阳。
一代贤相，最终却落得了一个冤死于他乡的下场，真是可悲。
好在，后来的宋仁宗赵祯为寇准沉冤昭雪，才没有让寇准死后都一直背负着这冤屈，也洗清了他的污名，这才让后世的我们可以了解寇准究竟是怎样的一个人。
