王黼失宠的原因有很多，比如他当政以后，宋国的情况每况日下，比如他推行的夫役钱搞的怨声载道，不过最重要的原因却是赵佶发现了王黼与梁师成居然是邻居，而且两家还有便门想通，换而言之，这一内一外两个重臣相交太密切了，有瞒上欺下的嫌疑。
任何朝代，大臣与内侍相交结都是犯忌讳的，皇帝对此皆是相当敏感。
朝官不得交结宦官，宦官也不宜与朝官交结，这是宋代防范宦官专权的一条重要原则。
按照规定，两者若相互往来，将受到惩处。
然而，宋徽宗时期，特别是宣和以来，宦官与朝官相交结，已经成为一种普遍风气，士大夫几乎无不奔走于宦官之门，已经相习成风，皆以附内侍为荣，但凡权势显赫的宦官，无不门庭若市，他们各立门户，公受货赂，以贩鬻官爵，只不过以前心思全都在书画和道家上的赵佶并没有注意到这些事罢了。
赵佶对王黼很失望。
当初，赵佶力排众议，破格提拔王黼，可以说对王黼是寄予了厚望。
赵佶给王黼的待遇也最高，不仅赐给他宅邸，还亲自给他的宅邸命名为“得贤治定”，甚至又亲自给他题写了“载赓堂”、“膏露堂”、“宠光亭”、“十峰亭”、“老山亭”、“荣光斋”、“隐庵”等七块碑额。
王黼与粱师成在赵佶面前很会表演。
王黼才智出众，能言善辩，既善于揽权敛财，又善于巧言献媚，逐步赢得了赵佶的信任。
而梁师成则是另一种风格，他愚讷谦卑，老实厚道，不能说不会道，但他善于察言观色，处事老道，也深得赵佶的宠信。
