接着，彭智贵又在市井中散布谣言，说管家在私下与外敌有所往来，甚至有意独揽大权。这些谣言经过精心设计，既不会直接传入陈二爷耳中，又能保证通过其他渠道让他得知，从而加深他对管家的猜疑。
不久，陈二爷开始暗中观察管家的一举一动，而管家也察觉到了主子态度的变化，开始感到不安。彭智贵趁机在一次宴会上，安排了一个与管家长相极为相似的演员，在人群中故意表现出贪婪和阴险的神态。这一场景恰好被陈二爷目睹，进一步加深了他对管家的不信任。
随着猜疑的种子在陈二爷心中生根发芽，他的态度和行为开始发生微妙的变化。在一次府邸的内部会议上，陈二爷公开质疑了管家的决策，指出了几个近期管理上的失误，这些失误在以往可能只是小事，但在陈二爷心中却成了管家不忠的证据。