之后李光地因在收复台湾这件事中立下功劳，被康熙委以重任，而当时朝廷之中两党之争渐起，都在朝廷中安插自己的人手，遂双方均想拉拢李光地。而李光地深知他们均非善类，不想参与其中，遂向康熙直言心中之意但未果，而此时康熙因利益问题只能牺牲李光地，便陷入狱之苦。

而受了这次的经验，李光地决心要扳倒这些弄权之人，以其人之道还治其人之身，遂开始了他张狂的一面，于是在明珠六十大寿的宴席上当面弹劾他让其难堪，因此康熙将两人的行为都进行严厉斥责。

之后康熙见李光地愈显杖权弄势趋向，愈感其变得暴躁的心态，因此为了加以防患，将李光地贬为台澎知县，远离朝政中心。