可惜，在他盛极一时的时候，因为一次案件的禀报不够具体详实，被判以欺君罔上的重罪，虽然，这时候免掉了他的死罪，可还是被削了其职位。

大概过了几年之后，顺治帝驾崩，康熙帝继位。继位之后的康熙帝，为了兴得满洲，所以又再次启用了图海，任命他为大学士。后来的图海，才真正开启了他精彩的一生。

图海一生戎马，立功无数。不仅仅在平定吴三桂的战役之中被封为三等公，更是在各个大大小小的战役中立下了无数的功劳。康熙二十年间，已经疾病缠身的图海却还是关心着国家，自动请缨要上前线四川平定叛军，但是康熙帝念他身体不佳，所以没有让他上前线。

可是，时间终究还是带走了这个精彩传奇的生命。康熙二十年十二月，图海病逝，享于太庙。