潘安在历经官场沉浮之后，逐渐变得趋炎附势，与当时权势极盛的外戚贾氏家族走得很近，时常与石崇二人对贾谧奉承拍马，也受到他们阴谋的煽惑。

当时的贾家在朝廷中权势之高能够呼风唤雨，而贾谧做为皇后贾南风的亲外甥，其祖父贾充又是西晋的开国功臣，因此贾谧更是备受恩宠，权高无比。当时的贾南风有欲废太子而新立，好将大权牢牢掌握在贾家手中，而潘安又与贾谧关系甚近，因此也被卷入了这场风波中。

有一回，太子喝多了，潘安被安排写一份祭神文供太子抄写。而此时的太子由于酒醉得神志不清，于是看也不看就临摹着抄了一份。接着潘安拿到太子的手稿后略添几笔将其塑造成一篇谋反之文，导致太子被废，其生母被处死。潘安虽不是主谋，但在此案中却是极为关键的推手。

后来，司马伦以报太子之仇的名义联合皇族发动兵变，除尽贾党，潘安也在“八王之乱”中落马，诛尽三族。