卫夫人为李矩生有一子为李充，是为东晋著名的文学大家，早文学方面的成就颇高，留有不少的文学作品如《翰林论》，而李充甚是擅长楷书书法，也是受其母卫夫人的影响。

后李充至剡县为官，卫夫人随儿子前往，后于公元349年病逝，享年77岁。卫夫人还曾是一代书圣王羲之的书法老师，多亏卫夫人的书法启蒙，使得王羲之在书法学习方面颇有造诣。