祝允明为人洒脱，放荡不羁，好游山水而不拘小节，与唐寅、文征明、沈周等名士都是是甚好的朋友，只是仕途坎坷。三十三岁才中得举人，五十岁后仍未被录用，焦躁难耐，常常借酒浇愁；五十五岁任广东惠州府兴宁县知县，祝允明励精图治，施展计谋，令民风不淳的兴宁县有很大改观；六十三岁任京兆应天府通判，无奈官场黑暗，不堪忍受，借病辞官回乡。

祝允明为人仗义，与唐伯虎私交甚好。在其三十七岁时，规劝唐寅读书求仕，不过天意弄人，在唐寅考得解元次年，因作弊案被牵连，终身不得入仕。二人便同病相怜，互相安慰。六十四岁时，唐寅去世，祝枝山悲伤不已，写《哭子畏》二首，字里行间流露出悲痛怜惜之情。