张九龄的曾祖父是岭南张氏的开山始祖。据说在岭南，有成千上百的张氏宗祠，而张九龄故居的宗祠是在岭南建得最早的一座。目前，张九龄故居遗迹仅存张氏宗祠、张文献公祠等遗迹。宗祠内设有张九龄和他迁居祖宏愈公等人的牌位。而张文献公是后人为了纪念这位伟大的宰相，在清康熙年间所建。据说初建于湖湾桂山岗左上方山麓，后迁到旗岗寨山麓。

2010年，张九龄文化研究会和张九龄的后裔、张氏宗亲等募资270余万对张九龄故居的宗祠进行修复工作。修复工作主要依据原建筑风格和格局进行，历时两年完工，先占地面积已达到2000多平米。

张九龄有“岭南第一相”的美誉，他在任期间不畏权贵，敢于恶势力作斗争，而正是他的这种高尚品质，才会被人们纪念至今。而他的故居，在修葺后也如他的精神一般，将永远屹立在中国南海。