不过，因为据说赵佗以及他之后的几代南越王的墓葬里都金银珠宝无数，所以后世不少人想要寻找和挖掘赵佗墓。各种史书对赵佗墓所在的具体位置都进行了推测，有说白云山的，有说悟性寺的等等，但基本肯定的是就在南越国的都城番禹，也就是现在的广州。

比如，在三国时期，番禹是吴国的领土，当时的孙权听说赵佗墓有宝藏后，就派人带着几千士兵，千里迢迢来到广州，大张旗鼓地寻找赵佗墓。他们可谓挖地三尺，附近可以埋人的山岗几乎都被他们翻了个遍，可还是只挖到了第三代南越王的陵墓。

不过在上世纪八十年代，第二代南越王、赵佗之孙的陵墓被考古发现，并的确从中出土了许多珍贵的文物。根据这一陵墓以及其他已经发现的南越国时期的墓葬分析，考古和历史学家们推测出赵佗墓最有可能是在广州的越秀山。