據史料記載，公元前221年，也就是秦王嬴政26年，此時南越已發展起來日漸壯大，秦國雖然強大但志在統一中原，北有匈奴強敵，不容南越再強勢威脅！所以秦始皇用了6年時間攻下南越全域，在越地設定了閩中、南海、象、桂林四郡，把分散的越族基本上統一起來了。

秦派往南方的軍隊，在秦二世元年的時候，這個軍隊的“正司令”任囂已經病入膏肓，他對“副司令”時任龍川縣令的趙佗說，現在中原盜賊頻起，此時應當關閉五嶺關隘，在兩廣割地稱王.據司馬遷記載當地最高長官下令堵塞了南北之間所有通道軍隊嚴禁北進作戰 何況，秦統一之後，對待原六國居民的政策，並不公平，於是秦雖然統一，但是原六國居民依然還是原來的心態，這個問題甚至到漢武帝前期都沒有解決，因此佔當時人口大多數的六國居民，即使進入秦軍作為首領，他也不會給秦政府賣命。

趙佗利用地理位置優勢自立為王，統治南越多年。

其實沒有為什麼秦始皇是真正的千古一帝，秦朝統一中原以後，北攻遊牧民族南征百越，作為一個雄才大略的君王開疆擴土征服嶺南是必須的，修靈渠連線長江和珠江，移民嶺南促進南北文化融合，為後世中國偉大奠定基礎。