秦始皇三十三年（公元前214年），秦始皇派任嚣、赵佗率军南下，统一岭南。
任嚣平定岭南后，出任南海郡尉并在南海郡番禺县内建城作为郡治，因处番山和禺山故起名为“番禺城”（史称“任嚣城”。
范围现今的仓边路以西，越秀区仓边路以西的儿童公园（广州南越国宫署遗址）、广州市文化局、广东省财政厅一带）。
秦朝末，南海郡尉任嚣病危时召见龙川县令赵佗，谓番禺“负山险阻南海”，“可以立国”，并假托秦廷命令，委赵佗代理南海郡尉。
汉高祖三年（前204年），赵佗自立为南越王，定都番禺，今广州市越秀山即为当年越王所名。
《史记·货殖列传》云：“番禺亦其一都会也”，是当时全国九大都会之一。
