后来赵胡病逝，赵婴齐回去继承南越王位，刘彻多次派使臣到南越国，提醒赵婴齐要入宫觐见。

但赵婴齐想要独霸大权，欲与大汉分庭抗礼。害怕一旦入朝，会像内地诸侯国一样，被削弱大权，借故拒不上朝。

赵婴齐病逝后，其子赵兴继位，其母憀氏为王太后。由于南越王赵兴尚幼，一切皆由王太后憀氏话事。

刘彻早就不爽这个南越国很久了。

他派使臣安国少季和卫尉路博德访南越国，传旨南越王赵兴与其母憀氏上京觑见。

汉使安国少季到达番禺后，与憀氏私通，他们在长安时早有私情，这件事在南越被揭发，人心惶惶，大多数南越百姓并不拥护憀氏。

憀氏害怕南越内部发生政变，多次劝赵兴与群臣归附大汉朝廷。这回借大汉使者到来，上书汉帝刘彻，要求南越按照内地诸侯，每三年觑见一次，双方贸易不再设关卡。

刘彻准奏。赐南越国丞相吕嘉银质印信，其他官职由南越王赵兴委任。取消南越酷刑严法，颁行汉典法，与内地各诸侯平等对待，大汉使臣留在南越，对该地区进行治理和安抚。

赵兴和憀氏备好行装和贡礼，准备入长安觑见汉天子，表臣服之心。

但南越丞相吕嘉却不服，他自认为南越三朝元老，势力非同小可。吕嘉拒绝同汉使会见，令到南越王赵兴十分为难。

刘彻听说这事，他的脾气能忍？

于是，刘彻任命韩千秋和僇乐率领二千大军，杀向南越，捉拿吕嘉。

吕嘉知道汉室不可能轻轻放过，干脆先下手为强，派兵攻入王宫，杀了赵兴和王太后憀氏，一不做二不休，将驻守在番禺城里的大汉使团也全杀了。

之后吕嘉独揽大权，韩千秋和憀乐率领汉军到达南越境内，离南越都城番禺百里时，遭到吕嘉率领的南越军伏击，汉军全军覆没。

边关传来讯报，韩千秋和憀乐的大军被吕嘉伏击，全军被灭。

刘彻闻之大怒：南越小国，此时不灭，更待何时？！

敢惹我汉室，你算是踢到铁板了！

刘彻认真起来，那可不是闹着玩的。

他任命伏波将军路博德率军从桂阳沿湟水出发；楼船将军扬仆率军从豫章沿浈水出发；任南越降将严为为戈船将军，率军从零陵沿离水出发；南越降将甲为为下濑将军，率军攻打苍梧。

各路大军会师番禺，捉拿吕嘉，消灭南越国。

大汉几路大军剑指岭南大地，汉军气势如潮，攻破番禺城墙。

……

至此，刘彻再度将岭南地区两广地带纳入中原版图。