他们进入南越境内，吕嘉等终于造反了，吕嘉同他弟弟率兵攻击并杀害了南越王赵兴、王太后和汉朝的使者。
他又派人告知苍梧秦王和各郡县官员，立明王的长子与南越籍的妻子所生的儿子术阳侯赵建德当南越王。这时韩千秋的军队进入南越境内，攻破几个小城镇。
之后，南越人径直让开道路，供给饮食，让韩千秋的军队顺利前进，走到离番禺四十里的地方，南越用兵攻击韩千秋等，把他们全部消灭了。吕嘉让人把汉朝使者的符节用木匣装好，封上，放置到边塞之上说了些好听的骗人的话向汉朝谢罪，同时派兵守卫在要害的地方。
并入汉朝
元鼎五年秋天，汉武帝命卫尉路博德为伏波将军，率兵出桂阳，直下汇水;主爵都尉杨仆为楼船将军，出豫章，直下横浦;原来归降汉朝被封侯的两个南越人当了戈船将军和下厉将军，率兵出零陵，然后一军直下离水，一军直抵苍梧;让驰义侯利用巴蜀的罪人，调动夜郎的兵卒，直下牂柯江，各军最后都在番禺会师。
元鼎六年冬天，杨仆率领精锐兵卒，首先攻下了寻陕，然后攻破石门，缴获了南越的战船和粮食，乘机向前推进，挫败南越的先头部队，随后与路博德会和。
两军一同围攻番禺，后番禺降于路博德，吕嘉和赵建德出海西逃时被路博德捕获。至此，南越国灭亡，传国五世，共九十三年。
