赵胡死后，其子赵婴齐继位。赵婴齐曾经在长安做质子，娶邯郸樛(jiū)氏女子为妻，生下儿子赵兴。之后赵兴继位，其母为太后。
南越太后和赵婴齐相识前，曾经和长安霸陵人安国少季私通。赵婴齐死后，西汉派使者安国少季出使南越国。旧情人多年不见，南越太后与汉使安国少季重燃爱火，又私通了。之后，南越人听说太后和汉使私通，便都不依附太后。
汉使安国少季出使的任务是劝说南越王比照诸侯的礼节前来长安朝见天子。南越太后担心有人借私通之事作乱，并且她也想依仗汉朝声威巩固权位，于是多次劝南越王以及群臣归属汉朝。因此，南越王及王太后委托汉使上书给汉武帝，请求成为汉朝的诸侯国，得到汉武帝的同意后，他们收拾行装准备去长安朝见天子。
南越国丞相吕嘉，是当地土著，给三代南越王当过丞相，宗族世代与王族通婚，势力强大，又深得南越民心。如果南越国归属汉朝，南越王依旧是属于赵家的，但南越丞相以及其他重要官职却是由汉朝皇帝指定的汉人担任。这样的话，吕嘉的宗族就会逐渐失去势力，所以吕嘉坚决不同意南越国归属汉朝，但多次劝谏南越王都失败，于是萌生了谋反之心。
南越王，太后，汉使都察觉到丞相吕嘉有谋反之心，于是在宫中宴请群臣打算由汉使诛杀吕嘉。吕嘉赴宴，他的弟弟是将军，带兵守在宫外，汉使胆怯，不敢下手。吕嘉见周围的人不是自己的耳目，立刻退走。太后大怒，握着短矛准备亲自刺杀吕嘉，被南越王阻拦，才让吕嘉得以离开。
吕嘉回家后，称病不出，秘密和群臣策划谋反，又得知南越王无意诛杀自己，所以准备了几个月都没有行动。南越王后想独自诛杀吕嘉，但没有国人支持，无能为力。
汉武帝认为只有吕嘉作乱，不足以派大军征讨，于是给壮士韩千秋和南越太后的弟弟樛乐两千人去南越平叛。吕嘉听闻汉军到了南越，于是在国中发布告令：“我们大王年少，太后是中国人，又与汉使通奸，她想一心归属汉朝，将先王宝器献出讨好天子。她带那么多随从，到长安后，就会将他们卖给汉人为奴。她得到自己逃脱一时的好处，却不顾赵氏万世的基业。”于是，吕嘉与弟弟率兵杀死了南越王、太后以及汉使，然后立赵建德为南越王。
