臣僚们的劝谏，勾起了赵胡对亡祖父赵佗当年所留遗训的回忆，想起了汉、越几十年来相互存有戒心和敌视的历史。

从此之后，他对汉廷一直称自己有病在身，不肯去长安入见皇帝。

汉武帝见赵胡迟迟不肯人朝晋见自己，便以牙还牙，以种种借口，把太子婴齐质于长安不肯放回。

赵佗当年的遗训应验了。

后来，垂相吕嘉用计，设法使太子婴齐返回南越。

但赵胡自太子人朝后，萎靡不振，如同大伤了元气一般，不再见辅佐大臣。

吕嘉等群臣以国家基业为重，数次入主宫进谏，总算使赵胡有了些起色，但已无力挽回南越国江河日下的颓局了。

在这种危机四伏的格局中，赵胡勉强支撑了十余年便抑郁而死，死后谧为文王。

多少年后，有学者认为赵胡既然答应了严助要亲自入长安朝见，后又&ldo;背入朝之约&rdo;，&ldo;一再售汉以疑&rdo;，造成了汉对南越的&ldo;益疑&rdo;，则&ldo;祸速&rdo;也，认为只要人朝见天子，&ldo;一修朝数，礼成而还，恭格之节愈昭，君臣之义愈密&rdo;，则南越国的江山愈固矣。

对这种看法，现代史学家张荣芳、黄淼章却提出了不同的见解和看法。

张、黄认为:经过汉初70余年的休养生息，汉王朝的国力正达到了最高峰。

在这种大气候下，具有雄才大略的汉武帝要加强中央集权，势必要解决封国问题，打击割据势力。

如武帝元朔二年（公元前127年）采纳主父僵的建议，下达&ldo;推恩令&rdo;等。

联系当时形势，武帝对南越国是有征服的想法的。

无论南越国如何讨好汉廷，只要汉朝国力一旦强盛起来，是不会允许这个极具威胁的王国存在的。

且看汉越刀兵相向，就可知两者决一雌雄的日子只是个时间问题了。

危机四伏南越国

事实上，早在汉文帝时，将军陈武就提出了以武力南征荡平百越的构想，当时的汉文帝则说:&ldo;兵，凶器，虽克所愿，动亦耗病，谓百姓远方何?愿&iddot;一结和通使，且无议军。

&rdo;话虽如此，实际上当时的汉廷军力有限，汉文帝颇有自知之明，所以未对南越动武。

而到汉武帝时，形势已大不相同了。

经过景帝的&ldo;削藩&rdo;和平吴楚七国之乱，同姓诸侯王的权势大不如前。

汉武帝行&ldo;推恩令&rdo;，强令诸侯王分封自己的子弟，使封地越分越小;同时借口取消了不少高官贵族的封爵，使中央王权得到了巩固，皇帝有能力独揽朝政大权。

整个国力达到了有汉以来最为鼎盛的时期，造成了国富民强和安定的政局。

这样，徽定边患，开拓疆域，建立大一统的汉帝国成了汉武帝的当务之急。