谋反未果
公元前174年，淮南王和棘蒲侯柴武之子柴奇，商议谋反之事，并派出使者前往闽越、匈奴各处联络。朝廷发觉此事，派使臣召淮南王入京惩治。
丞相张包等人揭发了淮南王的罪过，说他废弃先帝法令，不服从天子诏令，起居不遵法度，自制天子车驾，擅为法令，不实行汉家王法；擅自委任官吏，网罗收纳天下负罪逃亡之人；伙同棘蒲侯柴武之子柴奇等人谋反，意欲危害宗庙社稷，派使者联络闽越和匈奴发兵响应；无故杀人，任意加害别人，擅自赦免罪人；拒不接见天子使臣等罪名。
文帝下诏说：“朕不忍心依法制裁淮南王，将此事交给列侯与两千石官员商议吧。”列侯与两千石官员商议的结果，也是建议天子依法裁决。文帝还是不忍心，就赦免了淮南王的死罪，废掉了他的王位。在大臣们的一再要求下，文帝将淮南王发配到蜀地，但仍然给予每日食肉五斤、酒二斗，还命令昔日受过宠幸的妃嫔十人随同前往。
流放蜀地
朝廷将淮南王的同谋者惩处之后，命淮南王启程，一路囚车载着，令沿途各县递解入蜀。当时袁盎劝谏皇上说：“皇上一向骄宠淮南王，不为他安排严正的太傅和国相去劝导，才使他落到如此境地。淮南王性情刚烈，现在粗暴地折磨他，臣很担忧他会突然在途中身染风寒患病而死。陛下若落得杀弟的恶名该如何是好！”
文帝不以为然地说：“他身体好得很，我只是让他尝尝苦头罢了，很快就会让他回来的。”沿途各县送押淮南王的人都不敢打开囚车的封门，于是淮南王对仆人说：“谁说我是勇猛的人？我哪里还能勇猛！我因为骄纵听不到自己的过失而陷入这种困境。人生在世，怎能忍受如此闷气！”淮南王于是绝食身亡。
囚车行至雍县，县令把淮南王的死讯上报天子。文帝哭得很伤心，对袁盎说：“我不听你的劝告，终于把淮南王害死了。”袁盎说：“事情已无可奈何，望陛下好自宽解。”文帝问：“怎么办才好呢？”袁盎回答：“只能杀死几个人来向天下人谢罪了。”文帝命令丞相、御史收捕拷问各县押送淮南王而不予开封进食者，一律弃市问斩。然后按照列侯的礼仪在雍县安葬了淮南王，并安置三十户人为他守冢祭祀。
骄横的衡山王
衡山王名刘赐，王后乘舒生了三个孩子。他还有姬妾徐来、厥姬，都为他生下儿女。衡山王和淮南王两兄弟因为礼节上的一些龌龊而相互责怨，关系疏远。衡山王闻知淮南王准备造反时，也倾心结交宾客进行防范，深恐被他吞并。
一次，衡山王入京朝见，他的手下卫庆懂方术，想上书侍奉武帝刘彻。衡山王不同意，故意诬陷卫庆犯下死罪，还严刑拷打逼他承认。衡山国内史认为此事蹊跷，不肯审理此案。衡山王便指使人上书控告内史不作为，内史被迫办案，但直言衡山王从中作梗。衡山王还多次侵夺他人田产，毁坏他人坟墓辟为田地。有关官员请求追究衡山王的罪责，武帝不同意，只收回他原先可以自行委任本国官吏的权力，改为由天子任命。衡山王因此心怀愤恨，四处访求谙熟兵法和会观测星象以占卜吉凶的人。这些人日夜鼓动衡山王密谋反叛。
后宫争宠
衡山王后乘舒死后，衡山王立徐来为王后。厥姬同时也颇得衡山王宠幸。两人互相嫉妒，厥姬就向太子说王后徐来的坏话。她说：“徐来指使婢女用巫蛊邪术杀害了太子的母亲。”从此太子心中怨恨徐来。徐来的哥哥来到衡山国，太子与他饮酒，席间喝多了，一时愤怒，用刀刺伤了王后的哥哥。王后非常恼怒，屡次向衡山王诋毁太子。太子的妹妹刘无采出嫁后被休归娘家，就和奴仆通奸，又和宾客通奸。太子屡次责备刘无采，让她注意检点。刘无采很恼火，不再和太子来往。王后得知此事，就殷勤关怀无采，从中挑拨。刘无采和二哥刘孝因年少便失去母亲，不免依附王后徐来。徐来就巧施心计爱护他们，让他们一起毁谤太子。衡山王经常听到他们的诽谤，因此多次毒打太子。