後來劉胥果然在封國作威作福，還派使臣與楚王勾結。楚王宣稱：“我的祖先元王，是高祖皇帝的小弟弟，封地有三十二座城。如今，封地的城邑越來越少，因此我要與廣陵王一道發兵。擁立廣陵王為帝，自己則要恢複楚國原來的三十二座城，就像當初元王在位時那樣。”

後來此事被朝廷發現，朝中的公卿及主管官員都請求将其誅殺。

天子由于骨肉之情的緣故，不忍心将劉胥繩之以法，于是下诏不要處治廣陵王，隻将首惡楚王誅殺。

古書中所謂“蓬草生長在麻叢之中，不必扶正而自然挺直；白沙混在污泥之中，就會像污泥一樣黑”，就是說環境影響使它們變成這樣。後來劉胥又祈禱鬼神降下災禍并謀反，結果事發而自殺身亡，其封國也因此被廢除。