劉賀摔玉璽的意外，讓原本安排好的一切都亂套了。
張安世送劉賀的嬪妃兒子們去昌邑邸，則田延年帶人逮捕了以王吉為首的昌邑群臣，送入邸獄，又惡狠狠地提議擴大打擊面，將被劉賀解散回昌邑的兩百號人也抓來：
“王吉、龔遂、夏侯勝等人為廢帝羽翼，都不能留！”
大將軍卻在沉吟后下令：“不必大肆殺戮，王吉、龔遂曾勸諫過昌邑王，讓這兩人服城旦舂之刑即可。夏侯勝妖言惑眾，不是一次兩次了，速速遣人去昌邑逮捕，與坐亡輔導之誼，陷王于惡的安樂一起誅殺于市！”
眼下已是秋天，可是殺人的好時節啊，只殺二十余人，也算比較收斂了。
清洗之后，還有件大事要決定：究竟將劉賀安置到哪呢？
廢帝殺不得，也不可能再做諸侯王，從此就只是個庶人了，但安置在哪卻是要好好考慮清楚。
當然不可能關在昌邑王邸中，霍光雖行伊尹之事，但卻不會將劉賀當成太甲那般關在桐宮里。
原本霍光的計劃是，也不要太過分，將劉賀遣回昌邑國，雖是庶人身份，但還是給他兩千湯沐邑，當豬養著。
可經歷了摔玉璽之事后，霍光卻決定不按原計劃行事，那樣太便宜劉賀了。
杜延年等看出霍光所想，又奏言：“古者廢放之人屏于遠方，不及以政，請徙王賀漢中房陵縣。”
房陵從秦朝開始就是流放圣地，趙王遷等就被趕到房陵，而自有漢以來，宗室諸侯犯罪，也大多打發到那邊去，比如濟川王劉明坐殺太傅、中傅廢遷防陵；文帝之孫濟東王劉彭離以殺人劫貨為樂，有司請誅，武帝弗忍，廢為庶人，徙上庸。
劉賀的“罪行”比起他們真不算什么，但霍光卻仍有疑慮，因為房陵在漢中，還是離關內太近了，身為廢帝，與普通罪王畢竟不同。他還年輕，若是與那群罪王子孫勾結起來，指不定又會鬧出事來。
于是霍光繼續問：“可還有他處？”
御史大夫蔡義適時提議：“昔日淮南厲王悖逆謀反，孝文廢其王位，謫徙蜀郡嚴道邛郵（四川雅安市滎經縣）。”
“嚴道……”霍光琢磨了一會，嚴道已是蜀郡西垂，地方偏僻，遠離關東諸侯、儒生，長安又能隨時監控，倒是一個不錯的選擇。
當年孝文皇帝已經為小老弟劉長修好了府邸，但劉長不等去到地方就自殺了，只好閑置百年，如今就讓那地方派上用場吧！
就這樣，劉賀那一摔，將自己摔到了他原本歷史上從未去過的地方，踏上了一條相似卻又不同的路。
“明日便送走，安置到嚴道縣邛郵去，請皇太后賜其湯沐浴一千戶奉養之！”
……
夏侯勝先前再度被霍光驅逐，回了齊魯，暫時抓不到，但昌邑國相安樂托了任弘的福，早已在邸獄里關了許久，吃了好幾個月牢飯。
安樂見有人來提他，還以為是天子要放自己出去，歡天喜地，最后卻被抓到了東市，一個大漢唾沫噴在斧鉞上，不懷好意地看著他，而昌邑群臣二十余人已身首異處。