皇上对刘向的话十分感动。
当初，解万年说昌陵三年可以建成，结果竟不能完工，群臣纷纷指责，皇上交付有司研究，都说：“昌陵地势低下，填土工程的土方量非常大，填了那么久，墓园中便房的地势，也仅仅在地平线上而已。把别的地方的土运来做坟，不能保佑地下亡灵的平安。新土堆积，还需要沉降，也不坚固。参与工程的士兵和劳役犯，数以万计，白天劳动，晚上还点起火把赶工，从东山运土过来，土价已经与粮食相等。工程持续了数年，天下都被拖累。之前选址的延陵，地势较高，只需要用原地泥土，而且也接近祖先的墓园，先前又已经有十年工程基础，应该还是回到原方案，恢复延陵，不再强迫移民，才是上策。”
秋，七月，皇上下诏说：“朕执守道德，不够坚决，决策大事，又没有充分听取群臣意见，错误地听信了将作大匠解万年‘昌陵三年可成’的话，如今工程已经持续了五年，陵中的寝殿和司马门都还不能开工，天下虚耗，百姓疲劳，而外面运来的新土，又疏松疲软，终究不能建成。朕见到工程的艰难，惊骇而伤心，孔子说：‘过而不改，是谓过矣。’现在，撤销昌陵，重建延陵，而且不再强迫移民，使天下人心安定!”