徐羡之与傅亮、谢晦三人最终选定立三皇子宜都王，是因为朝野都认为他少时即出众，长大虽无师、傅管教之严，但天授和敏之姿，自禀人君之德，是武帝七子中的佼佼者。实际上，从某种意义上说，选择宜都王，并不仅仅是他们三人的意思。傅亮从江陵回来后，说他在晋景、文之上，现在看来，的确如此。

想到这里，徐羡之再次喟然长叹：

“我等只是为大宋选择最好的，这才不会辜负武帝的厚望。新帝必能明了我等赤心！”

次日，诏令不许归政。

徐羡之、傅亮又第三次上表归政，“伏愿陛下以宗庙为重，百姓为心，弘大业以嗣先轨，隆圣道以增前烈”，于是刘义隆这才答应他们的归政请求，从此开始亲览万机。

徐羡之仍坚持逊位——让位，退回位于清溪边的私人宅第。

吴郡太守徐佩之、黄门侍郎谢皭、侍中程道惠、吴兴太守王韶之等人既认为不妥，更感到不安，于是诸人轮番求见，力陈利害。不得已，徐羡之才重新回到西州府，奉诏视事。