宋度宗因为在母亲腹中时受到药物的严重影响，虽然平安出世，但是却智力低下，到了七岁才会说话，成为太子后，理宗派人教他读书安全投资炒股技巧，没过多久便亲自来询问其功课，愚钝的赵禥当然无法答出，因此常常惹得理宗大怒。但是在老迈而昏聩的理宗看来，赵禥毕竟是与自己血缘最亲近的侄子，而赵与莒（理宗原名）赵与苪兄弟在南宋皇族中原本地位就不高，只是偶然被选中这才进了宫成为了皇帝，因此理宗并不想改立他人。