饒州城破之時，江萬裏正在芝山寓所，守將唐震殉國的消息傳來，他很清楚擺在自己麵前的兩條路，一是向元軍投降，聽從他們的擺布，以自己的名義寫安民告示，二是以身殉國。
當時他的學生陳偉器正在身邊，江萬裏拉著他的手說：“大勢不可支，餘雖不在位，當與國為存亡。”
正在這個時候，又傳來他的弟弟江萬頃在與元軍作戰中，被元軍支解，心中悲憤，噴湧而出，江萬裏縱身跳入止水。
這時，外麵已經傳來元軍的吵嚷之聲，家人也不入水相救，反而一個一個隨著江萬裏跳下去。
一家數十口人，迅速沉溺於止水，元軍進到寓所之內，看到江家人都跳到水裏，也不相救，任其淹沒。
很快，這些人都消失在水麵，沉到水底，到第二天的時候，隻有江萬裏一個人的屍體浮出水麵，那少數沒有跳水的家人將他的屍體打撈上岸，草草在附近找了個地方埋葬。
臨安城裏，謝太皇太後收到江萬裏殉國的消息，一個人痛哭了一場，然後以皇帝的名義，追贈江萬裏為太傅益國公，後加贈太師，諡文忠。同時，也給在饒州殉城的唐震追贈，諡忠介。
江萬裏的死訊傳到身在揚州的賈似道那裏，畢竟曾經身為同僚，他哀歎了半天，也是無計可施。
賈似道知道元軍攻占臨安是遲早的事情，非常擔心發生當年在汴梁的徽、欽二宗被金人擄走這樣的事，把賈正等幾個近身幕僚找來商議，應給臨安的謝太皇太後提出遷都的建議。
說是遷都，準確地表達，應是遷皇帝在臨安的行在，因為自高宗皇帝設行在於臨安以來，沒有一個人不承認宋朝的都城是在汴梁的。
賈似道以總督的名義，向各地軍民發了一道命令，要求大家到海上迎接皇帝。
已65歲的謝太皇太後收到賈似道的奏章，內心當然是沉重的，知道戰局的危急，可是一想到這新皇帝才5歲，如果一旦動遷，龐大的皇家隊伍更可能成為元軍追擊的目標，與其那樣，還不如堅守臨安，如果臨安守不住了，那還能往哪裏奔逃呢？於是自作了一回主張，堅決拒絕了賈似道關於遷都的主張。