赵构在越州住了一个多月，不见金兵渡江，谅来又像去年袭击扬州那样，掳掠一番，放一把火就回去了。都说金人不耐南方湿热，又不善驾舟，畏惧江面风浪，果然如此。到了十一月下旬，赵构再也忍不住了，张才人和吴夫人也吵着要回临安。丞相吕颐浩阻挡不住，于是仍然乘着来时的御舟，插上三角形的黄龙旗，二十五日从越州出。御舟上帝妃喜气洋洋，观赏两岸风光，傍晚越过浦阳江，抵达钱清堰，离萧山县城已经不远。舟船刚刚停泊，忽然一名铁盔铁甲的年轻军士飞马高呼:法去
“前边可是天子御舟吗?”
扈驾的御营右军都统制张俊在前边船头上大声问道:
“来者是谁?”
“御营统制官岳飞将军麾下亲兵赵荣!”
“前来何事?”
“呈递报警奏章!”
张俊吃了一惊，用手向后船指了一下。左丞相吕颐浩正和赵构在舟中奕棋，听得岳飞急使到，颐浩大惊道:
“陛下，建康失守了!”
“怎见得?”
“杜充和陈邦光都无信息，却由岳飞越职上奏，可见事出非常。”
“难道杜充殉国了?”皇帝不胜骇叹。
颐浩随了皇帝出舱，内侍张去为已招呼赵荣上船。赵荣是由主母李清照请求岳飞准他从军的，他满头大汗，跪呈了岳飞的奏章，禀道:
“启奏陛下，金人已在马家渡过江，叛臣杜充、陈邦光以建康城降金，都统制陈淬战死，请陛下作处置，切勿回銮。岳将军当留在建康附近，袭击敌人，断敌归路。”
赵构君臣俱各骇异，颐浩接过奏章，拆启看了，奉与皇帝。赵构反复细看，终是不信。沉思了一会，说道:
“建康不守，已在朕的预料之中，可是老臣杜充一向忠心于朕，决不致辜负朝廷，莫非岳飞与他不睦?”
“不。”颐浩沉吟道:“如此大事，杜充并无奏章，岳飞所奏，当非虚构。此番幸亏岳飞忠勇机敏，若非他派急使报警，御舟到了临安，那就坏事了。”
“唔，事不容缓，御舟赶快回头去越州吧。”
“如今也只有这样办了。”
于是颐浩吩咐船家明天仍回越州。然后带了赵荣回到自己的座船，命随从招呼他茶饭歇宿。赵荣问颐浩道:
“相公，可知道李远相公和清照夫人的船到了没有?”
吕颐浩道:
“我早已写信催他们来越州，至今未到。听说沿途避难的舟船拥塞，行驶迟缓，总在这几天便可到了。”
次晨绝早，赵荣饱餐一顿，带了一些干粮，沿途寻找主母李清照去了。御舟也即日启碇返回越州，去明州换船航海。
赵荣策马缓驰，沿河细细寻访。渡过钱塘江，到临安城清泰门外水埠码头，在密密麻麻一片拥塞不通的舟船中，终于找到了夫人的座船。只见赵安站在船头上，和前边堵塞的船家争吵。赵荣大喜，忙呼道:
“老管家，赵荣回来了。”
赵安回瞧见一个全身甲胄的年轻军人，认出了是赵荣，忙招呼道:
“兄弟，快过来见夫人。”
赵荣把马缰系在岸旁垂杨树上，跨过了几条船，才到得夫人船上。赵安过来紧抱住赵荣流泪道:
“小兄弟，你怎么回来了，被打散了吗?”
“不是，是来替岳将军呈递奏章的。”
这时素兰也看见了，告诉了夫人，清照十分惊喜，忙唤赵荣进舱，急问道:
“承你挂念，还来看望我，建康失守了吗?”
赵荣说了马家渡一战经过，又说官家将由明州出海，清照叹息道。
“建康既失，临安也不免了。”
“夫人，这里太危险了，怎么还不离开?”