前有陈府密室遇刺之事，后有皇后断发之举，让乾隆觉得杭州是个不祥之地，他便不想继续在杭州呆了，遂禀明皇太后，准备打道回府，次日便收拾启程。因此，圣驾的大队人马离开了居住十二日的杭州。
之前傅恒奉命调查的乾隆遇刺案，傅恒也只是让人把陈府、以及密室通往的庙宇都贴了封条，然后称“刺客已死，无需再查”，等同于马虎结案了。然而现任的浙江巡抚可不敢马虎，乾隆在杭州地界遇刺，无论如何都是官员的失职，于是以“失职”罪落实责任人，几个杭州官员遭到降职或罢免，当值官兵也受到惩处，这个案子才算真的结束了。
因为乾隆遇刺案与皇后被遣送回京的时间很近，且对外宣称的缘由都太过于敷衍，不仅杭州官民把这两件事联系在了一起，连随行的宫人侍卫大多也是不知情的，难免人云亦云，新一轮的传言盖过了原先的流言蜚语，形成了各种各样的版本，在南巡队伍中、以及南巡途径之地传播开来。
圣驾的回程，不可能像皇后被遣送回京那样仓促，乾隆依旧是走走停停，速度放的很慢，一来是为了旅途不至于太劳累，二来也可以拾遗捡漏，看几眼之前可能错过的景致。
到了苏州，乾隆又下令停下来休息。
说是休息，实际上乾隆是一日也闲不住的，他深爱苏州风光，好不容易江南一行，岂能让美不胜收的苏州只是路过？因此又奉太后携妃嫔到各名胜园林去巡游，乐在其中。
永琪在来的路上对苏州园林就没多大兴趣，回去的路上心情更糟，不过大概敷衍着，有时跟在乾隆、太后等身后无聊的走两步，有时甚至只是陪乾隆用个早膳，早早的回行宫中自己的住处。只有在乾隆接见官员、处理政务的时候，永琪才作陪的稍微久一点。
瑛麟也没有兴致游山玩水，她与永琪冷战几日，只是勉强在人前维持着夫妇和谐的状态，两个人每天同去向乾隆、太后等请安，又一同返回，在一起的时间颇多，却经常保持沉默，心里一直感到很不自在，也很憋屈。
这日，在永琪、瑛麟返回行宫住处的路上，在路过一片花房时，他们偶然听到花架那边似乎有人提到了“皇后”二字。永琪不自觉放慢了脚步，在花架的外面听花架里面传出来的七嘴八舌的议论声：
“不是说得了急症吗？”
“真要是急症，送回京城再治，还能有命吗？一定是得罪了皇上，或者得罪了太后！”
“也说不定是令贵妃挑唆的！谁叫皇后怂恿皇上宠幸永常在呢？”
…。。