由毕再遇和时俊各领五千人马，付责断后。商定之后，李显忠又立刻写信给杨炎，告诉他撤军的安排，请他在水陆两路，都安排人马接应。
安排完毕之后，各军立刻开始行动。先是水军于十一月初四开始撒退，当天夜晚，孟宗政也派出五股小队人马，每队五百人，在采石一带偷渡了对岸，在沿江放火，制造混乱。长江北岸多是树木，而这时以是秋末冬初，天气干燥，北风劲吹，火借风势，立刻迅速展开来，一而不可收拾。江北正是孛撒的人马，金军的大营虽不在树木集中的地方，但火势蔓延到大营附近，也十分吓人。而且随着火势越来越大，带出大量浓烟，呛人肺腹。
再加上宋军又分散在四处，敲锣打鼓，摇旗呐喊，令孛撤一时之间也不知宋军到底有多少人马，因此只派遣数队小股精锐骑军，出营试探宋军虚实。而严命各处金军严守大营，不许轻易出战，并多备水桶，土石之物，以防火势烧到营中。
而就在同时，郭振也指挥着宋军的水军立刻向江北的金军水军动了进攻。金军的水军本来就不及宋军精锐，所用的战船不是民船，就是海船，性能也远不及宋军专用的江船，在白天还可以仗着船多与宋军周旋，但在晚上却一筹莫展，黑暗之中，兵不知将，将不知兵，战船