四月中旬，赵重阳将金饶两万根铁管交齐，金人就把六十万饿得奄奄一息的难民放了。
赵重阳在城外被金人夷为平地的几百个村庄办起难民安置点，在城里顾了上万人为他们熬粥，让大家先恢复体力。
过了几，方腊、杨怀玉等人带着人马全部赶到，赵重阳就让他们派兵把难民保护起来，并对难民实行登记。愿意去海外安家，就领上干粮，到山东坐船出海
不愿意去海外的，每人发粮六十斤粮食自谋生路。虽然家也毁了，亲人也离散了，但还是有半数的难民决定留下来，毕竟故土难离。好在有了海外大盛王赠送的人平六十斤粮，他们许多人又可以慢慢熬一段时间了。
几后，赵构也派人把钱和货物交齐，金人又放了另一半难民。
但赵构的钱粮已经被金人和辽人掏空，根本无力施救难民。赵构知道赵重阳不会对难民不管，就干脆对此事装聋作哑，不闻不问……
四月底，金辽联军终于从围困了近五个月的开封府撤军了。
金辽联军还是分成东西两路撤回，完颜杲、粘罕、完颜娄室、金兀术等人带着金兵从大名府北上，萧颜光带着辽军绕道山西，从太原北上返回辽国。
金辽撒军时，赵重阳虽然警告过完颜杲和萧颜光，让他们沿途老实撤退，别再骚扰沿途的村镇，否则，他们将受到疯狂的的报复。
辽军将领萧颜光一路约束辽军，四个月后，就安全地撤回国内了。
完颜杲开始也约束金兵，加上金人已经打了几个月的仗，多数人已经很想家了。所以，开始两个月金兵都比较规矩。
过了沧州后，就要进入金国饶地盘了。那些地方本来是辽国的，后全部被金人霸占了。
沧州北面两百多里的地方，有一个比较大的寨子叫唐家寨子，建在半山，这是这一带最大的一个寨子，住有三千多人。这里的山民全部以放牧和打猎为生。
由于这里是有名的大寨，又不当大道，所以金人南下时，闻迅赶到这一带来躲兵灾的人很多，最多时，达到了万人以上。
开春后，陆续走了一些人。现在这里也还有六千多人。
金人南下时，从抓的当地人口中，打听到这个寨子。但当时忙着南下，完颜杲没有同意那个叫完颜阿合的万户的意见，不许他带着手下去打唐家寨。
现在完颜阿合又旧事从提，要求带本部八千人马绕道唐家寨，打下唐家寨后，带着所有的财物和人口北上。大部队只需要在北边多等半，他们就赶回来了。
完颜杲心里想，这不过是顺手牵羊的事情，何况沧州以北大宋的行政机构和抵抗力量在他们金人南下时，已经被连根拔起，打一个的山寨，你赵重阳又能奈我何？
所以，就同意了完颜阿合的请求，同时，还把他战死的人马补充到一万，让他成为一名真正的万户。这样，这一大早，完颜阿合就带着他的一万人马高高兴胸去打唐家大寨去了。