，犹可二百里。褫鞍甲而不息不汗，若无事然。此其受大而不苟取，力裕而不求逞，致远之材也。不幸相继以死。今所乘者，日不过数升，而秣不择粟，饮不择泉，揽辔未安，踊踊疾驱，甫百里，力竭汗喘，殆欲毙然。此其寡取易盈，好逞易穷，驽钝之材也。”帝称善，曰：“卿今议论极进。”拜太尉，继除宣抚使兼营田大使。从幸建康，以王德、郦琼兵隶飞，诏谕德等曰：“听飞号令，如朕亲行。”
飞数见帝，论恢复之略。又手疏言：“金人所以立刘豫于河南，盖欲荼毒中原，以中国攻中国，粘罕因得休兵观衅。臣欲陛下假臣月日，便则提兵趋京、洛，据河阳、陕府、潼关，以号召五路叛将。叛将既还，遣王师前进，彼必弃汴而走河北，京畿、陕右可以尽复。然后分兵浚、滑，经略两河，如此则刘豫成擒，金人可灭，社稷长久之计，实在此举。”帝答曰：“有臣如此，顾复何忧，进止之机，朕不中制。”又召至寝阁命之曰：“中兴之事，一以委卿。”命节制光州。
飞方图大举，会秦桧主和，遂不以德、琼兵隶飞。诏诣都督府与张浚议事，浚谓飞曰：“王德淮西军所服，浚欲以为都统，而命吕祉以督府参谋领之，如何？”飞曰：“德与琼素不相下，一旦揠之在上，则必争。吕尚书不习军旅，恐不足服众。”浚曰：“张宣抚如何？”飞曰：“暴而寡谋，尤琼所不服。”浚曰：“然则杨沂中尔？”飞曰：“沂中视德等尔，岂能驭此军？”浚艴然曰：“浚固知非太尉不可。”飞曰：“都督以正问飞，不敢不尽其愚，岂以得兵为念耶？”即日上章乞解兵柄，终丧服，以张宪摄军事，步归，庐母墓侧。浚怒，奏以张宗元为宣抚判官，监其军。
帝累诏趣飞还职，飞力辞，诏幕属造庐以死请，凡六日，飞趋朝待罪，帝尉遣之。宗元还言：“将和士锐，人怀忠孝，皆飞训养所致。”帝大悦。飞奏：“比者寝阁之命，咸谓圣断已坚，何至今尚未决？臣愿提兵进讨，顺天道，固人心，以曲直为老壮，以逆顺为强弱，万全之效可必。”又奏：“钱塘僻在海隅，非用武地。愿陛下建都上游，用汉光武故事，亲率六军，往来督战。庶将士知圣意所向，人人用命。”未报而郦琼叛，浚始悔。飞复奏：“愿进屯淮甸，伺便击琼，期于破灭。”不许，诏驻师江州为淮、浙援。
飞知刘豫结粘罕，而兀术恶刘豫，可以间而动。会军中得兀术谍者，飞阳责之曰：“汝非吾军中人张斌耶？吾向遣汝至齐，约诱至四太子，汝往不复来。吾继遣人问，齐已许我，今冬以会合寇江为名，致四太子于清河。汝所持书竟不至，何背