靳丈二金剛摸不著腦袋，一疊聲喊冤枉，他說“我怎麼會求助外力，我絕不是這種忘恩負義的小人。”
段聽了更為生氣，就在抽屜中把張作霖的來信拿出來，大聲說“你說沒有，這是什麼東西，還要在我麵前撒謊。”
靳接過來一看，正是自己親家的來信，信中全是替自己講話，不是求助外力是什麼？便啞口無言。
段則怒衝衝地說“你告訴張作霖，他是什麼東西，越來越不成體統了，公然敢乾涉北洋派的家事，他配算是北洋派的人嗎？他是什麼出身？他怎麼有的今天？他不過是個馬賊，我不提拔他就能有今天嗎！簡直不知輕重，越來越不像樣了。”
靳站在段的麵前，走也不是，坐也不是，一直等段罵夠了才鞠躬而退。
段祺瑞這次真的動了肝火，他不隻對靳雲鵬生氣，甚至連徐樹錚也不接見，避居團河，宣稱此後不再過問內閣的事。
三月二十七日張作霖在沈陽作壽，同盟各省的督軍均派代表前往祝壽，同時開了一次秘密會議，決定三點
（一）擁靳雲鵬留任國務總理，不反對段祺瑞。
（二）安福係賣國禍國，應予解散。
（三）安徽督軍倪嗣衝久病不能視事，推薦張勳為安徽督軍（張勳亦是張作霖的親家）。
到沈陽壽的各省督軍代表外加張作霖的代表，在沈陽會議結束後一同前來保定，來到曹錕的大本營。他們名義上是參加保定舉行的追悼直軍陣亡將士會，而實際上則是應曹之召，參加保定會議。
保定會議與沈陽會議大同小異，也決定了三點
（一）擁靳雲鵬留任國務總理，不反對段祺瑞。
（二）讚成直軍撤防北歸，但須責成吳佩孚與南軍有一默契，保證直軍撤退後，南軍不乘機前進。
（三）宣布安福係賣國禍國的罪狀，勒令解散。
從沈陽會議和保定會議的決定中，可以看出奉係和直係雖然聯盟，但在各自利益上並不互相支持。張任霖想支持其親家張勳重回安徽，擴大自己的勢力，曹錕則關心直軍撤防問題。
段祺瑞避居團河後，閉門謝客。他在北京時，徐世昌和靳雲鵬感到事事段都要過問，不勝其苦。現在他去團河不問一切後，徐、靳又感到極為不方便。因此再三再四邀請他回到府學胡同私邸，以便就近承教，段堅決謝絕。
徐世昌隻好請在正定隱居的北洋元老王士珍到北京來調停政潮。
四月四日王士珍去團河訪段，王對段說“靳翼青（靳雲鵬）是你的人，他們擁護靳內閣，豈不就是擁護你，你生什麼氣呢！”
段聽了覺得也有道理，四月七日曾一度回到北京來。什麼事都沒乾，反而一直被安福係的人包圍，報告他的都是一些惱人的消息，一氣之下他於八日又回了團河。
奉係和直係雖然口裡不講倒段，但他們深知，不搞倒段祺瑞他們將一事無成。而要倒段就要付諸行動，就要有實際行動者，這個使命自然而然地落到吳佩孚身上。
吳佩孚的第一步行動就是撤防北歸。
三月上旬，吳佩孚派人把他部隊的眷屬七百餘人護送北歸，下令禁止兵士不得無故請假，不得向商人賒欠，不許擅取民間一草一木。並電請張敬堯準備派兵接收直軍的防地。其實他已暗中和湘軍有約，一俟撤防，就由湘軍來接防。
段祺瑞知道此事態嚴重，三月十八日他秘密地來到保定，請曹錕製止吳佩孚自動撤防。
同時又授意北京附近的駐軍五個師長曲同豐、陳文運、魏宗瀚、李進才、劉詢等聯名通電，借口營房不足，拒絕直軍吳師移駐北京。
這時吳佩孚已派參謀王伯相到北京，料理駐兵地點。王伯相到北京後便把實際情形電吳，所有兵房都被邊防軍駐守，吳為之大憤。
吳佩孚衡陽撤防是個極重大的事件，不但對當時國家局勢的走向影響極大，對吳本人的人生也具有決定性作用。
當時局外人都替吳擔心，認為他孤軍久戍，要從數千裡外冒險北歸，實在是一個大膽的嘗試。可是他卻從容不迫，就像關雲長千裡走單騎。
其實對於撤防問題，吳佩孚是經過縝密的考慮的。由衡州到保定雖然是一條漫長的路，但隻有張敬堯的地盤屬皖係的勢力範圍，而吳佩孚根本不把張敬堯放在眼下。由長嶽過湖北到河南，是王占元和趙倜的地區，王、趙都已加入八省同盟，一般不會遭人算計。