這時，荀攸見曹操因為仇恨的加重，已經失去了理智，連忙勸阻道：“主公萬不可再向前行，如今楊奉的七萬大軍已經和徐州城內的丹陽軍會合，兵力之盛絕不在我軍之下。而且，彭城乃是徐州的治所，城高牆厚，糧草充足，易守難攻，而且陶謙在徐州數年，早已深得民心，加上楊奉此人詭計多端，兵多將廣。我軍上次攻打彭城，損失已是不小，若此次再次強行攻打彭城，恐怕這十三萬大軍將會損失殆盡，還望主公三思。”
曹操聽到荀攸竟然在這個時候說出如此不吉利的話，心中頗為惱怒，但是荀攸素來多智，而且對曹操也是忠心耿耿，雖然心中惱怒，但是曹操並沒有發火，更沒有像曆史上袁紹對待田豐那般，將荀攸打入大牢之中。但是夏侯淵就沒有這麼高的涵養了，見荀攸竟然在此刻勸曹操暫時不要報仇，心中大怒道：“荀公達，住口。這擔架上躺著的不是你的親人，那被劉備殺死的也不是你的親人，若是你的兄弟被殺死或是成了這副模樣，你是否還能說得出這些風涼話。平素我敬你是潁川名士，對主公忠心耿耿，不想你竟然是如此一人，汝若再勸，休怪淵之寶劍無情。”
聽到夏侯淵的怒喝，荀攸的臉色絲毫未變，雙目平視著夏侯淵，並沒有一絲的怯意，用極其平緩的聲音道：“即使是攸的親人被殺，攸也會阻止主公去自投羅網，即便你要砍下攸的項上人頭，隻要頭顱不落地，攸依然也會勸主公退兵。隻要是戰爭，就會死人，倘若主公因為一時的衝動而去做讓親者痛仇者快的事情，恐怕以後再也沒有東山再出的機會了。”
荀攸的話說得不錯，而且曆史上的荀攸也是這樣做的，當曹操晚年逼死荀彧的時候，荀攸並沒有什麼反應，依然對曹操忠心耿耿，隻是暗中策劃了謀反曹操的事情，結果並沒有成功，被曹操所知，但是曹操因為對荀彧的愧疚，並沒有殺荀攸。
剛才曹操是見到夏侯惇的慘狀，聽到曹洪被殺的噩耗，一時失去了理智，心中隻想著複仇，如今聽了荀攸的進諫，腦子猶如被冷風一吹，清醒了許多。曹操明白目前的形勢如果強攻徐州，可能這十三萬大軍還會重蹈夏侯惇的覆轍，隻是曹操實在咽不下這口氣。
荀攸看出了曹操的心理，再次勸道：“主公，所謂君子報仇，十年未晚，主公不可憑一時之氣而做遺憾終生之事，使主公多年的努力付之東流，讓劉備奸賊從此逍遙法外，那麼，夏侯將軍和子廉將軍的大仇豈非今生無望了，望主公三思而後行。”
曹操沉吟了片刻，抬頭對荀攸道：“操心智已亂，現該如何去做，還望先生教我。”
荀攸見曹操不見堅持，頗感欣慰，道：“如今徐州之事已不可為，主公當回師濮陽，練兵囤糧，廣招賢才。如今天下已經大亂，李郭二賊扶持偽帝，天下諸侯無人認可，必不能久。主公可結盟楊奉，先取豫州，再謀四周，兵進雍涼二州，之後再南吞並荊益二州，則可與楊奉兩雄並立，如此則霸業可成。”
曹操大喜，道：“公達真是我的子房先生。”於是曹操便聽從荀攸的計策，回師鄄城。夏侯淵和曹仁雖然怒火未息，但是二人畢竟還是能分析出當前的形勢對袞州軍極為不利，就像荀攸說的那樣，此次若是真的去了徐州，無疑是自投羅網，於是也隻好強忍怨氣，隨曹操回師濮陽。
不料，大軍剛過任城，曹操便得到荀彧的告急書信。曹操打開一看，大吃一驚，不由說道：“若是兗州有失，我等便是真的無家可歸，多虧公達的勸諫，否則等我軍回師的時候，袞州必然已經落入呂布的手中。”
原來信中說呂布在陳宮的勸說下率軍三萬襲破兗州，進據濮陽，而張邈也在陳宮的策反下，舉起了反抗曹操的大旗，且袞州郡縣幾乎同時響應。袞州北部基本已經陷落，隻有鄄城、東阿、範縣三處，被荀彧、程立設計死守得全。曹純將軍與呂布屢戰，皆不能取勝，特此告急，希望曹操能早日回師。
這時候，張邈還沒有打出抗曹的旗號，而且張邈也不知道曹操已經回師，因為曹軍追擊太史慈的軍隊，一直在袞州東部活動，而陳留在袞州西麵，而且張邈根本沒有想到曹操在與徐州鏖戰的時候竟然會回兵，所以也沒有打探消息，隻是一直策劃反曹之事。