當年在湯陰縣學藝的時候，時遷告訴岳飛兩軍交戰時情報的重要性，所以悉心教導董先所有相關的知識與技藝
岳家軍具備雛型之後，岳飛便成立踏白軍，專職負責潛伏觀察、刺探敵情、跟蹤刺殺、蒐集情報以及傳送消息等任務、由董先擔任統制
這次岳飛便根據踏白軍的報告，發現曹成一直在移動，於是率部跟蹤去追擊；紹興二年的閏四月初，雙方一前一後已經到達嶺南的賀州。
當曹成探知岳飛的軍隊即將要追到之時，搶先控制了賀州境內的險要之地莫邪關。閏四月初六日，岳飛派遣前軍統制張憲去攻打關口。軍士郭進和旗頭二人領先登上牆頭，並且殺死賊軍的一名旗頭，賊軍陣勢馬上大為紊亂，宋軍一齊趕了上來，賊眾紛紛逃散，官軍遂得奪關而入。
帶領宋軍奪關而入的軍官，是第五將韓順夫。他不但好酒貪杯，而且喜歡與婦女狎戲。勝利進關之後，他脫掉身上的盔甲，解掉馬上的鞍韉，讓所擄婦人在旁作陪飲酒，正要大事享樂一番。不料埋伏在鄰近的賊人楊再興乘此機會，率眾直衝韓順夫的兵營。宋軍完全沒有意料會在城內遭到敵人突襲，措手不及之下節節敗退，關卡淂而復失。韓順夫本人，則被楊再興砍掉了一支胳臂，流血過多而死亡。
岳飛事後十分生氣，因為他的部隊一向以紀律嚴明而聞名。他認為韓順夫違反軍中規定，導致殺身之禍，只能說是咎由自取；韓順夫的親隨兵和他一起胡作非為，同樣是犯了軍法，因而將他們一律處斬。他還下令給第五副將，要他必須活捉楊再興，將功贖罪。
後來前軍統制張憲和后軍統制王經一同前來會師，重整軍力與楊再興在關前交戰。這次官軍數量占絕對優勢，而楊再興卻力戰不屈，不但未能把他捉獲，岳飛的弟弟岳飜反而一個不小心，被楊再興當陣殺死。與楊再興對戰過的人都稱讚他真是一名悍將，難怪他的綽號叫做「萬人敵」。
雖然擁有這麼一位優秀的將領，賊眾的整體實力還是與岳家軍有一段明顯的差距；單在這次戰役當中，就有上萬的人死傷。
岳家軍仍然沒有任何鬆懈，馬不停蹄繼續追擊；曹成和楊再興等人在屢戰屢敗之後，只好率領餘眾流竄到賀州東北的桂嶺縣去。
岳飛的部隊追了整整十天，才在桂嶺縣境趕上曹成與楊再興率領的游寇；曹成在接戰失利之後，又拔寨奔向連州。這時后軍統制王經正好率領所部運糧到達，所以也加入追兵的行列。
楊再興則向著靜江軍的方向逃竄，結果運氣不好，首先被岳飛后軍的騎兵部隊追上；他眼看脫逃無望，便縱身跳下一道深澗。騎兵們懼怕他悍勇作困獸之鬥，不願下馬涉險追捕，想想只能把他射死在這山澗中了。
當他們搭箭在弦，準備一起射出時，楊再興想起岳飛曾經在對陣時勸降過自己，所以高聲喊叫說：「我是一條好漢，你們先不要殺我，把我帶去見岳飛吧。」
追兵答應了他的要求，楊再興從深澗中跳了上來，任由追兵們綁了他去見岳飛。岳飛果然很讚賞他的勇武，一見面便親自解開捆綁在他身上的繩索，不但不提過去交戰中事，更不提起殺弟之仇，開口就向他說道：
「我知道你是一條好漢，而且是楊家將後人。我認識你父親青面獸楊志，知道他是一個血性男兒，不忍他絕後，所以才在陣前招降，希望你棄暗投明，報効國家，創立一番功業，以慰揚志叔在天之靈。我最後問你一句，你可願意從此改過，像你先祖一樣心存忠義，報答國家嗎？」
楊再興才知道兩個人之間還有這一層淵源，所以刻意留他性命；讓他感激莫名，滿口答應。從此以後，他便成了岳飛部隊中的一員猛將，而且非常忠心勇敢。
其實當年吳用、公孫勝等七人計劫生辰綱，那負責押運的軍官正好就是楊志，成了苦主：所以後來吳用與宋江前往雙龍山，要去邀請他上梁山入伙時，他始終堅持不肯。後來吳用只好使用苦肉計，以利刃刺進自己心臟謝罪，其實他早知自己心臟比旁人偏移數寸才可以僥倖不死，最後逼得楊志不得不答應上山入伙。
雖說吳用學過醫，但是他也沒打開過自己的胸膛測量過，在一群殺人高手面前，要拿捏得那麼精準也要靠一點運氣才能成功。
吳用心想，若要認真計較，自己欠楊志實在太多，所以當公孫勝告訴他楊再興的身世之後，他便準備幫他留住最後一條血脈，因此岳飛早就通告全軍不能傷害楊再興的生命，只能活捉。
也就因為如此，他的弟弟才會死在楊再興手上。岳飛心中雖然難過，卻只能安慰自己，就算是還楊志一點點公道吧。
岳飛下令給前軍統制張憲，命他率眾緊追逃向連州的曹成。曹成無計可施，又轉向湖南的郴州，郴州的知州趙不群憑藉城牆堅固力守，曹成攻打不下，又奔往邵州。
這時，擔任福建、江西、荊湖宣撫使的韓世忠，在福建把范汝為領導的農民起義鎮壓成功，全軍班師回到永嘉；表面上說要在那裡休整一段時間，暗地裡卻經由處州、信州，迅速到達洪州贛江之濱，連營數十里。
韓世忠這支人馬，不但人數眾多，而且以戰鬥力強大著稱。想不到突然開拔到此處，讓江西以至湖南境內的游寇們大為震驚。韓世忠知道曹成屢次為岳飛所敗，正在邵州困坐愁城，就充分利用自己部隊最近造成的這種強大的威懾作用，派人前往邵州對曹成進行招安。曹成在走投無路的情況下，終於在紹興二年閏四月接受了韓世忠的招安。
曹成的部下有一人名叫郝政，卻不肯隨同曹成一起歸順。他率領一部分人馬從邵州西向流竄到沅州。這夥人都在頭上綁上一條白手巾，自號白頭兵，他們宣稱一定要為死去的兄弟們報仇，與官軍抵抗到底。但當他們到達沅州境內時，張憲也很快追來，兵敗之後，他們最後還是歸附了張憲。
紹興二年六月初，李宏率領兵馬攻打潭州，把盤踞在那裡的馬友殺死。不久，韓世忠派遣部將率軍進入潭州，把李宏扣押起來，後來韓世忠任命他為統制。
這年七月下旬，韓世忠進軍岳州，去征討以白面山為根據地的游寇劉忠。韓世忠先把劉忠軍的營壘布署情形探察明白之後，派遣敢死隊趁著黑夜悄悄潛進去埋伏在山上，次晨他親率先鋒與前軍一起前進。交戰之後，埋伏在山上的敢死隊迅速跑上劉忠中軍的瞭望樓，豎起官軍的旗幟。游寇們看到以為已經戰敗，一時驚慌失措，大敗而逃。
劉忠這支游寇盤踞在岳州境內已達三年之久，這時終於全部向著淮西地區逃去。
解決劉忠之後，流竄在湖南地區的游寇，基本上算全部都被討平了。
岳飛在率部追殺曹成及其殘兵的途中，經過茶陵時遇到駐屯在那裡的樞密院將領韓京；行經郴州時又碰到駐屯在那裡的湖南帥司統制官吳錫。韓京和吳錫原來也都是游寇，後來接受了南宋政府的招安，兩人都將旗下精銳部隊加入岳家軍。他們的部隊被岳飛合併之後，在這次征討曹成的過程中也都起了一些作用。
紹興二年的六月上旬，朝廷下令給廣西經略司，要他們把新買到的戰馬三百匹分撥給岳飛的部隊。
朝廷獲報知道曹成所率游寇已被岳飛和韓世忠部隊平定之後，在紹興二年六月便下令給岳飛，要他率領全部人馬，包括不久前收編的韓京、吳錫兩部人馬在內，即刻開往江州去戍守。
岳飛的軍職雖然仍是神武副軍都統制，但他的虛銜，則由原來的親衛大夫、建州觀察使提升為中衛大夫、武安軍承宣使了。
當韓世忠撲滅了福建地區范汝為那支起義軍的時候，高宗曾派人送給他金蕉酒器一份以慰勞他的功勛。紹興三年二月，高宗又把同樣的一份禮品，派人送給了在江州的岳飛。
--