益陽在羅縣以西百餘里，路途不算太遠，而且那裡是荊南腹地，並不是前線，駐兵稀少，劉緯的一萬大軍抵達之時，那裡的縣長根本無力抵抗，直接就開城獻降了！佔據了益陽後，劉緯下令補充糧草，隨即安排好隨行人等，暫時安頓下來後，便馬上親統魏延和五千兵再向西開進，迅速抵達了武陵城下！
這回您明白劉緯的戰略意圖了吧，他這是避實就虛之策！長沙實力過強，而且劉黃二人頑固，是塊難啃的石頭，那就不要去動他們，而是轉向西，奔武陵郡而去！
武陵郡也是荊南四郡之一，地處偏遠，駐兵也不多，其太守金旋，也絕非什麼忠義不侍二主之臣，劉緯帶兵前往，也是把劉表亡故，荊州大變的消息，通過書信傳達給了他，再擺開陣勢一嚇唬，金旋立馬投降了！
佔據了武陵郡，劉緯對金旋和金禕父子十分禮敬和重用，利用他漢中王的身份，加封金旋為西門中郎將，仍領武陵太守之職，其子金禕，被封為諫議大夫，參與軍機！同時，劉緯還收編了武陵郡府軍七千餘人，軍力進一步增強了！
隨後，劉緯又派錦衣衛去往零陵，給太守劉度及其子劉賢送去一封親筆信！還記得麼，這兩人劉緯曾經有過一面之緣，而且關係相處得也不錯，劉緯在信中，也是把近期發生的變故說了，並勸父子二人能深明大義，為蒼生之念，早日來歸！
劉緯的這封信，還真起到了奇效，劉度見信後，很快便回覆了劉緯，表示願意投靠漢中郡王帳下效力！劉緯隨即加封劉度為南嶺中郎將，仍領零陵太守職銜，其子劉賢，加封偏將軍，在劉緯帳下聽用！很快，零陵五千援軍，在劉賢的統領下，也抵達了武陵！
照貓畫虎，劉緯用同樣的辦法，又勸降了桂陽太守趙範，並也加封了他官職，許以重利。到了建安十二年冬，趙範也派遣手下校尉陳應和鮑隆，領兵五千，抵達武陵，支援劉緯！
就這樣，劉緯兵不血刃地拿下了荊南四郡中的三郡，並藉助自己漢中王的身份和蔡瑁在荊州的影響力，打出誅蒯賊，復荊州的旗號，空手套白狼，拼湊起了一支近三萬人的大軍！隨後，他立刻重新調兵東進，再次兵臨長沙，這一次和上一次可不一樣了，劉緯的底氣，更足了！