Выбить белую конницу из Воронежа было не легкой задачей. У противника было превосходство в силе и технике (3 бронепоезда), он владел высотами, на которых расположен город, рекой перед городом и всеми переправами через нее. Возможности овладеть городом с юга от реки не было, поэтому красная конница решила прибегнуть к маневру и овладеть городом с севера. Для главного удара с севера направлялась 4-я кав. дивизия под командой т. Городовикова, а 6-я кав. дивизия (тов. Апанасенко) осталась заслоном на левом берегу реки Воронеж.
22 октября лихим налетом 2-й бригады 4-й кав. дивизии была занята ст. Рамонь, севернее г. Воронежа, и противник с большими потерями был отброшен к городу. Начала наступление и 6-я дивизия и согласованным ударом с севера и юго-востока, после продолжительного боя, конные корпуса генерала Шкуро и Мамонтова были разбиты и выброшены из Воронежа в ночь на 25 октября 1919 г. В городе была захвачена огромная военная добыча: поезд самого Шкуро с награбленным добром, 3 бронепоезда: «Шкуро», «Мамонтов» и Единая — Неделимая».
Отступая в беспорядке от г. Воронежа, белые корпуса пытались задержаться на большом железнодорожном узле «Касторная», между Воронежем и Курском, рассчитывая на сильные позиции и свои бронепоезда. Три дня здесь продолжался ожесточенный бой, закончившийся полным разгромом корпусов добровольческой армии. В этих боях конным корпусом Буденного были совершенно уничтожены 2 пехотные дивизии и I кавалерийский полк. Одних пленных было взято 1 500 человек, 2 бронепоезда, кроме того, в руки победителей досталось большое количество английского обмундирования, привезенного иностранными капиталистами для белогвардейских армий.
Неся большие потери, войска генерала Деникина безудержно покатились к югу. Конный корпус Буденного продолжал гнать зарвавшегося противника на Старый Оскол (к югу от станции Касторная). Здесь противник пытался собрать остатки своих конных корпусов генералов Мамонтова и Шкуро, которые к этому времени были усилены прибывшими с Царицынского фронта корпусом генерала Улагая и Чеченской конной дивизией. В половине ноября только что высадившиеся на станции Н. Оскол части корпуса генерала Улагая, прибывшего с нашего Царицынского фронта, столкнулись с конницей Буденного. Генерал Улагай, надеясь на превосходство своих сил, сам перешел в наступление на первую бригаду нашей 6-й кавалерийской дивизии. Командир этой бригады т. Василий Книга успел разместить свои полки в балках (оврагах) на флангах противника, а в центре выдвинул всего два эскадрона для того, чтобы ввести противника в заблуждение насчет своих сил. В болотистом изгибе реки Донец он расположил скрытно 40 пулеметов.
Конница Улагая, выскочив из-за горы, понеслась на два центральных эскадрона, рассчитывая на легкую победу. Но в это время затрещали все наши пулеметы. Огненным вихрем первые ряды улагаевской конницы были сметены почти начисто. А пока противник приводил себя в порядок, с флангов на расстроенную белую конницу ударили наши красные полки в конном строю.
Противник в панике бросился бежать. В этом бою особое геройство проявил командир взвода 31-го кавалерийского полка т. Цимбала, лично зарубивший около 40 белогвардейцев.
Этот период боев был вместе с тем и временем усиленной политической работы в конном корпусе. Корпус, в основе которого лежали партизанские отряды, иногда самой разнородной политической окраски, был взят в работу партии. В конце октября была проведена в корпусе партийная неделя, которая не только дала партии новых стойких работников, но и подняла политическую сознательность всего корпуса. Каждый боец отчетливо понял задачи и цели рабоче-крестьянской борьбы, и свою собственную задачу в этой борьбе. Это увеличило в свою очередь боеспособность корпуса и дало ему, а впоследствии и Конной армии, тех героев, имена ко-рых известны всей Красной армии и всем трудящимся Советского союза.