Конногвардейцы прикрывали Дроздовские конные батареи, кавалергарды находились в личном резерве начальника дивизии.
Кавалергардам было приказано задержать во что бы то ни стало продвижение красных в тыл дивизии и обеспечить ей путь отхода на село Старый Мерчик. Спешившись, кавалергарды залегли вдоль глубокой дренажной канавы и своим ружейным и пулеметным огнем сдерживали красную конницу более часа, не давая ей дебушировать из леса. Выход дивизии из боя начался с более угрожаемого ее левого фланга. Только тогда, когда все полки дивизии отошли за железную дорогу Богодухов—Харьков, в свою очередь, последними, отошли кавалергарды.
Цепляясь за каждый рубеж, дивизия медленно отходила, отбиваясь от наседавших красных. Только поздно вечером красные атаки прекратились. Ночью дивизия стала в село Старый Мерчик, куда подошла и 1-я кавалерийская дивизия. Находившаяся при бригаде генерала Аленича 2-я гвардейская батарея была возвращена своей бригаде.
10-го красные вновь атаковали охранение дивизии у станции Мерчик. Дивизия подошла к сторожевым заставам и развернулась на их высоте. Не в пример минувшим дням, красные на этот раз действовали вяло, ограничиваясь одной перестрелкой.
После полудня дивизии было приказано отойти на узловую железнодорожную станцию Майский, а затем на село Люботин, откуда 158 дней тому назад началось наступление 5-го конного корпуса. В Люботине дивизия получила приказание перейти в село Пересечное, на северо-запад от Харькова, для содействия частям Дроздовской дивизии, ведущим бой на северных подступах к городу.
Еще не начинало светать, когда 11 декабря полки дивизии вытягивались со своих биваков. Деревня Двуречный Кут была занята без боя. Продвигаясь дальше на север по Большой Богодуховской дороге, дивизия, не доходя местечка Ольшаны, встретилась с наступающей на Харьков красной пехотой.
Под прикрытием огня своих трех батарей дивизия быстро развернулась и перешла в наступление цепями и лавами. На левом фланге дивизии один из армейских полков обходил лавой Ольшаны с запада. На правом фланге кавалергардская лава обходила местечко с востока.
Появление дивизии перед Ольшанами было для красных, по-видимому, совершенно неожиданно. После короткого сопротивления красные начали отходить, сначала на Ольшаны, затем, после небольшой задержки на его окраине, совершенно очистили местечко, отойдя на несколько верст к северу. Местечко было занято обходившими его лавами.
После занятия Ольшан цепями, лавы были отозваны. До самой темноты с обеих сторон велась вялая перестрелка. Ночью дивизия отошла на села Гавриловка и Пересечное, в котором стал на ночлег Сводно-кирасирский полк.
12 декабря дивизия выступила на Харьков, но, не доходя до него версты четыре, было получено донесение, что накануне вечером красные заняли город (Латышская стрелковая и 8-я кавалерийская дивизии).
Дивизия круто повернула на юг и по плохой, совершенно разбитой, узкой лесной дороге вышла на село Березовка и затем