В километре от Дмитриевки находится село Ольховка. В начале 1860-х годов в деревне Ольховке Обоянского уезда – «349 ревизских душ, получивших надел». По документам переписи 1882 года: Обоянского уезда Краснянской волости деревня Ольховка – 119 хозяйств крестьян государственных душевых, 907 жителей (447 мужчин, 460 женщин), из них грамотных 2 мужчин (хотя до ближайшей школы всего 1 верста); у крестьян – 219 рабочих лошадей и 104 жеребёнка, 184 коровы и 124 телёнка, 884 овцы, 10 коз, 196 свиней, 24 домохозяина имели пчёл – 311 колодок. В 1890 году в деревне Ольховке – 937 жителей (485 мужчин, 452 женщины).
В середине 80-х годов XIX века шло строительство дороги с твёрдым покрытием, ставшей основой для нынешней трассы. Крестьяне возили на лошадях камень, щебёнку с крапивенской шахты Ярушки, производили грунтовую отсыпку. Эта дорога должна была проходить через барскую землю в направлении населённых пунктов Кондарево, Задельное, Белгород. Но, используя свою власть, граф Грайворонский повернул строительство шоссейной дороги в сторону Яковлево, в результате чего образовался изгиб, получивший название «колено». Сам граф Грайворонский проживал в столице, а хозяйством руководил по доверенности управляющий Пётр Дмитриев.
В конце 90-х годов XIX века в Дмитриевке и Ольховке были построены начальные школы, строились проезжие дороги. Школы в селе Ольховка и хуторе Сырцево были построены на средства графини Е. П. Клейнмихель и пожертвования населения. Здание школы в селе Ольховка находилось около кладбища (сведения получены от жительницы П. Г. Скобченко).
Ольховские крестьяне испокон веков любили землю, прилежно занимались хлебопашеством. В деревне было много умельцев портняжного, плотницкого, столярного и сапожного дела. Действовал кирпичный завод, поэтому в селе строилось много кирпичных домов.