Село Каргашино известно с первой трети XVIII века как усадьба воронежского губернатора, бригадира Петра Васильевича Измайлова (1686–1772).В последней четверти XVIII века в селе существовали две усадьбы: одна принадлежала тайному советнику Фёдору Васильевичу Карачинскому, другая — действительному тайному советнику князю Ивану Алексеевичу Гагарину (1771–1832).
В середине XIX века усадьба Карачинских перешла к коллежскому асессору и камергеру Николаю Ивановичу Карачинскому, а затем к его дочери Софье Николаевне, вышедшей замуж за генерал-лейтенанта Фёдора Фёдоровича фон дер Лауница (1811–1886). Их сын, генерал-майор Владимир Фёдорович фон дер Лауниц (1855–1906), занимал посты тамбовского губернатора и Санкт-Петербургского градоначальника. В имении фон дер Лауницев было организовано развитое хозяйство, включая конный завод.
Деревянная церковь Рождества Пресвятой Богородицы была построена в 1793 году. Впоследствии храм неоднократно перестраивался и обновлялся. В 1829 году подполковник Александр Семёнович Пущин и другие жертвователи способствовали замене тесовой кровли на железную и расширению окон. В 1849 году храм был расписан стараниями помещицы Анны Ивановны Засекиной. В 1863–1865 годах при храме была построена тёплая придельная церковь святителя Николая Чудотворца, освящённая 26 сентября 1865 года. В 1886 году была обновлена колокольня, а в 1894 году подведён каменный фундамент.
После революции 1917 года усадьба и храм были национализированы. В 1930 году основной храм был закрыт, однако богослужения в Никольском приделе продолжались до 1939 года. В последующие десятилетия здание храма пришло в упадок и было разрушено.