Село Кабанское впервые упоминается в писцовых книгах 1628–1629 годов как старинная вотчина княгини Трубецкой. В тот период в селе находилась деревянная шатровая церковь Рождества Пресвятой Богородицы с приделами во имя святого Андрея Стратилата, преподобного Сергия Радонежского и святых мучеников Флора и Лавра. Рядом располагалась вторая деревянная церковь — во имя святого пророка Илии. Обе церкви были построены на средства вотчинников и прихожан.
В 1709 году Ильинская церковь была перестроена на средства стольника Алексея Милославского. В 1722 году он же финансировал возведение новой Рождество-Богородицкой церкви взамен обветшавшей. В 1765 году храм был перестроен вновь. К концу XVIII века в Кабанском сохранялись две деревянные церкви: Ильинская (построенная прихожанами) и Рождество-Богородицкая (1765 года постройки).
В 1824 году на средства помещика Павла Петровича Свиньина при участии прихожан был возведён каменный храм в стиле классицизма, заменивший обе деревянные церкви. Главный престол освящён в честь Рождества Пресвятой Богородицы, боковые приделы — во имя пророка Илии и преподобного Сергия Радонежского. В 1866 году Сергиевский придел был отделён деревянной перегородкой и сделан тёплым.
Храм был закрыт не позднее 1930-х годов и использовался как склад. В середине 2000-х годов здание возвращено Русской Православной Церкви, проведены восстановительные работы. В храме сохранились старинные иконы, напрестольные Евангелия и церковная утварь, включая напрестольные кресты XVII–XVIII веков.