В древности на месте нынешнего храма существовал погост Алексин на речке Четверже, где стояла Димитриевская церковь. Однако в начале XVII века погост был разорён. Впоследствии, на пустоши Ивакино, располагавшейся рядом с бывшим погостом, стольник Павел Фёдорович Леонтьев в 1690 году поселил пять дворов крестьян и по его челобитью на церковной земле в Алексине была построена церковь во имя святого великомученика Димитрия Солунского. В 1704 году в новопостроенную церковь священнику Мине Фёдорову был выдан антиминс. После этого погост стал именоваться селом Ивакино.
Ныне существующая каменная церковь в честь Казанской иконы Божией Матери с приделом святого великомученика Димитрия Солунского была построена в 1814 году на средства владельца села Ивана Васильевича Скворцова. Архитектурно храм представляет собой кирпичное здание, выполненное в стиле классицизма, характерном для начала XIX века. Основной объём храма — двусветный четверик, увенчанный световым восьмериком с массивной луковичной главкой и крестом. С запада к четверику примыкает небольшая трапезная и трёхъярусная колокольня. Завершения четверика украшены рядом килевидных кокошников с размещёнными в них ликами святых.
В советский период храм был закрыт и подвергся разрушению. Здание использовалось для различных хозяйственных нужд, что привело к утрате значительной части внутреннего убранства и архитектурных элементов. К 2018 году храм находился в руинированном состоянии.
В последние годы предпринимаются усилия по восстановлению храма. Проводятся волонтёрские акции и богослужения под открытым небом на руинах храма.
