Село Подлипичье, где первоначально располагалась церковь, известно с XV—XVI веков. В начале XVII века деревянная Богородичная церковь, предположительно освященная в честь Смоленской Одигитрии, была разрушена в ходе польско-литовского нашествия.
В 1735 году местный помещик Петр Никитич Хитрово начал строительство новой деревянной церкви во имя Казанской иконы Божией Матери с приделом в честь преподобного Георгия Хозевита. Освящение этой церкви состоялось в 1753 году.
В 1778—1779 годах к храму был пристроен теплый придел в честь иконы Божией Матери «Всех скорбящих Радость», а также установлена каменная ограда вокруг церкви и кладбища.
В 1884—1886 годах по проекту архитектора И.М. Самарина был расширен Скорбященский придел. В 1898 году, на средства вдовы Е.С. Ляминой, придел Георгия Хозевита был обновлен и переименован в придел Усекновения главы Иоанна Предтечи в память об Иване Артемьевиче Лямине.
В начале XX века в храме служили священники Иоанн Красовский (до 1910 года), Леонид Казанский (с 1910 года), а также псаломщики Матвей Смородинцев, Семен Дмитриевский, Александр Кружилин, Петр Малофеев и Виктор Красовский.
В 1920-е годы, в период антицерковных настроений, священник Леонид Казанский вел активную антисоветскую агитацию, что привело к его аресту и дальнейшей судьбе на территории СССР.
В 1930-е годы храм был закрыт, а его здание разобрано на кирпич для строительства пенькозавода. На его месте был устроен сквер, названный именем Героя Советского Союза Якова Сергеевича Шумакова.
