В начале XIX века, в период с 1810 по 1821 годы, в селе был возведен каменный храм в честь Вознесения Господня. Первоначально в новом храме было устроено два престола: главный — в честь Вознесения Господня и придельный — в честь Архистратига Михаила. В 1854 году, с переходом деревни Ново из Липовицкого прихода в Варежский, на средства троих крестьян этой деревни в трапезной был устроен придел в честь Казанской иконы Божией Матери.
При храме был установлен причт, состоявший из священника, диакона и псаломщика. На их содержание из различных источников поступало до 1800 рублей в год. Члены причта имели собственные дома на церковной земле. Земельные владения церкви включали усадебную землю площадью 2280 квадратных саженей, пустошь Березино размером 50 десятин, неудобные земли под оврагами и водомоинами — 20 десятин, а также сенокосные угодья площадью 3,5 десятины.
Приход храма охватывал село Вареж и близлежащие деревни: Лохань, Юрьевец, Горбаново, Чирьево и Ново. Согласно клировым ведомостям, в этих населенных пунктах числилось 1230 мужчин и 1299 женщин. В селе функционировали земская и церковно-приходская школы, в которых обучалось соответственно 90 и 47 учеников. В деревне Чирьево действовала школа грамоты с 19 учащимися по состоянию на 1896 год.
В 1936 году, в период антирелигиозной политики советской власти, храм Вознесения Господня был разрушен. Священнослужители подверглись арестам, а остатки здания со временем обрушились из-за подмыва речного берега. В 1999 году, по благословению митрополита Николая (Кутепова), в селе была вновь создана община в честь Вознесения Господня.
