Строительство храма началось в 1998 году и завершилось в 2002 году. Проект одноглавого деревянного храма с колокольней был разработан в Троице-Сергиевой лавре. Инициаторами выбора проекта стали иерей Георгий Филимонов и председатель Общественной благотворительной организации «В честь Пресвятой Богородицы» Галина Семёнова. Строительство осуществлялось под руководством мастеров В. Тёркина и Ю. Бутылкина из Мышкинского Дома ремёсел. Бригада плотников из деревни Ульяниха изготовила срубы и к июню 1999 года установила основные конструкции здания церкви и колокольни. В этих работах приняли участие плотники И. А. Кузнецов, С. П. Белоус, Н. Н. Соколов, В. Петров под руководством бригадира А. П. Кузнецова. Летом 1999 года была установлена стропильная система с обрешёткой для крыши, а осенью того же года крыша была покрыта. В 2001 году брейтовские плотники В. Д. Виноградов и его сын Алексей обшили сруб церкви деревянной вагонкой. Крышу храма увенчали изящными главками с крестами. Резной иконостас изготовил В. Гаврилов. Часовня была построена В. Гридневым с сыновьями. Три колокола общей массой 150 кг были отлиты мастерами города Тутаева под руководством Н. А. Шувалова. Расходы на изготовление колоколов оплатил уроженец села Брейтово Анатолий Александрович Баракин. Купола и крыльцо также выполнили тутаевские мастера.
Название храма связано с иконой Божией Матери «Всех скорбящих Радость», которая была передана в дар церкви одной из местных семей. Эта икона, состоящая из четырёх частей, в советские годы хранилась в доме Марии Павловны и была сохранена её потомками, которые передали её в новую церковь.
6 июня 2002 года состоялось освящение престола храма, которое совершил архиепископ Ярославский и Ростовский Кирилл. После освящения в храме начались регулярные богослужения, включая крещения взрослых и младенцев.
29 октября 2005 года деревянный храм был уничтожен пожаром. Сигнал о возгорании поступил в местную пожарную часть в 12 часов 50 минут. На место прибыли две пожарные машины, однако пожарные запросили подкрепление. К церкви, которая горела открытым огнём, подъехали две автоцистерны. Однако пожарным не удалось справиться с огнём. Поблизости не было пожарного водоёма, ре
