Село Ям, также известное как Ямская слобода, упоминается в исторических документах с 1552 года, когда подмонастырское сельцо Фёдоровского монастыря было преобразовано в Ямскую слободу. Согласно переписным книгам, село известно с 1677 года.
В 1683 году прихожане приобрели в Фёдоровском монастыре готовую деревянную церковь, которая была перевезена в слободу и освящена в 1685 году. Главный престол этой церкви был посвящен Пресвятой Богородице Одигитрии, а придел — святым мученикам Флору и Лавру.
В 1820 году, вместо обветшавшей деревянной церкви, на средства прихожан был построен каменный храм с колокольней. Новый храм имел два престола: в холодной части — в честь Смоленской иконы Божией Матери, в теплом приделе — во имя святых мучеников Флора и Лавра.
Архитектурно храм представляет собой образец церковного зодчества начала XIX века, характерного для православных храмов того периода. Каменная структура обеспечила долговечность здания, а наличие двух престолов позволило проводить богослужения как в холодное, так и в теплое время года.
С 1883 года в Ямской слободе функционировала земская народная школа.
В советский период многие религиозные учреждения подвергались закрытию или перепрофилированию. Однако конкретные сведения о судьбе храма Смоленской иконы Божией Матери «Одигитрия» в селе Ям в этот период ограничены.