Каменный храм в честь Тихвинской иконы Божией Матери в селе Осока был построен в 1743 году на средства прихожан. Храм имел два престола: главный, холодный, освященный в честь Тихвинской иконы Божией Матери, и теплый придел во имя святых мучеников Кирика и Иулитты. К храму был приписан приход в селе Киселевке с престолом в честь Казанской иконы Божией Матери.
Церковь построена в стиле нарышкинского барокко, что является редким для Среднего Поволжья архитектурным решением. Здание состоит из двухсветного четверика храма с полукруглой апсидой и примыкающей с запада трапезной. Северо-восточный угол трапезной занимает невысокий придел, придающий асимметричность композиции, характерную для зодчества XVII - начала XVIII веков. Фасадный декор включает наличники с полуколонками и трапециевидными фронтонами, городчатый пояс по верху стен и профилированный карниз.
В 1930-х годах храм был закрыт. В начале 1990-х годов предпринималась неудачная попытка реставрации, в ходе которой был разобран старый купол, а новый, деревянный, меньший по размерам, остался недостроенным. В 1999 году храм получил статус выявленного объекта культурного наследия Ульяновской области.
В начале XXI века рядом с историческим каменным храмом был построен новый деревянный храм в честь Тихвинской иконы Божией Матери. Каменный храм остается недействующим и требует реставрации.
По данным на 1900 год, при храме числилось 3 десятины усадебной и 33 десятины пахотной земли. Причт состоял из священника и псаломщика. В селе действовали три школы: церковно-приходская (с 1892 года), школа грамоты в Киселевке (с 1895 года) и земская начальная школа в деревне Кудажлейке (с 1899 года).