Казанская церковь в селе Кологривово была возведена в 1795 году благодаря усилиям подпоручицы Федосии Васильевны Кологривовой. Здание церкви было каменным, с колокольней из того же материала.

Внутри церкви находились два престола: один в честь Казанской Божией Матери в холодном приделе, другой, в честь Святителя Николая Мирликийского Чудотворца в теплом. В 1903 году прихожане построили на территории церкви кирпичную сторожку с железной крышей, а в 1909 году провели капитальный ремонт храма.

До революции церковь заботилась о порядке на могилах семьи Кологривовых. Храм был окружен оградой и имел красивый плодовый сад. В этот период Александр Питерцев пожертвовал церкви около четырех десятин земли, находившейся в 10 верстах от села. В 1916 году в Кологривово работали учебно-показательная мастерская и земское начальное училище. Перед Октябрьской революцией священником в Казанской церкви служил Василий Введенский, а псаломщиком был Михаил Темнов.

Восстановление церкви началось в 2001 году на средства московского предпринимателя Ярослава Александровича Пескова. Инициатором восстановления выступила его мать, Валерия Николаевна Пескова, которая посвятила это дело памяти своего прадеда, Петра Ивановича Коновницина, представителя знатного рода, связанного с Романовыми, Шереметьевыми и Колычевыми, владевшего землями в Пасынках и Локотцах.

14 октября 2005 года, в праздник Покрова Пресвятой Богородицы, храм во имя Казанской Божией Матери в селе Кологривово Новодеревеньковского района вновь открыл свои двери для прихожан.