Храм Благовещения в Козлове был возведен в 1872 году помещиком Михаилом Петровичем Селифонтовым. Изначально это была небольшая церковь с крестовым планом, увенчанная широкой, но невысокой ротондой с уплощенным сферическим завершением. Силуэт дополнял легкий барабан с главкой и крестом. Небольшая колокольня находилась на расстоянии. В 1862 году крестьянин Кирилл Бутусов из деревни Бурдуково профинансировал надстройку колокольни и соединение ее с храмом через трапезную. В церкви находился классический иконостас, выполненный в белом цвете с золотыми элементами. В нем были древние и средневековые иконы, сохранившиеся от старого деревянного храма.

Храм был построен с двумя престолами: в честь Благовещения Пресвятой Богородицы и Святого Архистратига Михаила. Позже добавился еще один престол, Прочих Небесных Сил Бесплотных. Приход в селе Козлово был небогатым, насчитывал всего 376 прихожан. При церкви было 36 десятин земли, а в приходе, 6 селений.

Село Козлово упоминается в документах уже в середине XVII века как давно сложившееся поселение, где проживало 24 мужчины. Оно расположено на крутом берегу реки Сутки с видом на противоположный правый берег в сторону села Флоровского. До революции здесь находилась усадьба Ниловых, известного в губернии рода. Один из представителей рода был любимцем Николая II, имел звание адмирала и отличался тем, что мог много пить, не хмелея. Он присутствовал при отречении царя от престола. От усадьбы сохранился лишь фундамент, так как здание было перевезено в деревню Игнатцево под школу. У храма сохранились несколько разрушенных надгробий из некрополя Ниловых с южной стороны церкви.

Достопримечательностью села является частично сохранившаяся березовая аллея, ведущая от барского дома к храму.

Сегодня Козловская церковь находится в полуразрушенном состоянии, однако под куполом летней церкви сохранилась храмовая живопись. В алтарной части можно увидеть фреску «Спорительница хлебов» и изображение Богоматери, что является редкостью для храмов Некоузского района, а также фреску на библейский сюжет «Тайная вечеря».

На кладбище при церкви сохранился гранитный памятник на могиле крестьян Ивановых из деревни Подольское. Это единственный памятник такого рода на крестьянской могиле в приходе за все время существования кладбища.

Последняя служба в храме состоялась в 1960 году.