Die Hauptarchitektonische Sehenswürdigkeit von Chemizowka ist der alte Kirchturm. Die Kirche im Dorf wurde 1747 auf Initiative der Grundbesitzerin Wigilija Chemesowa errichtet. Laut anderen Quellen wurde der Bau 1751 abgeschlossen, und es gibt auch Informationen, dass die Kirche 1745 erbaut und 1748 geweiht wurde. Die Kirche war aus Holz, kalt und hatte einen Altar, der dem Heiligen Nikolaus gewidmet war. 1829 wurde sie an einen neuen Standort versetzt, und 1846 wurde dank der Bemühungen der Gemeindemitglieder ein steinerner Glockenturm an das Gebäude angebaut. Zum Pfarrbezirk der Chemizowka-Kirche gehörten die nahegelegenen Dörfer Lomowka, Petrowka, Nikolajewka, Ivanowka, Choroshewka und Darjewka. Zum kirchlichen Personal gehörten ein Priester und ein Psalmodiker, die in den Pfarrhäusern lebten. Unter der Sowjetregierung wurde die Kirche am 20. August 1934 geschlossen und in ein Getreidelager umgebaut. Sie blieb bis zum Ende des 20. Jahrhunderts verlassen, als sie durch ein Feuer, das durch die Unachtsamkeit der Anwohner, die trockenes Gras verbrannten, zerstört wurde. Heute ist von der alten Kirche nur noch das Fundament erhalten. Der Glockenturm und das Denkmal über dem Grab der Baronin Elena Alexandrowna Michailowa-Raslowlewa von Lipchart sind jedoch in ausgezeichnetem Zustand und befinden sich weiterhin hinter dem Altar der Kirche.