En 1890, un bâtiment en briques de deux étages a été érigé sur le territoire du complexe hospitalier, qui se trouve aujourd'hui sur la rue Moscou et fait face au sud. La partie centrale du bâtiment, surmontée d'un large dôme, était reliée à deux grands pavillons de deux étages. C'était un refuge pour les malades incurables souffrant de cancers et de sarcomes.

Le refuge a été construit grâce aux fonds de L.V. Vysheslavtsev, qui a dirigé pendant longtemps l'administration provinciale. De ses dons, 80 000 roubles ont été dépensés pour la construction du refuge de cent places, et 120 000 roubles pour son entretien. La ville a fourni le terrain pour la construction. Le rez-de-chaussée était destiné à l'unité masculine, tandis que l'étage supérieur était réservé aux femmes. L'aile gauche était utilisée pour les patients payants, et la droite pour les personnes âgées. Les chambres spacieuses et confortables étaient situées du côté ensoleillé, tandis que les couloirs étaient orientés au nord. Chaque personne avait droit à au moins 6 mètres cubes d'air.

Les conditions de vie, de traitement et de soins spirituels dans le refuge étaient soigneusement pensées. Une bibliothèque a été organisée pour les malades, ainsi que deux jardins pour les promenades. Pour maintenir l'équilibre spirituel, A.V. Vysheslavtsev a fondé l'église Elisabeth.

En l'honneur de L.V. Vysheslavtsev, le bienfaiteur du refuge, et d'A.V. Vysheslavtsev, le fondateur de l'église, deux « lits éternels » ont été ouverts dans les appartements. Le célèbre médecin S.K. Olenin a passé ses dernières années dans le refuge Elisabeth.