La casa Milgauzen fue construida a finales del siglo XVIII y principios del XIX, basándose en las salas del siglo XVII. Esta estricta casa de estilo clasicista está adornada con una rotonda con cúpula redonda y pilastras, elementos decorativos planos que sobresalen en forma de rectángulos. La rotonda parece más alta que la parte principal del edificio, ya que debido a las características del relieve, el sótano debajo de ella es más alto e incluso tiene ventanas.

A principios del siglo XIX, el propietario de la casa era Bogdan Milgauzen (1781 o 1782, 1854), doctor en medicina, profesor distinguido de la academia médico-quirúrgica y consejero estatal de pleno derecho. En la familia Milgauzen había cinco hijos: dos hijos y tres hijas. Los hijos, Fedor y Alexander, estudiaron en el internado de Leontiy Chermak junto con el futuro escritor Fedor Dostoyevski. El internado estaba ubicado cerca, en la calle Nueva Basman. El edificio del internado no se ha conservado, y a principios del siglo XX se construyó un edificio de apartamentos en su lugar.