A principios del siglo XIX, la casa en la Gran Dmitrovka fue asignada a la familia del comerciante moscovita Iván Afanasievich Zhivago. Esta familia poseyó la casa hasta la revolución de 1917.

El apellido Zhivago era bien conocido entre las familias comerciantes de Moscú y Riazán. En 1820, los hermanos Serguéi e Iván Zhivago se mudaron a Moscú.

Serguéi Afanasievich Zhivago se convirtió en el representante más conocido de la familia en Moscú. Fundó el Banco Comercial de Riazán y poseía una tienda de artículos para oficiales en el callejón Uspenski. Serguéi fue galardonado con una medalla de oro por la reconstrucción de la iglesia de la Asunción en Uspenski Vrazhka. Su hermano Iván Afanasievich poseía una casa en la esquina de la Gran Dmitrovka y el callejón Dmitrovsky, conocida desde la década de 1830. Las bodegas abovedadas de este edificio se han conservado hasta nuestros días, y los visitantes de la cafetería 'PирОГИ', que se abrió aquí en la década de 1990, pudieron verlas.

En 1884, según el proyecto del arquitecto S.S. Eibushits, se construyó un edificio de alquiler para los comerciantes Zhivago, que formó la esquina de la calle y el callejón. Este edificio de tres pisos en estilo neoclásico, con una esquina redondeada y un toldo decorado con el monograma de los propietarios, se integraba armoniosamente en la fila de edificios de alquiler de la Gran Dmitrovka. Un arco de paso conducía al patio desde el callejón Dmitrovsky. En la planta baja había tiendas, y los dos pisos superiores se alquilaban.

Desde 1901 y hasta la Revolución de Octubre, vivió en la casa Aleksandr Vasílievich Zhivago, nieto de Iván Afanasievich. Era médico del hospital Golitsyn y miembro de la Sociedad Fotográfica Rusa. Aleksandr reunió una colección única de raridades del antiguo Egipto, que se exhibía en su casa y ahora se conserva en el Museo Estatal de Bellas Artes A.S. Pushkin junto con su biblioteca, que cuenta con más de 6,000 volúmenes. Después de la revolución, trabajó como secretario científico del Museo de Bellas Artes en Moscú, y desde 1923 se convirtió en conferenciante y jefe del departamento de Oriente clásico. Zhivago, dominando varios idiomas y poseyendo conocimientos enciclopédicos, guiaba visitas por el museo que maravillaban a profesionales y orientalistas. Cabe destacar que no tiene relación con la novela de Boris Pasternak, la elección del apellido en la novela es casual.

Actualmente, el edificio ha sido ampliado con un cuarto piso y ha perdido el monograma de los comerciantes Zhivago.