Nikolai Ryabushinsky, der fünfte der Brüder Ryabushinsky, war bekannt für seine Verschwendungssucht und Exzentrik. Im Jahr 1900, nachdem er einen erheblichen Teil seines Vermögens ausgegeben hatte, schlossen ihn seine Brüder aus dem Familienunternehmen aus, und über sein Vermögen wurde eine Vormundschaft eingerichtet. 1905 verkaufte er seine Anteile an der Familienbaumwollgesellschaft, um die Zeitschrift „Goldene Wolle“ herauszugeben, die zu einer wichtigen Publikation des russischen Symbolismus wurde. Nikolai konnte die besten Vertreter der künstlerischen Intelligenz Moskaus für die Arbeit an der Zeitschrift gewinnen. 1907 organisierte er die Ausstellung „Blaue Rose“, die den gleichnamigen Zusammenschluss von Symbolistenkünstlern ins Leben rief. Zwei Jahre später veranstaltete er eine Vernissage zeitgenössischer französischer Künstler und präsentierte der Moskauer Öffentlichkeit zum ersten Mal Werke von Henri Matisse.

Eine der exzentrischen Taten Nikolais war der Bau einer Villa im Petrowski-Park. Hinter der strengen neoklassizistischen Fassade verbargen sich skurrile Innenräume, die Zeitgenossen mit ihrem exotischen Luxus beeindruckten. Der schwarze Schwan, der auf Möbeln, Porzellan und Kristall abgebildet war, wurde zum Symbol der Villa. Die Einweihung wurde groß gefeiert: Die Einladungen waren mit einem Monogramm mit dem Bild des schwarzen Schwans und der Aufschrift „Villa Schwarzer Schwan“ verziert. Im Garten wuchsen Palmen und Orchideen, Pfauen und Fasane streiften umher, und vor der Hundehütte saß ein Leopard.

Für die Gestaltung der Villa bestellte Nikolai malerische Wandbilder bei Pawel Kuznetsov, dem Führer der „Blauen Rose“. Die Halle war mit dem Fries „Ungeborene Kinder“ geschmückt, der einen unangenehmen Eindruck hinterließ. Die Villa war mit seltenen Gegenständen aus seinen Reisen und einer Sammlung von Gemälden geschmückt, die Werke europäischer Meister und zeitgenössischer Künstler umfasste. In der Villa gab es auch ein Atelier von Nikolai selbst, der sich für Malerei begeisterte.

Unter den Räumen der Villa stach das „Großmutters Zimmer“ hervor, das im Stil eines alten Wohnhauses eingerichtet war, was im Kontrast zu den modernen Gemälden stand. Im Garten plante Nikolai, einen Tierpark zu bauen, aber von dieser Idee musste er aufgrund eines Polizeiverbots Abstand nehmen. Am Eingang zum Garten stand ein marmorner Sarkophag mit einer Stierfigur, der für das zukünftige Grab des Besitzers bestimmt war.

Die Villa wurde oft zum Schauplatz prächtiger Feste. Der Künstler Sergei Vinogradov erinnert sich an das „Fest der Apfelblüte“, als das Mittagessen auf der Terrasse im blühenden Garten serviert wurde und abends die Bäume in bunten Lichtern erstrahlten. Ein anderes Mal, zu Neujahr, schmückte Nikolai die Bäume mit Hunderten von Lichtern und veranstaltete einen Empfang, bei dem er den Gästen Gemälde und Schmuck schenkte.

Im Jahr 1915 wurde die Villa stark durch ein Feuer beschädigt, das einen erheblichen Teil der Innenräume und der Gemäldesammlung, einschließlich des Frieses von Kuznetsov und der Werke der „Blauen Rose“, zerstörte. Es gelang jedoch, das Porträt von Valery Bryusov, das von Vrubel geschaffen wurde, zu retten.

Nach dem Feuer verkaufte Nikolai die Villa an seinen Freund, den Ölindustriellen Leon Mantashov, der sie angeblich im Karten spielen gewonnen hatte. Am Gebäude blieb das Monogramm von Leon Mantashov erhalten.