En 1796, l'architecte du comte Alexeï Grigorievitch Orlov crée un « jardin anglais » et construit au bord d'une haute colline surplombant la rivière un petit pavillon, qui sera plus tard appelé Maison d'été. L'une de ses façades complétait la partie supérieure du parc, tandis que depuis le balcon de l'autre, on avait une vue sur les vastes horizons du sud de Moscou, du Kremlin aux collines des Moineaux. Devant la maison, le parc descendait brusquement, où un étang avait été creusé et où se trouvaient le pavillon « Baignoire », le romantique grotte « Mystérieuse » et d'autres attractions du parc. Peu d'entre elles ont survécu. La plus célèbre était le « Théâtre aérien », créé en 1830 et qui a existé jusqu'en 1834. C'était une galerie couverte en forme de demi-cercle, où la scène était aménagée de telle sorte que les décors étaient remplacés par des arbres et des buissons.

La maison d'été était en bois et réalisée dans un style classique, avec un plan symétrique simple. Chacune des grandes façades était ornée de six colonnes de l'ordre corinthien, tandis que sur les petites façades se trouvaient des tonnelles de plain-pied avec des volets à treillis.

L'Anglaise Catherine Wilmot, qui a visité le jardin en 1807, notait : « Il est découpé par d'innombrables sentiers, collines, pelouses et falaises ; la diversité des tonnelles et des baignoires ravit les yeux. L'architecture du parc utilise l'écorce de bouleau, ce qui est remarquable, comme si les maisons d'été et les tonnelles avaient été créées par la nature elle-même. »

Depuis 1831, le jardin de Neskuchny passe sous la propriété de Nicolas Ier, bien qu'initialement seulement partiellement. Le domaine de Neskuchnoe a été acquis par le département des palais des Shakhov en novembre 1826, et la propriété des Golitsyn, le tsar ne put l'acheter qu'en 1842. N. P. Golitsyna, connue sous le nom de « Dame de pique », a refusé de vendre le terrain et a stipulé dans son testament qu'il ne pouvait être vendu que cinq ans après sa mort. Ce n'est qu'alors que les trois parties furent réunies dans le jardin de Neskuchny actuel. Pendant le séjour de la famille impériale à Moscou, sa résidence était le palais Alexandrin voisin, tandis que la maison d'été était utilisée jusqu'en 1917 pour des goûters en plein air par les membres de la famille impériale.

Après la révolution, la maison a été utilisée de différentes manières, le plus longtemps comme maison de création de l'Union des écrivains de l'URSS. Avant la transformation du parc Gorky, il y avait une bibliothèque-lecture. Actuellement, un studio photo s'y trouve.