Поселок Крутоярский находится в живописном месте на берегу реки Оки. Его главной достопримечательностью является частично сохранившаяся усадьба семейства Максутовых (Олениных). От прежнего великолепия остались лишь три здания: главный барский дом, готический домик и так называемая "китайская башня".

Усадьба, построенная в первой половине XIX века, принадлежала нескольким владельцам, чьи останки покоятся на местном кладбище. Одним из них был князь Н.В. Максутов, при котором усадьба обрела свой архитектурный стиль. Князь Максутов очень любил деревенскую жизнь и при любой возможности приезжал сюда, чтобы заняться благоустройством. Его наследники в 1863 году продали усадьбу В.А. Олениной, семье которой она принадлежала до революции.