Абсолютно вся архитектура в усадьбе - творение самого художника. В нем воплотилась его заветная мечта:
«Желание мое устроить музей осуществилось, когда нам удалось соорудить на берегу Оки дом, приспособленный к размещению коллекций, и я несказанно радуюсь, когда вижу, как приходят посетители и разглядывают наши собрания. Приходят целые экскурсии из ближайших городов, школ, из деревень, крестьяне и крестьянки с детьми».

В 1892 году дом Поленова стал первым в России художественным музеем в деревне, доступным самому широкому кругу посетителей. Принимали посетителей и водили их по дому сами хозяева усадьбы.
«Я эгоист. Я создал в доме музей, потому что мне самому это очень нравилось», — говорил Поленов.