Особняк построен в 1901–1903 годах для Александры Ивановны Дерожинской, дочери и единственной наследницы фабриканта Ивана Бутикова. В 1891 году Дерожинская уже вступила в права наследства, став владелицей нескольких деревень и большой фабрики в Москве. На момент заказа особняка у Шехтеля Александра Ивановна была женой коллежского ассессора Владимира Дерожинского. В 1908 году она стала Зиминой, выйдя замуж в третий раз за Ивана Зимина.

Начало 20 века относится к самому плодотворному десятилетию Шехтеля, когда зодчий построил свои самые известные сооружения. Особняк Дерожинской, как и каждый дом архитектора, отличается изысканным вкусом и смелыми решениями. Особняк практически не изменился со времени строительства, сохранились и необыкновенная витая чугунная ограда со стилизованными розами, и его фасады, и интерьеры.

Глядя на фасад, мы первым делом обращаем внимание на огромное арочное окно двусветного зала особняка. Высота зала — 11 м, а это дом в три этажа! Окно двусветного зала занимает почти весь фасад. Можно смело утверждать, что в начале XX века это было самое большое окно в Москве! Современники в воспоминаниях называли его окном «колоссальных, до 10 м, размеров».

В особняке на Земляном валу Хлудовы прожили без малого 20 лет. Герасим Иванович был натурой деятельной. Помимо Егорьевской мануфактуры, Хлудовы покупают бумажно-прядильную фабрику под Ярославлем. Спустя 14 лет братья учреждают компанию "Кренгольмская мануфактура".