Дом был возведён по проекту Николая Михайловича Вишневецкого в конце XIX века. В центре двухэтажного особняка в стиле итальянского ренессанса выступает ризалит, с примыкающем парадным крыльцом и пандусами. При отделке здания был использован гранит и декоративный камень. Сергей Павлович фон Дервиз проживал здесь до 1905 года, однако продал имение, приняв решение перебраться во Францию. Новый владелец промышленник Лев Зубалов огородил вход знаменитой гранитной оградой. После революции памятник архитектуры перешёл в пользование Румянцевского музея. Позже здесь разместился всесоюзный научно-исследовательский институт электромеханики.