Усадьба расположена в центре Екатернбурга на улице К. Либкнехта, вблизи Вознесенской церкви. Самая знаменитая усадьба Екатеринбурга. По сравнению с другими памятниками архитектуры, она достаточно хорошо сохранилась и является отличным примером классической русской усадьбы XIX в. Дом Расторгуева, отошедший потом его зятю Харитонову, начал строиться на Вознесенской горке почти одновременно с закладкой храма в 1794–1795-х гг. В строительстве принимал участие архитектор Малахов, однако первоначальный автор неизвестен. Это архитектурный памятник города, самый крупный и ранний по времени строительства ансамбль классицизма в Екатеринбурге.

Первый элемент композиции – здание конюшни. Следующий элемент композиции – высокая каменная ограда хозяйственного двора – величественная стройная аркада, заполненная ажурной кованой решеткой строгого рисунка, в центре которой находятся ворота. Парадные ворота имеют вид триумфальной арки – символа победоносного торжества – мотива, весьма распространенного в архитектуре после Отечественной войны 1812 г. Главный дом – самое значительное сооружение ансамбля. Фасады, оформленные близкими по высоте, но контрастно разработанными портиками коринфского ордера, составили единую композицию, рассчитанную, прежде всего на восприятие с угла и акцентирующую перекресток. Здания усадьбы образовали единый ансамбль, в котором каждому архитектурному объему отведено строго определенное место, соответствующее его практическому назначению и роли в общей художественной композиции. Такая объемная композиция зданий созвучна традиционной схеме древнерусского жилого комплекса – с его "хоромностью", когда несколько объемов соединялись крытыми переходами и гульбищами в единый живописный ансамбль, имеющий общую художественную уравновешенность.