Кыштымская усадьба тоже имела свою «статусность», что подтверждал путешественник и натуралист И. И. Лепехин, который посетил Кыштымские заводы в 1770 году. В своих заметках он писал, что «на берегу пруда возвышается двухэтажный каменный господский дом, обращенный лицом к пруду с оранжереей и садом», каменный забор замыкает комплекс в единое целое, а вершины башен венчают металлические флюгера в виде верблюдов символа торговли. Господский дом отметит в своих заметках и П. С. Паллас.
Новые владельцы Кыштымских заводов Расторгуев и Зотов сочли усадьбу «скромной» и, затеяв капитальную реконструкцию, развернулись в полную силу, предпочтя классический стиль, который господствовал тогда в архитектуре. После перестройки значительно увеличилась площадь особняка: дом стал на этаж выше, расширился, к южному и северному фасадам были пристроены ризалиты, над центральной частью появился мезонин. Усадьбу украсили колонны и лепнина на фасадах.
Об этом памятнике архитектуры написано немало, но по-прежнему «белым пятном» остается имя автора. Дело в том, что пожар 1830 года уничтожил все документы, способные поведать правду. Ученые называют нескольких зодчих, причастных к рождению кыштымского шедевра. Так, по мнению искусствоведа М. Зыковой, его замысел мог принадлежать «архитектурному ученику» кыштымского завода тех лет Блинову-Михайлову или хорошо известному на Урале выпускнику императорской академии художеств зодчему Чеботаеву.
Бывший директор Кыштымского музея Любовь Михайловна Кузнецова называет имя зодчего Матвея Казакова: «Он много строил по заказу Демидовых в Москве. Вполне возможно, что кыштымский дом проектировал кто-либо из учеников Казакова, используя его работы в качестве аналогов. В ряде построек на Урале прослеживается именно казаковский стиль».
Наконец, существует легенда, что новый дом строился по замыслу и чертежам безвестного архитектора-каторжника, сосланного за критику царской власти, которого Лев Расторгуев, якобы за большую взятку, вызволил из острога для составления проекта и строительства дворца. После окончания работ зодчего снова отправили в Тобольскую тюрьму, хотя ему было обещано досрочное освобождение.
Зато в отношении человека, который уже завершал реконструкцию Белого дома, придав ему тот вид, который дошел до наших дней, мнения исследователей сходятся. Им был известный архитектор Михаил Малахов, выстроивший половину екатеринбургских особняков возможно, он и «доводил до ума» прежнюю демидовскую усадьбу по аналогии с усадьбой Харитоновых-Расторгуевых в Екатеринбурге.
Об этом рассказывал А. М. Раскин в книге «Уральский архитектор Михаил Павлович Малахов»: «Перешедший к Расторгуеву Кыштымский завод с расположенной рядом усадьбой реконструировался Малаховым одновременно с казенным Каменским заводом. Коренной реконструкции и достройке подвергся главный дом усадьбы Белый дом, а главные корпуса возведены заново. Между главным домом екатеринбургской усадьбы и Белым домом немало общего. Четырехколонные портики их боковых фасадов почти идентичны, очень близки по пропорциям аркады над центральными портиками. Многие формы Белого дома роднят его и с другими малаховскими постройками, в которых использованы любимые мотивы: двухчастные антаблементы, ступенчатые аттики портиков, лучковые арки, невысокий парапет над карнизом, на который опирается кровля. Ясно, что своим обликом Белый дом обязан Малахову. От старой постройки сохранились, по-видимому, лишь стены первых двух этажей. Третий этаж и мезонин над нам за портиком уже малаховские. Относительно недавно были рахрушены оставленные Малаховым без изменений фланкирующие парадный двор старые постройки с башнями, придававшими всей композиции торжественный характер»
Впрочем, в истории реконструкции есть еще одна загадка, на которую указывает уральский исследователь В. М. Слукин. Новые хозяева, перекраивая особняк, практически не тронули дворовые службы например, оставили башни, фланкировавшие дом, и старое строение под хранение продуктов, которое называли лабазом большой деревянный «сарай», долгое время напоминавший о Демидовых. Суть в том, что под демидовскими строениями были подземные тайники вещь весьма ценная и полезная. Расторгуев, а за ним и Зотов не только сохранят и приведут тайники в порядок, но и добавят свои подземелья