В 1800 г. московский военный губернатор И. П. Салтыков просил у императора Александра I (вот пример централизации власти!) разрешения снести это здание, так как «дом сей от давнего его построения пришел в такую ветхость, что имеющиеся в стенах сквозные трещины и согнитие потолков и полов сверх безобразия представляют его склонным к падению, для чего оный давно уже необитаем и по свидетельству архитекторскому без сломки до подошвы исправлен быть не может». Дом разрешили сломать и участок продать.