Чета дворян Миллеров окончательно поселилась в Сивцеве после выхода в отставку мужа хозяйки
усадьбы, бывшего московского полицмейстера, полковника Ф. И. Миллера. В это время усадьба стала радушным местом для гостей со всей округи.
До революции 1917 года усадебные земли традиционно передавались по наследству, однако пожар и разорение послереволюционного периода не обошли усадьбу стороной. Был разорен бесценный архив семьи Миллеров, поддерживавшей переписку с А.К. Толстым и обладавшей интересными письмами писателя. Потомков Миллеров выселили из имения, и в бывшем усадебном доме открыли приют для детей с психическими заболеваниями. Главный дом усадьбы дошел до наших дней в руинированном состоянии. Сохранились фрагменты фундаментов хозяйственных построек, каскад
заросших прудов, остатки аллей старинного регулярного парка XVIII века.