Деревня Алтуфьево на реке Самотёшке, во владении Н. Д. Мякишева, известно с 1585 года. Первая Крестовоздвиженская церковь выстроена здесь около 1678 думным дворянином Н. И. Акинфиевым; с тех пор у села было и второе название — Воздвиженское. В 1760-е годы Алтуфьево перешло во владение И. И. Вельяминова, при котором был заложен господский дом «в тринадцать покоев» (1767) в стиле барокко, новый каменный храм и давно утраченный регулярный парк с двумя прудами. В последней трети XVIII века усадьба несколько раз перешла из рук в руки и была вновь перестроена при Куракиных в 1790-х годах (вероятно, надстроенный Куракиными второй этаж был деревянным). Современный вид главный дом приобрёл при Николае Арсеньевиче Жеребцове в 1849—1861.