Граф Орлов много сделал для хозяйственного обустройства Марфина: при усадьбе появились кузница, кирпичный заводик, столярная мастерская. Его дочь и наследница Софья Владимировна Панина с 1820-х годов продолжала перестройку господского дома и парковых сооружений. Первоначально работы велись под руководством крепостного архитектора Ф. Тугарова, при котором усадебные постройки приобрели черты ампира. Но уже вскоре, в 1837—1839 годах, была произведена перестройка усадьбы в духе «николаевской неоготики» по проекту архитектора М. Д. Быковского.