Главный дом усадьбы Матвеевых, XIX в.