Дом генерал-майора В.И. Романова, середина XIX века