Дом Ф.В. Оленева, середина XIX века