Дом купца Рудь, XIX век