Дом Рязанова, XIX в.