Начало истории усадьбы восходит к концу XVIII века, когда по заказу купца Кирилла Фёдорова были построены первые каменные здания, а в начале XIX века появился двухэтажный угловой дом с парадными воротами во внутренний двор. В середине века владельцем усадьбы был известный провизор К.И. Оссе, чьё имя до сих пор носит расположенная здесь аптека.
На рубеже 1870-1880-х гг. владельцами усадьбы становятся купцы 1 гильдии, братья Козловы, разбогатевшие на продаже китайского чая, сахара и других колониальных товаров. В целях рекламы на аттике ворот была поставлена скульптура «китайца» с зонтиком. На старинных фотографиях можно видеть эту примечательную и оригинальную скульптуру.
В 1881 году корпус лавок был надстроен вторым этажом, а в 1886 году были построены каменные палатки. Именно в этом складском строении хранилась уникальная библиотека И.А. Репина, привезённая в 1909 году в Астрахань из Москвы. Весь комплекс усадьбы имеет особую историко-мемориальную и архитектурную ценность. Подробнее об истории здания можно почитать в прилагаемой
исторической справке, подготовленной архитектором, исследователем архитектурного наследия Астрахани С.А. Березкиным.