Усадебный комплекс состоял из особняка, людской, конюшни, двора и хозяйственных построек. Принадлежало это владение уважаемому горожанину, почетному гражданину Ярославля, купцу Николаю Константиновичу Андронову и его семье.
Николай Андронов разбогател на торговле железом. В его лавках можно было найти самые разнообразные товары для строительства и сельскохозяйственных работ: плуги, косы, металлические листы, шпингалеты, ножи.
О том, каким богатством обладал купец, можно судить по расположению его лавок – в самых популярных местах Ярославля: в Гостином дворе, на Сретенской улице. Вёл он торговлю и в Москве, и в Туле, а на ярмарки ездил по всей России.
В 1870-е годы купец задумал построить добротную усадьбу со всем необходимым для жизни. Возвёл он её на Петропавловской улице, в самом центре города, где селились люди его круга и достатка. Фасад особняка выходил на
Петропавловскую улицу (современная улица Терешковой), за ним располагались флигель, небольшая семейная часовня, конюшня с каретником. По приказу купца в усадьбе был разбит роскошный сад с фонтаном.
Однако Николай Константинович был не только очень успешным торговцем, но и человеком с большим сердцем – в 1888 году, прямо в саду своей усадьбы, в самом сердце Ярославля, он велел построить богадельню – дом престарелых.
Окна её выходили на Волжскую набережную. Здесь могли поселиться пожилые ярославцы, которые нуждались в приюте или медицинской помощи.
Николай Константинович умер перед самым началом войны, в марте 1914 года. Начало революции ознаменовалось для его семьи упадком – склады и лавки оказались разрушены. Детям Николая Константиновича пришлось покинуть усадьбу,
оставив в её тайниках большую часть фамильных ценностей. Через несколько лет один из сыновей купца, Дмитрий, под давлением выдал чекистам местонахождение тайника, и драгоценности были изъяты.