Situé au pied des remparts, le bâtiment, une ancienne tannerie construite en 1925 et connue sous le nom de tannerie Chavet, a fonctionné jusque dans les années 1950. Racheté par la Région, il a d’abord été reconverti en Centre de Formation des Apprentis (CFA) avant d’être acquis par la municipalité pour y installer les réserves du musée Rolin.