Cet hôtel du XVIII^e siècle qui abrite aujourd’hui les collections du musée du Nouveau Monde est composé de deux maisons achetées à quelques années d’intervalle par Aimé-Benjamin Fleuriau qui les réunit en 1780 en faisant des travaux considérables.

Aimé-Benjamin, et sa femme Marie-Anne-Suzanne Liège, appartiennent à la grande bourgeoisie des armateurs et négociants enrichis par le commerce maritime et le produit de leurs plantations de Saint-Dominique. Ils jouent un rôle actif et généreux au sein de la communauté protestante quand elle se reconstitue dans la seconde moitié du XVIII^e siècle. Mais La Rochelle garde surtout le souvenir de leur fils Louis-Benjamin Liège, savant et homme de bien, à qui l’on doit la fondation du muséum d’histoire naturelle et qui se fait remarquer par son inépuisable générosité. Il disait volontiers : « la fortune doit se faire pardonner par une charité ardente et éclairée » .