Oléron fut un vivier de navigateurs, marins au cabotage ou au long cours, marins embarqués sur les vaisseaux du roi et de la République. Leurs traditions et leur ingéniosité les amenèrent à exceller dans la culture de l'huître et dans les techniques d'affinage lorsque l'huître « portugaise » fit son apparition vers 1870 sur les côtes. La figure incontournable du capitaine Hector Barthélemy Patoizeau (1821-1891) consacre le souvenir de celui qui fut à l'origine de l'essor et du développement de l'ostréiculture dans le bassin de Marennes-Oléron.

Le port médiéval :
Patrimoine historique mais aussi patrimoine maritime, l'ancien port médiéval du Château reste assez énigmatique pour beaucoup. Il était probablement dans les temps très anciens de l'époque celtique un simple abri port pour des barques, au pied de l'escarpe de la rue principale dominant le quartier de la Plaine, et protégé de la mer par un cordon littoral. Cet agri port fut vraisemblablement utilisé à l'époque romaine, wisigothe, Normande.
On ne sait quand il prit de l'ampleur, sans doute entre la construction du Château fort et le XI° siècle. Il était composé, croit-on, de trois éléments : d'un havre d'entrée, d'un chenal d'accès à deux bassins de mer situés au bas du quartier de la Plaine dont le niveau est à peu près celui de la mer. Les vestiges d'une tour ronde ont été retrouvés, marquant sans doute l'entrée du chenal, par un phare ou un fanal. La rue du vieux port ou de l'ancien port, devenue la rue Pierre Loti, desservait ces deux bassins. Les anneaux de fer encore en place dans les murs de maisons sont des témoins de ces restes de patrimoine.
On ne sait quand il cessa d'être utilisé, mais au XVI° siècle, on ne cite plus que le havre d'entrée.