Au XIe siècle, les premiers seigneurs du Pont établissent une motte féodale à la tête du pont traversant la rivière de Pont-l'Abbé, sur les terres de l'Abbaye de Loctudy, abandonnées depuis le passage des Normands au IXe siècle, . Leur blason était d'or au lion de gueules accompagné de la devise Heb Chang « sans rémission ». Le premier seigneur dont l'histoire fait mention est Juhel du Pont-L'Abbé, fait prisonnier par le roi d'Angleterre au siège de Dol. Il n'est délivré qu'en 1174 après avoir donné caution pour sa rançon à l'occasion du traité fait par Henri II et ses enfants. Cette commune est connue pour des faits liés à la Révolte des Bonnets Rouges en 1675.

Référence : Wikipedia