Plutôt difficile d’accès par la terre, le port de Brezellec a depuis toujours été un abri très prisé à l’entrée de la baie de Douarnenez. En effet, cette anse en eau profonde permettait un mouillage sûr même pour les bateaux de tonnage moyen comme les bateaux viviers de Sein et de Camaret par exemple.
Lorsqu’une voie d’accès fut ouverte vers le port de Brezellec en 1889, celui-ci était déjà pourvu de quelques aménagements : En 1877, une chaine de 185 mètres fut scellée au fond de l'eau afin d'y fixer 5 puis 12 bouées d'amarrage. Cet équipement a permis l’hivernage de certaines embarcations de pêche qui se réfugiaient auparavant à Douarnenez. En 1885, des marches ont été taillées dans la falaise et une échelle en fer a été positionnée près d’une petite cale de façon à faciliter l’embarquement et le débarquement des hommes et des produits de la pêche.
De nouvelles améliorations ont vu le jour par la suite, notamment la création d’un petit débarcadère pour les pêcheurs en 1895 et la pose d’un treuil de hissage en 1926. Puis s’en est suivie une série de campagnes d'améliorations, de réparations et de renforcements entrepris à la suite de dégâts provoqués par de violentes tempêtes.
Alors que l’on comptait 30 bateaux de pêche ayant Brezellec comme port d’attache en 1877, ce nombre a diminué progressivement pour atteindre 8 canots à moteur en 1948. La fréquentation du port a fortement augmenté ces dernières décennies. Ainsi, 5 bateaux professionnels et une cinquantaine de loisir mouillaient 6 mois par an à Brezellec en 1988, 56 bateaux dont un pêcheur professionnel en 2018.