Ο όρμος της Παναγίας αποτέλεσε από τα αρχαία χρόνια ένα σημαντικό λιμάνι. Στη πολύχρονη πορεία της ιστορίας του το λιμάνι ήταν τεράστιας εμπορικής και οικονομικής σημασίας. Στα τέλη του 19ου και στις αρχές του 20ου αιώνα γνωρίζει την μεγαλύτερη ανάπτυξή του αφού εξάγει μεγάλες ποσότητες επεξεργασμένου καπνού. Παράλληλα, στο πρώτο μισό του 20ου αιώνα, μετατρέπεται σε οικονομικό κέντρο λόγω της αλιείας. Στη σημερινή του μορφή έφτασε στη δεκαετία του 1960 μετά από έργα που κράτησαν σχεδόν 80 χρόνια.