Sito in una riparata insenatura del golfo di Mola sulla costa orientale dell'isola, col nome di Longone dato alla fortezza, fatta erigere nel 1602 da Filippo III di Spagna, il centro si sviluppò con caratteristiche militari; fece parte dello Stato dei Presidi, e fu nel corso del XVII sec. coinvolto nelle lotte franco-spagnole. Nel 1646 (guerra dei Trent'anni) fu infatti occupato dai Francesi, ai quali fu ritolto dagli Spagnoli di don Giovanni d'Austria nel 1650. Dopo un tentativo di occupazione da parte austriaca nel 1707 (guerra di Successione spagnola) sventato dagli Spagnoli vittoriosi in località Sassi Tedeschi, nel 1799 la fortezza, frattanto ceduta al regno di Napoli (1738), fu assediata dai Francesi impadronitisi dell'isola d'Elba. Ricacciati col concorso degli abitanti esasperati dai loro eccessi, i Francesi del generale Thurreau la conquistarono stabilmente nel 1801. Porto Longone seguì quindi le vicende dell'isola d'Elba. Dal 1947 diviene Porto Azzurro, la risorsa principale è data dal turismo. Sul promontorio a est dell'abitato si erge l'imponente fortezza del XVII sec.adibita a penitenziario nel XIX sec.