Dopo i Normanni, la città conobbe un nuovo periodo di depressione:
Federico II di Svevia nel 1216 decise di trasferire tutti i musulmani presenti sul territorio nella Piana di Lucera, in Puglia, nuocendo gravemente alla locale produzione agricola ed artigianale.
Neanche con la successiva dominazione angioina le cose cambiarono.
Tra il 1920 e il 1930, la flotta remo-velica divenne una flotta a propulsione meccanica, e questo determinò un aumento del pescato.