Nel 1816 il castello venne trasformato, dal dipartimento delle Bocche del Rodano, che ne aveva all'epoca la proprietà, in un carcere per detenuti comuni e funzionò come tale fino al 1926.
Sempre nel Seicento, Tarascona ricevette l'autorizzazione dall'intendente reale di Provenza , di costruire delle caserme per alloggiare i reparti militari che ripetutamente transitavano per la città, luogo di passaggio quasi obbligato per le truppe che da Parigi o da Lione erano dirette in Provenza o che dovevano compiere il cammino inverso.
Venne a tale proposito edificato, fra il 1718 e il 1757 un intero quartiere-caserma conosciuto oggi con il nome di "Kilmaine", in onore di un eroe della rivoluzione francese, Charles de Kilmaine, di origine irlandese, scomparso nel 1799.
Tale quartiere, ancora visibile e in attesa di passare al comune di Tarascona in virtù di una legge del 1810, si articolava in una serie di edifici a due piani raggruppati attorno a tre ampi cortili interni, due destinati alla fanteria e uno alla cavalleria.