ਸਪੇਨੀ ਲੋਕਾਂ ਨੇ ਕਦੇ ਵੀ ਜ਼ਮੀਨ ਦੀ ਇਸ ਪੱਟੀ ਨੂੰ ਨਹੀਂ ਵਸਾਇਆ, ਪਰ ਜਦੋਂ 1650 ਦੇ ਦਹਾਕੇ ਦੇ ਅਖੀਰ ਵਿੱਚ ਅੰਗਰੇਜ਼ ਆਏ ਤਾਂ ਉਨ੍ਹਾਂ ਨੇ ਇੱਥੇ ਫੋਰਟ ਕ੍ਰੋਮਵੈਲ ਬਣਾਇਆ; 1662 ਵਿੱਚ ਬ੍ਰਿਟਿਸ਼ ਰਾਜਸ਼ਾਹੀ ਦੀ ਬਹਾਲੀ ਤੋਂ ਬਾਅਦ ਇਸਦਾ ਨਾਮ ਬਦਲ ਕੇ ਫੋਰਟ ਚਾਰਲਸ ਰੱਖਿਆ ਗਿਆ ਸੀ।
ਫੋਰਟ ਚਾਰਲਸ ਆਖਰੀ ਨਾਮ ਹੈ ਜੋ ਕਿਲੇ ਦਾ ਕਦੇ ਹੋਵੇਗਾ।