Перші два століття його історії залишили свій слід лише на південному краї Мангеттена, приблизно на площі, що відповідає нинішньому Фінансовому округу (близько 1км²). В середині 17 століття територія Нового Амстердама була ще менше: північна межа міста проходила по дерев'яній стіні (вздовж нинішньої Уолл-стріт) і обмежувала територію приблизно в 22 га. Напрями вулиць пролягали вздовж узбережжя Гудзону й Іст-Рівер.