L'edificio sorgeva in una zona popolare, densamente abitata. Alle mura del Mausoleo di Augusto era abbarbicato un gruppo di casette sovrapposte, dove vivevano famiglie, il cui sostentamento derivava dalle attività del porto fluviale. L'ospedale maschile, funzionante già nel 1524, viene ampliato utilizzando un terreno "sub montis augustalis" e completato nel 1528.