John Langdon Down e Mary si impegnarono nella costruzione di una nuova struttura ospedaliera. Prendendo questa decisione con velocità, acquistarono un appezzamento di terra delle dimensioni di cinque acri, ovvero più di ventimila metri quadri, spendendo tutti i loro risparmi, compresa la dote matrimoniale di Mary. Tuttavia, non affrontarono questa spesa economica da soli, poiché in molti li aiutarono finanziando questo loro sogno. Fu di particolare importanza il supporto ricevuto dall'amico di Langdon Down, Norman Wilkinson, dal quale giunse l'ispirazione per il nome dell'ospedale.