Da allora in poi visse oppresso dalle ristrettezze e dalla convinzione che i suoi creditori gli stessero sempre alle costole. Gli anni che vanno dal 1867 al 1875 furono per Dunant di sofferenza. Lo storico Alexis Francois lo definì il “filantropo famelico”, rifugiatosi a Parigi per cercare qualche mezzo di sostentamento. Solo nel 1872 si alleviò la sua miseria, poiché disporrà di un lascito dello zio David di 100 franchi al mese, come rendita vitalizia.