Protettore degli impressionisti, che soleva ospitare nella sua casa di Auvers-sur-Oise, fu uno dei primi collezionisti di opere contemporanee: Vincent van Gogh, stabilitosi ad Auvers per essere curato da lui, realizzò due ritratti ed un'acquaforte del suo mecenate, ed è grazie soprattutto a queste effigi e al rapporto col grande pittore olandese che il nome del medico è conosciuto da molti. Van Gogh eseguì inoltre ritratti di Marguerite, figlia di Gachet.