Γεννηθείς στο μικρό χωριό Theuley-les-Lavoncourt της ανατολικής Γαλλίας, στις 14 Οκτωβρίου 1873, ο Ριμέ ήταν γιος παντοπώλη με περιορισμένα οικονομικά.
Născut în satul Theuley-les-Lavoncourt, în estul Franţei, pe data de 14 octombrie 1783, Rimet a fost fiul unui băcan cu venituri modeste.