Rođen 14. oktobra 1873. u seocetu Theuley-les-Lavoncourt na istoku Francuske, Rimet je bio sin trgovca mješovitom robom skromnih sredstava.
Născut în satul Theuley-les-Lavoncourt, în estul Franţei, pe data de 14 octombrie 1783, Rimet a fost fiul unui băcan cu venituri modeste.