Роден в малко село в Тюли-ле-Лавонкур в Източна Франция на 14 октомври 1873 г.
Rođen 14. oktobra 1873. u seocetu Theuley-les-Lavoncourt na istoku Francuske, Rimet je bio sin trgovca mješovitom robom skromnih sredstava.