Budskapet från David Cameron var tydligt - det måste ske "en stor kulturell förändring" mot idrott i skolor med en återgång till "konkurrenskraftiga ethos" i skolidrott.
Premiärministern sade att problemet inte var pengar och föreslog att vissa lärare inte "spela sin roll" men vad tror de inom gräsrotsidrotten är de viktigaste ingredienserna för framgång?
Graeme Maw, idrottschef på Millfield School, i Somerset, säger att varje elev på skolan gör minst tre timmars planerad sport per vecka.
Många elever på privatskolan, som har nio tidigare och nuvarande elever som tävlar vid London Games - mer än någon annan skola - gör dock upp till 22 timmars utbildning. Det finns också mer än 30 olika sporter att erbjuda.
Maw säger att ordet "möjlighet" är nyckeln.
"Sport och fysisk aktivitet är hjärtat i vårt samhälle", säger Maw.
Youth Sport Trust (YST) säger att det är viktigt att skolorna engagerar alla, till exempel genom att engagera ungdomar i urval och planering av idrott och aktiviteter.
Skolorna behöver också bredda utbudet av lunch- och after-timmarsklubbar för att öka möjligheterna för ungdomar att delta, säger det.
Det är en etik som Maw håller med om. "Dance kanske inte är en olympisk sport men det är något som unga flickor verkligen tycker om - det handlar om att hitta och upptäcka individuella talanger hos ett barn", tillägger han.
David Cameron talade på onsdag om "vissa lärare som inte vill delta och spela sin roll" när det gäller skolidrott.
Men Malcolm Trobe, biträdande generalsekreterare för Association of School and College Leaders (ASCL), säger att hans kommentarer var "oinformerade, orättvisa och inte erkänner det enorma bidrag som många lärare ger till idrott i skolorna".
– Många lärare, inte bara personal inom idrott, ger gärna upp sin tid för att motivera och coacha unga människor i ett brett utbud av idrotter, säger han.
YST säger att det måste finnas lärare och tränare på marken som är redo att stödja ungdomar som visar intresse för idrott på primär och sekundär nivå.
Cameron har sagt att regeringen investerar 1 miljard pund i skolidrott under de kommande fyra åren, men "problemet är inte pengar".
David Mansfield, rektor på Coopers Company och Coborn School, i Essex, säger att investeringar är nyckeln. Den statliga skolan utsågs till den mest idrottsinriktade skolan i Europa 2005 och Mansfield säger att det är en av få som tävlar med allmänna skolor inom nationell idrott.
Mr Mansfield säger att skolans framgång är att satsa extra pengar på idrott, till exempel att skolan anställer en professionell hockeytränare. Han beskriver finansieringen som "slutsatsen" och säger att det finns ett "straight-line samband mellan utfall och inkomster".
"Om skolorna inte är på framsidan för att identifiera talang så kommer vi att se ett riktigt fall bort från det fantastiska jobbet som har gjorts (i det förflutna), säger han.
Robert Trobe är kritisk till att finansieringen av skolidrottspartnerskapet (SSP), ett nätverk av idrottsskolor i England - inklusive Coopers skola - tas bort, vilket innebär att speciallärare inom idrottsområdet får arbeta med elever i grundskolan, att skolor kopplas samman med lokala idrottsklubbar, att tränare av hög kvalitet förs in i skolor och att tävlingsmatcher främjas.
Experter säger att det är för tidigt att säga hur detta kommer att påverka skolidrottens deltagande.
Men herr Trobe säger: "Om premiärministern menar allvar med att vilja förbättra idrotten i skolorna måste finansieringen införas för att stödja dessa mycket villiga lärare och tränare att leverera ett varaktigt idrottsarv."
The Fields in Trust (FIT), en brittisk välgörenhet som skyddar fritidsområden, säger att finansiering är viktigt - men det är viktigt att inte glömma bort fälten själva.
"Det är viktigt att se bortom finansieringen när man överväger sportar arv för en gyllene framtid", säger Alison Moore-Gwyn, verkställande direktör.
"David Cameron har initierat denna process men det är viktigt att andra element som främjar idrottsförmåga inte förbises. En grundläggande förutsättning är att det finns utrymme för människor att upptäcka och finslipa sin talang."
Välgörenhetsdrottningen Elizabeth II Fields Challenge fokuserar på detta, säger Moore-Gwyn. Systemet arbetar med markägare för att skydda sina fritidsområden utomhus, med målet att 2 012 av dem ska vara skyddade i slutet av året.
YTS säger att skolor och fullmäktige också bör öppnas efter timmar.
På tisdagen avslöjades att utbildningsminister Michael Gove har godkänt försäljningen av mer än 20 skolidrottsplaner under de senaste två åren.
Men FIT sade mer oroande var situationen för akademier och nya fria skolor, som är undantagna från statliga regler som styr vanliga skolors frihet att sälja av sina spelplaner. Det kan finnas ett okänt antal andra idrottsplatser som har gått förlorade, sade det.
"Detta kan få allvarliga konsekvenser för vårt idrottsarv", sade en taleskvinna.
Premiärministern har krävt en återgång till den "konkurrenskraftiga etiken" och "att göra sig av med idén måste alla vinna priser och du kan inte ha konkurrenskraftiga sportdagar".
Men British Olympic Association ordförande Colin Moynihan säger att många barn inte vill spela tävlingsidrott, inte heller bör de behöva.
– Det viktigaste är att se till att var de vill finns anläggningen och möjligheten för dem att göra det och det är vår betoning och har varit vår betoning hela tiden, säger han.
YST tillägger att ungdomars första erfarenhet av idrott måste vara så positiv som möjligt för att uppmuntra dem att gå längre.
Denna vecka fann en undersökning av 2 000 personer av Freeview att sju av 10 trodde att Team GB-idrottare hade ersatt musikstjärnor och fotbollsspelare som förebilder.
Under spelen hittills många stjärnor har tjänat till att inspirera unga idrottare.
Alan Davis, huvudtränare på Maindy Flyers Club i Cardiff, där den guldvinnande cyklisten Geraint Thomas tränade tills han var 16 år, sade att Thomas var "den perfekta förebilden".
"Han är ödmjuk och tar sin framgång och tillfälliga bakslag lika bra. Vilket bättre exempel att ge nioåriga barn, sa han.
Jessica Ennis före detta idrottslärare har sagt att hon inspirerar en ny generation idrottare.
Chris Eccles, som undervisade miss Ennis på King Ecgbert School, Sheffield, sade: "De är inspirerade av henne eftersom de kan se någon från sin egen stad vara så framgångsrik."
De har varit med under hela spelen, inte mer än Chad Le Clos far Bert som hyllade sin "vacker pojke" efter att ha vunnit ett simguld, men föräldrar är ofta nyckeln till många olympiska framgångar.
John Steele, chefsofficer på YST, säger: "För varje guldmedalj och OS-idrottare har vi haft nöjet att titta på framförandet på spelen, det finns en lärare, tränare eller förälder som inspirerade dem att starta resan för att vara deras personliga bästa."
YST säger att föräldrar bör uppmuntra sina barn att leda en aktiv livsstil och engagera dem i idrott, men föräldrarna själva måste också uppmuntras till volontärroller i idrottsklubbar och skolidrottsverksamhet.
Maw säger att det är viktigt att hitta sätt att fira idrott och göra det roligt.
Förra året hade 2.000 av Millfields elever och 450 anställda totalt 2 755 miles, vilket ökade 21.000 pund för Sport Relief.
Han säger att det handlar om "alla som har kul i idrottens namn".
Med Team GB fira sina mest framgångsrika OS i 100 år, växer en debatt om hur man bäst bygger på arvet och inspirera nästa generation till idrott.