Zaprojektuj eksperyment w celu przetestowania zdolności modeli GPT do rozumienia języka naturalnego.
Eksperyment powinien polegać na przeprowadzeniu zestawu zadań językowych dla modeli GPT oraz ocenie ich wydajności. Zadania te mogą obejmować klasyfikację, generowanie otwartych odpowiedzi, zrozumienie oraz edycję tekstu. Zadania powinny obejmować mieszankę pytań krótkiej odpowiedzi oraz esejów o zrużnicowanym stopniu trodności. Przykłady możliwych zadań mogą obejmować: tłumaczenie zdania, przepisanie zdania, aby poprawić jego gramatyken, generowanie opiso dla obrazka lub odpowiedź na pytanie wielokrotnego wyboru dotyczące danego fragmentu tekstu. Zadania powinny byci zaprojektowane w taki sposób, aby wynik modeli GPT był latwo określalny. Ocena powinna również uwzględniać inne aspekty, takie jak płynnosić, czytelności i poprawność gramatyczną.