Zhu and Li (2023) studied this problem by training a randomly initialized GPT-2-like transformer from scratch on synthetic biographies and evaluated its ability to answer questions about the individuals.
Zhu와 Li(2023)는 합성 전기에서 무작위로 초기화된 GPT-2와 유사한 Transformer를 처음부터 훈련하여 개인에 대한 질문에 답하는 능력을 평가하는 방식으로 이 문제를 연구했다.
Zhu와 Li(2023)는 합성 전기에서 무작위로 초기화된 GPT-2와 유사한 트랜스포머를 처음부터 훈련하여 개인에 대한 질문에 답하는 능력을 평가하는 방식으로 이 문제를 연구했다.