ResearchTweetShareHatenaスタンフォード大学の研究者らは、画像とテキストを組み合わせたマルチモーダルモデルが、プロンプト内で例を大量に載せるとより賢くなるかを調査しました。多くのデータセットで実験を行い、例示が少ない場合と多い場合での性能を比較しました。複数の質問を一度に処理する方法も検討し、その効果を評価しました。Proには、共通する傾向がある一方で、大きな違いも示されています。HR」を開始しました!登録後はオファーを受け取るだけのシンプルなサービスです!現在、期間限定で、ギフト券が必ずもらえる新規登録キャンペーンも行っています。Learning)として広く知られるようになっています。LLMがモデルのパラメータを更新せずに少数のサンプルから学習し、新しいタスクに適応するものです。最近では、マルチモーダルモデルもコンテキスト内のサンプルから学習する能力を示しています。モデルのコンテキストウィンドウ(モデルが一度に処理できる入力の長さ)が限られているために、例示の数を増やすことがどれほどパフォーマンスに与えるのか、その影響は今まで詳しくわかっていません。マルチモーダルモデルは画像表現に多数の視覚トークン(画像を表現するための単位)を使用するためなおさらです。Proでは最大100万トークンという非常に長いコンテキストウィンドウが実現され、例示を大幅に増やすことの効果を調べることが可能になりました。これまでのところ、コンテキスト内学習のスケーリング(大規模化)について、例示の数を増やすとLLMのパフォーマンスが向上することが研究で示されてきましたが、それでもテストされた例示の数は少なく、テキストのみのベンチマークに限定されています。マルチモーダルのコンテキスト内学習の研究はまだ初期段階にあり、巨大なコンテキストウィンドウを利用して例示の数を増やすことの効果は調べられていません。そこで研究者らは、マルチモーダルモデルにおける多数の例示を用いたコンテキスト内学習の能力を調査するために、例示の数を数桁スケールアップしてモデルのパフォーマンスをベンチマークする大規模な実験を行いました。マルチモーダルモデルのアプリケーションやドメインへの適応可能性を探ることを目的としています。当サイトの利用にはAIDBのアカウントが必要です。記事の購読には、アカウント作成後の決済が必要です。※ログイン/初回登録後、下記ボタンを押してください。AIDBとはプレミアム会員(記事の購読)について■サポートのお願いAIDBを便利だと思っていただけた方に、任意の金額でサポートしていただけますと幸いです。