私はそれが私のデータセットだとは思わない、私は30の例を持っている、そして私のモデルには128Bパラメーターしかない。どのようなドロップアウト率を提案しますか？
ドロップアウト率の設定は、データの種類やモデルの目標など、多くの要因に依存します。一部の人々は、ドロップアウト率を20％（5分の1）に設定することに成功しましたが、モデルの正しいドロップアウト率を見つけるために試してみる必要があるでしょう。通常、MLモデルでは、モデルパラメーターよりも少なくとも10倍多くのトレーニングデータが必要です。あなたの場合、少なくとも1.28tの例を挙げることをお勧めします。最初に例の数を増やし、それが機能しない場合。異なるドロップアウト率をテストします。