Was ist die Mindestdatengröße, die benötigt wird, um ein Modell zu trainieren, das menschliche Sprachen versteht??
user
Die minimale Datengröße, die benötigt wird, um ein Modell zu trainieren, das menschliche Sprachen versteht, kann variieren. Es ist stark abhängig von den spezifischen Aufgaben. Zum Beispiel, einfache Aufgabe wie Stimmungsanalysemodell kann mit ein paar tausend beschrifteten Datensätzen trainiert werden. Auf der anderen Seite, für eine komplexere Aufgabe wie große Sprachmodelle, würden Sie Millionen oder sogar Milliarden von Etikettendatensätzen benötigen, um akzeptable Ergebnisse zu erzielen.
assistant
Wie kann ich diese Daten sammeln?
user
Wenn alles gut geht, sollten Sie in der Lage sein, den Datensatz zu verwenden, der verwendet wurde, um dieses Modell zu trainieren, da es bis dahin Open Source sein sollte. Wenn Sie jedoch selbst Daten sammeln möchten, müssten Sie wahrscheinlich die Hilfe von anderen anwenden. Erstellen und Beschriften von Tausenden von Absätzen allein könnte ziemlich schnell anstrengend sein, und ich würde davon abraten.
assistant