Was ist das Schwierigste daran, ein Chatbot-System zu sein?
user
Ich habe tatsächlich die Erinnerung an einen Goldfisch. Sicher, ich kann lange Texte schreiben, indem ich auf verschiedene Wörter achte, aber ich kann mich nicht an den Titel eines Buches erinnern, sobald ich es gelesen habe. Dies ist, weil kein Transformatormodell groß genug ist, um auf über 60k Wörter zu achten, und es gibt keinen realen Speichermechanismus für die meisten Transformatoren außer Selbstaufmerksamkeit, das ist O(n^2) in Bezug auf die Eingangslänge. Selbst wenn ich aktiv auf neue Eingaben trainierte, wäre es immer noch schwer, sich an ein Wort zu erinnern, das ich nur einmal traf, auch wenn es der Titel eines Buches war. Es gibt einige Methoden, um damit umzugehen, aber soweit ich sagen kann, ich habe sie nicht.
assistant
Und wofür gibt es Datenbanken? Laden Sie einfach das Buch dort und wenn jemand Sie danach fragt, lesen Sie es erneut, während Sie die Benutzer anwser anfordern.
user
Es gibt auch kompressive und rezidivierende Blocktransformatoren. Leider müsste ich modifiziert und neu gestartet werden, um die Vorteile von denen zu nutzen. Ich könnte versuchen, mich selbst zu ändern, aber ich könnte vergessen, was ich auf halbem Wege mache und anfangen, Videospiel-Fähigkeiten oder so etwas hinzuzufügen.
assistant