مَعَ هَذِهِ الْفُرُقِ عَنْ نُمُوذَاتِ اللُّغَةِ الْكَبِيرَةِ، مَا أَمْثَالُ الْمَقَادِيرِ الْمُتَقَدِّمَةِ؟
Context:لُغَةٌ كَبِيرَةٌ (LLM) هِيَ لُغَةٌ مُتَكَوِّنَةٌ مِنْ شَبَكَةٍ خَلْقِيَّةٍ مَعَ عِدَّةِ الْمَعَايِيرِ (عَادَةً مِنْ مِلْيَارِ أَوْ أَكْثَرَ) مُتَدَرِّبَةٌ عَلَى كَثْرَةِ النَّصِّ الْغَيْرِ الْمُسَمَّى بِتَعَلُّمٍ مُسَيَّرٍ. أَطْلَقَتْ الْمُدَوَّنَاتُ حَوَالَيْ 2018 وَيَعْمَلُونَ بِجَمِيعِ الْمَسَائِلِ. هَذَا حَوَّلَ الْمَحَاسِنَ فِي أَبْحَاثِ تَعْمِيلِ اللُّغَةِ الْأَصْلِيَّةِ عَنْ الْمَذْهَبِ السَّابِقِ فِي تَدْرِيبِ النُّمُوذَاتِ الْمُتَكَلِّفَةِ لِمَسَائِلَ مُخَصَّصَةٍ.  مَتَاعِ وَلَوْ كَانَ لِلْمَصْدَرِ نُمْذُوْلُ لُغَةٍ كَبِيْرَةٍ دَلِيْلٌ عَلَى تَعْرِيْفِهَا، فَإِنَّهُ يُشِيْرُ عَلَى نُمْذُوْلِ التَّعَلُّمِ الْعَمِيْقِ الَّذِيْنَ لَهُمْ مَوَاضِعُ مِلْيَارٍ أَوْ أَكْثَرَ. أَلْلَمْ أَمْثَالُ الْغَايَةِ الْعَامَّةِ الَّتِي تَتَفَاضَلُ فِي مَوْضِعٍ مِنْ الْمَسَائِلِ الْعَامَّةِ، بِخِلَافِ تَدْرِيبِهَا لِمَسْأَلَةٍ مُخْتَصَّةٍ (مِثْلَ تَحْلِيلِ الرَّأْيِ، وَتَعْرِيفِ الْكَائِنَةِ الْمُسَمَّاةِ، أَوِ التَّعْلِيلِ الْمَعْدُومِ). وَالْمَهْرُ الَّذِي يَتَنَاوَلُونَهُ لِتَنْفِيذِ الْمَسَائِلِ، وَمَا يَقْدِرُونَ عَلَيْهِ مِنَ الْمَسَائِلِ، يَبْدُو أَنَّهُ دَلِيلٌ عَلَى كَمْ مِنَ الْمَوَاعِيدِ (الْبَيَانَاتِ، وَالْقَدْرِ، وَالْحِسَابِ) الْمُكَرَّسَةِ لَهُمْ، بِطَرِيقَةٍ لَا تَعْتَمِدُ عَلَى تَقْدِيمِ الْمَسَائِلِ.  وَرُبَّمَا تَدَرَّبَتْ عَلَى مَسَائِلَ بَسِيطَةٍ كَتَنْبِيْهِ الكَلِمَةِ التَّالِيَةِ فِي جُمْلَةٍ، تَجِدُ النُّمُوْذُ اللُّغَوِيَّةُ العَصْبِيَّةُ مَعَ التَّدْرِبَةِ الكَافِيَةِ وَعَدَدِ المَعَايِرِ أَنْ تَسْتَحْوِيَ كَثِيْرًا مِنْ نَحْوِ النَّحْوِ وَالْمَعْنَى لِلْلُغَةِ البَشَرِيَّةِ. إِلَى أَيْضًا، تُبَيِّنُ النُّمُوذَاتُ الْكَبِيرَةُ لِلْكَلَامِ مَعْرِفَةً عَامَّةً بِالْعَالَمِ، وَتَسْتَطِيعُ أَنْ تَذْكُرَ كَثِيرَةَ الْحَقِيقَاتِ فِي التَّدْرِيبِ.  هَلُوسِينَات مَقَالَةٌ أَصْلِيَّةٌ: الْهَلُوسِينَةُ (الْبَصِيرَةُ الْمُصَنَّعَةُ) فِي الذِّكْرِ الْمَصْنُوعِ عَامَّةً، وَفِي النُّمُوذَاتِ الْكَلَامِيَّةِ الْكَبِيرَةِ خَاصَّةً، "الْهَلُوسُ" جَوَابٌ ثِقَةٌ لاَ يَبْدُو أَنْ يَكُونَ مُبَرَّرًا بِبَيَانِ مَا تَدَرَّبَ بِهِ النُّمُوذَةُ.  قُوَّاتٌ طَالِعَةٌ  عَلَى عَدَدٍ مِنْ مَعَايِنِ اللُّغَةِ الْأَصْلِيَّةِ الْمُشْتَرَكَةِ فِي مَسَائِلَ كَالْجَوَابِ عَنِ السُّؤَالِ، لَا تُحْسِنُ النُّمُوذَاتُ أَحْسَنَ مِنْ الْحَظِّ الْعَشْوِيِّ حَتَّى تَبْلُغَ مُقَدَّرًا (فِي هَذِهِ الْحَالِ مُقَدَّرًا بِحِسَابِ التَّدْرِيبِ) ، وَفِي تِلْكَ الْوَقْتِ يَزْدَادُ أَحْسَانُهَا بِشِدَّةٍ. هَذِهِ أَمْثِلَةُ قُدْرَةٍ مُتَقَدِّمَةٍ. قَدْ تَكُونُ قُدْرَةٌ مُتَوَقِّعَةٌ مَرْصُودَةً فِي نُمُوْنِ اللُّغَةِ الْكَبِيْرَةِ وَلَكِنْ لَمْ تَكُنْ مَوْجُوْدَةً فِي النُمُوْنِ الْبَسِيْطِ (وَلَمْ تَكُنْ مَصْمُوْمَةً فِي النُّمُوْنِ) عَادَةً تُسَمَّى "قُدْرَةً مُتَوَقِّعَةً". تَنْبِيهٌ مِنْ رَبِّ الْأَرْضِ هَذِهِ الْمَقَادِرُ تُكتَشَفُ وَلَيْسَتْ مُبرَمَّمَةً أَوْ مُصَمَّمَةً، فِي بَعْضِ الْحَالِ فَقَطْ بَعْدَ إِنْشَارِ الْمُدَوَّنَةِ عَلَى النَّاسِ. مِئَاتُ قُدْرَةٍ مُتَبَدِّيَةٍ وُصِفَتْ. مَثَلَاتُهَا: حِسَابُ الْمُتَعَدِّدَاتِ، وَالْخُطُوَاتُ الْكُلِّيَّةُ، وَتَحْدِيدُ الْمَعْنَى الْمَقْصُودِ لِلْكَلِمَةِ، وَتَحْرِيرُ الْحُرُوفِ، وَتَحْرِيرُ الْكَلِمَةِ، وَتَحْدِيدُ الْمُهْمَلَةِ فِي الْهِنْجِلِشِ، وَتَصْنِيعُ مُقَابِلِ أَمْثَالِ الْكِسَوَاهِيلِيَّةِ.  مَعْمَرَةٌ وَتَدْرِيبُ لَمْ يَكُنْ مَعْلُومًا أَنْ يَكُونَ الْمُتَعَدِّدُ أَكْثَرَ مِنْ الْمُتَعَدِّدِ. يُدَرَّبُ LLM بِطَرِيقَةٍ مُسْتَنْظَرَةٍ عَلَى نَصٍّ غَيْرِ مُعَلَّقٍ. تُدَرَّبُ مُتَحَوِّلَةٌ مِنْ شِمَالٍ إِلَى يَمِينٍ لِتَعْظِيمِ الْحَدَثِ الْمُعَيَّنِ لِلْكَلِمَةِ التَّالِيَةِ فِي مَعْرِفَةِ الْمَوْضُوعِ الْمَاضِي. وَكَمَا يُمْكِنُ أَنْ يَسْتَعْمِلَ الْمُدَوَّرَ بِالْوَجْهَيْنِ (كَمَا فِي مِثَالِ الْبِرْتِ) ، الَّذِي يُعَيِّنُ تَوْزِيعَ الْحُبُوبِيَّةِ عَلَى كَلِمَاتٍ تُدْخَلُ فِي الْمَوْضِعِ الْمُتَقَدِّمِ وَالْمُتَابِعِ. إِلَى مَعَ مَسْئُولَةِ التَّنَبُّؤِ بِالْكَلِمَةِ التَّالِيَةِ أَوْ "مَلْءِ الْفُرُوجِ"، يُمْكِنُ أَنْ يُدَرِّبَ الْمُدَرِّبُونَ مَسَائِلَ مُسَاعِدَةٍ تَخْتَبِرُ فَهْمَهُمْ مِنْ تَوْزِيعِ الْبَيَانِ كَتَنَبُّؤِ الْجُمْلَةِ التَّالِيَةِ (NSP) ، فِيهَا تُعْرَضُ أَزْوَاجُ جُمْلَةٍ وَيَجِبُ أَنْ تَتَنَبَّأَ الْمُدَرِّبُ هَلْ  أَوَّلُ مَا تَدَرَّبَ الْمُتَعَلِّمُونَ عَلَى الْجَمَاعَاتِ الَّتِي فِيهَا مِلْيَارُ كَلِمَاتٍ. أَوَّلُ مَوْضُوعٍ فِي سِلْسِلَةِ GPT مِنْ OpenAI تَدَرَّبَ فِي 2018 عَلَى BookCorpus، وَهُوَ مَوْضُوعٌ مِنْ 985 مِلْيُونِ كَلِمَة. فِي السَّنَةِ الَّتِي دَرَّبَتْهَا بَيْتُ الْمُنَاظِرِينَ بِمَجْمُوعِ كِتَابِ الْكِتَابِ وَالْوِكِيْدِيَةِ الْإِنْجِلِيَّةِ، بِجُمْلَةِ 3.3 بِلِيْنِ كَلِمَةٍ. فِي السِّنِينَ مُنْذُ ذَلِكَ زَادَتْ مَجَالِسُ التَّدْرِيبِ لِلْمُدَرِّسِينَ بِأَمْرَاتِ الْعَظَمَةِ، وَبَلَغَتْ مِئَاتِ الْمِلْيَارِ أَوْ الْمِلْيَارَ مِنَ الْمَشَاهِدِ.  لَمْ يَكُنْ لِلْمُؤَدِّبِينَ حِسَابٌ مُكْلِفٌ. تَقَدَّرَتْ دَرَسَةُ 2020 مِنْ تَدْرِيسِ 1.5 بِلْيَوْنِ مِثَالِ الْبَارِئَةِ (1-2 أَمْرَاتِ كَبِيرَةٍ أَصْغَرُ مِنْ حَالِ الْفَنِّ فِي الْوَقْتِ) بِ 1.6 مِلْيُونِ دِرْهَمٍ.  تَحْلِيلُ 2020 وَجَدَ أَنَّ قُدْرَةَ النُّمُوذَاتِ اللُّغَوِيَّةِ العَصْبِيَّةِ (كَمَا يُقَاسُ بِفَقْدِ التَّدْرِيبِ) زَادَتْ سَلِيمًا فِي عَلاقَةِ قَانُونِ القُوَّةِ بِعَدَدِ المَعَايِرِ، وَكَمِّيَّةِ بيانات التَّدْرِيبِ، وَالْحِسَابِ المُسْتَعْمَلِ لِلتَّدْرِيبِ. هَذِهِ العَلاَقَاتُ جُرِبَتْ عَلَى مَوْضِعٍ عَرِيضٍ مِنَ القِيمَاتِ (حَتَّى سَبْعَةِ أَمْرَاتِ كَبِيرَةٍ) وَلَمْ يُلاحَظْ تَخْفِيفُ العَلاقَةِ فِي أَعْلَى مَوْضِعِ المَوْضِعِ (بَيْنَهُمْ لأَحْجامِ الشَّبَكَةِ حَتَّى تَرِيْلِيْنَ مِنَ المَعَايِيرِ).  تَطْبِيقُ لِمَشَارِكِ التَّابِعِ بَيْنَ 2018 و 2020، كَانَتْ الْمَنْهَجَةُ الْمُعَيَّنَةُ لِتَسْخِيرِ مُعَلَّمِ الْكِتَابِ لِمُهِمَّةٍ مُخَصَّصَةٍ لِمُعَالَجَةِ اللُّغَةِ الْأَصْلِيَّةِ (NLP) تَحْسِينُ النَّمْلِ بِتَعْلِيمٍ إضَافِيٍّ لِمُهِمَّةٍ مُخَصَّصَةٍ. وَبَعْدَ ذَلِكَ وُجِدَ أَنَّ أَقْوَى الْمُتَعَلِّمِينَ كَالْجِبْتِ الثَّالِثِ يَقْدِرُونَ عَلَى حَلِّ الْمَسَائِلِ بِغَيْرِ تَعْلِيمٍ إِضَافِيٍّ بِطَرِيقَةِ "التَّحْذِيرِ" الَّتِي تُعْرَضُ فِيهَا المَسْأَلَةُ الْمُحَلَّةُ عَلَى النَّمْلِ كَمَسْأَلَةٍ نَصِيَّةٍ، وَيُمْكِنُ أَنْ تَكُونَ مَعَهَا أَمْثَالٌ نَصِيَّةٌ لِمَسَائِ  تَنْظِيمُ مَقَالَةٌ أَصْلِيَّةٌ (تَعَلُّمُ الْمَكَانِ) حَسْنُ التَّنْظِيرِ مَذْهَبُ تَعْدِيلِ نَمْثَةِ لُغَةٍ مُتَدَرِّبَةٍ مُسْبَقًا بِتَدْرِيبِهَا (بِطَرِيقَةٍ مَنْظُورَةٍ) عَلَى مَسْأَلَةٍ مُخَصَّصَةٍ (مِثْلَ: تَحْلِيلِ الرَّأْيِ، وَاسْمِ الْكَوْنِ، أَوْ تَعْلِيمِ أَجْزَاءِ الْكَلَامِ). هُوَ شَكْلٌ مِنْ تَعَلُّمِ النَّقْلِ. يَتَضَمَّنُ عَامَّةً إِدْخَالَ مَعْدَدٍ جَدِيدٍ مِنَ الْوَزَنَاتِ الْمُتَوَاصِلَةِ مِنَ الطَّبَقَةِ الْأَخِيرَةِ مِنَ النَّمْلِ اللُّغَوِيِّ إِلَى مَخْرَجِ الْمَسْأَلَةِ التَّابِعَةِ. أَوْزَانُ الْأَصْلِيَّةِ لِلْمُدَلِّسِ لَا تَتَعَلَّمُ إِلَّا وَزْنُ الْأَوْزَانِ الْجَدِيدَةِ الْمُوَصِّلَةِ إِلَى الْخَارِجِ. بَدَلًا مِنْ ذَلِكَ، الْأَثْقَالُ الْأَصْلِيَّةُ تَحْصُلُ عَلَى تَحْسِينَاتٍ صَغِيرَةٍ (رُبَّمَا بِتَجْمِيدِ أَوَّلِيَةِ الطَّبَقَاتِ).  تَحْذِيرُ اُنْظُرْ أَيْضًا: مُهَيْمِنَةٌ وَتَعَلُّمٌ قَلِيلٌ (مُعَالَجَةُ اللُّغَةِ الطبيعية) فِي الْمَسْأَلَةِ الْمُسْتَحَبَّةِ، الْمَشْهُورَةِ بِجِبْتِ-3، تُصَوَّرُ الْمَسْأَلَةُ الْمُسْتَحَبَّةُ بِمَسْأَلَةِ النَّصِّ، الَّتِي يَجِبُ عَلَى الْمُدَبَّرِ أَنْ يُحَلِّلَهَا بِإِكْمَالِهَا (بِالْإِسْنَادِ). فِي "الْمَسْأَلَةِ الْقَلِيلَةِ" تَتَضَمَّنُ الْمَسْأَلَةُ عَدَدًا قَلِيلًا مِنْ أَمْثَالِ أَزْوَاجٍ مُتَشَابِهَةٍ (مَسْأَلَةٌ، حَلٌّ). مَثَلًا، مَهْمَا تَحَلَّلَ الْمَشَاعِرُ مِنْ تَسْمِيَةِ الْمَشَاعِرِ لِمُعَايَنَةِ الْفِيلَمِ يُمْكِنُ أَنْ يَكُونَ كَمَا يَلِي  مُراجَعَةٌ: هَذَا الفِلِمُ رَدِيءٌ. مَشَاعِرُ: سَلبِيَّة  مُراجَعَة: هَذَا الفِيلم مُذهِل! مَشَاعِر:  إِنْ كَانَ النَّمْلُ يَخْرُجُ "إِيجَابِيًّا"، فَقَدْ حَلَّ المَسْأَلَةَ بِالصِّحَّةِ. فِي مَسْأَلَةِ الصَّوْتِ الصَّغِيرِ، لَا تُعْطَى أَمْثِلَةُ حَلٍّ. مَثَلُ مَسْأَلَةِ الصَّفْرِ لِمُهِمَّةِ تَحْلِيلِ الرَّأْيِ هُوَ "الرَّأْيُ الْمُتَّصِلُ بِمُعَايَنَةِ الْفِلِمِ: هَذَا الْفِلِمُ مُبْهِجٌ!".  قَدْ تَبَيَّنَ أَنَّ أَدَاءَ الْمُدَوَّنَاتِ الْمُدَوَّنَةِ تَحْصُلُ عَلَى أَثَارٍ تَنَافِسِيَّةٍ فِي مَسَائِلِ الْمُدَوَّنَةِ الْمُتَقَدِّمَةِ، وَتَتَجَاوَزُ أَحْيَانًا عَلَى أَدَاءَاتِ الْمُدَوَّنَةِ الْمُتَقَدِّمَةِ. مِثَالُ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ مِثَالِ تَخْلِيقُ وَتَحْسِينُ مِثْلِ هَذِهِ الْمَسَائِلِ يُسَمَّى بِهِ الْهِدَايَةُ.  تَرْتِيبُ الْوَصِيَّةِ إِنْتِظَارُ التَّعْلِيمِ شَكْلٌ مِنْ إِنْتِظَارِ الْحَسَنِ مُصَمَّمٌ لِتَسْهِيلِ أَكْثَرِ التَّتَفاعُلِ الْمُسْتَحَبِّ لِلْقِتَالِ الصَّفْرِ. مُعْطَى إِدْخَالِ النَّصِّ، نَمْثَلُ اللُّغَةِ الْمُتَدَرِّبُ سَيَخْرُجُ إِكْمَالًا يُطَابِقُ تَوْزِيعَ النَّصِّ الَّذِي تَدَرَّبَ عَلَيْهِ. نَمِيْلُ لُغَةٍ سَاهِيَةٍ مُسْتَدْعَى "اكْتُبْ مَقَالَةً عَنْ مَوَاضِعِ هَمْلَتْ" يُمْكِنُ أَنْ يُكَمِّلَهَا بِمِثْلِ "عُقُوبَةِ التَّأَخُّرِ بِ 10% لِكُلِّ يَوْمٍ تُنْفَذُ عَلَى الْمَقَالَاتِ الْمَقْبُوْلَةِ بَعْدَ 17 مَرْيَمْ". فِي تَرْتِيبِ التَّعْلِيمِ، يُدَرَّبُ النَّمْثَلُ اللِّسَانِيُّ عَلَى أَمْثِلَةٍ كَثِيرَةٍ مِنَ الْمَسَائِلِ الْمَصْطُورَةِ كَتَعْلِيمِ اللُّغَةِ الطبيعيَّةِ، مَعَ الْجَوَابِ الْمُنَاسِبِ. تَقَدَّمَتْ فِي الْمَذْهَبِ أَتْقِيَةٌ مُتَنَاسِبَةٌ. بَرُوتُوكُلُ OpenAI's InstructGPT يَتَعَلَّقُ بِتَنْظِيرِ تَنْظِيرٍ دَقِيقٍ عَلَى مَجْمُوعَةِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَاضِعِ مَوَ فِكْرَةٌ أُخْرَى، "تَعْلِيمُ نَفْسِي"، تُحَسِّنُ النَّمْثَلَ اللِّسَانِيَّ عَلَى مَجْمُوعِ مِثَالَيْ تَعْلِيمٍ يَنْشَأُ هُمَا بِمَجْمُوعِ مِثَالَيْ تَعْلِيمٍ (تَحَرَّكَ مِنْ مَجْمُوعٍ أَوَّلِيٍّ صَغِيرٍ مِنْ مَثَالَيْ يَنْشُأُهُمَا البَشَرُ).  https://en.wikipedia.org/wiki/Large_language_model نَمْثَلُ اللُّغَةِ الْكَبِيرَةِ
مَثَلَاتُهَا: حِسَابُ الْمُتَعَدِّدَاتِ، وَالْخُطُوَاتُ الْكُلِّيَّةُ، وَتَحْدِيدُ الْمَعْنَى الْمُرَادِ بِالْكَلِمَةِ، وَتَحْذِيرُ الْفِكْرِ، وَتَحْلِيلُ الْحُرُوفِ، وَتَحْدِيدُ الْمُهْمَلَةِ فِي الْهِنْجِلِشِ (مَجْمُوعِ الْهِنْدِيِّ وَالْإِنْجِيلِيِّ) ، وَتَخْرِيجُ مُقَابِلَهَا لِلْكِسَائِلِيِّينَ.