Does the processor contain apply_chat_template??
#4
by
damerajee
- opened
Was trying to fine tune this model on my own custom data but my dataset is kind of a chat format and I want to apply a chat template to it but
AttributeError: 'PaliGemmaProcessor' object has no attribute 'apply_chat_template'
Here is what the dataset looks like
[ { "role": "human", "content": "आप इस चित्र में क्या होता हुआ देख रहे हैं?\n<image>" }, { "role": "gpt", "content": "चित्र के केंद्र में, एक जीवंत नीली लंच ट्रे में चार कंटेनर हैं, जिनमें से प्रत्येक विभिन्न प्रकार के खाद्य पदार्थों से भरा हुआ है। कंटेनर, दो गुलाबी रंग में और दो पीले रंग में, 2x2 ग्रिड में व्यवस्थित हैं।\n\nऊपरी बाएँ गुलाबी कंटेनर में, ब्रेड का एक टुकड़ा रखा हुआ है, जिस पर हल्के से मक्खन लगाया गया है और मुट्ठी भर बादाम छिड़के हुए हैं। ब्रेड को एक आयत में काटा जाता है, और बादाम उसकी मक्खन जैसी सतह पर बिखरे होते हैं।\n\nइसके बगल में ऊपरी दाएं कोने में, एक अन्य गुलाबी कंटेनर में फलों का मिश्रण रखा हुआ है। कटे हुए सेब, जिनका ताजा सफेद आंतरिक भाग खुला हुआ है, अनानास के रसीले टुकड़ों के साथ स्थान साझा करते हैं। सेब के स्लाइस और अनानास के टुकड़ों का रंग गुलाबी कंटेनर के विपरीत खूबसूरती से विपरीत है।\n\nइनके नीचे, ट्रे के निचले बाएँ कोने में, एक पीले कंटेनर में कुछ ब्रोकोली के साथ एक मीटबॉल रखा हुआ है। मीटबॉल, गोल और भूरा, जीवंत हरे ब्रोकोली फूलों के बगल में बैठता है।\n\nअंत में, नीचे दाएँ पीले कंटेनर में, एक मीठी चीज़ है - एक चॉकलेट चिप कुकी। सुनहरे-भूरे रंग की कुकी चॉकलेट चिप्स से भरी हुई है, उनका गहरा रंग कुकी की हल्की सतह के सामने स्पष्ट दिखता है।\n\nनीली ट्रे पर इन कंटेनरों की व्यवस्था देखने में आकर्षक और संतुलित भोजन बनाती है, जिसमें प्रत्येक घटक को बड़े करीने से अलग किया जाता है, फिर भी एक एकजुट संपूर्ण हिस्सा होता है।" } ]
Hi
@damerajee
, Sorry for late response. The processor you're using PaliGemmaProcessor doesn’t have a method called apply_chat_template. If you are using a specific processor like PaliGemmaProcessor, verify if it's compatible with the model you're using, and consult its documentation. No Need for apply_chat_template You can handle the chat formatting manually in the preprocessing step and skip the call to apply_chat_template. if you have any concerns please let us know. Thank you.