फाल्कन-एमिरी: जब एक एलएलएम बोलचाल की भाषा, संस्कृति और सूक्ष्मताओं को सीखता है
huggingface ·
टेक्नोलॉजी इनोवेशन इंस्टीट्यूट ने फाल्कन-अमीराती-7B जारी किया है, जो अमीराबी अरबी बोलचाल को समझने और उत्पन्न करने के लिए विशेष रूप से डिज़ाइन किया गया एक बड़ा भाषा मॉडल (LLM) है। फाल्कन-H1-अरबिक आर्किटेक्चर पर आधारित इस 7 अरब पैरामीटर वाले मॉडल का उद्देश्य सामान्य अरबी मॉडलों को विशिष्ट सांस्कृतिक और भाषाई सूक्ष्मताओं के अनुकूल बनाने की चुनौतियों को दूर करना है। टीम ने सटीकता सुनिश्चित करने के लिए प्रामाणिक वेब क्रॉल, अमीराती विरासत पर केंद्रित मानक अरबी (MSA) सामग्री और कठोर रूप से निर्देशित संश्लेषित डेटा सहित तीन-भाग वाली डेटा रणनीति का उपयोग किया। मूल्यांकन परिणामों में दिखाया गया है कि फाल्कन-अमीराती-7B ने एलियाह (Alyah) बेंचमार्क पर 84.83% स्कोर हासिल किया, जिससे यह बड़ी बहुभाषी प्रतिस्पर्धियों को पीछे छोड़ देता है। महत्वपूर्ण रूप से, मॉडल श्रेष्ठ बोलचाल की सटीकता प्रदर्शित करता है और अन्य मॉडलों की तरह मानक अरबी की ओर जाने के बजाय विश्वसनीय रूप से अमीराबी में जवाब देता है। इसके अलावा, यह यूएई-विशिष्ट परिदृश्यों में सांस्कृतिक रूप से उपयुक्त प्रतिक्रियाओं को पहचानने के लिए अरबकल्चर-डायलॉग (ArabCulture-Dialogue) बेंचमार्क पर सबसे अधिक स्कोर प्राप्त करता है। इस रिलीज पर यह जोर दिया गया है कि लक्षित बोलचाल प्रशिक्षण गैर-शाब्दिक अर्थों, कविता और सामाजिक मानकों को पकड़ने के लिए आवश्यक है, जिन्हें सामान्य मॉडल अक्सर चूक जाते हैं।
huggingface