Masar مساركل المقالات
٢٨ أكتوبر ٢٠٢٦·5 دقائق قراءة

تقييم النماذج اللغوية العربية: تغطية اللهجات في النماذج الرائدة

يتطلب نشر الذكاء الاصطناعي في المنطقة تجاوز الفصحى الحديثة. نراجع هنا أداء نماذج GPT-4o وClaude 3.5 وGemini 1.5 في التعامل مع اللهجات الإقليمية الفعلية.

تُعد اللغة العربية الفصحى الحديثة الوسيلة المعتمدة في المعاملات الرسمية، والنشرات الإخبارية، والمنشورات الأكاديمية. وهي أيضاً الأساس اللغوي الذي تُدرب عليه تقريباً كافة النماذج اللغوية الكبيرة التجارية عندما تزعم الشركات المطورة دعمها للغة العربية. ومع ذلك، فإن أياً من 400 مليون ناطق بالعربية عبر الشرق الأوسط وشمال إفريقيا لا يستخدم الفصحى في تفاعلاته الاستهلاكية اليومية، أو تذاكر الدعم الفني، أو المحادثات المؤسسية الداخلية، أو الاتصالات الصوتية التجارية.

يمثل هذا التباين اللغوي خطراً تشغيلياً مباشراً لقادة الأعمال الذين ينشرون تقنيات الذكاء الاصطناعي التوليدي في الخليج، أو المشرق العربي، أو مصر، أو شمال إفريقيا. فنظام خدمة العملاء الآلي أو محرك استرجاع المعلومات الداخلي الذي يقتصر على فهم الفصحى سيتعثر فور مواجهة القصد الفعلي للمتعاملين.

بهدف وضع مرجع موضوعي لقرارات الشراء المؤسسية، قيّمت مسار أبرز النماذج الرائدة—GPT-4o من OpenAI، وClaude 3.5 Sonnet من Anthropic، وGemini 1.5 Pro من Google—عبر محاور استيعاب اللهجات، والتبديل اللغوي، وإنجاز المهام.

نطاق اللهجات: الفروق الإقليمية

ليست اللغة العربية لغة واحدة ذات لكنات ثانوية، بل هي سلسلة متصلة من الازدواجية اللغوية. قمنا باختبار النماذج عبر أربع مجموعات لغوية رئيسية:

  • اللهجة الخليجية: السائدة في السعودية، والإمارات، وقطر، والكويت. تتميز بمفردات خاصة وتداخل كبير مع المصطلحات الإنجليزية للأعمال في بيئات الشركات.
  • اللهجة المصرية: الأكثر انتشاراً وفهماً إقليمياً بفضل الإنتاج الإعلامي، وتتسم بتراكيب فعلية وصيغ نفي مميزة.
  • اللهجة الشامية: المنتشرة في الأردن، ولبنان، وسوريا، وفلسطين، وتحتوي على العديد من الكلمات المستعارة وتنوعات صوتية فريدة.
  • اللهجات المغاربية (الدارجة): الأكثر تمايزاً من الناحية اللغوية، حيث تدمج تراكيب فرنسية وأمازيغية، مما يفرض تحديات حادة على أدوات المعالجة والتجزئة القياسية.

لا يمكن قياس جاهزية الذكاء الاصطناعي العربي بالدقة النحوية في الفصحى فحسب. المعيار الحقيقي يكمن في قدرة النموذج على فهم القصد التجاري المصاغ بلهجات دارجة دون إجبار المستخدم على تطويع حديثه الطبيعي.

تحليل النماذج

OpenAI: GPT-4o

يُظهر نموذج GPT-4o أعلى سرعة استجابة وأقل تكلفة إضافية في تجزئة النصوص العربية بفضل المفردات المحسنة في أداة التجزئة التابعة لـ OpenAI. يقدم النموذج تصنيفاً واستخراجاً للمشاعر وتلخيصاً موثوقاً في الفصحى واللهجة المصرية.

وعند تقييمه على اللهجة الخليجية، ينجح GPT-4o في تحويل العبارات العامية إلى إجراءات مؤسسية بدقة، مما يجعله مناسباً لقطاعي التجزئة والخدمات المصرفية في دول مجلس التعاون الخليجي. غير أنه يميل إلى إعادة صياغة المخرجات إلى الفصحى الرسمية ما لم يُطلب منه صراحة الالتزام بالطابع العامي. أما في الدارجة المغاربية، فينخفض الأداء بشكل ملحوظ؛ ورغم بقاء الفهم الدلالي مقبولاً، فإن التوليد ينحدر غالباً إلى مزيج هجين وغير متناسق بين الفرنسية والعربية.

Anthropic: Claude 3.5 Sonnet

يقدم Claude 3.5 Sonnet أقوى أداء في التفكير المعقد، والاحتفاظ بالسياق، والالتزام الدقيق بتعليمات المؤسسات في البيئات العربية.

يتفوق Claude بوضوح في استيعاب التبديل اللغوي—وهي الممارسة الشائعة في دبي، والرياض، وبيروت حيث يتم التبديل بين العربية والإنجليزية ضمن الجملة الواحدة. يحلل النموذج الأوامر الهجينة بدقة تعجز عنها النماذج الأخرى. كما أن إدراكه للفروق الدقيقة في اللهجة الشامية يتفوق على منافسيه، إذ يلتقط المشاعر الكامنة والتهكم المبطن الذي تخطئ أدوات تحليل المشاعر التقليدية في تفسيره. وتبقى نقطة المفاضلة الأساسية هي كفاءة التجزئة؛ إذ تستهلك النصوص العربية عدداً أكبر بكثير من الرموز لكل كلمة مقارنة بـ GPT-4o، مما ينعكس على تكاليف الاستدلال التشغيلي على نطاق واسع.

Google: Gemini 1.5 Pro

يستفيد Gemini 1.5 Pro من التاريخ الطويل لشركة Google في الفهرسة متعددة اللغات. وتتيح نافذة السياق الضخمة للمؤسسات إدخال أحجام كبيرة من الوثائق القانونية المحلية، وسجلات مراكز الاتصال، وقواعد المعرفة الدارجة مباشرة في المدخلات.

أظهر النموذج قدرة غير متوقعة في التعامل مع اللهجات المغاربية، حيث يتعثر كلاً من GPT-4o وClaude. وتبرز دقته العالية في استرجاع المعلومات من النصوص العربية غير المقيسة. ومع ذلك، تأتي مخرجاته التوليدية بالعامية العربية بأسلوب آلي في كثير من الأحيان. ورغم استيعابه العالي للمدخلات العامية، يفتقر توليده التلقائي إلى السلاسة الحوارية المطلوبة في الواجهات الموجهة للمتعاملين مباشرة دون ضبط دقيق.

استنتاجات معمارية لتصميم الأنظمة

يكشف تقييم تغطية اللهجات عن ثلاثة واقعية فنية يجب على مهندسي النظم المؤسسية أخذها بالاعتبار:

1. تفاوت تكاليف التجزئة

لا تزال تجزئة النصوص العربية تفتقر إلى الكفاءة لدى كبار المزودين مقارنة بالنصوص اللاتينية. فالطلب الواحد باللهجة الخليجية قد يستهلك ما بين 1.8 إلى 2.6 ضعف عدد الرموز المستهلكة في نظيره الإنجليزي. ويتفوق GPT-4o في تخفيف هذا العبء مقارنة بـ Claude 3.5 Sonnet، مما يعني أن الأنظمة ذات الأحجام التبادلية العالية مطالبة بالموازنة بين قدرات التفكير لدى Claude والجدوى الاقتصادية لـ GPT-4o.

2. إشكالية العربيزي

في التواصل الرقمي اليومي، يعتمد ملايين المستخدمين في بلاد الشام وشمال إفريقيا على كتابة العربية بحروف لاتينية وأرقام (العربيزي أو الفرانكو). تتعامل النماذج الرائدة مع العبارات البسيطة بصورة مقبولة في الأوامر المستقلة، غير أن الدقة تتراجع سريعاً في المحادثات المتعددة والمعقدة. ويظل استخدام طبقات معالجة مسبقة متخصصة أمراً حتمياً للتطبيقات الموجهة للجمهور.

3. التنسيق الهجين مقابل الاعتماد على نموذج وحيد

لا يوجد نموذج رائد واحد يتفوق في كافة اللهجات ومحاور التقييم. لذلك، تعتمد البنى التحتية المؤسسية المتقدمة في منطقة الشرق الأوسط وشمال إفريقيا على طبقات توجيه ذكية: استخدام مصنفات خفيفة لاكتشاف اللهجة، وتوجيه الاستيعاب والتحليل إلى Claude 3.5 Sonnet أو Gemini 1.5 Pro، واستخدام نماذج مفتوحة المصدر مضبوطة بدقة أو GPT-4o لإتمام المهام وتوليد المخرجات بكفاءة مالية.

توصيات استراتيجية

يتعين على المؤسسات التي توسع عمليات الذكاء الاصطناعي في العالم العربي التوقف عن الاعتماد على المعايير العالمية التي تقيّم اللغة العربية حصراً من خلال المجموعات اللغوية الأكاديمية. يجب أن تشمل بروتوكولات الاختبار المؤسسي سجلات خدمة العملاء الحقيقية، ومخرجات تحويل الصوت العامي إلى نص، والمصطلحات التجارية الدارجة إقليمياً. إن اختيار الشريك التقني القادر على استيعاب الفوارق الدقيقة بين دارجة الأعمال الخليجية وتعبير الشارع الشامي ليس مسألة تعريب ثانوية؛ بل هو الحد الفاصل بين تطبيق يعزز الإنتاجية وآخر يولد نفوراً لدى المستخدمين.

llm benchmarksarabic aienterprise aimena technology