انتقل إلى المحتوى الرئيسي

مصادر الحصول على النماذج

هناك عدة مصادر موثوقة للحصول على النماذج اللغوية، ويمكن استخدامها للتطبيقات المختلفة سواء البحثية أو التجارية.

Hugging Face​

منصة Hugging Face هي المصدر الرئيسي للنماذج اللغوية المفتوحة:

  • نظرة عامة:

    • منصة مركزية لمشاركة النماذج ومجموعات البيانات والأدوات
    • تحتوي على آلاف النماذج اللغوية بما فيها العديد من النماذج الداعمة للعربية
    • تدعم تنزيل النماذج واستخدامها مباشرة من خلال مكتبة Transformers

  • كيفية الاستخدام:

    • البحث عن النماذج باستخدام محددات البحث (اللغة، الحجم، المهمة)
    • تنزيل النماذج باستخدام واجهة الويب أو من خلال الشيفرة البرمجية
    • الاستفادة من أدوات التكميم والتحويل المتاحة على المنصة

  • نماذج عربية بارزة:

    • TII/jais-13b-chat: نموذج Jais للمحادثة
    • aubmindlab/aragpt2-medium: إصدار AraGPT متوسط الحجم
    • huggingface/bert-large-arabertv2: نموذج BERT عربي محسّن

GitHub​

GitHub يوفر العديد من المستودعات للنماذج اللغوية ومكتبات التشغيل:

  • نظرة عامة:

    • يستضيف العديد من مشاريع النماذج اللغوية مفتوحة المصدر
    • يتيح الوصول إلى أحدث التطويرات والتحسينات قبل نشرها رسميًا
    • يتضمن مكتبات تشغيل مثل llama.cpp و ExLlama

  • مستودعات رئيسية:

    • mlc-ai/mlc-llm: أدوات لتشغيل النماذج على مختلف الأجهزة
    • ggerganov/llama.cpp: مكتبة خفيفة لتشغيل النماذج على المعالج المركزي
    • abetlen/llama-cpp-python: واجهات بايثون للتفاعل مع llama.cpp

  • كيفية الاستخدام:

    • استنساخ المستودعات المطلوبة باستخدام Git
    • اتباع تعليمات التثبيت والإعداد المتاحة في ملفات README
    • الاستفادة من الأمثلة والوثائق المتاحة لتشغيل النماذج

المستودعات المتخصصة بالنماذج العربية​

مصادر مخصصة للنماذج العربية والموارد اللغوية:

  • جهات رئيسية:

    • TII (Technology Innovation Institute): مطور نماذج Jais وFalcon
    • AraELECTRA: مشروع لنماذج ELECTRA مخصصة للعربية
    • CAMeL Lab: مختبر معالجة اللغة العربية بجامعة نيويورك أبوظبي

  • منصات تخصصية:

    • ARBML: منصة موجهة للتعلم الآلي باللغة العربية
    • ALT at Qatar Computing Research Institute: أبحاث وأدوات معالجة اللغة العربية
    • Masader: فهرس شامل لموارد اللغة العربية

  • كيفية الوصول:

    • زيارة مواقع الويب الرسمية للمؤسسات
    • الاشتراك في قنوات التواصل والمجتمعات ذات الصلة
    • الاطلاع على الأوراق البحثية للحصول على أحدث النماذج

التحقق من جودة واعتمادية النماذج​

إرشادات لضمان جودة واعتمادية النماذج التي يتم تنزيلها:

  • فحص التراخيص:

    • التحقق من الترخيص وشروط الاستخدام (تجاري، غير تجاري، بحثي)
    • مراجعة القيود المحتملة على استخدام النماذج
    • الانتباه للمتطلبات القانونية مثل الإسناد أو مشاركة التعديلات

  • تقييم الجودة:

    • مراجعة مقاييس الأداء المنشورة من قبل المطورين
    • الاطلاع على تقييمات المستخدمين والتعليقات
    • إجراء اختبارات أولية على مهامك الخاصة قبل الاعتماد

  • التحقق من المصدر:

    • تنزيل النماذج من المصادر الرسمية والموثوقة
    • التحقق من التوقيعات الرقمية عند توفرها
    • فحص تاريخ التحديثات والصيانة المستمرة للنموذج