تكشف Meta عن نموذج لاما جديد وأكثر كفاءة

أعلنت شركة Meta عن أحدث إضافة إلى عائلة Llama من نماذج الذكاء الاصطناعي التوليدية: Llama 3.3 70B.

في منشور على X، قال أحمد الدحل، نائب الرئيس للذكاء الاصطناعي التوليدي في Meta، إن Llama 3.3 70B النصية فقط تقدم أداء أكبر نموذج Llama في Meta، Llama 3.1 405B، بتكلفة أقل.

وكتب الدهلي: “من خلال الاستفادة من أحدث التطورات في تقنيات ما بعد التدريب… يعمل هذا النموذج على تحسين الأداء الأساسي بتكلفة أقل بكثير”.

نشر أحمد الدحل مخططًا يوضح تفوق Llama 3.3 70B على Gemini 1.5 Pro من Google، وGPT-4o من OpenAI، وNova Pro الذي تم إصداره حديثًا من Amazon في عدد من معايير الصناعة، بما في ذلك MMLU، الذي يقيم قدرة النموذج على فهم وإنشاء النص. عبر البريد الإلكتروني، قال متحدث باسم Meta إن النموذج يجب أن يقدم تحسينات في مجالات مثل الرياضيات والمعرفة العامة واتباع التعليمات واستخدام التطبيق.

نقدم لكم Llama 3.3 – نموذج 70B جديد يقدم أداء طراز 405B الخاص بنا ولكنه أسهل وأكثر فعالية من حيث التكلفة في التشغيل. من خلال الاستفادة من أحدث التطورات في تقنيات ما بعد التدريب بما في ذلك تحسين التفضيلات عبر الإنترنت، يعمل هذا النموذج على تحسين الأداء الأساسي في… pic.twitter.com/6oQ7b3Yuzc

— أحمد الدحلة (@Ahmad_Al_Dahle) 6 ديسمبر 2024

Llama 3.3 70B، المتوفر للتنزيل من منصة تطوير الذكاء الاصطناعي Hugging Face ومصادر أخرى، بما في ذلك موقع Llama الرسمي، هو أحدث مسرحية لشركة Meta للسيطرة على مجال الذكاء الاصطناعي من خلال نماذج “مفتوحة” يمكن استخدامها وتسويقها لمجموعة من الأغراض.

تقيد شروط Meta كيفية استخدام بعض المطورين لنماذج اللاما الخاصة بها؛ ويجب على المنصات التي تضم أكثر من 700 مليون مستخدم شهريًا أن تطلب إذنًا خاصًا من الشركة. لكن بالنسبة للعديد من المطورين والشركات، ليس من المهم أن تكون نماذج Llama ليست “مفتوحة” بالمعنى الدقيق للكلمة. وفقًا لشركة Meta، حققت نماذج Llama الخاصة بها أكثر من 650 مليون عملية تنزيل.

لقد استفادت Meta من اللاما لتحقيق أهدافها الخاصة أيضًا. Meta AI، مساعد الذكاء الاصطناعي للشركة، والذي يتم تشغيله بالكامل بواسطة نماذج Llama، لديه الآن ما يقرب من 600 مليون مستخدم نشط شهريًا، وفقًا لمنشور على Instagram للرئيس التنفيذي مارك زوكربيرج يوم الجمعة. يدعي زوكربيرج أن Meta AI تسير على الطريق الصحيح لتصبح مساعد الذكاء الاصطناعي الأكثر استخدامًا في العالم.

لقد كانت طبيعة اللاما المنفتحة بمثابة نعمة ونقمة لميتا.

في نوفمبر، ظهر تقرير يفيد بأن الباحثين العسكريين الصينيين استخدموا نموذج اللاما لتطوير روبوت الدردشة الدفاعي. استجابت شركة Meta بجعل نماذج اللاما الخاصة بها متاحة لشركاء الدفاع الأمريكيين.

أعربت ميتا أيضًا عن مخاوفها بشأن قدرتها على الامتثال لقانون الذكاء الاصطناعي، وهو قانون الاتحاد الأوروبي الذي يحدد إطارًا قانونيًا وتنظيميًا للذكاء الاصطناعي – ووصفت تنفيذ القانون بأنه “لا يمكن التنبؤ به للغاية”. وتتعلق القضية بالنسبة للشركة بالأحكام ذات الصلة في اللائحة العامة لحماية البيانات (GDPR)، وقانون الخصوصية للاتحاد الأوروبي، والمتعلقة بتدريب الذكاء الاصطناعي. يقوم Meta بتدريب نماذج الذكاء الاصطناعي على البيانات العامة لمستخدمي Instagram وFacebook الذين لم يقموا بإلغاء الاشتراك، وهي البيانات التي تخضع في أوروبا لضمانات اللائحة العامة لحماية البيانات.

طلب المنظمون في الاتحاد الأوروبي في وقت سابق من هذا العام من شركة ميتا وقف التدريب على بيانات المستخدم الأوروبي أثناء تقييم امتثال الشركة للقانون العام لحماية البيانات. وقد رضخت ميتا، في حين أيدت في الوقت نفسه رسالة مفتوحة تدعو إلى “تفسير حديث” للقانون العام لحماية البيانات لا “يرفض التقدم”.

تعمل Meta، التي ليست محصنة ضد التحديات التقنية التي تواجهها مختبرات الذكاء الاصطناعي الأخرى، على تكثيف بنيتها التحتية الحاسوبية لتدريب وخدمة الأجيال القادمة من نماذج اللاما. أعلنت الشركة يوم الأربعاء أنها ستبني مركز بيانات للذكاء الاصطناعي بقيمة 10 مليارات دولار في لويزيانا، وهو أكبر مركز بيانات للذكاء الاصطناعي قامت ببنائه على الإطلاق.

قال زوكربيرج في مكالمة أرباح Meta للربع الرابع في أغسطس إنه لتدريب المجموعة الرئيسية التالية من نماذج Llama، Llama 4، ستحتاج الشركة إلى حوسبة أكثر بـ 10 مرات مما هو مطلوب لتدريب Llama 3.

يمكن أن يكون تدريب نماذج اللغات الكبيرة عملاً مكلفًا. ارتفعت النفقات الرأسمالية لشركة Meta بنسبة 33٪ تقريبًا إلى 8.5 مليار دولار في الربع الثاني من عام 2024، من 6.4 مليار دولار في العام السابق، مدفوعة بالاستثمارات في الخوادم ومراكز البيانات والبنية التحتية للشبكات.