شركة Guide Labs تطلق نموذج لغة كبيراً قابلاً للتفسير بـ 8 مليارات معامل

يوم الاثنين، أطلقت شركة الذكاء الاصطناعي الناشئة Guide Labs، ومقرها سان فرانسيسكو، نموذج Steerling-8B، وهو نموذج لغة كبير (LLM) بـ 8 مليارات معامل مصمم ليكون قابلاً للتفسير. وعلى عكس النماذج التقليدية التي يكون فيها اتخاذ القرار بمثابة “صندوق أسود”، يمكن تتبع كل رمز (token) ينتجه Steerling-8B إلى أصوله في بيانات التدريب. وتهدف الشركة، التي أسسها الرئيس التنفيذي Julius Adebayo وكبيرة مسؤولي العلوم آية عبد السلام إسماعيل، إلى معالجة الصعوبات التي تواجه النماذج الحالية مثل ChatGPT ونموذج Grok التابع لشركة xAI.

لتحقيق هذه القابلية للتتبع، تبني Guide Labs نماذجها بطبقة مفاهيمية (concept layer) تصنف البيانات إلى فئات قابلة للتتبع. وأوضح Adebayo، الذي شارك في تأليف ورقة بحثية استُشهد بها على نطاق واسع في عام 2018 خلال دراسته للدكتوراه في MIT، أن هذا النهج يغير نموذج تحليل النماذج. وقال Adebayo: “نوع القابلية للتفسير الذي يقوم به الناس هو… علم أعصاب على نموذج، ونحن نقلب ذلك. ما نفعله هو هندسة النموذج من الألف إلى الياء بحيث لا تحتاج إلى القيام بعلم الأعصاب”. تسمح هذه البنية للمطورين بتحديد ترميزات بيانات محددة. على سبيل المثال، إذا كانت هناك 1 تريليون طريقة لترميز الجنس ويقوم النموذج بترميزه في 1 مليار من تلك الطرق، فيجب على المطورين العثور على كل تلك الـ 1 مليار حالة والتحكم فيها بشكل موثوق. وعلى الرغم من هذه البنية، أكد Adebayo أن النموذج يحتفظ بالسلوكيات الناشئة. وأشار أيضاً إلى أن النموذج يثبت أن تدريب نماذج قابلة للتفسير قد انتقل من كونه تحدياً علمياً إلى مشكلة هندسية.

وفقاً لـ Guide Labs، يمكن لـ Steerling-8B تحقيق 90% من قدرات النماذج الحالية مع استخدام بيانات تدريب أقل. ويجادل Adebayo بأن هذه البنية القابلة للتفسير ستكون ضرورية لنماذج اللغة الكبيرة الموجهة للمستهلكين لحظر المواد المحمية بحقوق الطبع والنشر أو التحكم في المخرجات المتعلقة بالعنف أو المخدرات. كما أنها تحمل إمكانات للصناعات الخاضعة للتنظيم، حيث يجب أن تكون النماذج أكثر أماناً وقابلية للتحكم. وأضاف أن إضفاء الطابع الديمقراطي على القابلية للتفسير المتأصلة سيكون مفيداً للبشرية على المدى الطويل، خاصة مع قيام المطورين ببناء نماذج أكثر ذكاءً بشكل متزايد.

انبثقت شركة Guide Labs من مسرعة الشركات الناشئة Y Combinator، وجمعت 9 ملايين دولار في جولة تمويل أولية في نوفمبر 2024. وقد قادت جولة التمويل شركة رأس المال الاستثماري Initialized Capital.

لماذا يهم

تحاول شركة Guide Labs من خلال نموذج Steerling-8B حل مشكلة “الصندوق الأسود” في التعلم العميق من خلال جعل إجراءات النموذج قابلة للتتبع، مما قد يتيح ذكاءً اصطناعياً أكثر أماناً وقابلية للتحكم في الصناعات الخاضعة للتنظيم.