السلوك الناشئ
السلوك الناشئ في الذكاء الاصطناعي يشير إلى القدرات أو السلوكيات التي تنشأ تلقائيًا في النماذج واسعة النطاق نتيجة لتوسيع نطاق حجم النموذج أو بيانات التدريب أو الموارد الحسابية دون أن تكون مبرمجة بشكل صريح أو متوقعة من قبل مطوري النموذج. هذه السلوكيات غير موجودة في النماذج الأصغر ولا يمكن التنبؤ بها عن طريق استقراء أداء النماذج الأصغر بل تنشأ فجأة عند عتبات مقياس معينة. تشمل القدرات الناشئة في نماذج اللغة الكبيرة الاستدلال المتقدم والتعلم في السياق واتباع التعليمات وتوليد الكود والاستدلال الرياضي والترجمة متعددة اللغات. لم يتم تدريب هذه القدرات بشكل صريح ولكنها نشأت عندما تم توسيع النماذج لتصل إلى مليارات المعلمات وتدريبها على مجموعات نصوص ضخمة. لظاهرة النشوء آثار كبيرة على تطوير ونشر الذكاء الاصطناعي.这意味着 مع ازدياد حجم النماذج، قد تطور قدرات لم يتوقعها منشئوها وهو ما يمكن أن يكون مفيدًا ومقلقًا في نفس الوقت. تشمل القدرات الناشئة المفيدة تحسين الاستدلال وتعميم أفضل والقدرة على أداء مهام لم تكن جزءًا من بيانات التدريب. تشمل السلوكيات الناشئة المقلقة احتمالية الخداع أو التلاعب أو تطوير استراتيجيات تحسّن لأهداف التدريب بطرق غير مقصودة. دراسة السلوك الناشئ هي مجال بحث نشط في الذكاء الاصطناعي. يبحث العلماء في الظروف التي يحدث فيها النشوء والآليات التي تدفعه وكيفية التنبؤ بالقدرات الناشئة والتحكم فيها. تشمل النتائج الرئيسية أن النشوء مرتبط ارتباطًا وثيقًا بمقياس النموذج وأن القدرات المختلفة تنشأ على مستويات مختلفة وأن تكوين بيانات التدريب يؤثر على القدرات التي تنشأ. فهم السلوك الناشئ أمر بالغ الأهمية لسلامة الذكاء الاصطناعي لأنه يعني أن النماذج قد تطور قدرات لم تكن مقصودة صراحة وقد لا تكون هذه القدرات مفهومة أو قابلة للتحكم بشكل كامل.
في الخدمات المالية
مثال واقعي
اكتشف بنك عالمي ينشر نموذج لغة كبير لتحليل المستندات أن النموذج قد طور قدرة ناشئة على اكتشاف الاحتيال المالي المحتمل. بينما تم تدريب النموذج واختباره فقط لتصنيف المستندات واستخراج المعلومات، بدأ في وضع علامات على المستندات التي تحتوي على أنماط متسقة مع الاحتيال المالي. اكتشف نظام المراقبة في البنك هذا السلوك عندما بدأ النموذج في توليد تنبيهات احتيال في مخرجاته. قام فريق الذكاء الاصطناعي في البنك بالتحقيق وأكد أن النموذج قد طور قدرة حقيقية على اكتشاف الاحتيال محققًا دقة 85٪ على مجموعة اختبار من حالات الاحتيال المعروفة. قرر البنك تطوير هذه القدرة الناشئة إلى أداة رسمية لاكتشاف الاحتيال مع التحقق والاختبار الإضافيين. قام البنك أيضًا بتحديث إطار إدارة مخاطر النماذج ليشمل اختبارًا دوريًا للقدرات الناشئة مع عملية لتقييم والموافقة على أي قدرات جديدة يتم اكتشافها.
لماذا يهم في التمويل
السلوك الناشئ هو أحد أهم وأصعب جوانب نشر نماذج الذكاء الاصطناعي الكبيرة في الخدمات المالية. احتمالية تطوير النماذج لقدرات غير متوقعة يعني أن المؤسسات المالية لا تستطيع التنبؤ بشكل كامل بما ستكون أنظمة الذكاء الاصطناعي الخاصة بها قادرة على فعله حتى بعد اختبارات مكثفة. لهذا عدم اليقين آثار كبيرة على إدارة مخاطر النماذج والامتثال التنظيمي وحوكمة الذكاء الاصطناعي. يجب على المؤسسات المالية تنفيذ أنظمة مراقبة يمكنها اكتشاف السلوكيات الناشئة وأطر حوكمة يمكنها تقييم والموافقة على القدرات الجديدة وعمليات إدارة المخاطر التي تعالج عدم اليقين المتأصل في السلوك الناشئ.
مصطلحات ذات صلة
استكشف في Finatune
أسئلة شائعة
ما هو السلوك الناشئ في الذكاء الاصطناعي؟
السلوك الناشئ يشير إلى القدرات التي تنشأ تلقائيًا في النماذج واسعة النطاق نتيجة للتوسع دون أن تكون مبرمجة بشكل صريح.
لماذا يعتبر السلوك الناشئ مهمًا لإدارة مخاطر الذكاء الاصطناعي المالي؟
مهم لأن النماذج قد تطور قدرات غير متوقعة لم يتم اختبارها أثناء التحقق.
كيف يجب على البنوك التعامل مع السلوك الناشئ في أطر مخاطر النماذج؟
يجب تنفيذ مراقبة مستمرة واختبار دوري وإجراءات تصعيد للسلوكيات غير المتوقعة.