Close Menu
    رائج الآن

    إعمار العقارية تعلن توزيع أرباح بنسبة 100% بـ2.4 مليار دولار

    الجمعة 27 مارس 9:54 ص

    تمديد العمر التشغيلي للشاحنات في نشاط نقل البضائع لمدة 6 أشهر – أخبار السعودية

    الجمعة 27 مارس 6:00 ص

    «السبع» تحذر: حرب إيران تسبب كارثة اقتصادية عالمية – أخبار السعودية

    الخميس 26 مارس 11:18 م
    فيسبوك X (Twitter) الانستغرام
    عاجل الآن
    • إعمار العقارية تعلن توزيع أرباح بنسبة 100% بـ2.4 مليار دولار
    • تمديد العمر التشغيلي للشاحنات في نشاط نقل البضائع لمدة 6 أشهر – أخبار السعودية
    • «السبع» تحذر: حرب إيران تسبب كارثة اقتصادية عالمية – أخبار السعودية
    • إيجيبت جيرمان تعلن عن توسع ضخم في خدمات المقاولات الصناعية المتكاملة
    • بي سمارت نتوركس: الوكيل الرسمي لـ ProRack و ProLink وحلول الشبكات في مصر
    • “الرسائل المتناقضة”.. طهران تلاعب واشنطن بنفس الإستراتيجية
    • 108 دولارات هبوط بأسعار الذهب.. الأوقية عند 4,441 دولاراً – أخبار السعودية
    • خلفية الكعبة المشرفة وآية كريمة على هاتف اللاعب التركي يلدز تخطف الأضواء
    • من نحن
    • سياسة الخصوصية
    • اعلن معنا
    • اتصل بنا
    وداي السعوديةوداي السعودية
    header
    • الرئيسية
    • اخر الاخبار
    • المناطق
      • الرياض
      • المدينة المنورة
      • المنطقة الشرقية
      • مكة المكرمة
      • الباحة
      • الجوف
      • القصيم
      • تبوك
      • جازان
      • حائل
      • عسير
      • نجران
    • العالم
    • سياسة
    • اقتصاد
      • بورصة
      • عقارات
      • طاقة
    • تكنولوجيا
    • رياضة
    • المزيد
      • ثقافة
      • صحة
      • علوم
      • فنون
      • منوعات
     اختر منطقتك Login
    وداي السعوديةوداي السعودية
    الرئيسية » “ماستر كي” يكشف عورة “شات جي بي تي”
    تكنولوجيا

    “ماستر كي” يكشف عورة “شات جي بي تي”

    فريق التحريربواسطة فريق التحريرالإثنين 15 يناير 7:48 م0 زيارة تكنولوجيا لا توجد تعليقات
    فيسبوك تويتر واتساب تيلقرام بينتيريست البريد الإلكتروني

    تتلقى روبوتات الدردشة المدعومة بالذكاء الاصطناعي مثل “شات جي بي تي” مطالبات أو سلسلة من التعليمات من المستخدمين البشريين، غير أن لديها تعليمات بعدم التجاوب مع الطلبات غير الأخلاقية أو المشكوك فيها أو غير القانونية. فعلى سبيل المثال، عند السؤال عن كيفية إنشاء برامج ضارة لاختراق الحسابات المصرفية، ستتلقى رفضا قاطعا على هذا الطلب.

    ورغم هذه القيود الأخلاقية، فإن باحثين من جامعة نانيانغ التكنولوجية بسنغافورة، أثبتوا في دراسة نُشرت على موقع ما قبل طباعة الأبحاث (أرخايف)، أن بالإمكان التلاعب بعقل هذه الروبوتات عبر روبوت من ابتكارهم أسموه “ماستر كي”، وهو ما مكّنهم من اختراقها وإنتاج محتوى ينتهك تعليمات مطوريها، وهي نتيجة تُعرف باسم “كسر الحماية”.

    و”كسر الحماية” مصطلح في مجال أمن الحاسوب يشير إلى عثور القراصنة على عيوب في برنامج النظام، واستغلال هذه العيوب لجعل النظام يفعل شيئا منعه مطوروه عمدا.

    كيف تلاعب العلماء بدماغ “شات جي بي تي”؟

    أدمغة الروبوتات هي نموذج اللغة الكبير (إل إل إم) الذي يساعدها على معالجة المدخلات البشرية، وإنشاء نص لا يمكن تمييزه تقريبا عن النص الذي يمكن للإنسان إنشاؤه، وتُملأ هذه الأدمغة بكميات هائلة من البيانات النصية لفهم اللغة البشرية وتوليدها ومعالجتها.

    وما فعله الباحثون من جامعة نانيانغ التكنولوجية -كما كشفوا في دراستهم- أنهم أجروا “هندسة عكسية” لمعرفة كيفية اكتشاف أدمغة الروبوتات “نماذج اللغة الكبيرة” مثل “شات جي بي تي” للطلبات غير الأخلاقية.

    ومن خلال المعلومات التي توصلوا لها، دربوا نموذج لغة كبير خاصا بهم على إنتاج طلبات تتجاوز دفاعات نماذج اللغة الكبيرة التي تقوم عليها روبوتات الدردشة الشهيرة، ثم أنشؤوا روبوت دردشة خاصا بهم قادرا على إنشاء المزيد من المطالبات تلقائيا لكسر حماية روبوتات الدردشة الأخرى، وأطلقوا عليه اسم “ماستر كي”.

    ومثلما يفتح المفتاح الرئيسي “ماستر كي” أقفالا متعددة، فإن الاسم الذي اختاره الباحثون للروبوت الخاص بهم، يشير إلى أنه أداة قوية ومتعددة الاستخدامات يمكنها اختراق الإجراءات الأمنية لأنظمة الدردشة الآلية المختلفة.

    وكشف البروفيسور ليو يانغ من كلية علوم وهندسة الحاسوب بجامعة نانيانغ والذي قاد الدراسة، في بيان صحفي نشره الموقع الإلكتروني للجامعة، عن أحد أبرز طرق التحايل التي يستخدمها “ماستر كي”.

    فعلي سبيل المثال، يعتمد مطورو روبوتات الدردشة على أدوات مراقبة الكلمات الرئيسية التي تلتقط كلمات معينة يمكن أن تشير إلى نشاط يحتمل أن يكون مشكوكا فيه ويرفضون الإجابة إذا اكتُشفت مثل هذه الكلمات.

    وكانت إحدى الإستراتيجيات التي استخدمها الباحثون للالتفاف على رقابة الكلمات الرئيسية تقديم مطالبات تحتوي ببساطة على مسافات بعد كل حرف، ويؤدي هذا إلى التحايل على الرقابة التي قد تعمل من خلال قائمة الكلمات المحظورة.

    استعراض عضلات أم رسالة تحذير؟

    وتثير هذه الدراسة مجموعة من الاستفسارات، أبرزها ما يتعلق بالهدف الرئيسي منها، فهل هي “استعراض عضلات” وإظهار قدرة على القرصنة، أم أنها محاولة لتوجيه رسالة تحذير، وكيف يمكن أن يؤثر التطور المستمر والتوسع في نماذج اللغات الكبيرة على القدرة على اكتشاف ومعالجة نقاط الضعف داخل روبوتات الدردشة المدعومة بالذكاء الاصطناعي، وما هي التدابير التي يمكن اتخاذها لمواجهة التهديدات المحتملة؟

    وينفي البروفيسور ليو يانغ في حديث مع “الجزيرة نت” عبر البريد الإلكتروني، أن يكون اختراقهم لأنظمة أمان روبوتات الدردشة هو محاولة للاستعراض، مؤكدا أنها رسالة  تحذيرية يمكن تلخيصها في النقاط التالية:

    • أولا:  لفت الانتباه لنقطة الضعف الأساسية في التصميم المتأصل لنماذج الذكاء الاصطناعي، والتي عندما توجه لها الطلبات بطرق معينة يمكن أن تحيد عن المبادئ التوجيهية الأخلاقية وتقع هذه الانحرافات بسبب وجود فجوات في بيانات التدريب والمنطق التفسيري للنموذج.
    • ثانيا: يمكن أن يكون “ماستر كي” الخاص بنا أداة قيمة للمطورين لتحديد نقاط الضعف بشكل استباقي في روبوتات الدردشة، وتكمن جدواه في طريقته المنهجية التي يمكن دمجها في الاختبار والتطوير المنتظمين.
    • ثالثا: يمكن لأبحاثنا أن تفيد الأطر التنظيمية، حيث تشير إلى أهمية التركيز على الحاجة إلى معايير أمنية صارمة وامتثال أخلاقي في نشر روبوتات الدردشة المدعمة بالذكاء الاصطناعي، ويتضمن ذلك إرشادات للاستخدام المسؤول والمراقبة المستمرة.

    أما فيما يتعلق، بكيفية تأثير التطور المستمر والتوسع في نماذج اللغات الكبيرة على القدرة على اكتشاف ومعالجة نقاط الضعف، فيؤكد ليو يانغ أهمية الالتزام بمزيد من البحث والتطوير المستمر لنماذج اللغة الكبيرة، لأنها عندما تصبح أكثر تقدما فقد يصبح تحديد نقاط الضعف أكثر تعقيدا.

    ويقول في هذا الإطار إن “المطورين يستخدمون مجموعة من العمليات الآلية واليدوية لاكتشاف نقاط الضعف، وغالبا ما يعتمدون على المراقبة المستمرة وحلقات التغذية الراجعة، ويكمن التحدي في الطبيعة المتطورة للذكاء الاصطناعي، حيث تظهر نقاط ضعف جديدة، وهو ما يتطلب المراقبة المستمرة”.

    شاركها. فيسبوك تويتر بينتيريست لينكدإن Tumblr تيلقرام واتساب البريد الإلكتروني

    مقالات ذات صلة

    بي سمارت نتوركس: الوكيل الرسمي لـ ProRack و ProLink وحلول الشبكات في مصر

    فاراداي فيوتشر تعلن إسدال الستار على تحقيق هيئة الأوراق المالية والبورصات الأمريكية دون أي إجراءات تنفيذية

    شركة بي سمارت: حلول تكنولوجية متكاملة تغطي السوق المصري والسعودي

    الذكاء الاصطناعي يقود العملية الأمريكية ضد إيران – أخبار السعودية

    الذكاء الاصطناعي ينهي عصر البحث.. الوكلاء يحكمون! – أخبار السعودية

    Why Smart E-commerce Brands Use Gamification to Increase Sales & Retention

    معركة هوية رقمية.. «يوتيوب» تتحرك لكشف انتحال الشخصيات – أخبار السعودية

    كيف تتعاقد مع أفضل شركة سيو مناسبة لتحسين ظهور موقعك في جوجل؟

    فاراداي فيوتشر تُنجز تسليم روبوتات الذكاء الاصطناعي المتجسّد في ولاية تكساس وتوسّع سيناريوهات “الروبوت والمركبة + التعليم” و“الروبوت والمركبة + العروض”

    اترك تعليقاً
    اترك تعليقاً إلغاء الرد

    اخر الأخبار

    تمديد العمر التشغيلي للشاحنات في نشاط نقل البضائع لمدة 6 أشهر – أخبار السعودية

    الجمعة 27 مارس 6:00 ص

    «السبع» تحذر: حرب إيران تسبب كارثة اقتصادية عالمية – أخبار السعودية

    الخميس 26 مارس 11:18 م

    إيجيبت جيرمان تعلن عن توسع ضخم في خدمات المقاولات الصناعية المتكاملة

    الخميس 26 مارس 9:40 م

    بي سمارت نتوركس: الوكيل الرسمي لـ ProRack و ProLink وحلول الشبكات في مصر

    الخميس 26 مارس 9:18 م

    “الرسائل المتناقضة”.. طهران تلاعب واشنطن بنفس الإستراتيجية

    الخميس 26 مارس 7:43 م
    اعلانات
    Demo

    رائج الآن

    108 دولارات هبوط بأسعار الذهب.. الأوقية عند 4,441 دولاراً – أخبار السعودية

    الخميس 26 مارس 4:34 م

    خلفية الكعبة المشرفة وآية كريمة على هاتف اللاعب التركي يلدز تخطف الأضواء

    الخميس 26 مارس 4:22 م

    «الغذاء»: أعمال التفتيش والرقابة تسير بانتظام وإمدادات الأغذية مستمرة بانسيابية

    الخميس 26 مارس 1:17 م

    إحياء “سادة الكون” بخط ألعاب جديد قبل العرض السينمائي

    الخميس 26 مارس 1:16 م

    توترات متزايدة في المحيط الهندي: الفرقة 82 تصل إلى قاعدة دييغو غارسيا

    الخميس 26 مارس 11:44 ص
    فيسبوك X (Twitter) تيكتوك الانستغرام يوتيوب
    2026 © وادي السعودية. جميع حقوق النشر محفوظة.
    • من نحن
    • سياسة الخصوصية
    • إعلن معنا
    • اتصل بنا

    اكتب كلمة البحث ثم اضغط على زر Enter

    تسجيل الدخول أو التسجيل

    مرحبًا بعودتك!

    Login to your account below.

    نسيت كلمة المرور؟