مباشر
أين يمكنك متابعتنا

أقسام مهمة

Stories

32 خبر
  • خطة ترامب لإنهاء الحرب في غزة
  • رياضة
  • فيديوهات
  • خطة ترامب لإنهاء الحرب في غزة

    خطة ترامب لإنهاء الحرب في غزة

  • رياضة

    رياضة

  • فيديوهات

    فيديوهات

  • حرب الخليج

    حرب الخليج

  • العملية العسكرية الروسية في أوكرانيا

    العملية العسكرية الروسية في أوكرانيا

خطر جديد في عالم التقنية: كيف يُصاب الذكاء الاصطناعي بـ"التسمم"؟!

عادة ما تُرتبط كلمة "تسمم" بصحة الإنسان أو بالبيئة، غير أن هذا المصطلح بدأ في الآونة الأخيرة يتردد بشكل متزايد في سياق التكنولوجيا الرقمية.

خطر جديد في عالم التقنية: كيف يُصاب الذكاء الاصطناعي بـ"التسمم"؟!

المقصود هنا هو "تسمم" الذكاء الاصطناعي، وهو تهديد جديد وخفي قد يقوّض الثقة في الخوارزميات الذكية. وأظهرت أبحاث حديثة أن هذا الخطر واقعي؛ فقد وجد علماء من المعهد البريطاني لأمن الذكاء الاصطناعي ومعهد "آلان تورينج" وشركة Anthropic أن المتسللين قادرون — لخنق نموذج لغوي كبير مثل ChatGPT أو Claude — على إحداث تأثير خفي عبر إدخال نحو 250 مثالا  ضارا فقط ضمن ملايين الأسطر من بيانات التدريب. وقد نُشر هذا البحث في مجلة Computer Science.

ما هو تسمم الذكاء الاصطناعي؟

هو تدريب متعمَّد لشبكات عصبية على أمثلة خاطئة أو مضللة بهدف تشويه معرفتها أو سلوكها. والنتيجة أن النموذج يبدأ في ارتكاب أخطاء، أو ينفذ أوامر ضارة بطريقة ظاهرة أو سرّية.

يُميّز الخبراء نوعين رئيسيين من الهجمات:

  • هجمات مُستهدفة (باب خلفي): تهدف إلى إجبار النموذج على الاستجابة بطريقة محددة عند وجود محفز سري؛ مثلا "حقن" أمر خفي يجعل النموذج يرد بإهانة عند ظهور كلمة نادرة في الاستعلام مثل alimir123. قد تبدو الإجابة طبيعية عند الاستعلام العادي، لكنها تتحول إلى مسيئة عند إدخال المحفز. ويمكن للمهاجمين نشر هذا المحفز على مواقع أو وسائل تواصل لتفعيله لاحقا.
  • هجمات غير مباشرة (تسميم المحتوى): لا تعتمد على محفزات خفية بقدر اعتمادها على ملء بيانات التدريب بمعلومات زائفة. نظراً لاعتماد النماذج على كميات هائلة من المحتوى المتاح على الإنترنت، يستطيع المهاجم إنشاء مواقع ومصادر متعددة تروّج لمعلومة خاطئة (مثلاً: "سلطة الخضار تعالج السرطان")؛ وإذا استُخدمت هذه المصادر في التدريب، فسيبدأ النموذج بتكرار تلك الأكاذيب بصفتها حقائق.

ما مدى خطورة ذلك عمليا؟

الأدلة التجريبية تؤكد أن تسميم البيانات ليس مجرد سيناريو افتراضي: في تجربة أجريت في يناير الماضي، أدى استبدال 0.001% فقط من بيانات التدريب بمعلومات طبية مضللة إلى أن النموذج صار يُقدّم نصائح خاطئة في سياق اختبارات طبية نموذجية. هذا يبيّن قدرة الهجمات الصغيرة والمُحكمة على إحداث أضرار كبيرة تُؤثر على سلامة المخرجات وثقة المستخدمين.

المصدر: Naukatv.ru

 

 

 

 

التعليقات

أكسيوس: محمد بن سلمان أبلغ ترامب مخاوفه من شن ضربات واسعة على إيران ودعاه إلى خفض التصعيد

مرندي: ربما هذه الليلة الأخيرة من الهدوء في قطر والسعودية والكويت والبحرين والإمارات والأردن وعُمان

كواليس تعليق الضربات الأمريكية.. هل رضخ ترامب لضغوط بن سلمان بشأن أهداف إيران؟

"فارس" تنشر صورا فضائية وتقول إنها تظهر "أضرارا بمصفاة جازان في السعودية" جراء هجوم من اليمن (صورة)

السخرية تلاحق ترامب بعد تراجعه عن ضرب إيران

ترامب يعلن تعليق الهجوم على إيران وقبول اتفاق مبدئي لفتح مضيق هرمز وإنهاء التهديد النووي

أزمة جديدة قرب قناة السويس قد تدفع الناتو للتدخل

مستشار المرشد يرد على تهديدات ترامب: استهداف البنية التحتية الإيرانية سيهز أسس الهيمنة الأميركية

وزير الدفاع الإيراني: إعلان ترامب إلغاء الهجوم يندرج في حرب نفسية لن تخدعنا

السفارة الأمريكية في عمّان توصي الأمريكيين بمغادرة المنطقة

واشنطن تحذر رعاياها في الشرق الأوسط وخارجه وسفارات أمريكية في المنطقة تصدر تنبيهات جديدة

مصدر إيراني ينفي إعادة فتح مضيق هرمز

إسرائيل تتأهب.. تقنيات التخفي والصواريخ الذكية لمواجهة "أس 300"

ساويرس يعلق على تراجع ترامب عن ضرب إيران

إيران تلوح باللجوء إلى إحكام إغلاق مضيق هرمز وممرات ومضائق استراتيجية أخرى

الجيش اللبناني: إصابة 5 عسكريين في بلدة كفرا جنوبي لبنان في انفجار جسم مشبوه

الجيش الأميركي يسحب منظومات "باتريوت" من أربيل

بيان عاجل من السفارة الأمريكية في بغداد يحذر من التصعيد ويدعو للمغادرة

قيادة الأمن الداخلي السوري توضح ملابسات ما جرى في بلدة تل منين بريف دمشق

"وول ستريت جورنال" نقلا عن مصدر: ترامب أصدر أمر الهجوم على إيران

11.8 مليون برميل يوميا ومليار برميل خارج السوق.. نتيجة الضربات الإيرانية لمواقع النفط

مخاوف إسرائيلية من حصول مصر على صواريخ "إس 400" الروسية من أنقرة

مسؤول سوري: تنفيذ اندماج "قسد" مع الدولة السورية صار بمراحله الأخيرة