مباشر
أين يمكنك متابعتنا

أقسام مهمة

Stories

39 خبر
  • إسرائيل تواصل عملياتها في لبنان
  • مونديال 2026
  • اتفاق أمريكي إيراني لوقف الحرب على جميع الجبهات
  • إسرائيل تواصل عملياتها في لبنان

    إسرائيل تواصل عملياتها في لبنان

  • مونديال 2026

    مونديال 2026

  • اتفاق أمريكي إيراني لوقف الحرب على جميع الجبهات

    اتفاق أمريكي إيراني لوقف الحرب على جميع الجبهات

  • العملية العسكرية الروسية في أوكرانيا

    العملية العسكرية الروسية في أوكرانيا

  • فيديوهات

    فيديوهات

خطر جديد في عالم التقنية: كيف يُصاب الذكاء الاصطناعي بـ"التسمم"؟!

عادة ما تُرتبط كلمة "تسمم" بصحة الإنسان أو بالبيئة، غير أن هذا المصطلح بدأ في الآونة الأخيرة يتردد بشكل متزايد في سياق التكنولوجيا الرقمية.

خطر جديد في عالم التقنية: كيف يُصاب الذكاء الاصطناعي بـ"التسمم"؟!

المقصود هنا هو "تسمم" الذكاء الاصطناعي، وهو تهديد جديد وخفي قد يقوّض الثقة في الخوارزميات الذكية. وأظهرت أبحاث حديثة أن هذا الخطر واقعي؛ فقد وجد علماء من المعهد البريطاني لأمن الذكاء الاصطناعي ومعهد "آلان تورينج" وشركة Anthropic أن المتسللين قادرون — لخنق نموذج لغوي كبير مثل ChatGPT أو Claude — على إحداث تأثير خفي عبر إدخال نحو 250 مثالا  ضارا فقط ضمن ملايين الأسطر من بيانات التدريب. وقد نُشر هذا البحث في مجلة Computer Science.

ما هو تسمم الذكاء الاصطناعي؟

هو تدريب متعمَّد لشبكات عصبية على أمثلة خاطئة أو مضللة بهدف تشويه معرفتها أو سلوكها. والنتيجة أن النموذج يبدأ في ارتكاب أخطاء، أو ينفذ أوامر ضارة بطريقة ظاهرة أو سرّية.

يُميّز الخبراء نوعين رئيسيين من الهجمات:

  • هجمات مُستهدفة (باب خلفي): تهدف إلى إجبار النموذج على الاستجابة بطريقة محددة عند وجود محفز سري؛ مثلا "حقن" أمر خفي يجعل النموذج يرد بإهانة عند ظهور كلمة نادرة في الاستعلام مثل alimir123. قد تبدو الإجابة طبيعية عند الاستعلام العادي، لكنها تتحول إلى مسيئة عند إدخال المحفز. ويمكن للمهاجمين نشر هذا المحفز على مواقع أو وسائل تواصل لتفعيله لاحقا.
  • هجمات غير مباشرة (تسميم المحتوى): لا تعتمد على محفزات خفية بقدر اعتمادها على ملء بيانات التدريب بمعلومات زائفة. نظراً لاعتماد النماذج على كميات هائلة من المحتوى المتاح على الإنترنت، يستطيع المهاجم إنشاء مواقع ومصادر متعددة تروّج لمعلومة خاطئة (مثلاً: "سلطة الخضار تعالج السرطان")؛ وإذا استُخدمت هذه المصادر في التدريب، فسيبدأ النموذج بتكرار تلك الأكاذيب بصفتها حقائق.

ما مدى خطورة ذلك عمليا؟

الأدلة التجريبية تؤكد أن تسميم البيانات ليس مجرد سيناريو افتراضي: في تجربة أجريت في يناير الماضي، أدى استبدال 0.001% فقط من بيانات التدريب بمعلومات طبية مضللة إلى أن النموذج صار يُقدّم نصائح خاطئة في سياق اختبارات طبية نموذجية. هذا يبيّن قدرة الهجمات الصغيرة والمُحكمة على إحداث أضرار كبيرة تُؤثر على سلامة المخرجات وثقة المستخدمين.

المصدر: Naukatv.ru

 

 

 

 

التعليقات

"قبل بزوغ الفجر".. الحرس الثوري الإيراني يتوعد إسرائيل برد مزلزل بعد قصف الضاحية الجنوبية لبيروت

المجلس الأعلى للأمن القومي الإيراني يصدر "بيانا للشعب" عقب إعلان الاتفاق مع واشنطن

علي أكبر ولايتي: ساعة الصفر حانت والمنصات تأخذ وضعية الإطلاق

مصدر إيراني مطلع: تنازل استثنائي انتزعه قاليباف من ترامب في اللحظة الأخيرة

التلفزيون الإيراني يعلن رسميا التوصل لاتفاق مع الولايات المتحدة (فيديو)

"القناة 12" العبرية: ترامب يتحدث عن نتنياهو بطريقة لم يسبق لأي زعيم أن تحدث بها عنه علنا من قبل

بيان مشترك لأربع دول أوروبية تؤكد استعدادها لرفع العقوبات عن إيران

بعد 3 سنوات على هجوم "محمد صلاح".. الجيش الإسرائيلي يعيد حساباته تجاه التهديدات القادمة من مصر

بعد انفجار ترامب غضبا في وجه نتنياهو.. بن غفير يتحدى ويوجه رسالة لسيده ورئيسه

"النووي خارج النقاش".. مستشار رئيس فريق التفاوض يكشف تفاصيل مذكرة التفاهم المرتقب توقيعها

تقرير عبري: مصر أصبحت اللاعب الإقليمي الأبرز في حرب إيران.. والقاهرة جنت مكاسب دبلوماسية غير متوقعة

"سنرد قريبا جدا".. إيران ترفض عرضا قدمه ترامب مقابل ضبط النفس وعدم مهاجمة إسرائيل

وكالة "فارس" تسرد تفاصيل تدمير السرب 157 الإسرائيلي في قاعدة رامات ديفيد

ترامب يعلن التوصل إلى اتفاق سلام مع إيران والرفع الفوري للحصار البحري وفتح مضيق هرمز بالكامل

نائب وزير الخارجية الإيراني يكشف تفاصيل محادثات الـ60 يوما مع واشنطن

أمين مجلس الأمن القومي الإيراني: لبنان حياتنا ورد جند الإسلام قادم

قرقاش: الاتفاق الأمريكي - الإيراني قد يطوي صفحة الحرب في المنطقة

الرئيس الإيراني:‏ وصف فريق التفاوض بالخائن أمر مؤسف

رئيس الأركان الإسرائيلي الأسبق: اليد العليا لإيران والاتفاق يرشحها للحصول على القنبلة النووية

ترامب: الهجوم على بيروت ما كان ينبغي أن يحدث ونحن على وشك التوصل إلى اتفاق سلام مع إيران

باكستان: أمريكا وإيران اتفقتا على وقف فوري ونهائي لإطلاق النار على كل الجبهات بما في ذلك لبنان

بزشكيان: قرار الحرب والتفاوض يعودان إلى قائد الثورة والمجلس الأعلى للأمن القومي والكل سيلتزم

ترامب يشيد بدور بوتين وشي في تسهيل التوصل إلى تسوية مع إيران

الأصول المجمدة والمضيق والملف النووي.. تفاصيل تتكشف تباعا حول مسودة اتفاق واشنطن وطهران

زيلينسكي يسرد في هستيريا عدد الضربات الروسية الضخمة في الأسبوع الماضي

تستبعد تركيا.. أمريكا وإسرائيل واليونان وقبرص توقع اتفاقية لإنشاء مركز طاقة جديد في شرق المتوسط

"يديعوت أحرونوت": تقديرات إسرائيلية بأن إيران ستمتنع عن مهاجمة إسرائيل مقابل مزايا