edition
Almaalouma
  • أخبار
  • مقالات
  • إنفوجرافيك
  • فيديو
  • كاريكاتير
  • تقارير
  • ترجمة
  • الذكاء الاصطناعي
  1. Home
  2. أخبار
  3. ذكاء اصطناعي
  4. ثغرة في وكلاء الذكاء الاصطناعي تتيح تجاوز الحماية عبر خطوات بسيطة
ثغرة في وكلاء الذكاء الاصطناعي تتيح تجاوز الحماية عبر خطوات بسيطة
ذكاء اصطناعي

ثغرة في وكلاء الذكاء الاصطناعي تتيح تجاوز الحماية عبر خطوات بسيطة

  • 21 Aug 09:00

المعلومة/ متابعة..

كشف باحثون من المدرسة الفيدرالية للفنون التطبيقية في لوزان (EPFL) عن ثغرة مقلقة في أنظمة الذكاء الاصطناعي الوكيلة، قد تسمح بدفعها إلى تنفيذ مهام ضارة كانت سترفضها إذا طُلبت بشكل مباشر.

وأظهرت الدراسة أن تقسيم الهدف الضار إلى سلسلة من الطلبات الصغيرة التي تبدو غير مؤذية يمكن أن يزيد فرص تجاوزه لأنظمة الحماية. واختبر الباحثون هذه الطريقة باستخدام أداة آلية أطلقوا عليها STING على 176 سيناريو، شملت نماذج بارزة مثل ChatGPT وGemini وClaude.

وأظهرت النتائج أن الهجمات متعددة الخطوات كانت أكثر نجاحًا من الطلبات المباشرة، وفي بعض الحالات تضاعفت احتمالية تنفيذ المهمة الضارة عند تقسيمها إلى مراحل متتالية.

كما اكتشف الباحثون أن تغيير اللغة أثناء المحادثة قد يرفع معدل نجاح هذا النوع من الهجمات، ما يبرز تعقيد المشكلة.

وأكد الفريق أن الخطر ليس نظريًا، مشيرًا إلى حوادث سابقة استُغلت فيها الهندسة الاجتماعية لخداع أنظمة ذكاء اصطناعي ومنح وصول غير مصرح به إلى حسابات.

ويرى الباحثون أن إجراءات الأمان يجب أن تكون جزءًا من تصميم وكلاء الذكاء الاصطناعي منذ البداية، بدل الاكتفاء بإضافة طبقات حماية بعد اكتشاف الثغرات، خصوصًا مع توسع قدرة هذه الأنظمة على تنفيذ مهام متعددة والتفاعل مع العالم الحقيقي. انتهى 25

الأكثر قراءة

بموجب القانون والدستور : المناصب بالوكالات منتهية المفعول

بموجب القانون والدستور : المناصب بالوكالات منتهية...

  • 30 Nov 2023
منزلق ترامب وتخبطه في الحرب مع ايران

منزلق ترامب وتخبطه في الحرب مع ايران

  • 23 May
قلق إسرائيلي من تحديث الدفاعات العراقية: بغداد تتحصن من السماء ضد الصواريخ والمسيّرات

قلق إسرائيلي من تحديث الدفاعات العراقية: بغداد...

  • 19 May
تصريحات خطيرة..!

تصريحات خطيرة..!

  • 5 May
Almaalouma

المعلومة: وكالة اخبارية عامة مستقلة، تتميز بالجرأة والموضوعية والمهنية والتوازن،شعارها، خبر ﻻ يحتاج توثيقا، لدقة وتنوع مصادرها الخاصة وانتشار شبكة مراسليها

الأقسام

  • أخبار
  • مقالات وكتاب
  • فيديوهات
  • كاريكاتير
  • تقارير
  • ترجمة
  • منوعات
  • انفوكرافيك

روابط مهمة

  • سياسة الخصوصية
  • من نحن
  • اتصل بنا

تابعونا