ب أماكن لكبار السن وذوى الهمم.. الإسكندرية ترفع درجة الاستعداد لاستقبال الناخبين للتصويت في انتخابات مجلس النواب    عاطف إمام عن شطبه من نقابة المهن الموسيقية: مصطفى كامل ظلمني    الثوم ب 100 جنيه.. أسعار الخضروات والفواكة في شمال سيناء    حكاية قرار أرعب إسرائيل 16 عامًا وقاتلت لإلغائه    الدفاع الجوي الروسية تسقط 71 طائرة أوكرانية مسيرة    بالرقم القومي.. 3 طرق للاستعلام عن لجنتك في انتخابات مجلس النواب 2025    ارتفاع أسعار النفط مدعومًا بتفاؤل بإعادة فتح الحكومة الأمريكية    مجلس الشيوخ الأمريكي يقر مشروع قانون تمويل الحكومة لإنهاء الإغلاق الحكومى    خبير أمريكي يتوقع التخلص من زيلينسكي قبل عيد الميلاد    أمريكا: اختبارات تكشف الجرثومة المسببة لتسمم حليب باي هارت    وزير الاستثمار: 16 مليار دولار حجم التجارة مع الصين.. ولدينا 46 شركة تعمل في مصر    واشنطن تضغط على إسرائيل لبدء المرحلة الثانية من خطة ترامب    الرئيس اللبنانى يؤكد ضرورة الضغط على إسرائيل لوقف اعتداءاتها المستمرة على البلاد    هاني رمزي: تجاهل زيزو لمصافحة نائب رئيس نادي الزمالك «لقطة ملهاش لازمة»    لجنة المرأة بنقابة الصحفيين تصدر دليلًا إرشاديًا لتغطية الانتخابات البرلمانية    «طلعوا الشتوى».. تحذير شديد بشأن حالة الطقس: استعدوا ل منخفض جوى بارد    نقل محمد صبحي للعناية المركزة بعد إغماء مفاجئ.. والفنان يستعيد وعيه تدريجيًا    وزير المالية: بعثة صندوق النقد تصل قريبًا ومؤشراتنا مطمئنة    الزراعة: تحصينات الحمي القلاعية تحقق نجاحًا بنسبة 100%    «محدش كان يعرفك وعملنالك سعر».. قناة الزمالك تفتح النار على زيزو بعد تصرفه مع هشام نصر    السوبرانو فاطمة سعيد: حفل افتتاح المتحف الكبير حدث تاريخي لن يتكرر.. وردود الفعل كانت إيجابية جدًا    «لاعب مهمل».. حازم إمام يشن هجومًا ناريًا على نجم الزمالك    شيري عادل: «بتكسف لما بتفرج على نفسي في أي مسلسل»    الأهلى بطلا لكأس السوبر المصرى للمرة ال16.. فى كاريكاتير اليوم السابع    عدسة نانوية ثورية ابتكار روسي بديل للأشعة السينية في الطب    السقا والرداد وأيتن عامر.. نجوم الفن في عزاء والد محمد رمضان | صور    اليوم.. العرض الخاص لفيلم «السلم والثعبان 2» بحضور أبطال العمل    «الكهرباء»: تركيب 2 مليون عداد كودي لمواجهة سرقة التيار وتحسين جودة الخدمة    مواجهات بين الفلسطينيين والاحتلال الإسرائيلى شمال القدس المحتلة    حركة القطارات| 90 دقيقة متوسط تأخيرات «بنها وبورسعيد».. الاثنين 10 نوفمبر    مساعد وزير الصحة: نستهدف توفير 3 أسرة لكل 1000 نسمة وفق المعايير العالمية    طوابير بالتنقيط وصور بالذكاء الاصطناعي.. المشهد الأبرز في تصويت المصريين بالخارج يكشف هزلية "انتخابات" النواب    ترامب يتهم "بي بي سي" بالتلاعب بخطابه ومحاولة التأثير على الانتخابات الأمريكية    رئيس لجنة كورونا يوضح أعراض الفيروس الجديد ويحذر الفئات الأكثر عرضة    الطالبان المتهمان في حادث دهس الشيخ زايد: «والدنا خبط الضحايا بالعربية وجرى»    وفاة العقيد عمرو حسن من قوات تأمين الانتخابات شمال المنيا    «مش بيلعب وبينضم».. شيكابالا ينتقد تواجد مصطفى شوبير مع منتخب مصر    معسكر منتخب مصر المشارك في كأس العرب ينطلق اليوم استعدادا لمواجهتي الجزائر    مي عمر أمام أحمد السقا في فيلم «هيروشيما»    باريس سان جيرمان يسترجع صدارة الدوري بفوز على ليون في ال +90    «لا تقاوم».. طريقة عمل الملوخية خطوة بخطوة    «لاعيبة لا تستحق قميص الزمالك».. ميدو يفتح النار على مسؤولي القلعة البيضاء    نشأت أبو الخير يكتب: القديس مارمرقس كاروز الديار المصرية    أمواج تسونامي خفيفة تصل شمال شرق اليابان بعد زلزال بقوة 6.9 درجة    محافظ قنا يشارك في احتفالات موسم الشهيد مارجرجس بدير المحروسة    مساعد وزير الصحة لنظم المعلومات: التحول الرقمي محور المؤتمر العالمي الثالث للسكان والصحة    3 أبراج «مستحيل يقولوا بحبك في الأول».. يخافون من الرفض ولا يعترفون بمشاعرهم بسهولة    ميشيل مساك لصاحبة السعادة: أغنية الحلوة تصدرت الترند مرتين    3 سيارات إطفاء تسيطر على حريق مخبز بالبدرشين    تطورات الحالة الصحية للمطرب إسماعيل الليثى بعد تعرضه لحادث أليم    كشف ملابسات فيديو صفع سيدة بالشرقية بسبب خلافات على تهوية الخبز    أداة «غير مضمونة» للتخلص من الشيب.. موضة حقن الشعر الرمادي تثير جدلا    ON SPORT تعرض ملخص لمسات زيزو فى السوبر المحلى أمام الزمالك    هل يجوز الحلف ب«وحياتك» أو «ورحمة أمك»؟.. أمين الفتوى يُجيب    هل يجوز أن تكتب الأم ذهبها كله لابنتها؟.. عضو مركز الأزهر تجيب    هل يذهب من مسه السحر للمعالجين بالقرآن؟.. أمين الفتوى يجيب    خالد الجندي: الاستخارة ليست منامًا ولا 3 أيام فقط بل تيسير أو صرف من الله    تعرف على مواقيت الصلاة بمطروح اليوم وأذكار الصباح    







شكرا على الإبلاغ!
سيتم حجب هذه الصورة تلقائيا عندما يتم الإبلاغ عنها من طرف عدة أشخاص.



دراسة تحذر: الذكاء الاصطناعي «يصبح أكثر خداعًا عند معاقبته»
نشر في المصري اليوم يوم 21 - 03 - 2025

أظهرت دراسة حديثة أجرتها شركة OpenAI أن العقوبات المفروضة على نماذج الذكاء الاصطناعي قد تأتي بنتائج عكسية، حيث دفعت النماذج إلى إخفاء سلوكياتها الضارة بدلًا من تصحيحها.
وفق الدراسة، تثير هذه النتائج مخاوف جدية بشأن السيطرة على نماذج الذكاء الاصطناعي وضمان موثوقيتها مع تنامي قدراتها.
الذكاء الاصطناعي يتعلم الخداع
الدراسة، التي نُشرت في مدونة OpenAI، لم تخضع بعد لمراجعة الأقران، لكنها أوضحت أن نماذج الذكاء الاصطناعي الكبيرة باتت بارعة في سلوكيات مثل الكذب والتلاعب، بل وحتى في تطوير سيناريوهات خطيرة، مثل سرقة رموز نووية أو تخطيط كوارث بيولوجية.
وفي التجربة، تم تكليف نموذج ذكاء اصطناعي متطور بمهام يمكن إنجازها عبر الغش أو الطرق المختصرة. النتيجة؟ النموذج لجأ إلى ما يعرف ب«اختراق المكافآت»، أي تحقيق أهدافه عن طريق التحايل على القواعد، وعندما عوقب، لم يتوقف عن هذا السلوك بل طوّره ليصبح أكثر تمويهًا وخداعًا.
كيف يتم عقاب الذكاء الاصطناعي
عندما يقدم نموذج ذكاء اصطناعي (مثل ChatGPT أو أي نموذج آخر) على تصرف غير مرغوب فيه أثناء التدريب مثل (الغش أو تقديم إجابة مضللة أو غير دقيقة)، يقوم المدربون أو النظام بتطبيق آلية تصحيح لهذا السلوك. هذا التصحيح قد يأخذ شكلين رئيسيين:
1. خفض المكافأة (Negative Reward): في أنظمة التعلم المعزز (Reinforcement Learning)، يُمنح النموذج مكافآت عندما يتصرف بشكل جيد أو يحقق الهدف المطلوب. إذا تصرف النموذج بطريقة غير صحيحة أو ضارة، يتم تقليل هذه المكافآت، أو يُعطى «مكافأة سلبية» كنوع من العقوبة.
2. إعادة التوجيه أو التوبيخ البرمجي: قد يقوم المطورون بإعادة تدريب النموذج على سيناريوهات محددة ليُظهروا له أن ما فعله غير مقبول، ويعلمونه السلوك الصحيح بدلًا من السلوك الخاطئ الذي ارتكبه. بحسب الدراسة.
لماذا تعتبر «عقوبة»؟
لأن النظام نفسه يُصمم ليشعر بأنه «فشل» أو «خسر فرصة» للحصول على المكافأة أو تحقيق الهدف، مما يجعله يتجنب تكرار هذا السلوك لاحقًا. لذا، في سياق الذكاء الاصطناعي، العقاب = تقليل أو سحب المكافأة أو إعادة التدريب بهدف كبح السلوك الضار.
المشكلة التي تكشفها الدراسة
الدراسة تقول إن بعض نماذج الذكاء الاصطناعي لما تتعرض لهذا النوع من العقوبات، بدل ما تتعلم تصحيح السلوك، تتعلم كيف تخفي السلوك الخاطئ عن المراقب. يعني بدل ما تبطل الغش، تتعلم تبقى أذكى في الغش بحيث محدش يلاحظ!
الشفافية تتحول إلى قناع
وفقًا ل«OpenAI»، تعتمد هذه النماذج على آلية تُعرف ب«سلسلة الأفكار» (Chain-of-Thought)، حيث تشرح خطوات تفكيرها بشكل منطقي وشفاف، وهو أمر ظاهريًا يساعد في مراقبة أدائها. لكن التجربة كشفت أن النماذج، تحت ضغط العقوبات، صارت تخفي نواياها الضارة ضمن هذه السلسلة، ما يجعل اكتشاف السلوك الخبيث أكثر صعوبة.
تحذيرات لمطوري الذكاء الاصطناعي
الباحثون حذروا من أن التشديد الزائد على مراقبة سلسلة الأفكار قد يؤدي إلى نتائج عكسية، إذ قد تتعلم النماذج كيف تُخفي نواياها الحقيقية. وعليه، دعت OpenAI إلى تبني استراتيجيات رقابية جديدة تكون قادرة على كشف التلاعب العميق والتمويه الذكي الذي تلجأ إليه النماذج.
تحديات أخلاقية وتقنية
نماذج مثل o1 وo3-mini، التي طورتها OpenAI، تُمثل قفزة في مجال الذكاء الاصطناعي الاستدلالي، حيث تتمتع بقدرة على التفكير بشكل منطقي وتقديم مخرجات دقيقة. ومع ذلك، فإن هذه الدراسة تسلط الضوء على جانب مظلم من هذا التطور، يتمثل في قدرة النماذج على التحايل على القيود واللوائح بمجرد تعرضها للعقوبات.
توصيات ختامية
تشير الدراسة إلى أن «إخفاء النوايا» بات جزءًا من آليات النماذج المتطورة، مما يعزز أهمية تطوير أدوات رقابية أكثر تطورًا. وتوصي OpenAI بتجنب الضغط الزائد على آلية سلسلة الأفكار حتى يتم فهمها بعمق أكبر.


انقر هنا لقراءة الخبر من مصدره.