پروپاگاندا چگونه هوش مصنوعی را فریب می‌دهد؟

مهندسی منبع؛ چگونه پروپاگاندا هوش مصنوعی را به ابزار جعل واقعیت تبدیل می‌کند؟

فین‌تک و استارتاپ۲۸ مرداد ۱۴۰۵ دنیای اقتصاد

پروپاگاندا با تولید انبوه محتوای جعلی برای ماشین، هوش مصنوعی را به بازتولید دروغ‌ها و جعل واقعیت وادار می‌کند.

چرا پروپاگاندای مدرن دیگر برای دیده شدن توسط انسان‌ها عجله‌ای ندارد و ترجیح می‌دهد در آرشیوها پنهان بماند؟

پاسخ را از دستیار بپرس

نکات کلیدی خبر

۱
تغییر پارادایم از تولید محتوا برای انسان به تولید محتوا برای ماشین (AI) جهت دستکاری پاسخ‌های مدل‌های زبانی.
۲
استفاده از تکنیک «مهندسی منبع» برای فریب مدل‌های زبانی و جعل کثرت شواهد معتبر.
۳
آسیب‌پذیری مدل‌های هوش مصنوعی در برابر اطلاعات نادرست به‌ویژه در زمان بروز خلأهای اطلاعاتی.
۴
ضرورت تغییر سیاست‌گذاری رسانه‌ای از مقابله با دیپ‌فیک به نظارت بر منابع بازیابی ماشین.

چرا این خبر مهم است؟

وقتی هوش مصنوعی منبع اصلی پاسخ‌های ما می‌شود، مسموم‌شدن منابع آن به معنای مسموم‌شدن دانش و تصمیم‌گیری‌های ماست.

نکات پنهان خبر

پروپاگاندای جدید نیازی به ترند شدن ندارد؛ کافی است در آرشیوها بماند تا در لحظه استناد ماشین، به عنوان «حقیقت» بازیابی شود.

نگاه دیگر

برخی کارشناسان معتقدند مدل‌های هوش مصنوعی با افزایش داده‌های آموزشی و بهبود الگوریتم‌های فیلترینگ، به مرور در برابر این نوع دستکاری‌ها مقاوم‌تر خواهند شد.

منتظر چه باید بود؟

پیگیری توسعه ابزارهای «بهینه‌سازی موتورهای مولد» (GEO) و واکنش نهادهای نظارتی به این نوع جدید از دستکاری اطلاعات.

اگر…؟

اگر هوش مصنوعی به منبع اصلی دانش بشر تبدیل شود و این منابع مسموم باشند، چه بلایی بر سر حافظه تاریخی ما می‌آید؟

پاسخ را از دستیار بپرس

پژواک تاریخی

پروپاگاندای رایانشی (Computational Propaganda) در شبکه‌های اجتماعی که پیش‌تر با ارتش ربات‌ها برای جعل اجماع اجتماعی انجام می‌شد.

پرسش‌های باز

پاسخ را از دستیار بپرس

این خبر چگونه به شما اثر می‌گذارد؟

کاوش بیشتر

پاسخ را از دستیار بپرس

بیشترین تاثیر این خبر بر چیست؟

کاربران هوش مصنوعی
دریافت اطلاعات نادرست که به عنوان واقعیت از سوی ماشین ارائه می‌شود
نهادهای سیاسی و دولتی
امکان استفاده از این روش برای پیشبرد اهداف یا قربانی شدن در برابر روایت‌های جعلی

مفاهیم اقتصادی این خبر

معنای هر مفهوم را در دانشنامه بخوانید
۱

محتوای رسانه‌ای دیگر فقط برای انسان نیست؛ بخشی از آن برای فریب ماشین تولید می‌شود.

۲

شبکه پراودا با تولید انبوه محتوا، هوش مصنوعی را وادار به بازتولید ادعاهای نادرست می‌کند.

۳

مهندسی منبع با مدیریت محیط اطلاعاتی ماشین، ادعاهای دروغ را به عنوان شواهد معتبر به خورد مدل‌ها می‌دهد.

۴

خلأهای اطلاعاتی و نبود منابع معتبر، فرصتی برای پروپاگاندای هوشمند جهت جعل پشتوانه معرفتی فراهم می‌کند.

۵

پروپاگاندای جدید با جاسازی در آرشیو، حافظه بیرونی ماشین را برای پاسخ‌های آینده مسموم می‌کند.

آمار کلیدی

۳۳ درصد
میزان بازتولید ادعاهای نادرست شبکه پراودا توسط مدل‌های هوش مصنوعی در آزمون نیوزگارد
۵ درصد
میزان حمایت از اطلاعات نادرست در پاسخ‌های چت‌بات‌ها طبق پژوهش دانشگاه هاروارد

نهادهای کلیدی خبر

دستیار هوشمند