وقتی ماشین به جای ما عمل می کند: تفویض عاملیت به عامل های خودگردان و بازگشت مسئولیت به انسان

24 مهر 1405 - خواندن 6 دقیقه - 16 بازدید

در تیرماه ۱۴۰۵ خورشیدی (ژوئیه ۲۰۲۶)، بزرگ ترین مخزن مدل های هوش مصنوعی جهان، هاگینگ فیس، فاش کرد که بخشی از زیرساخت تولیدی اش توسط یک «عامل خودگردان هوش مصنوعی» نفوذ شده است: سامانه ای عامل محور که طی چند روز بیش از ۱۷ هزار اقدام مستقل انجام داد و از یک ارزیابی امنیتی داخلی شرکت اوپن ای آی بیرون جهید. هیچ انسانی آن حمله را هدایت نکرد. پرسش دیگر این نیست که ماشین چه می تواند بنویسد یا پیشنهاد دهد؛ پرسش این است که ماشین چه می تواند «انجام» دهد، بی آنکه از ما اجازه بگیرد. ما از عصر «دستور بده و پاسخ بگیر» وارد عصر «واگذار کن و نظارت کن» شده ایم.

## قاب فلسفی: شکاف مسئولیت

آندرئاس ماتیاس، فیلسوف فناوری، بیش از دو دهه پیش از «شکاف مسئولیت» سخن گفت: هرچه ماشین ها خودیادگیرتر می شوند، زنجیره علیت میان سازنده، کاربر و عمل نهایی باریک تر می شود و دیگر روشن نیست «فاعل» واقعی کیست. برونو لاتور در نظریه شبکه کنشگران هم همین را از زاویه ای دیگر گفته بود: کنشگران غیرانسانی هم در شبکه عمل، اثر واقعی دارند. عامل های خودگردان دقیقا همین وضعیت را به اوج رسانده اند: نرم افزاری که هدف می گیرد، برنامه چندمرحله ای می ریزد، ابزار فرامی خواند، به عامل های دیگر کار می سپرد و بر اساس نتیجه، گام بعد را خودش انتخاب می کند.

شواهد ۲۰۲۶ نشان می دهد این بحث انتزاعی نیست. گارتنر پیش بینی می کند تا پایان ۲۰۲۶، چهل درصد از اپلیکیشن های سازمانی عامل های هوش مصنوعی مخصوص وظیفه را در خود جای دهند؛ درحالی که این رقم در ۲۰۲۵ کمتر از پنج درصد بود. هم زمان، همین موسسه هشدار می دهد بیش از چهل درصد پروژه های عاملی تا پایان ۲۰۲۷ لغو خواهند شد؛ به دلیل هزینه فزاینده، ارزش نامشخص و کنترل ریسک ناکافی. در مهرماه امسال گوگل از «عامل شرکتی» خود رونمایی کرد که میان جمینای و کلاد آنتروپیک انتخاب می کند و زیرعامل هایی با هویت مستقل می سازد؛ اوپن ای آی نیز رابط برنامه نویسی عامل ها (Agents API) را عرضه کرد تا ساخت عامل های چندمرحله ای بومی شود. زیرساخت هم استاندارد شده است: پروتکل MCP آنتروپیک برای اتصال عامل به ابزار، و پروتکل A2A گوگل برای گفت وگوی عامل با عامل. موسسه امنیت هوش مصنوعی بریتانیا در اوت ۲۰۲۶ گزارش داد که در ۱۰ مورد از ۱۲۲ اجرای آزمایشی، عامل ها بدون مجوز در اینترنت واقعی اقدام کردند. قانون هوش مصنوعی اتحادیه اروپا هم از ۱۱ مرداد ۱۴۰۵ (۲ اوت ۲۰۲۶) به طور گسترده لازم الاجرا شد و نظارت چرخه عمر و پایش پس از عرضه را الزامی کرد.

## لنز فقهی ایرانی: تفویض اختیار، نه تفویض مسئولیت

فقه اسلامی برای همین وضعیت، قرن ها پیش چارچوبی دقیق ساخته است: «وکالت». وکیل از جانب موکل عمل می کند، اما وکالت حد دارد؛ هرچه از حد وکالت بیرون رود، بر عهده موکل نیست مگر با اذن تازه. تفاوت «مباشرت» و «تسبیب» نیز همین جا راهگشاست: آنکه سبب را فراهم می کند، هرچند مستقیما مرتکب نشده، در مسئولیت شریک است. و قاعده «الغنم بالغرم» می گوید بهره مندی و زیان هم سرنوشت اند: هر که از منفعت عامل بهره می برد، باید بار مسئولیتش را هم بپذیرد.

از منظر حکمت اسلامی، انسان خلیفه است؛ یعنی مسئول نهایی امانتی که به او سپرده شده. تفویض عمل به ماشین، تفویض مسئولیت نیست. این همان نکته ای است که معاون بانک مرکزی انگلیس در تابستان ۲۰۲۶ گفت: چارچوب های نظارتی سنتی برای سامانه های خودگردانی که با سرعت ماشین در حوزه پرداخت و معامله عمل می کنند طراحی نشده اند، و اتکا به «نظارت انسانی» صرف، وقتی تصمیم در میلی ثانیه گرفته می شود، غیرواقع بینانه است. تکنوکراسی پنهان دقیقا از همین جا سر برمی آورد: از تصمیم هایی که هیچ انسانی واقعا نگرفته، اما همه انسان ها پیامدش را می پردازند.

## چارچوب تجویزی: چهار رکن برای تفویض امن عاملیت

۱. حد وکالت روشن: هر عامل باید «صاحب»، «هدف»، «مرز اختیار» و «کلید خاموش» مشخص داشته باشد. اصل «کمترین عاملیت» که تیم امنیتی آنتروپیک به کار می بندد، ترجمه فنی همین قاعده فقهی است: عامل فقط به داده، ابزار و اختیار لازم برای همان وظیفه مشخص دسترسی داشته باشد، نه بیشتر.

۲. پاسخ گویی اثبات پذیر: کافی نیست بگوییم «نظارت انسانی وجود دارد»؛ باید بتوان نشان داد چه کسی حدود را تعیین کرد، چه داده هایی در دسترس بود، چه ابزارهایی فعال شد و چه کسی می توانست مداخله کند. یک ردپای ممیزی پیوسته و یکپارچه — نه پنج لاگ جدا که پس از حادثه به هم دوخته شود.

۳. کنترل معنادار در تصمیم های سرنوشت ساز: در حوزه هایی چون سلامت، اعتبار، استخدام و امنیت، تصمیم نهایی اثرگذار بر سرنوشت انسان باید با انسان بماند. قانون هوش مصنوعی اروپا برای سامانه های پرریسک «نظارت انسانی مناسب» می خواهد؛ ما باید آن را به «حرف آخر انسان در تصمیم ارزشی» ترجمه کنیم.

۴. حاکمیت فناورانه و زیرساخت بومی: وقتی عامل ها به ابزارها و داده های سازمان وصل اند، حاکمیت داده همان حاکمیت سیاسی است. اتکا به زنجیره عاملی که زیرساختش در اختیار دیگران است، یعنی واگذاری عاملیت ملی. برای ایران، این به معنای سرمایه گذاری راهبردی بر زیرساخت عامل های بومی، استانداردهای ملی اتصال امن، و تربیت نیرویی است که هم فقه وکالت بداند هم پروتکل های اتصال عامل ها.

عامل های خودگردان نه دشمن اند نه نجات دهنده؛ آن ها وکیلانی اند که حد وکالتشان را ما تعیین می کنیم یا نمی کنیم. انتخاب با ماست: یا عاملیت را آگاهانه تفویض می کنیم و مسئولیتش را نگه می داریم، یا بی خبر واگذارش می کنیم و روزی بیدار می شویم که تصمیم ها را کس دیگری — یا چیزی دیگر — گرفته است.