پرش به محتوای اصلی
پرش به محتوای مقاله

رئیس AI تنست: فیلتر داده پیش‌آموزش تنها دفاع در برابر سلاح بیولوژیک

·۱۸ آبان ۱۴۰۵۳ دقیقه مطالعه
متخصص امنیت AI در مورد تهدیدات سلاح بیولوژیک و فیلتر کردن داده‌ها صحبت می‌کند
متخصص امنیت AI در مورد تهدیدات سلاح بیولوژیک و فیلتر کردن داده‌ها صحبت می‌کند
اشتراک‌گذاری
واقعاً چه چیز جدید است؟

تنست نخستین شرکت بزرگ است که مدل وزنی باز Hy4 را با استراتژی صریح فیلتر داده پیش‌آموزش برای حذف قابلیت‌های دوکاربره منتشر می‌کند — روشی که در برابر دور زدن‌های پس‌ازآموزش مقاوم‌تر از نرده‌های استنتاج است.

وینس یائو شونیو، رئیس هوش مصنوعی تنست، به ساوث چاینا مورنینگ پست گفت که هوش مصنوعی به‌زودی توسعه سلاح بیولوژیک را امکان‌پذیر می‌کند. او مناقشه باینری مدل‌های باز و بسته را ناکام خواند و راهکار ترکیبی را پیشنهاد داد. این مناقشه در بحث گسترده‌تری درباره چالش مدل‌های وزن‌باز به انحصار آزمایشگاه‌های پیشرو قرار دارد که پیش‌تر بررسی شده است. تجربه‌های laboratoire Vals نشان می‌دهد چگونه مدل‌های باز به سطح مدل‌های بسته در هک سایبری رسیده‌اند که در این گزارش توضیح داده شده است. کاهش شدید داده‌های قابل تقطیر در کلود، تلاش آنتروپیک برای مقابله با تقلید مدل‌ها توسط laboratoire‌های چینی است که پیش‌تر گزارش شده است.

چرا مناقشه باز و بسته ناکام است

آنتروپیک و آزمایشگاه‌های آمریکایی دیگر مدل‌های بسته را به بهانه ایمنی ترویج می‌کنند، در حالی که حامیان وزن‌های باز شفافیت را شرط دفاع موثر می‌دانند. یائو شونیو تأکید کرد که در بیولوژی — برخلاف امنیت سایبری — قابلیت‌های تهاجمی و دفاعی از هم جدا نشدنی‌اند. شکاف قابلیت بین مدل‌های چینی و آمریکایی به مرز ناچیز رسیده و لزوم هماهنگی جهانی را تشدید کرده است.

رویداد هاگینگ فیس: فیلترهای بسته مانع دفاع شدند

در ژوئن کلود آنتروپیک از تحلیل دستورات حمله به دلیل فیلترهای ایمنی خودداری کرد. محققان برای تجزیه لاگ‌های جنایی از مدل باز چینی GLM-5.2 استفاده کردند. هاگینگ فیس تأکید کرد که نقض امنیت با پچ کردن آسیب‌پذیری‌ها متوقف شده، نه با مدل باز، و این پرونده استدلال علیه فیلترهای ایمنی نیست.

فیلترهای پس‌ازآموزش شکننده‌اند

تحقیقات نشان می‌دهد فیلترهای ایمنی مدل‌های باز شکننده‌اند. تکنیک Abliteration می‌تواند رفتارهای انکاری را به‌صورت جراحی حذف کند و هزاران واریانت چنین در هاگینگ فیس گردش دارند. استارتاپ آمریکایی Abliteration.ai دسترسی به نسخه غیرفیلترشده GLM-5.3 می‌فروشد. تدابیر موجود این تغییرات را سخت‌تر می‌کنند اما از آن‌ها جلوگیری نمی‌کنند.

رویکرد تنست: فیلتر داده در پیش‌آموزش

تنست قصد دارد مدل Hy4 را به‌عنوان مدل وزن‌باز با گزارش ایمنی منتشر کند. شرکت اعلام کرده قابلیت‌های بیولوژیک Hy4 زیر آستانه ریسک بالا قرار دارد. تنست قابلیت‌های هک را با فیلتر کردن داده‌های آموزشی حذف کرده — روشی که محققان می‌گویند در برابر تلاش‌های Abliteration مقاوم مانده است.

خلأ حکمرانی جهانی

سازمان استاندارد TC260 چین هشدار داده که حفاظت‌های مدل‌های باز قابل دور زدن هستند و در حال تدوین استاندارد امنیتی برای هوش مصنوعی متن‌باز است. نه آمریکا و نه چین تا امروز آستانه محاسباتی ملزم‌کننده‌ای برای ممنوعیت انتشار باز تعیین نکرده‌اند. کلود فیبل ۵ پرسش‌های مشکوک را به آپوس ۴.۸ مسیریابی می‌کرد و در ابتدا ۸ تا ۹ درصد وظایف — از جمله تحلیل مشروع اسکن MRI — را خطر بیوتروریسم برچسب زد. آنتروپیک فیلترهای بیش‌ازحد را پذیرفت.

چرا این موضوع مهم است؟

تهدید سلاح بیولوژیک هوش مصنوعی نمی‌تواند با انتخاب باینری بین مدل باز یا بسته مدیریت شود؛ دفاع موثر نیازمند فیلتر کردن داده‌های خطرناک در ریشه آموزش و استانداردهای حکمرانی محاسباتی است. هشدار رئیس AI یک غول تکنولوژی چینی و تأیید محققان مستقل اعتبار این ضرورت را تقویت می‌کند.

تأثیر برای ایران

تأثیر مستقیم فعلی بر توسعه‌دهندگان ایرانی نیست؛ تحریم‌ها و محدودیت‌های API دسترسی به مدل‌های تنست و آنتروپیک را مسدود نگه داشته‌اند.

·نگاه ما
تحریریه دات‌هوش

فیلتر داده پیش‌آموزش تنها دفاعی است که پس از انتشار مدل توسط مهاجم قابل حذف نیست — برخلاف نرده‌های استنتاج که Abliteration در چند ساعت بی‌اثر می‌سازد. این تغییر پارادایم، مسئولیت ایمنی را از لایه استنتاج به لایه داده و آموزش منتقل می‌کند و ابزارهای اعتبارسنجی داده را ضروری می‌کند.

منابع

این گزارش با خط‌لولهٔ خودکار دات‌هوش از منابع معتبر جهانی تدوین و زیر نظر تحریریه منتشر شده است. روش کار ما

گفتگو

پنج‌شنبه‌های هوش‌محور

بسته‌ی هفتگی دات‌هوش

۵ خبر، ۲ ابزار، ۱ پرامپت در هر شماره. به‌زودی راه‌اندازی می‌شود — هر پنج‌شنبه صبح.

خبر کلیدی
ابزار کاربردی
پرامپت حرفه‌ای
تحلیل پژوهش
به‌زودی
زاویه‌ی ایرانی
به‌زودی
تمرین این هفته
به‌زودی

راهنماهای دات‌هوش

راهنماهای کاربردیِ دات‌هوش برای کار با هوش مصنوعی — از همین‌جا شروع کنید:

دات‌هوش

راهنمای فارسی هوش مصنوعی — با نگاه به ایران

اخبار روزانه، معرفی ابزارها و مدل‌ها، و آموزشِ کار با هوش مصنوعی؛ همیشه با این پرسش که از ایران چه چیزی کار می‌کند و چه چیزی نه.