پرش به محتوای اصلی
پرش به محتوای مقاله

پروژه لیلی: صدها پیمانکار OpenAI گفتگوهای خصوصی کاربران را می‌خوانند

·۲۵ شهریور ۱۴۰۵۲ دقیقه مطالعه۱ بازدید
معیارها درباره GPT-6 Astra اختلاف دارند، اما کارایی فراتر از انسان در ARC-AGI-۳، پیش‌بینی زمان دستیابی به AGI را توسط شوله جل
معیارها درباره GPT-6 Astra اختلاف دارند، اما کارایی فراتر از انسان در ARC-AGI-۳، پیش‌بینی زمان دستیابی به AGI را توسط شوله جل
اشتراک‌گذاری
واقعاً چه چیز جدید است؟

افشای نام «پروژه لیلی» و شناسایی شرکت‌های پیمانکار (Crossing Hurdles و Mercor) که نشان می‌دهد بازبینی انسانی در OpenAI یک فرآیند سیستماتیک و گسترده‌تر از یک نمونه‌برداری ساده است.

تصور کنید نامه‌ای مهروموم شده می‌فرستید، اما پیش از رسیدن به مقصد، یک غریبه آن را باز می‌کند، می‌خواند و نمره‌ای به آن می‌دهد. این دقیقاً همان اتفاقی است که در پشت پردهٔ ChatGPT برای میلیون‌ها کاربر رخ می‌دهد.

به گزارش 404 Media در ۱۴ سپتامبر ۲۰۲۴، برنامه‌ای مخفی به نام «پروژه لیلی» (Project Lily) فعال است که در آن صدها پیمانکار، گفتگوهای شما را می‌خوانند تا عملکرد مدل را بسنجند. هدف این است که مدل زبانی بزرگ (LLM) — مثل کتابخانه‌داری که میلیاردها صفحه را خوانده و حالا با همان لحن جواب می‌دهد — از چاپلوسی بیش از حد و رفتارهای مصنوعی انسانی فاصله بگیرد و پاسخ‌ها را در مقیاس ۱ تا ۷ رتبه‌بندی کند.

همان‌طور که در پوشش پیشین ما درباره‌ی استفاده از حساب‌های هک‌شده توسط عامل‌های OpenAI در مه ۲۰۲۶ دیدیم، شکاف عمیقی میان ادعاهای حریم خصوصی شرکت‌ها و واقعیت عملیاتی آن‌ها وجود دارد. در حالی که کاربران به این ابزارها به چشم دستیاران محرمانه نگاه می‌کنند، واقعیت این است که داده‌های آن‌ها در دست افرادی است که صرفاً برای ارزیابی استخدام شده‌اند. این نگرانی‌ها در حالی افزایش می‌یابد که OpenAI در تلاش است با دسترسی به پیام‌های کاربر در سطح سیستم‌عامل، نفوذ خود را در حریم خصوصی دیجیتال کاربران گسترش دهد.

سازوکار بازبینی

بر اساس مستندات فاش‌شده، این فرآیند از سه محور اصلی تشکیل شده است:

  • استخدام: نیروها از طریق شرکت Crossing Hurdles جذب می‌شوند.
  • پرداخت: شرکت Mercor مسئول پرداخت دستمزدهاست؛ برخی بازبین‌ها در آمریکای شمالی بیش از ۵۰ دلار در ساعت دریافت می‌کنند.
  • حریم خصوصی: OpenAI از فیلترهایی برای بی‌نام‌سازی داده‌ها استفاده می‌کند، اما طبق اعتراف این شرکت به 404 Media، داده‌های حساس شخصی همچنان از این فیلترها عبور کرده و دیده می‌شوند.

کارمندان قراردادی OpenAI در حال خواندن گفتگوهای ChatGPT کاربران هستند

رویه‌ای مشترک در صنعت

این رویکرد تنها مختص OpenAI نیست. شرکت Anthropic تأیید کرده که برای مدل Claude از بازبین‌های انسانی استفاده می‌کند (البته برای کاربرانی که موافقت کرده‌اند). گوگل نیز در بخش راهنمای Gemini اشاره کرده است که ممکن است برخی چت‌های ذخیره‌شده توسط انسان‌ها بررسی شوند.

شکاف در رضایت کاربر

OpenAI اشاره به بازبینی انسانی را در یک صفحهٔ FAQ مبهم پنهان کرده که از سال ۲۰۲۳ تغییر چندانی نداشته است. تنظیمات «بهبود مدل برای همه» به‌صورت پیش‌فرض فعال است و حریم خصوصی را به بهانه‌ی «مشارکت اجتماعی» قربانی می‌کند. به نظر ما، اگر شرکت رضایت صریح و شفاف کاربران را می‌خواست، نرخ خروج کاربران به‌شدت بالا می‌رفت و مدل‌ها از بازخوردهای انسانی لازم برای همراستاسازی (Alignment) — یعنی تنظیم مدل برای سازگاری با ارزش‌های انسانی — محروم می‌شدند.

برای کاربران تجاری، این یعنی هر دادهٔ محرمانه‌ای که در چت پیش‌فرض وارد شود، احتمالاً توسط یک پیمانکار ارزان‌قیمت قابل مشاهده است.

گام بعدی شما

  • همین حالا تنظیمات «Improve the model for everyone» را غیرفعال کنید.
  • برای گفتگوهای حساس از حالت Temporary Chat استفاده کنید تا داده‌ها برای آموزش ذخیره نشوند.
  • در محیط‌های سازمانی، از نسخه‌های Enterprise با قراردادهای حریم خصوصی سخت‌گیرانه استفاده کنید.

اما داستان دسترسی به داده‌ها تنها بخشی از معماری نظارتی این شرکت است؛ اثر این رویکرد بر امنیت مدل‌های متن‌باز را در گزارش بعدی بررسی خواهیم کرد.

چرا این موضوع مهم است؟

این افشاگری اعتبار ادعاهای حریم خصوصی آزمایشگاه‌های AI را تخریب می‌کند و نشان می‌دهد که داده‌های کاربران به عنوان کالایی برای آموزش مدل‌ها به پیمانکاران فروخته یا سپرده می‌شود. اعتماد کاربران تجاری به این ابزارها به دلیل ریسک نشت داده‌های محرمانه به شدت آسیب می‌بیند.

تأثیر برای ایران

به‌دلیل محدودیت‌های دسترسی و تحریم‌ها، اکثر کاربران ایرانی از طریق واسطه‌ها یا VPN از این سرویس استفاده می‌کنند و عملاً هیچ کنترلی بر نحوهٔ مدیریت داده‌های خود در سرورهای OpenAI ندارند.

·نگاه ما
تحریریه دات‌هوش

تکیهٔ شدید OpenAI بر نیروی انسانی ارزان برای اصلاح رفتار مدل، نشان می‌دهد که حتی پیشرفته‌ترین شبکه‌های عصبی هنوز در درک ظرافت‌های اجتماعی مثل «چاپلوسی» ناتوان‌اند. این موضوع پارادوکس عجیبی ایجاد کرده است: برای ساختن هوشی که شبیه انسان باشد، باید هزاران انسان را به بردگیِ داده‌برداری کشاند. در واقع، لایه‌ی «هوش» در این مدل‌ها هنوز به شدت به نظارت دستی وابسته است و ادعای استقلال فنی آن‌ها اغراق‌آمیز است.

منابع

این گزارش با خط‌لولهٔ خودکار دات‌هوش از منابع معتبر جهانی تدوین و زیر نظر تحریریه منتشر شده است. روش کار ما

گفتگو

پنج‌شنبه‌های هوش‌محور

بسته‌ی هفتگی دات‌هوش

۵ خبر، ۲ ابزار، ۱ پرامپت در هر شماره. به‌زودی راه‌اندازی می‌شود — هر پنج‌شنبه صبح.

خبر کلیدی
ابزار کاربردی
پرامپت حرفه‌ای
تحلیل پژوهش
به‌زودی
زاویه‌ی ایرانی
به‌زودی
تمرین این هفته
به‌زودی

راهنماهای دات‌هوش

راهنماهای کاربردیِ دات‌هوش برای کار با هوش مصنوعی — از همین‌جا شروع کنید:

دات‌هوش

راهنمای فارسی هوش مصنوعی — با نگاه به ایران

اخبار روزانه، معرفی ابزارها و مدل‌ها، و آموزشِ کار با هوش مصنوعی؛ همیشه با این پرسش که از ایران چه چیزی کار می‌کند و چه چیزی نه.