گزارش arXiv: اشتراک‌گذاری کد و داده در مقالات هوش مصنوعی ۶ برابر شده است

باید بپذیریم که دوران «جعبه‌های سیاه» در پژوهش‌های آکادمیک هوش مصنوعی به پایان رسیده است. تحلیل جدیدی از ۵۶ هزار مقاله نشان می‌دهد که شفافیت اکنون یک انتخاب نیست، بلکه استاندارد جدید اعتبار علمی است.

برای سال‌ها، شکاف عمیقی بین نتایج ادعایی و قابلیت بازتولید (Reproducibility) در یادگیری ماشین وجود داشت. همان‌طور که در تحلیل‌های پیشین ما درباره‌ی استانداردهای ارزیابی مدل‌ها اشاره کردیم، نبودِ دسترسی به کد و داده، بسیاری از پیشرفت‌های ادعایی را در حد تخمین‌های غیرقابل اثبات نگه می‌داشت.

به نقل از تحلیل منتشر شده در arXiv در ۱۶ ژوئن ۲۰۲۶، این مطالعه ۱۰ سال پژوهش در پنج کنفرانس برتر هوش مصنوعی را بررسی کرده است. طبق مستندات این گزارش، یافته‌های کلیدی عبارتند از:

• افزایش نرخ اشتراک‌گذاری کد و داده از ۱۱ درصد در سال ۲۰۱۴ به ۶۴ درصد در سال ۲۰۲۴.
• رشد نرخ بازتولید استنباط‌شده (بر اساس متدهای مستندسازی) از ۲۸ درصد به ۶۴ درصد در همین بازه زمانی.
• وقوع این تغییرات پیش از معرفی رسمی چک‌لیست‌های بازتولید توسط برگزارکنندگان کنفرانس‌ها.

این داده‌ها فرضیه رایج مبنی بر «اجبار اداری» را می‌شکند. به باور تحلیلگران، بهبود مستندات پیش از وضع قوانین رسمی نشان می‌دهد که ما با یک چرخش فرهنگی در جامعه‌ی علمی روبرو هستیم؛ جایی که شفافیت دیگر نه یک مانع بوروکراتیک، بلکه پیش‌شرط دستیابی به تأثیرگذاری و اعتبار شناخته می‌شود.

گام بعدی شما

• بررسی متغیرهای مستندسازی در مقاله اصلی arXiv برای شناسایی الگوهای موفق در بازتولید پژوهش.
• تطبیق نرخ‌های بازتولید در مدل‌های بازمتن در مقابل مدل‌های تجاری بسته برای ارزیابی شکاف شفافیت.
• رصد اثر این شفافیت بر سرعت توسعه مدل‌های کوچک‌تر و بهینه‌تر.

اما در حالی که آکادمی به سمت شفافیت می‌رود، مدل‌های تجاری مسیر متفاوتی را می‌پیمایند — به بررسی ما درباره‌ی اثر مدل‌های بسته بر اکوسیستم پژوهشی مراجعه کنید.