پرش به محتوای اصلی
پرش به محتوای مقاله

«انتقال قابلیت‌ها بدون آموزش مجدد»؛ راهکار جدید برای بهینه‌سازی مدل‌ها

·۲۵ مهر ۱۴۰۵۲ دقیقه مطالعه
انتقال در زمان آزمون: بند به عنوان معلم عمل می‌کند
انتقال در زمان آزمون: بند به عنوان معلم عمل می‌کند
اشتراک‌گذاری
واقعاً چه چیز جدید است؟

جایگزینی دستورات متنی (Prose) با چارچوب‌های قطعی (Deterministic Harnesses) برای انتقال قابلیت؛ به جای اینکه به مدل کوچک بگوییم «چطور فکر کند»، برایش «راهی برای اجرا» می‌سازیم.

تصور کنید بتوانید هوش یک متخصص ارشد را در لحظه به یک کارآموز منتقل کنید، بدون اینکه او نیاز به گذراندن دوره‌های آموزشی جدید داشته باشد. طبق مطالعه‌ای که در اوت ۲۰۲۶ در arXiv (۲۶۰۸.۱۲۳۰۷) منتشر شد، مدل‌های قدرتمند هوش مصنوعی اکنون می‌توانند در زمان استنتاج (Inference) — یعنی همان لحظه‌ای که مدل واقعاً جواب تولید می‌کند و شبیه به آشپزی است، نه دوره‌ی آموزش آشپز — قابلیت‌های خود را به مدل‌های ضعیف‌تر ببخشند.

این دستاورد یک گلوگاه حیاتی در استقرار هوش مصنوعی را می‌شکند: شکاف میان توانایی مدل در تصمیم‌گیری و توانایی او در اجرای دقیق آن تصمیم. همان‌طور که در تحلیل‌های پیشین ما درباره‌ی بهینه‌سازی مدل‌های لبه اشاره کردیم، تلاش برای «متقاعد کردن» مدل‌های کوچک از طریق مهندسی پرامپت معمولاً شکست می‌خورد؛ زیرا دقت را نمی‌توان با مذاکره به دست آورد، بلکه باید آن را به ساختارهای بیرونی منتقل کرد. این ضرورتِ جایگزینی حدس و گمان با ساختارهای قطعی، یادآور این واقعیت است که پاسخ‌های موفق در دموهای اولیه اغلب نتیجه شانس هستند و برای اطمینان از عملکرد واقعی، ایجاد چارچوب‌های ثبت خطا ضروری است.

به نقل از این پژوهش، مدل قدرتمند برای مدل ضعیف یک «هارنس» یا چارچوب قطعی می‌سازد تا مدل هدف در درون آن اجرا شود. در این روش، مدل کوچک دیگر مجبور نیست خودش استدلال کند، بلکه فقط باید مسیری را دنبال کند که مدل بزرگ برایش ترسیم کرده است.

سازوکار انتقال قابلیت

بر اساس مستندات این مطالعه، بیشترین پیشرفت‌ها نه از طریق دستورات بهتر، بلکه از طریق محدودیت‌های ساختاری حاصل شده است. محرک‌های فنی اصلی عبارت‌اند از:

  • کدهای قطعی: انتقال استدلال‌های ناپایدار به ساختارهای صلب کدنویسی.
  • مسیریابی (Routing): هدایت وظایف از طریق مسیرهای منطقی مشخص.
  • اجبار در قالب: الزام سخت‌گیرانه برای نحوه ارائه پاسخ‌ها.

در چهار محک مربوط به «نظریه ذهن»، نمرات مدل‌های ضعیف از میانگین ۰.۴۹ به ۰.۹۱ جهش کرد. نکته جالب این است که ضعیف‌ترین مدل‌ها بیشترین سود را بردند؛ این یعنی به‌صرفه‌ترین راه برای خرید قابلیت، استفاده از کوچک‌ترین مغزی است که بتواند یک چک‌لیست را دنبال کند.

برای مدیران کسب‌وکار، هدف دیگر یافتن مدل کوچکی نیست که بتواند مثل یک غول استدلال کند، بلکه باید «دروازه‌هایی کد-محور» ساخت تا مدل کوچک از مسیر منحرف نشود. اگر مدلی بتواند یک مسیر قطعی را دنبال کند، می‌تواند تصمیماتی در سطح بالا اجرا کند که هرگز به‌تنهایی قادر به استخراج آن‌ها نبود.

توسعه‌دهندگان اکنون باید به «انتقال در زمان تست» به عنوان راهکاری برای حفظ دقت در دستگاه‌های لبه نگاه کنند. چالش بعدی این است که بفهمیم کدام دسته‌ از تصمیمات را می‌توان با متن منتقل کرد و کدام‌یک برای بقا به یک دروازه سخت‌افزاری یا کد نیاز دارند.

گام بعدی شما

  • بررسی مدل‌های کوچک (SLM) برای اجرای وظایفی که توسط مدل‌های بزرگ به کد تبدیل شده‌اند.
  • جایگزینی پرامپت‌های طولانی با ساختارهای خروجی سخت‌گیرانه (Deterministic) برای کاهش توهمات.
  • تحلیل هزینه‌های استنتاج در مدل‌های لبه با استفاده از متد انتقال قابلیت.

اما داستان سخت‌افزاری این تحول حتی شگفت‌انگیزتر است — به تحلیل ما درباره‌ی تراشه‌های Blackwell مراجعه کنید.

چرا این موضوع مهم است؟

این روش هزینه استقرار هوش مصنوعی را به‌شدت کاهش می‌دهد زیرا اجازه می‌دهد مدل‌های بسیار ارزان‌قیمت با دقت مدل‌های گران‌قیمت عمل کنند. اعتبار این ادعا بر اساس نتایج عددی در محک‌های نظریه ذهن تأیید شده است.

تأثیر برای ایران

این رویکرد برای توسعه‌دهندگان ایرانی که با محدودیت سخت‌افزاری و هزینه بالای GPU مواجه‌اند، فرصتی است تا از مدل‌های کوچک‌تر با دقت بالا در محیط‌های محلی استفاده کنند.

·نگاه ما
تحریریه دات‌هوش

این یافته فرضیه «ضرورت اندازه برای استدلال» را به چالش می‌کشد. در واقع، استدلال را می‌توان از لایه مدل به لایه اجرا (Execution) منتقل کرد. این یعنی مدل‌های کوچک در آینده نه به عنوان جایگزین مدل‌های بزرگ، بلکه به عنوان «بازوهای اجرایی» دقیق آن‌ها عمل خواهند کرد.

منابع

این گزارش با خط‌لولهٔ خودکار دات‌هوش از منابع معتبر جهانی تدوین و زیر نظر تحریریه منتشر شده است. روش کار ما

گفتگو

پنج‌شنبه‌های هوش‌محور

بسته‌ی هفتگی دات‌هوش

۵ خبر، ۲ ابزار، ۱ پرامپت در هر شماره. به‌زودی راه‌اندازی می‌شود — هر پنج‌شنبه صبح.

خبر کلیدی
ابزار کاربردی
پرامپت حرفه‌ای
تحلیل پژوهش
به‌زودی
زاویه‌ی ایرانی
به‌زودی
تمرین این هفته
به‌زودی

راهنماهای دات‌هوش

راهنماهای کاربردیِ دات‌هوش برای کار با هوش مصنوعی — از همین‌جا شروع کنید:

دات‌هوش

راهنمای فارسی هوش مصنوعی — با نگاه به ایران

اخبار روزانه، معرفی ابزارها و مدل‌ها، و آموزشِ کار با هوش مصنوعی؛ همیشه با این پرسش که از ایران چه چیزی کار می‌کند و چه چیزی نه.