پرش به محتوای اصلی
پرش به محتوای مقاله

Oxlo.ai قطعه‌بندی تصویر را با تبدیل زبان طبیعی به مختصات مکانی خودکار کرد

·۳۱ تیر ۱۴۰۵۱ دقیقه مطالعه۲ بازدید
باز کردن قفل توانایی مدل‌های زبانی بزرگ برای تقسیم‌بندی تصویر
باز کردن قفل توانایی مدل‌های زبانی بزرگ برای تقسیم‌بندی تصویر
اشتراک‌گذاری
واقعاً چه چیز جدید است؟

استفاده از LLM نه برای شرح تصویر، بلکه به عنوان یک موتور تولید مختصات مکانی دقیق برای ابزارهای قطعه‌بندی، در حالی که مدل قیمت‌گذاری برای حذف جریمه‌ی توکن‌های تکراری در حلقه‌های عامل‌محور تغییر کرده است.

تصور کنید برنامه‌نویسی هستید که دیگر نیازی ندارد برای هر نوع تصویر، یک خط لوله‌ی پردازشی جداگانه بسازد و فقط با یک دستور متنی، دقیقاً همان نقطه‌ای را که می‌خواهد شناسایی کند. جداسازی تصویر یک پیچ زنگ‌زده که زمانی نیازمند تنظیمات دستی tedious بود، اکنون با یک فرمان ساده متنی امکان‌پذیر است.

طبق اعلام Oxlo.ai در ۲۱ ژوئیه ۲۰۲۶، این پلتفرم از مدل‌های زبانی بزرگ (LLM) — شبیه کتابخانه‌داری که میلیاردها صفحه را خوانده و حالا با همان لحن کتاب‌ها جواب می‌دهد — به عنوان موتورهای استدلال برای خودکارسازی خط لوله‌ی پیچیده‌ی قطعه‌بندی تصویر (Image Segmentation) استفاده می‌کند. این قابلیت در واقع تکامل یافته‌ی رویکرد این شرکت است که پیش‌تر استنتاج چندوجهی را در یک API واحد یکپارچه کرده بود تا دسترسی به مدل‌های مختلف ساده‌تر شود. بینایی ماشین سنتی اغلب به وزن‌های پیش‌آموزش‌دیده یا آستانه‌های دستی نیاز دارد که بسیار خشک هستند و پیکربندی آن‌ها زمان‌بر است.

همان‌طور که در تحلیل قبلی ما درباره‌ی هوش مصنوعی حاکمیتی و داشبوردهای سازمانی اشاره کردیم، این تغییر نشان‌دهنده‌ی حرکت به سمت پشته‌های هوش مصنوعی چندوجهی (Multimodal) — مدلی که هم‌زمان متن، عکس و صدا را می‌فهمد، شبیه ما که با چند حس دنیا را می‌خوانیم — و منعطف‌تر است.

به گزارش وب‌سایت dev.to، شرکت Oxlo.ai مدل‌های وزن‌باز مانند Gemma 3 27B و Kimi VL A3B را برای مدیریت سه نقش کلیدی میزبانی می‌کند:

  • رابط‌های بینایی-زبانی (Vision-Language Interfaces): تبدیل عبارتی مثل «پیچ زنگ‌زده در پنل چپ» به فایل JSON شامل جعبه‌های محدودکننده یا مختصات چندضلعی.
  • ارکستراسیون گردش کار: استفاده از استدلال عامل‌محور (Agentic) برای مدیریت وظایف قطعه‌بندی چندمرحله‌ای از طریق استفاده از ابزار (Tool Use).
  • تولید کد: نوشتن کدهای تخصصی برای اجرای الگوریتم‌های کلاسیک.

این مدل‌های بینایی-زبانی می‌توانند به عنوان بذر برای مدل هر چیزی را قطعه‌بندی کن (SAM) عمل کنند یا با توصیف ویژگی‌های بافت، یک تبدیل آب‌ریز (Watershed Transform) را هدایت کنند. برای پشتیبانی از این حلقه‌های تکراری، Oxlo.ai از قیمت‌گذاری مبتنی بر درخواست استفاده می‌کند؛ این یعنی جریمه‌های مالی معمول برای پرامپت‌های تصویری طولانی و پرس‌وجوهای مکرر عامل‌ها حذف شده است. این مدل اقتصادی در واقع بخشی از استراتژی شرکت است که با تغییر ساختار قیمت‌گذاری، هزینه‌های مربوط به عامل‌های چندوجهی را برای کاربران کاهش داده است.

این رویکرد، فرض صنعت را از «آموزش مدل‌های خاص» به «استدلال معنایی» تغییر می‌دهد. برای توسعه‌دهندگان، این یعنی سربار نگهداری از خط لوله‌های مجزای هر وجه (Modality) از بین می‌رود و تبدیل مستقیم یک اسکرین‌شات یا دیاگرام PDF به فراخوانی‌های API عملیاتی، سیستم‌های تولیدی را به شدت بهینه می‌کند.

گام بعدی شما

  • بررسی کنید که مدل‌های بینایی-زبانی چگونه استدلال مکانی را در گردش‌کارهای فعلی شما مدیریت می‌کنند.
  • ظهور پشته‌های استنتاج ترکیب‌پذیر را برای کاهش تأخیر در رمزگذاری بینایی زیر نظر بگیرید.
  • تست کنید آیا جایگزینی مدل‌های CNN سنتی با مدل‌های استدلالی در پروژه‌های شما دقت را افزایش می‌دهد یا خیر.

اما داستان سخت‌افزاری این تحول حتی شگفت‌انگیزتر است و تأثیر مستقیم روی GPUها دارد؛ به تحلیل ما درباره‌ی تراشه‌های Blackwell مراجعه کنید.

چرا این موضوع مهم است؟

این رویکرد با تکیه بر اعتبار مدل‌های استدلالی مدرن، هزینه‌ی توسعه سیستم‌های بینایی را از سطح آموزش مدل‌های سنگین به سطح مهندسی پرامپت می‌آورد. این تغییر باعث می‌شود شرکت‌ها بتوانند بدون داشتن دیتاست‌های برچسب‌خورده عظیم، قابلیت‌های دقیق بصری را پیاده‌سازی کنند.

تأثیر برای ایران

توسعه‌دهندگان ایرانی می‌توانند از مدل‌های وزن‌باز Gemma 3 روی سرورهای داخلی برای خودکارسازی تحلیل تصاویر صنعتی استفاده کنند تا نیاز به APIهای گران‌قیمت خارجی کاهش یابد.

·نگاه ما
تحریریه دات‌هوش

جایگزینی لایه‌های سخت‌گیرانه بینایی ماشین با استدلال معنایی، پایان عصر «آموزش برای هر تسک» است. این مدل‌ها به جای یادگیری لبه‌ها، مفهوم «شیء» را می‌فهمند و این یعنی انعطاف‌پذیری در برابر داده‌های خارج از توزیع (OOD) به شدت افزایش می‌یابد. در واقع، استدلال مکانی اکنون به یک مهارت زبانی تبدیل شده است.

منابع

این گزارش با خط‌لولهٔ خودکار دات‌هوش از منابع معتبر جهانی تدوین و زیر نظر تحریریه منتشر شده است. روش کار ما

گفتگو

پنج‌شنبه‌های هوش‌محور

بسته‌ی هفتگی دات‌هوش

۵ خبر، ۲ ابزار، ۱ پرامپت در هر شماره. به‌زودی راه‌اندازی می‌شود — هر پنج‌شنبه صبح.

خبر کلیدی
ابزار کاربردی
پرامپت حرفه‌ای
تحلیل پژوهش
به‌زودی
زاویه‌ی ایرانی
به‌زودی
تمرین این هفته
به‌زودی

راهنماهای دات‌هوش

راهنماهای کاربردیِ دات‌هوش برای کار با هوش مصنوعی — از همین‌جا شروع کنید:

دات‌هوش

راهنمای فارسی هوش مصنوعی — با نگاه به ایران

اخبار روزانه، معرفی ابزارها و مدل‌ها، و آموزشِ کار با هوش مصنوعی؛ همیشه با این پرسش که از ایران چه چیزی کار می‌کند و چه چیزی نه.