تصور کنید ۸۰٪ از وب‌سایت‌های جهان برای نسل بعدی جست‌وجو عملاً وجود ندارند. طبق داده‌های منتشر شده توسط WebScore در ۱۳ اوت ۲۰۲۶، اکثریت قریب به اتفاق سایت‌ها فاقد فایل llms.txt هستند؛ سیگنالی حیاتی که خزنده‌های هوش مصنوعی برای درک محتوا و مجوزهای سایت به آن نیاز دارند.
سئو سنتی بر روی بک‌لینک‌ها و سرعت صفحه تمرکز داشت، اما بهینه‌سازی برای موتورهای زاینده (GEO) — شبیه به داشتن یک پاسپورت دیجیتال که بدون مهر‌های تأیید، برند شما در پاسخ‌های مدل اصلاً شناسایی نمی‌شود — مستقیماً روی نحوه ارجاع مدل‌های هوش مصنوعی زاینده (Generative AI) مانند ChatGPT، Perplexity و Gemini تمرکز می‌کند. همان‌طور که در تحلیل‌های قبلی ما درباره‌ی استانداردهای داده‌های ساختاریافته اشاره کردیم، مدل‌های زبانی دیگر صرفاً به دنبال کلمات کلیدی نیستند، بلکه به دنبال اعتبار و ساختار هستند. این تغییر در نحوه دسترسی به محتوا، نگرانی‌های جدی درباره‌ی سهم ناچیز بازدیدهای مستقیم وب‌سایت‌ها در برابر پاسخ‌های مستقیم هوش مصنوعی ایجاد کرده است که بقای مدل‌های سنتی انتشار محتوا را به چالش می‌کشد.
به گزارش WebScore، چندین سیگنال کلیدی تعیین‌کنندهٔ میزان دیده شدن در عصر هوش مصنوعی است:
- llms.txt: فایلی متنی که مانند robots.txt اما مخصوص هوش مصنوعی عمل می‌کند.
- موجودیت‌های ویکی‌داده (Wikidata Entities): سایت‌هایی که در ویکی‌داده ثبت شده‌اند، ۳ برابر بیشتر ارجاع می‌گیرند.
- ارجاعات معتبر: لینک دادن به ۲ یا چند منبع معتبر (مانند ویکی‌پدیا یا سایت‌های دولتی) احتمال دیده شدن را ۲۷.۵٪ افزایش می‌دهد.
- اسکمای FAQ: داده‌های ساختاریافته JSON-LD که پرسش و پاسخ‌ها را به‌صورت آماده برای موتورهای هوش مصنوعی فراهم می‌کند.
بر اساس بررسی‌های این گزارش، ۶۰٪ وب‌سایت‌ها به‌طور ناخواسته دسترسی خزنده‌های اصلی مانند GPTBot یا ClaudeBot را در فایل robots.txt مسدود کرده‌اند. این اشتباه فنی، شکاف عمیقی میان برندهای «آماده برای هوش مصنوعی» و کسانی که هنوز به چک‌لیست‌های قدیمی سئو متکی هستند، ایجاد کرده است.
برای صاحبان کسب‌وکار، این تغییر یعنی رتبه ۱ گوگل دیگر تنها معیار موفقیت نیست. هدف جدید، «نرخ ذکر در هوش مصنوعی» (AI Mention Rate) است؛ یعنی تعداد دفعاتی که یک مدل زبانی بزرگ (LLM) — مثل کتابخانه‌داری که میلیاردها صفحه را خوانده و حالا با همان لحن جواب می‌دهد — محصول شما را به عنوان بهترین ابزار برای یک کار خاص پیشنهاد می‌کند.
گام بعدی شما
- وب‌سایت خود را در ابزار GEO در webscore.dev تست کنید تا سیگنال‌های مفقود را بیابید.
- فایل llms.txt را برای راهنمایی خزنده‌های AI در ریشه سایت خود ایجاد کنید.
- موجودیت برند خود را در Wikidata ثبت کنید تا احتمال ارجاع مدل‌ها افزایش یابد.
اما داستان سخت‌افزاری این تحول حتی شگفت‌انگیزتر است — به تحلیل ما درباره‌ی تراشه‌های Blackwell مراجعه کنید.
گفتگو