پرش به محتوای اصلی
پرش به محتوای مقاله

«جلوگیری از استخراج داده‌ها»؛ دلیل حذف فیدهای RSS در ردیت

·۸ مهر ۱۴۰۵۳ دقیقه مطالعه۱ بازدید
ردیت از مدل‌های زبانی بزرگ برای حل مشکلی استفاده می‌کند که خود این مدل‌ها ایجاد کرده‌اند
ردیت از مدل‌های زبانی بزرگ برای حل مشکلی استفاده می‌کند که خود این مدل‌ها ایجاد کرده‌اند
اشتراک‌گذاری
واقعاً چه چیز جدید است؟

تعیین تاریخ دقیق برای پایان دادن به RSS و API عمومی؛ ردیت دیگر به دنبال محدود کردن استخراج داده نیست، بلکه به طور کامل در حال بستن درهای رایگان برای اجبار شرکت‌های AI به پرداخت لایسنس است.

اگر از اپلیکیشن‌های مستقل برای دنبال کردن بحث‌های ردیت استفاده می‌کنید، باید بدانید که دوران «وب باز» در این پلتفرم به پایان رسیده است. ردیت تصمیم گرفته است تمام مسیرهای دسترسی رایگان و استاندارد به محتوای کاربرانش را ببندد تا شرکت‌های هوش مصنوعی را مجبور به پرداخت هزینه کند.

طبق اعلام رسمی این شرکت، فیدهای RSS (Really Simple Syndication/Rich Site Summary) در ۱۳ نوامبر ۲۰۲۶ و دسترسی به API (رابط برنامه‌نویسی کاربردی) عمومی تا مارس ۲۰۲۷ به‌طور کامل متوقف می‌شوند. ردیت مدعی است این مسیرها به ابزارهای اصلی برای سوءاستفاده‌های خودکار و استخراج گسترده داده‌ها (Scraping) در مقیاس بزرگ تبدیل شده‌اند.

زمینه و تاریخچه وب باز

فید RSS یک استاندارد جهانی برای توزیع محتوا در وب است. این فناوری به کاربران و اپلیکیشن‌ها اجازه می‌دهد تا به‌روزرسانی‌های وب‌سایت‌ها را در قالبی یکسان و ثابت دریافت کنند. RSS در دوران طلایی وبلاگ‌ها یک ابزار حیاتی بود و به کاربران اجازه می‌داد از طریق اپلیکیشن‌های خبرخوان (News-reading apps)، مشترک پست‌های جدید شوند.

در گذشته، گوگل محبوب‌ترین خبرخوان جهان را اداره می‌کرد، اما در سال ۲۰۱۳ آن را تعطیل کرد. این اتفاق باعث شد بازار در اختیار اپلیکیشن‌های مستقل و شرکت‌هایی مانند Feedly قرار بگیرد. ردیت اشاره کرده است که RSS برای مدت‌ها «بخش محبوب وب باز» بوده است، اما اکنون زمان پایان دادن به آن فرا رسیده است.

این تغییر در حالی رخ می‌دهد که ردیت در حال تبدیل آرشیو عظیم محتوای تولیدشده توسط کاربران به یک کسب‌وکار با حاشیه سود بالا است. در حالی که وب باز زمانی برای کشف محتوا به فیدهای استاندارد متکی بود، ردیت اکنون دسترسی رایگان به داده‌ها را به عنوان یک «نشتی» در مرکز سودآوری خود می‌بیند. این وضعیت را می‌توان به کتابخانه‌ای تشبیه کرد که زمانی اجازه می‌داد هر کسی به‌طور رایگان در آن گشت‌وگذار کند، اما حالا برای هر صفحه‌ای که یک پژوهشگر می‌خواند، هزینه اشتراک دریافت می‌کند.

به گزارش TechCrunch، انگیزه مالی این تصمیم کاملاً روشن است. درآمدهای ردیت از بخش «سایر موارد» که شامل قراردادهای لایسنس برای هوش مصنوعی زاینده (Generative AI) است، در سه ماهه دوم سال جاری با رشد ۲۴ درصدی به ۴۳ میلیون دلار رسیده است.

زمان‌بندی دقیق تعطیلی‌ها

برای اینکه بدانید چه زمانی دسترسی‌ها قطع می‌شوند، به این تقویم توجه کنید:

  • ۱۳ نوامبر ۲۰۲۶: توقف کامل پشتیبانی از تمام فیدهای RSS.
  • ۱۲ ژانویه ۲۰۲۷: آخرین مهلت برای توسعه‌دهندگان جهت ثبت اپلیکیشن‌ها و بات‌های شخص ثالث مورد تایید. پس از این تاریخ، ردیت دسترسی API را برای هر توسعه‌دهنده‌ای که ثبت‌نام نکرده باشد، قطع خواهد کرد.
  • مارس ۲۰۲۷: تعطیلی کامل و نهایی API عمومی.

جزئیات اثرات بر مدیران و ابزارها

برای مدیران انجمن‌ها (Moderators)، اثرات این تصمیم فوری است. ردیت توصیه کرده است که برای دریافت هشدارها به اپلیکیشن Discord Relay Devvit مهاجرت کنند. این شرکت از تیم‌های مدیریتی خواسته است تا پیش از ۱۳ نوامبر تنظیمات خود را بررسی کرده و جریان‌های کاری‌شان را منتقل کنند تا دچار اختلال نشوند. با این حال، ردیت اعتراف کرده است که هیچ جایگزینی برای فیدهای RSS که برای دنبال کردن محتوا در خارج از محیط مدیریت انجمن‌های خود کاربر می‌شدند، وجود ندارد.

مدیران از همین حالا نگرانی‌های خود را ابراز کرده‌اند. زمانی که ردیت برای اولین بار به پایان RSS اشاره کرد، بسیاری شکایت کردند که پلتفرم برای آن‌ها «غیرقابل مدیریت» خواهد شد. همچنین بسیاری از کاربران تاکید کردند که RSS روش مورد علاقه آن‌ها برای دسترسی به محتوا بوده است.

علاوه بر API، ردیت دسترسی به نسخه قدیمی سایت (Old Reddit) را نیز محدود می‌کند. این نسخه که متنی است و حجم کمی دارد، اکنون هدف «استخراج داده‌های مخرب و ترافیک خودکار» قرار گرفته است. به همین دلیل، ردیت در حال افزودن لایه‌های حفاظتی است. به‌زودی دسترسی به Old Reddit تنها برای مدیرانی که وارد حساب خود شده‌اند و کاربرانی که در ۹۰ روز گذشته از این سایت قدیمی استفاده کرده‌اند، محدود خواهد شد.

اقتصاد API و هوش مصنوعی

این یک حرکت حساب‌شده برای مجبور کردن شرکت‌های هوش مصنوعی به امضای قراردادهای تجاری است. در حال حاضر، دستیارهای هوش مصنوعی برای پاسخ به سوالات کاربران در لحظه، از API عمومی استفاده می‌کنند؛ اما پس از مارس ۲۰۲۷، این ابزارها یا باید برای داده‌ها هزینه پرداخت کنند یا دسترسی خود را از دست بدهند.

قطع دسترسی به API عمومی مستقیماً بر دسته‌های زیر اثر می‌گذارد:

  • محصولات شنود اجتماعی (Social Listening) برای تحلیل افکار عمومی
  • ابزارهای پژوهشی آکادمیک و حرفه‌ای
  • دستیارهای هوش مصنوعی و محصولات مبتنی بر برنامه‌نویسی AI

برای یک کاربر عادی، این به معنای آن است که دوران «باز» بودن ردیت عملاً به پایان رسیده است. شما دیگر نخواهید توانست بدون پشتیبانی رسمی پلتفرم، ساب‌ردیت‌ها را از طریق اپلیکیشن‌های مستقل مانند Feedly دنبال کنید.

این استراتژی بازتاب‌دهنده یک روند گسترده‌تر است که در آن پلتفرم‌ها با گفتگوهای انسانی به عنوان یک «ماده خام اختصاصی» برای آموزش مدل‌های زبانی بزرگ (LLM) برخورد می‌کنند. ردیت با کشتن API، در واقع «سطح رایگان» اقتصاد داده‌های خود را حذف می‌کند. این رویکرد تجاری‌سازی داده‌ها در کنار سایر تلاش‌ها برای استخراج سود از مدل‌های هوش مصنوعی قرار می‌گیرد؛ برای مثال، برخی شرکت‌ها حتی تجاری‌سازی حذف حفاظ‌های ایمنی در مدل‌های هوش مصنوعی را به عنوان یک مدل درآمدی جدید دنبال می‌کنند.

پژوهشگران و محصولات تحلیل اجتماعی بزرگ‌ترین بازندگان این رویه هستند. بدون دسترسی برنامه‌نویسی‌شده، توانایی مطالعه روندهای اینترنتی در لحظه به یک کالای لوکس تبدیل می‌شود که تنها در اختیار کسانی است که توان پرداخت هزینه‌های لایسنس ردیت را دارند.

باید منتظر ماند و دید که جامعه توسعه‌دهندگان با نزدیک شدن به مهلت ثبت‌نام ژانویه چه واکنشی نشان می‌دهند. تنش بین استانداردهای وب باز و تجاری‌سازی هوش مصنوعی در حال رسیدن به نقطه انفجار است.

گام بعدی شما

  • اگر توسعه‌دهنده هستید، پیش از ۱۲ ژانویه ۲۰۲۷ برای ثبت اپلیکیشن خود در سامانه ردیت اقدام کنید.
  • مدیران انجمن‌ها باید جریان‌های کاری خود را از RSS به ابزارهای جایگزین مانند Devvit منتقل کنند.
  • برای دسترسی به آرشیوهای قدیمی، عادت کنید از طریق حساب کاربری وارد شوید تا دسترسی شما به Old Reddit قطع نشود.

اما تنش بین استانداردهای وب باز و تجاری‌سازی داده‌ها تنها به ردیت محدود نمی‌شود؛ در گزارش بعدی بررسی خواهیم کرد که توییتر (X) چگونه این مسیر را پیش از همه آغاز کرد.

چرا این موضوع مهم است؟

این تصمیم اعتبار ردیت را به عنوان یکی از آخرین منابع داده‌های انسانیِ باز در وب تضعیف می‌کند و استخراج داده را به یک امتیاز تجاری تبدیل می‌کند. این تغییر، دسترسی پژوهشگران مستقل به داده‌های واقعی اجتماعی را به شدت محدود خواهد کرد.

تأثیر برای ایران

به‌دلیل محدودیت‌های دسترسی و تحریم‌ها، اکثر توسعه‌دهندگان ایرانی از طریق APIهای غیررسمی یا ابزارهای واسط با ردیت تعامل داشتند که با این تغییرات، دسترسی آن‌ها به داده‌های این پلتفرم دشوارتر یا غیرممکن خواهد شد.

·نگاه ما
تحریریه دات‌هوش

ردیت با این اقدام، مدل کسب‌وکار خود را از یک «پلتفرم اجتماعی» به یک «تأمین‌کننده داده» تغییر می‌دهد. این استراتژی نشان می‌دهد که در عصر مدل‌های زبانی بزرگ، ارزش واقعی نه در تعداد کاربران، بلکه در مالکیت انحصاری روی مجموعه داده‌های آموزشی (Training Sets) است. احتمالاً به زودی شاهد تبدیل شدن سایر شبکه‌های اجتماعی به «باغ‌های محصور» خواهیم بود که هر توکن داده در آن‌ها قیمت دارد.

منابع

این گزارش با خط‌لولهٔ خودکار دات‌هوش از منابع معتبر جهانی تدوین و زیر نظر تحریریه منتشر شده است. روش کار ما

گفتگو

پنج‌شنبه‌های هوش‌محور

بسته‌ی هفتگی دات‌هوش

۵ خبر، ۲ ابزار، ۱ پرامپت در هر شماره. به‌زودی راه‌اندازی می‌شود — هر پنج‌شنبه صبح.

خبر کلیدی
ابزار کاربردی
پرامپت حرفه‌ای
تحلیل پژوهش
به‌زودی
زاویه‌ی ایرانی
به‌زودی
تمرین این هفته
به‌زودی

راهنماهای دات‌هوش

راهنماهای کاربردیِ دات‌هوش برای کار با هوش مصنوعی — از همین‌جا شروع کنید:

دات‌هوش

راهنمای فارسی هوش مصنوعی — با نگاه به ایران

اخبار روزانه، معرفی ابزارها و مدل‌ها، و آموزشِ کار با هوش مصنوعی؛ همیشه با این پرسش که از ایران چه چیزی کار می‌کند و چه چیزی نه.