کلودفلر اعلام کرد که از این پس، به‌صورت پیش‌فرض خزنده‌های شناخته‌شده هوش مصنوعی را مسدود خواهد کرد تا از “دسترسی بدون اجازه یا پرداخت” آنها به محتوای اینترنتی جلوگیری کند. این تصمیم بخشی از برنامه گسترده‌تری است که به صاحبان دامنه‌ها امکان می‌دهد هنگام ثبت وب‌سایت، مشخص کنند آیا اجازه‌ی دسترسی به خزنده‌های AI را می‌دهند یا خیر.
یکی از ویژگی‌های جدید این طرح، برنامه‌ای با عنوان پرداخت به ازای خزیدن (Pay Per Crawl) است که به ناشران منتخب این امکان را می‌دهد تا برای دسترسی خزنده‌های AI به محتوای خود، قیمت‌گذاری مشخصی تعیین کنند. شرکت‌های توسعه‌دهنده‌ی هوش مصنوعی می‌توانند این قیمت‌ها را مشاهده کرده و درباره‌ی پرداخت یا عدم استفاده از محتوا تصمیم‌گیری کنند. کلودفلر می‌گوید این اقدام با هدف حمایت از تولیدکنندگان محتوای باکیفیت و تضمین دسترسی قانونی به آثار آنان انجام شده است.
پیش‌تر، کلودفلر قابلیت مسدودسازی خزنده‌ها را فقط برای بات‌هایی فعال کرده بود که به فایل robots.txt احترام می‌گذارند؛ فایلی که صرفاً توصیه‌نامه‌ای است و ضمانت اجرایی ندارد. اما حالا وب‌سایت‌ها می‌توانند تمام خزنده‌های هوش مصنوعی را مسدود کنند، حتی اگر آن خزنده به robots.txt پایبند نباشد. این تنظیمات از این پس به‌صورت پیش‌فرض برای مشتریان جدید کلودفلر فعال خواهد بود. همچنین قابلیتی موسوم به “هزارتوی هوش مصنوعی” معرفی شده که خزنده‌های غیرمجاز را با الگوریتمی پیچیده از دسترسی به محتوا بازمی‌دارد.
ناشران بزرگ و پلتفرم‌هایی مانند AP، The Atlantic، Fortune، Stack Overflow و Quora از این سیاست جدید استقبال کرده‌اند. زیرا معتقدند در دوران گسترش استفاده از چت‌بات‌های هوش مصنوعی، که بسیاری از کاربران ترجیح می‌دهند از طریق پاسخ‌های هوش مصنوعی به اطلاعات برسند، محافظت از محتوای اصلی اهمیت بیشتری یافته است. کلودفلر همچنین با برخی شرکت‌های هوش مصنوعی همکاری می‌کند تا خزنده‌های آنها را اعتبارسنجی کرده و هدف استفاده‌ی آنها از محتوا را (مثلاً برای آموزش مدل یا جستجو) شفاف‌سازی کند. این اطلاعات به صاحبان وب‌سایت‌ها کمک می‌کند تا درباره اجازه دسترسی به خزنده‌ها تصمیم‌گیری دقیق‌تری بگیرند.
ارسال دیدگاه