Google объявила о важной новинке, которая позволит владельцам веб-сайтов более точно управлять использованием их ресурсов для обучения искусственного интеллекта (ИИ). Компания представила токен Google-Extended для служебного файла robots.txt, предназначенный для указания поисковым роботам Google, что сайт можно индексировать в поиске, но использование его данных будет запрещено для обучения системами ИИ, которые лежат в основе чат-бота Bard и Vertex AI, а также для будущих поколений ИИ-моделей компании.
Google-Extended предоставляет владельцам сайтов больший контроль и прозрачность в отношении использования их содержания для обучения нейросетей. Теперь владельцы сайтов могут активно влиять на процесс обучения ИИ и решать, какие данные доступны для анализа и использования, а какие — нет.
Это важный шаг в обеспечении баланса между развитием искусственного интеллекта и защитой данных веб-сайтов. Google подчеркивает свое стремление сотрудничать с сообществами веб-разработчиков и специалистов по ИИ, чтобы разработать более гибкие и эффективные методы контроля за обучением ИИ на веб-платформах.
Это изменение демонстрирует отражает тенденцию к более ответственному использованию данных в сфере искусственного интеллекта.
Как еще можно запретить Chat GPT использовать контент своего сайта для обучения?
Чтобы запретить GPTBot доступ к вашему сайту, вы можете добавить GPTBot в файл robots.txt вашего сайта:
User-agent: GPTBot
Disallow: /
Чтобы разрешить GPTBot доступ только к частям вашего сайта, вы можете добавить токен GPTBot в файл robots.txt вашего сайта следующим образом:
User-agent: GPTBot
Allow: /directory-1/
Disallow: /directory-2/

