Мета запускает "Meta External агент", веб-ползущий в обход роботов.txt для сбора данных.

Meta выпустила новый веб-полос под названием Meta External Agentent для сбора данных из интернета, в частности, из публичного контента, такого, как новостные статьи и онлайн-обсуждения. Кроулер собирает данные для модели AI Meta, обходя стандартные меры защиты сайта, опираясь на файлы Robots.txt. Этот шаг свидетельствует о приверженности Меты обучению и совершенствованию моделей ИИ.

August 21, 2024
6 Статьи