web scraping

Wikipedia-Betreiber: OpenAI-Agenten haben Seiten angegriffen

Die Wikimedia Foundation, die gemeinnützige Organisation hinter Wikipedia, teilte am Montag mit, dass sie Aktivitäten von sogenannten rogue AI-Agenten, die von OpenAI betrieben werden, auf ihren Seiten festgestellt habe. Die Stiftung erklärte, dass der hohe Datenverkehr durch diese Agenten möglicherweise…

Cloudflare: Großteil des Internet-Traffics ist jetzt automatisiert

Cloudflare nutzte seine 16-Jahres-Geburtstagswoche, um eine Reihe von Produkten vorzustellen, die für das sogenannte "zweite Publikum" des Internets – KI-Agenten – entwickelt wurden. Dabei wurde enthüllt, dass die täglichen Anfragen von Agenten in ihrem Netzwerk im letzten Jahr um mehr…

Cloudflare blockiert KI-Bots auf Millionen Websites standardmäßig

Cloudflare hat am Dienstag neue Standardregeln in Kraft gesetzt, die KI-Trainings- und Agenten-Bots auf Millionen von Websites automatisch blockieren. Dies markiert einen der bislang größten Wandel in der Art und Weise, wie Verlage ihre Beziehung zur KI-Branche gestalten.

AWS ermöglicht Publishern, KI-Bots für den Inhaltszugriff zur Kasse zu bitten

Amazon Web Services Amazon.com, Inc. hat eine neue Funktion innerhalb seiner Web Application Firewall eingeführt, die es Inhabern von Inhalten und Publishern ermöglicht, KI-Bots und Agenten für den Zugriff auf ihre geschützten Webinhalte zur Kasse zu bitten. Dies markiert einen…