Die Anzahl aggressiver AI-Bots, Die Deine Website regelmäßig crawlen, hat sich spätestens seit dem AI-Boom vervielfacht. AI-Unternehmen wie Google, Apple, Amazon und co. trainieren ihre generative AI-Modelle auf Deine Kosten, indem sie Deine Website crawlen, was wiederum Deine Server-Ressourcen teils massiv beanspruchen und zu deutlich erhöhten Ladezeiten führen kann.
Wer ist betroffen?
Betroffen sind insbesondere WordPress Websites ohne oder teils nichts richtig konfigurierten Caching betroffen. Aber auch WooCommerce Shops oder Websites mit vielen dynamischen Inhalten auf denen kein Object Cache verwendet wird können von massiven Performance-Einbußen durch AI-Bots betroffen sein.
So schützt Dich WPspace vor AI-Bots
Auf mehrfachen Wunsch unserer Kunden, haben wir in den letzten Monaten Bots von mehr als 17 unterschiedlichen Unternehmen genauer unter die Lupe genommen und analysiert, wie sich das Crawling auf die Website-Performance unserer Kunden auswirkt.
Bots die sich in unseren Analysen besonders negativ bei einer Vielzahl an Kunden ausgewirkt habe, blockt unser System nun vollautomatisiert für dich.
Welche AI-Bots werden geblockt?
Auch weiterhin werden wir analysieren und klassifizieren welche AI-Bots für unsere Kunden eher nützlich und welche eher schädlich sind. Wir blockieren ausschließlich AI-Bots. Suchmaschinen-Bots wie Google, Bing, Yahoo und co. werden ausdrücklich NICHT blockiert!
Derzeit werden folgende Bots von WPspace als äußerst aggressiv eingestuft und blockiert:
Diese Liste wird fortlaufend von uns aktualisiert.
Kann ich die WPspace AI-Bot-Protection deaktivieren?
Ja. Du kannst die ID 1337 in der Web Application Firewall als Ausnahme definieren. Danach werden keine AI-Bots mehr blockiert.
Beachte bitte, dass Deine Website dann aggressiven AI-Bots, in Bezug auf AI-Bot-Zugriffe, schutzlos ausgeliefert ist und sich dadurch die allgemeine Performance und Stabilität Deiner Website drastisch verschlechtern kann. Du bist dann selbst dafür verantwortlich, beispielsweise mittels robots.txt, Crawler auf Deiner WordPress Website einzuschränken.