Marcus Jaschen<p>Steuern kann man die Crawl-Rate nicht, es bleibt am Ende nur ein Rate-Limiting oder einfach das direkte Erden der Requests 💣</p><p>Wenigstens ist <a href="https://mastodon.social/tags/PerplexityAI" class="mention hashtag" rel="nofollow noopener" target="_blank">#<span>PerplexityAI</span></a> so nett, die IP-Ranges ihrer Bots bekannt zu geben, das ist ja auch längst nicht mehr Standard.</p><p><a href="https://docs.perplexity.ai/guides/bots" rel="nofollow noopener" translate="no" target="_blank"><span class="invisible">https://</span><span class="">docs.perplexity.ai/guides/bots</span><span class="invisible"></span></a></p>