Krátká odpověďAno, a stává se to často. Cloudflare i některé hostingy mají ochranu proti botům, která AI roboty zablokuje nebo jim místo webu ukáže ověřovací stránku. robots.txt přitom vypadá v pořádku. Pomůže vypnout plošné blokování AI botů nebo povolit ověřené roboty.
Jak to poznat
- AI vysvědčení otevře web jako běžný prohlížeč i jako robot ChatGPT a výsledky porovná.
- V Cloudflare se podívejte do Security → Events, jestli tam nejsou blokované požadavky od GPTBot, OAI-SearchBot nebo PerplexityBot.
- Zeptejte se ChatGPT na konkrétní stránku vašeho webu. Pokud ji „nemůže otevřít“, je to podezřelé.
Jak to opravit
- Cloudflare: v nastavení botů zkontrolujte volbu blokování AI botů a povolte ověřené roboty (Verified Bots).
- Hosting: požádejte podporu, ať AI roboty z ochrany vyjme.
- Bezpečnostní pluginy (Wordfence apod.): zkontrolujte pravidla pro boty.
Jak je na tom váš web?
Zjistěte zdarma za 10 vteřin, jestli váš web umí přečíst a doporučit ChatGPT a Google AI.