Úvod / Generátor robots.txt
Nástroj zdarma
Generátor robots.txt pro AI roboty.
Vytvořte robots.txt, který pustí ChatGPT, Perplexity, Copilot a Google k vašemu obsahu, a pokud chcete, zakáže roboty sbírající data pro trénink AI. Pro WordPress, Shoptet i jiné weby.
Kam ho dát: WordPress: Rank Math → Obecné nastavení → Upravit robots.txt (jen když na hostingu není fyzický soubor robots.txt), nebo Yoast → Nástroje → Editor souborů. Jiný web: soubor robots.txt do kořene webu. Po uložení otevřete vas-web.cz/robots.txt a zkontrolujte, že se zobrazuje.
Chcete víc než kód? V PDF průvodci za 490 Kč je postup krok za krokem, jak se dostat do odpovědí ChatGPT, Google AI a Perplexity. Nebo to nastavím za vás za 2 990 Kč.
Vyhledávací vs. tréninkoví roboti
AI roboti se dělí na dvě skupiny. Vyhledávací roboti, například OAI-SearchBot od OpenAI nebo PerplexityBot, čtou web, aby ho mohli citovat v odpovědích s odkazem. Ty byste blokovat neměli. Tréninkoví roboti, například GPTBot nebo CCBot, sbírají obsah pro učení modelů a návštěvu vám nepřinesou. Jestli je pustíte, je vaše rozhodnutí.
Častá chyba je přidat samostatnou skupinu pravidel pro konkrétního robota. Robot, který má vlastní skupinu, pravidla pro User-agent: * ignoruje. Generátor proto vyhledávací roboty nechává pod obecnými pravidly. Víc v článku robots.txt a AI roboti.
Po nasazení si web ověřte kontrolou AI viditelnosti zdarma.
Časté otázky
Zablokuje zákaz GPTBot můj web v ChatGPT?
Ne. Podle OpenAI řídí zobrazení ve vyhledávání ChatGPT robot OAI-SearchBot. GPTBot slouží k tréninku modelů.
Mám blokovat Google-Extended?
Google-Extended neovlivňuje Google Search ani AI přehledy. Podle Googlu ale řídí i použití obsahu v aplikacích Gemini, proto jeho blokaci firmám, které chtějí být vidět, nedoporučuji.
Jak to funguje na Shoptetu?
Shoptet má vlastní robots.txt a text, který zadáte v administraci, přidá na jeho konec. Výchozí pravidla tím nepřepíšete, jen doplníte další.
Je robots.txt závazný?
Je to dobrovolný standard. Velcí provozovatelé AI a vyhledávačů ho podle svých dokumentací respektují, ale technicky přístup nezabrání.
Související: Kontrola AI viditelnosti · Generátor JSON-LD · Generátor robots.txt · llms.txt · Generátor llms.txt
