nástroj/v0.1

Robots.txt

Vizuální builder robots.txt — skupiny user-agentů s allow/disallow pravidly, crawl-delay a sitemapy. Parser s českým výkladem.

Skupina 1

User-agent

Pravidla

Crawl-delayvteřin (volitelné)

Sitemap mapy

Výstup

User-agent: *
Disallow: /admin

Sitemap: https://example.com/sitemap.xml

Soubor robots.txt řídí, jak roboti procházejí váš web. Tento nástroj generuje i parsuje obvyklou syntaxi (User-agent, Allow, Disallow, Crawl-delay, Sitemap). Vše počítáme v prohlížeči — nic se neukládá ani neodesílá.