Analisi locale — nessun fetch live.

WebToolMage

Tester robots.txt

Valida robots.txt incollato in locale.

Nessuno stato crawl senza fetch (non in questi piloti).

Risultato

{
  "lines": 4,
  "agents": 1
}

Metodo

inspectUrl usa URL. robots controlla User-agent/Disallow/Allow/Sitemap.

Ipotesi

  • Parsing URL API.
  • Regole robots.
  • Nessuna API di rete a pagamento.

Domande

Recupera il mio sito?

Non in questi piloti. Incolla il contenuto.

Consulenza legale?

No. Solo validazione sintattica.

Ispettore URL·Versione in inglese USA

Tester robots.txt · WebToolMage