Lokale parse — geen live fetch geclaimd.
WebToolMage
Robots.txt-tester
Valideer geplakte robots.txt lokaal.
Geen crawlstatus zonder fetch (niet in deze pilots).
Methode
inspectUrl gebruikt URL. robots controleert User-agent/Disallow/Allow/Sitemap.
Aannames
- URL-API-parsing.
- Robots-regels.
- Geen betaalde netwerk-API.
Vragen
Haalt het mijn site op?
Niet in deze pilots. Plak inhoud.
Juridisch advies?
Nee. Alleen syntaxisvalidatie.