robots.txt — Genereren
Voorbeeldinvoer
https://example.com/sitemap.xmlWaarop letten
Gegenereerde code is een beginpunt. Controleer echte URL’s en inhoud voor publicatie.
Maak een robots.txt met crawlregels en een sitemapverwijzing.
https://example.com/sitemap.xmlGegenereerde code is een beginpunt. Controleer echte URL’s en inhoud voor publicatie.