Robots.txt generator
Genereer snel basisregels voor zoekmachinecrawlers.
Je resultaat verschijnt hier…
Hoe gebruik je deze tool?
Voer de gevraagde informatie in of plak deze in de tool.
Pas indien nodig de beschikbare opties aan.
Start de tool en bekijk, kopieer of download daarna het resultaat.
Gebruik bijvoorbeeld eerst een kleine test met je eigen gegevens om het resultaat te controleren.
Robots.txt generator
Voer een domein in en eventueel een pad dat crawlers niet mogen bezoeken. De tool maakt een eenvoudige robots.txt-structuur die je kunt controleren voordat je deze publiceert.