Robots.txt talar om för sökmotorer (robots eller botar) vilka URLer på din sida de får komma åt.

Det kan antingen vara en fil eller så kan innehållet genereras av WordPress när någon besöker den.

Robots.txt-filen finns i din sidas webbrot (root-mapp) och kan nås via dindomän.se/robots.txt.

För att redigera filen så kan du följa vår guide för att sätta upp filåtkomst, navigera till din sidas webbrot och redigera robots.txt-filen där.

Om det inte finns någon robots.txt-fil i din mappen så kommer den istället att genereras av WordPress "on the fly" när någon besöker den. Om filen inte finns där så kan du ladda upp din egen robots.txt-fil om du vill kontrollera dess innehåll.