Je kunt niet meer dan 25 onderwerpen selecteren
Onderwerpen moeten beginnen met een letter of nummer, kunnen streepjes bevatten ('-') en kunnen maximaal 35 tekens lang zijn.
4 regels
67 B
4 regels
67 B
4 jaren geleden
|
# https://www.robotstxt.org/robotstxt.html
|
||
|
|
User-agent: *
|
||
|
|
Disallow:
|