Код

robots.txt

.htaccess