Вопрос к SEOшникам, если они есть:
Если я в robots.txt поставлю:
User-agent: *
Disallow: /
будет запрет доступа всех роботов ко всему сайту или нет?
И в какой кодировки писать?
Вопрос к SEOшникам, если они есть:
Если я в robots.txt поставлю:
User-agent: *
Disallow: /
будет запрет доступа всех роботов ко всему сайту или нет?
И в какой кодировки писать?