Вопрос к SEOшникам, если они есть:
Если я в robots.txt поставлю:
User-agent: *
Disallow: /
будет запрет доступа всех роботов ко всему сайту или нет?
И в какой кодировки писать?
Вопрос к SEOшникам, если они есть:
Если я в robots.txt поставлю:
User-agent: *
Disallow: /
будет запрет доступа всех роботов ко всему сайту или нет?
И в какой кодировки писать?
да он впринципе ненужен робот этот. кодировка ютф-8
Роботс нужен ,по вопросу - да ,будет запрещен к индексации весь сайт
Спасибо то что надо!