Все привет, как сделать, чтобы робот Яндекс не скачивал статьи от Библиотеки? Что нужно прописать на файл robots.txt? Заранее спасибо
Все привет, как сделать, чтобы робот Яндекс не скачивал статьи от Библиотеки? Что нужно прописать на файл robots.txt? Заранее спасибо
Наоборот надо давть роботу скачивать, индексировать статьи из библиотеки иначе вообще смысла нет..
Или у тебя там порнушка
..
---
Disallow: /library/
User-agent: Yandex
Disallow: /library/index.php?act=download*
# Blade (22.12.2015 / 10:18)а разве в библе есть скачать статью уже ?
User-agent: Yandex
Disallow: /library/index.php?act=download*
Если робот будет индексировать библиотеку это наоборот лучше будет много посетителей.
# Fublin (22.12.2015 / 12:48)Есть, тут библиотеку глянь
а разве в библе есть скачать статью уже ?