robots.txt каким должен быть?

506
.
Люди, читал статьи разные на эту тему но не вьехал. Пожалуйста, дайте мне готовый файл без запрета на что либо. И кто может обьяснить, как сайтмап.хмл делать.
.
KaNapizZ, в джонеесть файл тм что написанно то рарешено для индексации
.
Fublin (21.10.2012 / 13:15)
KaNapizZ, в джонеесть файл тм что написанно то рарешено для индексации
Только что искал не нашел
.
OtherWorld
KaNapizZ, Вот стандартный robots.txt джона
Прикрепленные файлы:
.
КЕК
Есть специальный сервис, он сам сам все делает, ты только адрес свой пишешь...
.
http://4seo.biz/tools/15/
.
OtherWorld
"Очень важно запомнить
главное - файл robots .txt ничего не разрешает , а только запрещает!!!" т.е. получается что строка "Allow: /" лишняя
.
OtherWorld (21.10.2012 / 15:28)
"Очень важно запомнить
главное - файл robots .txt ничего не разрешает , а только запрещает!!!" т.е. получается что строка "Allow: /" лишняя
нужна..птому что например мы разремаем читать директорию, но запрещаем читаь в ней что то, например ид=54?до=5
.
Fublin, Т.е. если не написать "Allow: /" сайт не будет индексироватся? Так получается?
.
Fublin (21.10.2012 / 15:35)
нужна..птому что например мы разремаем читать директорию, но запрещаем читаь в ней что то, например ид=54?до=5
Ты не прав.
Allow: / - разрешает индексировать все
Так что все, что написано в Disallow будит проиндексировано
Всего: 15