Нужно ли закрывать граб от ботов?

У меня граб новостей на сайте стоит нужно ли закрывать папку от ботов. А то сотни страниц с этого граба проиндексировали которых у меня получается нет

Лучше закрывать..
За грабы поисковики банят..

Windler, а я не знал

Лучше закрыть. Этим ты избежишь проблем с хостером по поводу нагрузки и страниц левых не будет в поисковиках.
Они индексируются, но под выдачу не попадают всё равно потому что есть оригиналы.
З.Ы. Бан поисковики не дают за грабы.

это в роботс надо что прописать вот это Disallow: /граб

askar69 (18.04.2011/12:20)
это в роботс надо что прописать вот это Disallow: /граб

В роботс.тхт
писать::
Disallow:/game ??
P.S. game это папка с грабером

и все?

Falcao, А вопросит знак тож надо чтоли?

Не, нинадо)
посмотри B robots.txt там написано как надо с папкой panel ! - скопируй и вместо panel впиши свое

У меня нет роботс сам ща создам и напишу