|
Помогите сделать правельный файл Robots.txt.
|
|
Дата: Вс, 31.07.2011, 11:16:30 | Сообщение # 1|
|
У меня на сайте вообще нету файла Robots.txt.
Прошу можете мне сделать его???((( 
Я вообще не понимаю как его делать!(Добавлено (31.07.2011, 11:16:30)
---------------------------------------------
Вот сделал себе robots.txt
Вернее одолжин у сайта одного! cs-hlds
Правельный ли он?????
User-agent: Yandex
Host: sewer.clan.su
Disallow: /_ld
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
|
|
Дата: Вс, 31.07.2011, 11:38:40 | Сообщение # 2|
|
Этот Robots.txt сделан под яндекс, с других поисковиков переходов вообще не будет.
|
|
Дата: Вс, 31.07.2011, 11:50:49 | Сообщение # 3|
|
Hasl, Сможешь сделать что бы с других тоже был!(((
чень надо прошу!
С меня награды!и + сы!Добавлено (31.07.2011, 11:50:49)
---------------------------------------------
А вод так???
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
|
|
Дата: Вс, 31.07.2011, 11:55:15 | Сообщение # 4|
|
icesewer, ты лучше подожди пока яша тебя проиндексирует и твой роботс.тхт сам появиться! а уж потом редактируй =)
|
|
Дата: Вс, 31.07.2011, 11:56:32 | Сообщение # 5|
|
UnFeeL,
Спасибо большое!
Потом обьясни что и как!))
С меня награды и плюсики!)
|
|
Дата: Пт, 05.08.2011, 04:30:58 | Сообщение # 6|
|
icesewer, поле Disallow: указывай ссылку на то что не должно индексироваться, а именно:
1.Страницы где ты размещаеш чужие ссылки
2.Советую закрыть раздел на форуме вакансии или банерообмен
Прогоняю сайты по Allsubmitter 6.6
|
|
Дата: Пт, 05.08.2011, 10:21:10 | Сообщение # 7|
|
Code User-agent: *
Disallow: /panel/
Disallow: /admin/
Disallow: /search
Host: http://cылка на сайт
Sitemap:http://домен/ sitemap.xml
Sitemap:http://домен/sitemap-forum.xml
Самый оптимальный вариант
Skype: troll-face0
|
|
Дата: Пт, 05.08.2011, 12:51:30 | Сообщение # 8|
|
UnHappy, вариант ужасный!
В твоём robots.txt не закрыты от индексации страницы регистрации, которым не нужно индексироваться! Не закрыты страницы с авто входом и многие другие страницы!
Прогоняю сайты по Allsubmitter 6.6
|
|
Дата: Пт, 05.08.2011, 12:57:33 | Сообщение # 9|
|
Code User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /mchat
Host: site.ru
Sitemap: http://site.ru/sitemap.xml
Sitemap: http://site.ru/sitemap-forum.xml
вот держи правильный robots.txt
[cntr] [/cntr]
|
|
Дата: Пт, 05.08.2011, 13:35:22 | Сообщение # 10|
|
Liiion, можно сказать стандартный!
Но советую не принебрегать закрывать страницы с большим количеством чужих ссылок ну и конечно страницы с формой добовления материала!
Прогоняю сайты по Allsubmitter 6.6
|
|
