Форум Diz-Cs.Ru
Преимущества регистрации:
Возможность создания тем
Общение с пользователями
Найдете множество полезной информации
Найдете своих единомышленников
DIZ-CS.RU - Мы с Вами НАВСЕГДА!
В данном разделе Вы сможете задать любой вопрос который касается uCoz. Если Вы ищите скрипт, то напишите в эту тему, также можете посетить наш раздел веб-мастеров.
Если у пользователя мало гарантий, то советуем провести сделку через гаранта.
  • Страница 1 из 1
  • 1
Модератор форума: -SAM-  
Вопрос по robots.txt
Дата: Вс, 31.07.2011, 20:44:38 | Сообщение # 1
Аватарка icesewer
OFF
Banned Users
94 Сообщения:
Skype пользователя:
Что такое??
Длеаю проверку у меня вот такое случилось!оО cry
http://www.imageup.ru/img36/bezymyannyjj719177.jpg.html

Некорректное имя главного зеркала сайта
Дата: Вс, 31.07.2011, 20:48:20 | Сообщение # 2
Аватар не установлен
OFF
Премиум
1419 Сообщения:
345 Награды:
5 Отзывы:
Skype пользователя:
Сайт пользователя:
без хттп и последнего слеша, чисто домен нужно вводить.
Дата: Вс, 31.07.2011, 20:50:00 | Сообщение # 3
Аватарка icesewer
OFF
Banned Users
94 Сообщения:
Skype пользователя:
А всё ясно!Разобрался!
Вот я тут проверил!По моему лучше сделать Robots.txt таким!
User-Agent: msnbot
Disallow: /

User-Agent: bingbot
Disallow: /

User-Agent: *
Disallow:

Нету блокировок страниц!)

Лучше же чем:

User-agent: *
Disallow: /stat/
Disallow: /search/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /mchat

Sitemap: http://sewer.clan.su/sitemap.xml
Sitemap: http://sewer.clan.su/sitemap-forum.xml

????
Дата: Вс, 31.07.2011, 21:02:36 | Сообщение # 4
Аватар не установлен
OFF
Премиум
1419 Сообщения:
345 Награды:
5 Отзывы:
Skype пользователя:
Сайт пользователя:
Quote (icesewer)
Нету блокировок страниц!)

спама много в выдаче будет = +% попасть под АГС
Дата: Вс, 31.07.2011, 21:04:42 | Сообщение # 5
Аватарка icesewer
OFF
Banned Users
94 Сообщения:
Skype пользователя:
Fidelist
я вообще в робостах не смыслю!
Ну значит этот лучше?
User-agent: *
Disallow: /stat/
Disallow: /search/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /mchat

Sitemap: http://sewer.clan.su/sitemap.xml
Sitemap: http://sewer.clan.su/sitemap-forum.xml
  • Страница 1 из 1
  • 1
Поиск: