Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
  • Страница 1 из 1
  • 1
Скажите что означает этот роботс тхт
Uk
#1
Четверг, 01.12.2011, 10:37
Uk
Проверенный
Сообщения: 275
Репутация:
User-agent: * Disallow: Host: http://site.ru Sitemap: http://site.ru/sitemap.xml
Разрешена индексация или запрещена?
http://o-gta.ru/
#2
Четверг, 01.12.2011, 11:26
Ragipnol
Проверенный
Сообщения: 304
Репутация: 32
вот так делай

User-agent: *

Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /search

Host: site.ru
Sitemap: http://site.ru/sitemap.xml

Sitemap: http://site.ru/sitemap-forum.xml

и все будет норм

Добавлено (01.12.2011, 10:26)
---------------------------------------------
Disallow: - значит не индексировать

Uk
#3
Четверг, 01.12.2011, 11:34
Uk
Проверенный
Сообщения: 275
Репутация:
А вот именно этот роботс тхт что означает?
Я знаю как надо,то просто сайт не на ucoz,это запрещеная индексация или разрешена?
http://o-gta.ru/
#4
Четверг, 01.12.2011, 12:01
Ragipnol
Проверенный
Сообщения: 304
Репутация: 32
роботс.тхт показывает что индексировать и что не индексировать

в нем типа указвается чтоо ненадо индексировать профили и другие ненужные страницы,
и указывает где лежит сайтмап (карта сайта в которой прописаны адреса всех новостей, постов)
Uk
#5
Четверг, 01.12.2011, 14:23
Uk
Проверенный
Сообщения: 275
Репутация:
Ragipnol, блин я знаю что такое роботс тхт а что в моем случае он означает, разрешена индексация сайта или нет!Пургу только мне какуе то ответил!
http://o-gta.ru/
#6
Четверг, 01.12.2011, 14:37
Ragipnol
Проверенный
Сообщения: 304
Репутация: 32
если написано
Disallow: Host: http://site.ru
значит запрещена
Uk
#7
Четверг, 01.12.2011, 14:51
Uk
Проверенный
Сообщения: 275
Репутация:
а у меня такой вопрос,нашел сайт, с такми же роботс тхт только там 5000 страниц в гугле!
Как такое быть может??
Может ты что то перепутал?
http://o-gta.ru/
#8
Четверг, 01.12.2011, 14:54
Ragipnol
Проверенный
Сообщения: 304
Репутация: 32
хз
дай адрес на твой роботс

Добавлено (01.12.2011, 13:54)
---------------------------------------------
а вообще вот ресурсы с описанием как их делать и распространенные ошибки
http://robotstxt.org.ru/robotstxterrors
http://effe.com.ua/article/10
http://pyramid.com.ua/promo/meta/robots.shtml
http://www.cy-pr.com/forum/f15/t16105/

#9
Четверг, 01.12.2011, 16:54
McMAP
Проверенный
Сообщения: 1341
Репутация: 1017
Uk, а по-моему ты что-то тут перепутал. Если твой сайт не на юкозе, то что эта тема делает в этом разделе?
Uk
Четверг, 01.12.2011, 17:22
Uk
Проверенный
Сообщения: 275
Репутация:
Даже дело если идет о юкоз,роботс тхт везде одинаковый!
http://o-gta.ru/
Четверг, 01.12.2011, 17:40
McMAP
Проверенный
Сообщения: 1341
Репутация: 1017
Uk, структура одинаковая, содержимое разное.
Прочитай материалы по ссылкам, которые выложили выше.
  • Страница 1 из 1
  • 1
Поиск:
Форум
Социальные сети
Хостинг от uCoz