Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
  • Страница 1 из 1
  • 1
Вопрос про robot.txt
#1
Понедельник, 01.11.2010, 12:54
Vangan
Проверенный
Сообщения: 1679
Репутация: 3190
Суть вопроса:у меня нет файла robot.txt на моем сайте,обязательно ли его создавать и не повредит его отсутствие на индексацию...
Русский сервер игры http://rift-online.ru/
#2
Понедельник, 01.11.2010, 13:05
fishing-man
Проверенный
Сообщения: 240
Репутация: 175
Robots лучше создать, с ним лучше индексируется сайт поисковиками особенно яндексом, так же в Robots можно указать что ненужно индексировать если вы не желаете этого...
http://0-rybalke.ru/ - сайт русской рыбалки!
http://megasoft.3dn.ru/forum/95-219690-1 - Повышение тИЦ с гарантией возврата средств!!!
#3
Понедельник, 01.11.2010, 13:24
Vangan
Проверенный
Сообщения: 1679
Репутация: 3190
fishing-man, спасибо,обязательно пропишу
Русский сервер игры http://rift-online.ru/
#4
Понедельник, 01.11.2010, 13:26
fishing-man
Проверенный
Сообщения: 240
Репутация: 175
Не за что...
http://0-rybalke.ru/ - сайт русской рыбалки!
http://megasoft.3dn.ru/forum/95-219690-1 - Повышение тИЦ с гарантией возврата средств!!!
#5
Понедельник, 01.11.2010, 13:31
igoryanzx1
Проверенный
Сообщения: 1897
Репутация: 3429
Vangan, У меня его небыло и сайт в топ 3 по вч, так что думаю ничего страшного нет!
Хотя Недавно пришлось сделать, т.к пришлось запретить пару страниц!
#6
Понедельник, 01.11.2010, 13:48
Vangan
Проверенный
Сообщения: 1679
Репутация: 3190
igoryanzx1, ну у меня тоже его не было и топ 3 по вч и так имеет сайт
Вот ещё один вопрос:
правда ,что директиву Host понимает только яндекс и для других поисковых систем нужно разделять директивы?
Русский сервер игры http://rift-online.ru/
#7
Понедельник, 01.11.2010, 13:52
Kxaker2
Пользователь
Сообщения: 69
Репутация: -34
http://v-ucoz.net.ru/load/45-1-0-11611 ЭТО видео урок если что как настроить чтоб все сканировало или запретить какие нить разделы! ;)
#8
Понедельник, 01.11.2010, 13:55
fishing-man
Проверенный
Сообщения: 240
Репутация: 175
Vangan: да, Host принимает только яндекс
http://0-rybalke.ru/ - сайт русской рыбалки!
http://megasoft.3dn.ru/forum/95-219690-1 - Повышение тИЦ с гарантией возврата средств!!!
#9
Понедельник, 01.11.2010, 13:56
Vangan
Проверенный
Сообщения: 1679
Репутация: 3190
fishing-man, значит,robots.txt должен быть такого типа?
Code
  User-agent: Yandex
       Disallow: /user/
       Disallow: /backup/
       Disallow: /engine/
       Disallow: /language/
       Disallow: /templates/
       Disallow: /upgrade/
       Disallow: /uploads/
       Disallow: /autobackup.php
       Disallow: /admin.php
       Disallow: /index.php?do=addnews
       Disallow: /index.php?do=feedback
       Disallow: /index.php?do=lostpassword
       Disallow: /index.php?do=pm
       Disallow: /index.php?do=register
       Disallow: /index.php?do=stats
       Disallow: /index.php?do=search
       Disallow: /index.php?subaction=newposts
       Disallow: /?do=lastcomments
       Disallow: /statistics.html
       Host: ваш-сайт.ру

       User-agent: *
       Disallow: /backup/
       Disallow: /user/
       Disallow: /engine/
       Disallow: /language/
       Disallow: /upgrade/
       Disallow: /autobackup.php
       Disallow: /admin.php
       Disallow: /index.php?do=addnews
       Disallow: /index.php?do=feedback
       Disallow: /index.php?do=lostpassword
       Disallow: /index.php?do=pm
       Disallow: /index.php?do=register
       Disallow: /index.php?do=stats
       Disallow: /index.php?do=search
       Disallow: /index.php?subaction=newposts
       Disallow: /?do=lastcomments
       Disallow: /statistics.html

       Sitemap: http://ваш-сайт.ру/sitemap.xml

Kxaker2, реклама,всю помощь жду только в теме...

Пост отредактировал Vangan - Понедельник, 01.11.2010, 14:48
Русский сервер игры http://rift-online.ru/
  • Страница 1 из 1
  • 1
Поиск:
Форум
Социальные сети
Хостинг от uCoz