Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы
  • Страница 1 из 1
  • 1
Как правильно создать robots.txt.
#1
Вторник, 17.01.2012, 21:24
BuFi
Пользователь
Сообщения: 89
Репутация: 78
Вообшем такая история, зарегестрировал я свой сайт в Яндекс но для индексации сайта требуеться robots.txt. я запарилься с ним и так и эток всеровно не правильно помогите сделать пожалуйста..!
з.ы Извените если не в данном топике тему создал=)

Добавлено (17.01.2012, 20:24)
---------------------------------------------
Люди помогите

#2
Вторник, 17.01.2012, 21:31
JackBlack
Проверенный
Сообщения: 745
Репутация: 645
Пропишите в конце:

Code
User-agent: Yandex
Host: www.site-name.ru


Это при условии, что у вас основная часть правильная.
#3
Вторник, 17.01.2012, 21:48
BuFi
Пользователь
Сообщения: 89
Репутация: 78
Хелп)

Добавлено (17.01.2012, 20:33)
---------------------------------------------
JackBlack я шяс скину как у меня

Добавлено (17.01.2012, 20:34)
---------------------------------------------
User-agent: YandexBot #
Sitemap: http://recipe.my1.ru/sitemap.xml
Sitemap: http://recipe.my1.ru/sitemap-forum.xml
Disallow: /a/
Disallow: /?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/0-0-0
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Host: recipe.my1.ru

Добавлено (17.01.2012, 20:48)
---------------------------------------------
Да помогите ёпт

#4
Вторник, 17.01.2012, 21:56
JackBlack
Проверенный
Сообщения: 745
Репутация: 645
Откуда вы взяли такой Robots ? oO

Правильный:

Code
User-agent: *
Disallow: /a/  
Disallow: /?  
Disallow: /stat/  
Disallow: /index/1  
Disallow: /index/2  
Disallow: /index/3  
Disallow: /index/5  
Disallow: /index/7  
Disallow: /index/8  
Disallow: /index/9  
Disallow: /index/0-0-0  
Disallow: /main/  
Disallow: /admin/  
Disallow: /secure/  
Disallow: /informer/  
Disallow: /mchat  
Sitemap: http://recipe.my1.ru/sitemap.xml  
Sitemap: http://recipe.my1.ru/sitemap-forum.xml  
User-agent: Yandex  
Host: recipe.my1.ru
#5
Вторник, 17.01.2012, 22:00
Adriano
Проверенный
Сообщения: 1622
Репутация: 2359
BuFi, а уделить 5 минут на прочтение данной статьи и самому написать правильный роботс для сайта, слабо?
Быть дерьмом может каждый, а реально заставить себя делать что-то могут не все.
#6
Вторник, 17.01.2012, 22:08
BuFi
Пользователь
Сообщения: 89
Репутация: 78
JackBlack спасибо большое за помошь=)
Adriano я на это один день потратил всеровно неполучилось(
#7
Среда, 18.01.2012, 11:27
Adriano
Проверенный
Сообщения: 1622
Репутация: 2359
BuFi, JackBlack хоть и создал вам карту, точнее сказать даже исправил вашу, но данная карта не верная. И после индексации многие страницы вашего сайта вылетят из индекса. А то, что действительно нужно закрыть, например, те же дубли страниц. Будут продолжать индексироваться. Поймите, что карта сайта нужна не для того, чтобы она просто была. А для того чтобы закрывать шлак сайта от индексации.
Быть дерьмом может каждый, а реально заставить себя делать что-то могут не все.
#8
Среда, 18.01.2012, 11:33
BuFi
Пользователь
Сообщения: 89
Репутация: 78
Adriano и что вы предлогаете делать?

Добавлено (18.01.2012, 10:33)
---------------------------------------------
Где, что и как изменить?

#9
Среда, 18.01.2012, 12:31
JackBlack
Проверенный
Сообщения: 745
Репутация: 645
Quote
JackBlack хоть и создал вам карту, точнее сказать даже исправил вашу, но данная карта не верная.


Я просто выложил более-менее универсальный вариант карты для сайтов на uCoz. Для закрытие дубликатов надо собственно их видеть, а такой возможностью я не располагаю :)
Среда, 18.01.2012, 13:35
BuFi
Пользователь
Сообщения: 89
Репутация: 78
Так что мне сделать чтоб закрыть данные дубликаты?
Среда, 18.01.2012, 13:48
JackBlack
Проверенный
Сообщения: 745
Репутация: 645
Закрыть их для индексации в Robots по образцу.
Среда, 18.01.2012, 14:34
BuFi
Пользователь
Сообщения: 89
Репутация: 78
я этот robots.txt. толком правильно заполнить не могу...
  • Страница 1 из 1
  • 1
Поиск:
Форум
Социальные сети
Хостинг от uCoz