ГС, robots.txt и Яндекс - Страница 3 - Форум о поисковых системах и социальных сетях

Страница 3 из 3
«
1
2
3

ГС, robots.txt и Яндекс

regu

#31

Понедельник, 08.03.2010, 21:20

Проверенный

Сообщения: 356

Репутация: 529

halyavin,причину этого я отписал в предведущем посте

Профиль

FullBlooded

#32

Понедельник, 08.03.2010, 21:38

Проверенный

Сообщения: 2840

Репутация: 11427

regu,

Quote (regu)

Quote (FullBlooded)

Я не понимаю, роботс же запрещает индексацию!!! Каким образом? chuckle

все очень просто и объяснимо:
у тебя запрещается:
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Не забывайте, это только для робота uBot

Code

User-agent: uBot

А для всех остальных роботов, в том числе и роботов Яндекса, действует правило:

Code

User-agent: *
Disallow: /

Ваша версия не конает.

Создал зеркало темы на ачате. Ответил один неадекват, а дальше молчание.

Хочу продать все свои сайты.

Профиль

regu

#33

Понедельник, 08.03.2010, 22:00

Проверенный

Сообщения: 356

Репутация: 529

Впринципе вы правы ...Но есть одно НО и еще одна теория:
На сколько я знаю , .htaccess (возможно у юкоз как-то по другому называется ) дает на это все права: тоесть категория /news не относится в / , т.к возможно выполняется разными программами (имею ввиду образотчиков).
Именно поэтому news может и индексируется...

Профиль

FullBlooded

#34

Понедельник, 08.03.2010, 22:02

Проверенный

Сообщения: 2840

Репутация: 11427

Quote

На сколько я знаю , .htaccess

Уже не то, так как используется исключительно на php-хостингах. И то не на всех.

Хочу продать все свои сайты.

Профиль

regu

#35

Понедельник, 08.03.2010, 22:06

Проверенный

Сообщения: 356

Репутация: 529

[quote=FullBlooded]Уже не то, так как используется исключительно на php-хостингах. И то не на всех. [/quote]
[quote=regu].htaccess (возможно у юкоз как-то по другому называется )[/quote]
я же сказал , что называется-то по другому , ну а смысл не меняется...

Профиль

FullBlooded

#36

Понедельник, 08.03.2010, 22:13

Проверенный

Сообщения: 2840

Репутация: 11427

regu,
Там такого нет.

Хочу продать все свои сайты.

Профиль

ГС, robots.txt и Яндекс

Страница 3 из 3
«
1
2
3