Че за бред с роботами! - Форум о поисковых системах и социальных сетях

SMM продвижение Форум Блог Агентство Отзывы Подписки

Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы

Форум о социальных сетях Поиск по форуму Инвестиции SMM обучение SMM курсы

Страница 1 из 1
1

Че за бред с роботами!

Че за бред с роботами!

Offline

#1

Воскресенье, 08.11.2009, 19:47

Проверенный

Сообщения: 1393

Репутация: 861

У меня сайт стоит на DLE, robots.txt тоже есть, посомтреть его можно тут вот заходит робот Яндекса и сидит минут 5 на главной странице, после чего уходит Bukas

Bukas

Offline

#2

Воскресенье, 08.11.2009, 20:19

Проверенный

Сообщения: 577

Репутация: 199

Почитай здесь http://megasoft.3dn.ru/forum/41-104174-1, какой robots.txt для dle должен быть. А директивы Allow вообще не бывает. Только Disallow.

http://rd01.ru/ - регистрация и продление доменов .RU и .РФ - всего 96 руб.!

Offline

#3

Воскресенье, 08.11.2009, 20:21

Проверенный

Сообщения: 1393

Репутация: 861

kuut, ну на расскрученых сайтах я такое видел, да и robots.txt брал с них

Offline

#4

Воскресенье, 08.11.2009, 20:23

Проверенный

Сообщения: 577

Репутация: 199

robots.txt ничего не разрешает. Его назначение запрещать индексацию страниц или директорий.

Добавлено (08.11.2009, 20:23)
---------------------------------------------
В общем читай мою тему. Я это тоже не с потолка взял.

http://rd01.ru/ - регистрация и продление доменов .RU и .РФ - всего 96 руб.!

Offline

#5

Воскресенье, 08.11.2009, 20:25

Проверенный

Сообщения: 1393

Репутация: 861

kuut, да все почитал, все понятно за труд +5 лови

Offline

#6

Воскресенье, 08.11.2009, 20:35

Проверенный

Сообщения: 577

Репутация: 199

Почитай ещё здесь http://robotstxt.org.ru/
Полезный сайт.

http://rd01.ru/ - регистрация и продление доменов .RU и .РФ - всего 96 руб.!

Че за бред с роботами!

Страница 1 из 1
1

Социальные сети

Хостинг от uCoz