Powered by Invision Power Board
Здравствуйте Гость ( Вход | Регистрация ) Выслать повторно письмо для активации

Страницы: (2) [1] 2   ( Перейти к первому непрочитанному сообщению ) Reply to this topicStart new topicStart Poll

> robots.txt
Deco
Отправлено: Окт 3 2010, 19:33
Quote Post


SEO,HTML,IPB
Group Icon

Группа: Пользователи
Сообщений: 389
Пользователь №: 2 447
Регистрация: 16-Июля 10
Member Offline

Репутация: 15




Статья о robots.txt на нашем сайте: http://ipb.su/wiki/robots.php

Вопросы можно задавать здесь.

Это сообщение отредактировал admin - Авг 8 2013, 12:46


--------------------
Top
AZaRt
Отправлено: Окт 16 2010, 19:39
Quote Post


Хочу в модераторы!
Group Icon

Группа: Пользователи
Сообщений: 35
Пользователь №: 2 698
Регистрация: 16-Октября 10
Из: МО, г.Ногинск
Member Offline

Репутация: нет




когда я проверяю своего робота у сайта (http://unicalstat.ipb2.ru/robots.txt), то у меня такие строки:
Код
User-agent: * Disallow: Host: www.unicalstat.ipb2.ru

а должно быть вроде:
Код
User-agent: *
Disallow:
Host: www.unicalstat.ipb2.ru

что делать?

Это сообщение отредактировал AZaRt - Окт 16 2010, 19:39
Top
Deco
Отправлено: Окт 16 2010, 20:14
Quote Post


SEO,HTML,IPB
Group Icon

Группа: Пользователи
Сообщений: 389
Пользователь №: 2 447
Регистрация: 16-Июля 10
Member Offline

Репутация: 15




Не думаю, что тут можно или нужно что-то делать.


--------------------
Top
Kor
Отправлено: Окт 16 2010, 21:53
Quote Post


Новичок
Group Icon

Группа: Пользователи
Сообщений: 26
Пользователь №: 2 635
Регистрация: 23-Сентября 10
Member Offline

Репутация: нет




Где этот файл найти? И как его создать? И где создвать?
Top
admin
Отправлено: Окт 16 2010, 22:33
Quote Post


Разработчик
Group Icon

Группа: Администраторы
Сообщений: 5 535
Пользователь №: 1
Регистрация: 27-Октября 07
Member Offline

Репутация: 183




АдминЦентр -> Системные настройки -> Поисковая оптимизация


--------------------
Ответы на очень многие вопросы уже много раз давались на форуме. Пожалуйста, перед созданием темы с вопросом пользуйтесь поиском.

user posted image
Top
Kor
Отправлено: Окт 16 2010, 23:09
Quote Post


Новичок
Group Icon

Группа: Пользователи
Сообщений: 26
Пользователь №: 2 635
Регистрация: 23-Сентября 10
Member Offline

Репутация: нет




Ну я вот так сделал:
User-agent: *
Disallow:

А ботов в онлайне всеравно не вижу,
поставил чтобы они заходили как пользователи.

Это сообщение отредактировал Kor - Окт 16 2010, 23:26
Top
Dron
Отправлено: Окт 17 2010, 09:15
Quote Post


admin of ipb.su
Group Icon

Группа: Пользователи
Сообщений: 6 040
Пользователь №: 3
Регистрация: 27-Октября 07
Из: г.Псков
Member Offline

Репутация: 133




Kor,
А вы видимо думали, что они в тот же день прибегут? wink.gif
У неготорых до двух недель уходит, прежде чем первый бот вообще появиться на форуме.


--------------------

Мой блог: Блог Dron'а
E-mail: dron@ipb.su.
ICQ: 263635213.
-----------------------------------------------------------------------
user posted image

-----------------------------------------------------------------------
Вопрос/Ответ на тему IPB.SU
-----------------------------------------------------------------------
user posted image - Отблагодари, если я помог.
Top
Potter
Отправлено: Авг 18 2011, 21:35
Quote Post


Админ
Group Icon

Группа: Пользователи
Сообщений: 156
Пользователь №: 1 629
Регистрация: 11-Августа 09
Из: Украина
Member Offline

Репутация: 1




и что нужно загружать, и куда?


--------------------
user posted image
(Мой второй проект)
user posted image
(Мой первый проект)
_____________________________________________
IФутбол(Football)
IГП(Harry Potter)
IВК(vKontakte)
IПокер(Poker)
IМузыку и Кино(Musics and Films)
IМу Gilrfriend:).
_____________________________________________
Top
Slesher
Отправлено: Авг 19 2011, 08:24
Quote Post


реформатор
Group Icon

Группа: Пользователи
Сообщений: 1 224
Пользователь №: 650
Регистрация: 18-Марта 08
Из: Украины
Member Offline

Репутация: 57




Я думаю, хоть 3 000 статей в гугле, но найдутся на эту тему.


--------------------
Корпорация Фалкея - создание и развитие сайтов на заказ

Записки веб-программиста | Помог? спасибо!
Top
asm-a
Отправлено: Фев 19 2012, 13:54
Quote Post


<? echo"Кодер" ?>
Group Icon

Группа: Пользователи
Сообщений: 964
Пользователь №: 2 333
Регистрация: 29-Май 10
Member Offline

Репутация: 58




А где пункт про Robots? Я что то не нашел blink.gif


--------------------
Уважаемые посетители, используйте ПОИСК прежде чем что-то спросить.
--------------
За пределами форума технической поддержки помогаю только на ПЛАТНОЙ основе, независимо, есть ли у вас форум на нашем сервисе. Если есть вопросы или предложения, можете смело обратиться ко мне в ЛС
--------------
Мой сайт
--------------
xxx: Сегодня был у нашего админа, увидел на столе в горах хлама листок, весь исписанный фразой «Hello world». Оказалось, он так ручку расписывает.
Top
PruFF
Отправлено: Апр 1 2012, 07:39
Quote Post


Человек
Group Icon

Группа: Пользователи
Сообщений: 42
Пользователь №: 3 578
Регистрация: 30-Марта 12
Из: Абакан
Member Offline

Репутация: нет




Цитата (admin @ Окт 16 2010, 23:33)
АдминЦентр -> Системные настройки -> Поисковая оптимизация

А че это за Робот такой?


--------------------
Top
seomilk
Отправлено: Фев 20 2013, 08:29
Quote Post


Новичок
Group Icon

Группа: Пользователи
Сообщений: 3
Пользователь №: 4 050
Регистрация: 18-Февраля 13
Из: Москва
Member Offline

Репутация: нет




Возникла проблема с robots.txt после привязки к форуму домена второго уровня. По старому адресу http://домен.ipb.su/robots.txt все работает корректно, а по новому http://домен.ru/robots.txt - 404 ошибка.
Top
admin
Отправлено: Фев 20 2013, 10:33
Quote Post


Разработчик
Group Icon

Группа: Администраторы
Сообщений: 5 535
Пользователь №: 1
Регистрация: 27-Октября 07
Member Offline

Репутация: 183




seomilk, вечером разберусь, в чём проблема.


--------------------
Ответы на очень многие вопросы уже много раз давались на форуме. Пожалуйста, перед созданием темы с вопросом пользуйтесь поиском.

user posted image
Top
Raydenlord
Отправлено: Фев 20 2013, 11:17
Quote Post


-=godofwar=-
Group Icon

Группа: Пользователи
Сообщений: 120
Пользователь №: 3 509
Регистрация: 9-Февраля 12
Из: Санкт-Петербург
Member Offline

Репутация: 4




admin, точно такая же проблема...
Top
seomilk
Отправлено: Фев 20 2013, 20:53
Quote Post


Новичок
Group Icon

Группа: Пользователи
Сообщений: 3
Пользователь №: 4 050
Регистрация: 18-Февраля 13
Из: Москва
Member Offline

Репутация: нет




admin, спасибо!
Top
0 Пользователей читают эту тему (0 Гостей и 0 Скрытых Пользователей)
0 Пользователей:

Topic Options Страницы: (2) [1] 2  Reply to this topicStart new topicStart Poll