robots.txt
| IPB.SU · Правила форума | Репутация Помощь Поиск Участники Календарь Аркады Журналы |
| Здравствуйте Гость ( Вход | Регистрация ) | Выслать повторно письмо для активации |
| Страницы: (2) 1 [2] ( Перейти к первому непрочитанному сообщению ) |    |
robots.txt| admin |
Отправлено: Фев 20 2013, 21:17
|
 Разработчик  Группа: Администраторы Сообщений: 5 535 Пользователь №: 1 Регистрация: 27-Октября 07  Репутация: 183  |
Исправлено.
-------------------- Ответы на очень многие вопросы уже много раз давались на форуме. Пожалуйста, перед созданием темы с вопросом пользуйтесь поиском.
 |
|
| seomilk |
Отправлено: Фев 20 2013, 22:06
|
|
Новичок  Группа: Пользователи Сообщений: 3 Пользователь №: 4 050 Регистрация: 18-Февраля 13 Из: Москва Репутация: нет |
admin, все заработало. Спасибо!
|
|
|
| Raydenlord |
Отправлено: Фев 20 2013, 22:09
|
 -=godofwar=- Группа: Пользователи Сообщений: 120 Пользователь №: 3 509 Регистрация: 9-Февраля 12 Из: Санкт-Петербург Репутация: 4 |
admin, подтверждаю, заработало! Благодарю
 |
|
|
| Alex86 |
Отправлено: Авг 3 2013, 11:39
|
|
Участник Группа: Пользователи Сообщений: 94 Пользователь №: 3 736 Регистрация: 20-Августа 12 Репутация: 1 |
Скажите, как составить robots.txt, чтоб не индексировались профили пользователей?
|
|
|
| Raydenlord |
Отправлено: Авг 6 2013, 10:55
|
|
-=godofwar=- Группа: Пользователи Сообщений: 120 Пользователь №: 3 509 Регистрация: 9-Февраля 12 Из: Санкт-Петербург Репутация: 4 |
Код User-agent: * Disallow: /index.php?showuser |
|
|
| Murky |
Отправлено: Мар 8 2015, 08:49
|
 ГлавБУХ Группа: Пользователи Сообщений: 10 Пользователь №: 5 224 Регистрация: 29-Января 15 Репутация: нет |
Если я не хочу запрещать индексацию никаких форумов, robots.txt не нужен, всё и так проиндексируется, или он всё же полезен? Если да, то чем?
У меня прикреплённый домен. В таком случае robots.txt нужен, полезен или можно обойтись без него? |
|
|
| admin |
Отправлено: Мар 9 2015, 22:06
|
|
Разработчик Группа: Администраторы Сообщений: 5 535 Пользователь №: 1 Регистрация: 27-Октября 07 Репутация: 183 |
Роботс в любом случае полезен. Если прикреплённый домен - тем более, чтобы указать его как главный для поисковиков.
-------------------- Ответы на очень многие вопросы уже много раз давались на форуме. Пожалуйста, перед созданием темы с вопросом пользуйтесь поиском.
|
|
|
| Altron |
Отправлено: Июл 19 2015, 18:19
|
|
Новичок Группа: Пользователи Сообщений: 1 Пользователь №: 5 734 Регистрация: 19-Июля 15 Репутация: нет |
Приветствую. Проблема с файлом.
Когда его переносили с движка юкоза на IPB, то попросили временно сделать сайт не индексируемым. И сделал подрядчик вот такой файл Код User-agent: * Disallow: /forum/admin/ Disallow: /forum/cache/ Disallow: /forum/converge_local/ Disallow: /forum/hooks/ Disallow: /forum/ips_kernel/ Disallow: /forum/retail/ Disallow: /forum/public/style_captcha/ Disallow: /forum/index.php?app=core&module=task Disallow: /forum/index.php?app=forums&module=moderate§ion=moderate Disallow: /forum/index.php?app=forums&module=extras§ion=forward Disallow: /forum/index.php?app=members&module=chat Disallow: /forum/index.php?&unlockUserAgent=1 Disallow: /forum/*&module=search Allow: /forum/*&search_tags= Disallow: /forum/*app=core&module=global§ion=reputation Disallow: /forum/*app=core&module=usercp Disallow: /forum/*app=members&module=messaging Disallow: /forum/*&p= Disallow: /forum/*&pid= Disallow: /forum/*&hl= Disallow: /forum/*&start= Disallow: /forum/*view__getnewpost$ Disallow: /forum/*view__getlastpost$ Disallow: /forum/*view__old$ Disallow: /forum/*view__new$ Disallow: /forum/*view__getfirst$ Disallow: /forum/*view__getprevious$ Disallow: /forum/*view__getnext$ Disallow: /forum/*view__getlast$ Disallow: /forum/*&view=getnewpost$ Disallow: /forum/*&view=getlastpost$ Disallow: /forum/*&view=old$ Disallow: /forum/*&view=new$ Disallow: /forum/*&view=getfirst$ Disallow: /forum/*&view=getprevious$ Disallow: /forum/*&view=getnext$ Disallow: /forum/*&view=getlast$ Disallow: /forum/*?s= Disallow: /forum/*&s= Disallow: /forum/index.php?app=core&module=global§ion=login&do=deleteCookies Disallow: /forum/index.php?app=forums&module=extras§ion=rating Disallow: /forum/index.php?app=forums&module=forums§ion=markasread Disallow: /forum/*&do=who Disallow: /forum/*§ion=dname Disallow: /forum/go/ Disallow: /forum/user/ Disallow: /forum/members/ Disallow: /forum/calendar/ Disallow: /forum/statuses/ Disallow: /forum/index.php/user/ Disallow: /forum/index.php/members/ Disallow: /forum/index.php/calendar/ Disallow: /forum/index.php/statuses/ Disallow: /forum/index.php?/user/ Disallow: /forum/index.php?/members/ Disallow: /forum/index.php?/calendar/ Disallow: /forum/index.php?/statuses/ Что нужно сделать, чтобы сайт начал нормально индексироваться? есть какой-то вид файла дл форума на этом движке, по умолчанию? Чтобы форум индексировался, а личные данные пользователей и т.п. были недоступны для робота? Спасибо. |
|
|
Страницы: (2) 1 [2] |
|