|
Проблема с роботом.тхт
|
|
Beginner
93 сообщения
Мужчина
|
Добрый день, почему у меня гугл жалуется на robot.tht
скриншот:
И как можно устранить данную проблему? Мой сайт Доступно только для пользователей . Для данного сайта был приобретен пакет базовый и только после этого, сайт был добавлен в поисковики в ручную.
|
|
|
|
|
|
Beginner
103 сообщения
Мужчина
|
Snaik, Дай свой сайт ?! Если у тебя сайт новый то жди 1месяц
нормальный роботс должен быт такой
Code http://usite.su/robots.txt
|
|
|
|
|
|
Beginner
93 сообщения
Мужчина
|
в принципе, я ничего никогда не меняю в роботе.тхт и он выглядит следующим образом
Code http://comedoz.su/robots.txt
Вы правильно подметили, я его недавно открыл. Но сразу же приобрел через 1 неделю пакет базовый.
Добавлено (08.06.2012, 15:07)
---------------------------------------------
play-boy, И еще такой вопрос, у меня в роботе.тхт присутствует такой раздел Sitemap: http://comedoz.su/sitemap-shop.xml а на данном сайте http://usite.su его нет, так вот я интернет магазин и форум не буду открывать, мне наверное стоит убрать два эта раздела из робот.тхт или лучше не стоит?
|
|
|
|
|
|
Beginner
103 сообщения
Мужчина
|
Нет лучше не трогай нечего и добавь сайт заново! или дай помогу Skype дай?
|
|
|
|
|
|
Beginner
93 сообщения
Мужчина
|
play-boy, snaik1993, но я не смогу сейчас поговорить, немного занят. Через 1 час я освобожусь
|
|
|
|
|
|
Beginner
103 сообщения
Мужчина
|
ok
|
|
|
|
|
|
Бывалый
1284 сообщения
Мужчина
|
Quote (play-boy) Нет лучше не трогай нечего и добавь сайт заново!
Ты хоть знаешь чем помогать ? Для начала прочти информацию о данном файле, а потом давай какие-то советы.
Если модулей нету, зачем ему лишние строки в robots-е ?
Quote (Snaik) l а на данном сайте http://usite.su его нет
Почему ты смотришь на чужие сайты ? Тогда посмотри и на robots-ы Google и Яндекса. Там еще будут новые, для тебя строки, и их добавь. Каждый сайт имеет свою структуру, поэтому и свой robots.
Snaik, Если модули Форум и Магазин у тебя отключены, тогда /sitemap-forum.xml и /sitemap-shop.xml тебе ни к чему в файле. Поэтому удаляй их спокойно.
Quote (play-boy) нормальный роботс должен быт такой
http://usite.su/robots.txt
Еще раз говорю, что под каждый сайт своя структура robots-а.
Snaik, Пропиши host:
Snaik, Убери это:
Code Disallow: /shop/order/
Quote (Snaik) как можно устранить данную проблему?
Добавь в robots:
Code Allow: /
Allow: /gb
Allow: /index/0-2 |
|
|
|
|
|
Beginner
93 сообщения
Мужчина
|
Rj_DiNex, хорошо, сейчас все сделаю. Только еще такой вопрос. Как можно все изменить.
Наверное надо создать на своем компьютере файл с разрешение тхт (это через блокнот) Вставить такую информацию
Code User-agent: *
Host: comedoz.su
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Allow: /
Allow: /gb
Allow: /index/0-2
Sitemap: http://comedoz.su/sitemap.xml
все верно? И потом просто через файловый менеджер загрузить данный робот.тхт и он автоматически будет измене. Все верно?
Добавлено (08.06.2012, 16:03)
---------------------------------------------
Rj_DiNex, ну, все мой робот.тхт был успешно изменен Code http://comedoz.su/robots.txt
А теперь как дать гуглу команду просканировать новый робот.тхт и яндексу? Или яша и гугл самостоятельно узнают о роботе.тхт?
|
|
|
|
|
|
Бывалый
1284 сообщения
Мужчина
|
Snaik, Не так:
Code User-agent: *
Host: comedoz.su
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Allow: /
Allow: /gb
Allow: /index/0-2
Sitemap: http://comedoz.su/sitemap.xml
А вот так:
Code User-agent: Yandex
Allow: /
Allow: /gb
Allow: /index/0-2
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
User-agent: *
Allow: /
Allow: /gb
Allow: /index/0-2
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: comedoz.su
Sitemap: http://comedoz.su/sitemap.xml
Теперь создаешь у себя файл под названием robots.txt, вкладываешь в него код и загружаешь в корневой каталог, заменяя старый.
Теперь в панель веб-мастера ищешь кнопку, где можно будет пересканировать robots и жмешь её. Не помню где она, а искать лень. А вообще, они со временем сами это увидят.
|
|
|
|
|
|
Beginner
93 сообщения
Мужчина
|
Rj_DiNex, Спасибо тебе большое ))
Тема может быть закрыта ))
|
|
|
|
|
|
