На главную | Бесплатные DLE модули | Бесплатные DLE шаблоны | Хаки для DLE | Платные DLE шаблоны | Платные DLE модули

Мои вопросы....

Автор Тема: Мои вопросы....  (Прочитано 5950 раз)

0 Пользователей и 1 Гость просматривают эту тему.

goalkar

  • Я ещё новичок
  • *
  • Сообщений: 38
  • Карма: 1
    • Просмотр профиля
Мои вопросы....
« : 06-09-2010, 22:25:37 »
Помогите сделать robots.txt  в гугл написали сегодня ошибку сканирования
http://tihan.ru/page/4/
   URL, запрещенный файлом robots.txt
вот сам файл
User-agent: *
Disallow: /backup/
Disallow: /catalog/
Disallow: /engine/
Disallow: /favorites/
Disallow: /language/
Disallow: /lastnews/
Disallow: /newposts/
Disallow: /tags/
Disallow: /templates/
Disallow: /uploads/
Disallow: /user/
Disallow: /addnews.html
Disallow: /admintihan.php
Disallow: /autobackuptihan.php
Disallow: /index.php?do=
Disallow: /index.php?subaction=newposts
Disallow: /rules.html
Disallow: /statistics.html
Host: tihan.ru
Sitemap: http://tihan.ru/sitemap.xml
« Последнее редактирование: 15-09-2010, 11:41:43 от goalkar »

asmakovec2

  • Герой форума
  • *****
  • Сообщений: 5 064
  • Карма: 235
    • Просмотр профиля
    • Всё для CMS
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #1 : 06-09-2010, 22:32:56 »
с роботсом всё впорядке. Скорее всего просто глюк гугла.

vladimir

  • Администратор
  • Герой форума
  • *****
  • Сообщений: 4 112
  • Карма: 401
    • Просмотр профиля
    • Помогаем новичкам в ДЛЕ
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #2 : 06-09-2010, 22:36:56 »
Ага. А только одну страницу указал он в ошибках? Дата какая ошибки?
Понравился форум dle.net.ua? Поставь ссылку!

goalkar

  • Я ещё новичок
  • *
  • Сообщений: 38
  • Карма: 1
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #3 : 06-09-2010, 23:41:09 »
дата обновления Обновлено 06.09.2010
только почему-то заблокировал одну страницу ,странно
роботс полный ничего не нужно добавлять?
что еще посоветуете для лучшего вывода сайта

Vens

  • Герой форума
  • *****
  • Сообщений: 1 005
  • Карма: 22
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #4 : 07-09-2010, 19:09:43 »
Ты плз проясни - Гугл тебе страницу блокирнул или AdSense? Если второе - кое что проясню. А с роботсом действительно порядок - у меня похожий.
Приворот посетителей к сайту. Поднятие тИЦ, PR, ратио за один сеанс. Дистанционное уничтожение спамеров и правообладателей. Отведение взора правоохранительных органов. Магический биллинг.

goalkar

  • Я ещё новичок
  • *
  • Сообщений: 38
  • Карма: 1
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #5 : 08-09-2010, 08:54:11 »
меня гугл блоканул

Vens

  • Герой форума
  • *****
  • Сообщений: 1 005
  • Карма: 22
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #6 : 09-09-2010, 18:15:36 »
Тащи скрин блокирнутой строки.
Вот что можно еще:
Disallow: /*print - запрет всех страниц из версии для печати. Осторожно, это палка о двух концах. Ходят слухи, что гугл лучше печатныке версии страниц индексирует. А минус в том, что неопытный откроет и сразу закроет, ты пролетаеш.
Я не спец по robots.txt , но у меня Disallow: /tags/ не запрещены.
Приворот посетителей к сайту. Поднятие тИЦ, PR, ратио за один сеанс. Дистанционное уничтожение спамеров и правообладателей. Отведение взора правоохранительных органов. Магический биллинг.

asmakovec2

  • Герой форума
  • *****
  • Сообщений: 5 064
  • Карма: 235
    • Просмотр профиля
    • Всё для CMS
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #7 : 09-09-2010, 18:20:59 »
Тащи скрин блокирнутой строки.
Вот что можно еще:
Disallow: /*print - запрет всех страниц из версии для печати. Осторожно, это палка о двух концах. Ходят слухи, что гугл лучше печатныке версии страниц индексирует. А минус в том, что неопытный откроет и сразу закроет, ты пролетаеш.
Я не спец по robots.txt , но у меня Disallow: /tags/ не запрещены.

Disallow: /*print  - здесь явно не причём.
Disallow: /tags/ -  насчёт тегов у всех разное мнение, я лично закрываю, мне на сайте лишние дубли совсем ни кчему.

Сима

  • Модератор
  • Герой форума
  • *****
  • Сообщений: 3 195
  • Карма: 237
  • sima007-->Сима :)
    • Просмотр профиля
    • Блог sima
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #8 : 09-09-2010, 18:23:28 »
А у меня яша только теги и кушал,не вылазил с сайта,когда я новости грабером получал,и теги с новости брались,и вообще мне  больше всего в граббере понравилось как он теги выбирает ;)
Помог?Помоги и ты : R132599791532 , Z151187258120 , U315585286440 .

asmakovec2

  • Герой форума
  • *****
  • Сообщений: 5 064
  • Карма: 235
    • Просмотр профиля
    • Всё для CMS
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #9 : 09-09-2010, 18:34:30 »
А у меня яша только теги и кушал,не вылазил с сайта,когда я новости грабером получал,и теги с новости брались,и вообще мне  больше всего в граббере понравилось как он теги выбирает ;)

ну да теги кушает, а основные страницы с новостью выкидывает.

Vens

  • Герой форума
  • *****
  • Сообщений: 1 005
  • Карма: 22
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #10 : 09-09-2010, 18:49:18 »
Да *принт - это он спрашивает, что еще можно запретить, я и указал.
А вот про теги грабберских новостей, это очень интересно.
Сейчас у меня стоит вроде по умолчанию - оставлять старые, ну с фильтром конечно. А я вот и думаю, может поставить перегенерацию? А то прикиньте, одинаковые строки в поиске вылетать начнут. Надо перегенерировать или нет?
Приворот посетителей к сайту. Поднятие тИЦ, PR, ратио за один сеанс. Дистанционное уничтожение спамеров и правообладателей. Отведение взора правоохранительных органов. Магический биллинг.

Сима

  • Модератор
  • Герой форума
  • *****
  • Сообщений: 3 195
  • Карма: 237
  • sima007-->Сима :)
    • Просмотр профиля
    • Блог sima
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #11 : 09-09-2010, 18:50:49 »
Там есть генерировать из новости,или как-то так.
Мне за теги яша людей слал,ммммммммммм..... ::)
Помог?Помоги и ты : R132599791532 , Z151187258120 , U315585286440 .

Vens

  • Герой форума
  • *****
  • Сообщений: 1 005
  • Карма: 22
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #12 : 09-09-2010, 18:54:51 »
Я не понял, так надо генерить или нет? Кстати, у меня индексация вроде растет.
« Последнее редактирование: 09-09-2010, 19:03:41 от Vens »
Приворот посетителей к сайту. Поднятие тИЦ, PR, ратио за один сеанс. Дистанционное уничтожение спамеров и правообладателей. Отведение взора правоохранительных органов. Магический биллинг.

Сима

  • Модератор
  • Герой форума
  • *****
  • Сообщений: 3 195
  • Карма: 237
  • sima007-->Сима :)
    • Просмотр профиля
    • Блог sima
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #13 : 09-09-2010, 19:47:22 »
Я не понял, так надо генерить или нет? Кстати, у меня индексация вроде растет.
вот видиш нужно было подождать=)
Генерить нужно там в настройках есть генерить ;)
Помог?Помоги и ты : R132599791532 , Z151187258120 , U315585286440 .

Vens

  • Герой форума
  • *****
  • Сообщений: 1 005
  • Карма: 22
    • Просмотр профиля
Re: Заблокирован файлом robots.txt ‎(1)‎
« Ответ #14 : 09-09-2010, 20:16:03 »
Подождать то подождать, но пока 400 стр. всего в соплях Гугла и всего 80 Яша.
Где там Goalkar? Нам нужно составить ему идеальный robots, или нас могут обвинить в замусоривании тем. Так вот у меня, вот эти строки:
Host: _tihan.ru
Sitemap: _http://tihan.ru/sitemap.xml
стоят в другой последовательности, наоборот.
И как его зовут? Гулькар? Гоалкер?
Приворот посетителей к сайту. Поднятие тИЦ, PR, ратио за один сеанс. Дистанционное уничтожение спамеров и правообладателей. Отведение взора правоохранительных органов. Магический биллинг.