Есть блог на блогспоте. Я так понимаю, из за недавнего внедрения региональных доменов на блогспоте возникли проблемы с индексацией блога яндексом. Т.е. сам блог по адресу название_сайта.blogspot.com, но если вы заходите на него, например, из России то идет перенаправление на название_сайта.blogspot.ru.
При анализе файла robots.txt в яндекс.вебмастере мне пишут следующее - Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление.
Прошу помощи у знающих людей, как же все таки сделать, чтобы робот яндекса проиндексировал мой блог?
Раздел: Прочее образование, последний комментарий: 23.06.2013 05:46 Вопрос закрыт пользователем Leningrad00
Воспользуйтесь сервисом проверки http заголовков В первое поле вставляем адрес своего сайта, во вторую вводим код с картинки, нажимаем продолжить, результат сохранить ввиде скрина и выложить сюда.
Добавлено спустя 12 минут 27 секунд
Лучше результат выложите в виде текстового файла.
Рад, что у вас все нормально в этом плане, а у меня вот проблемы, о чем и прошу помощи. Мой блог только гугл проиндексировал и переходы только с гугла, с остальных поисковых систем нет :(
Заходим сюда: оже сервис проверки http заголовков). В поле "смотрим как" выбираем: yandex, вводим адрес своего сайта, жмём на кнопку, результат выкладываем сюда.
Добавлено спустя 07 минут 49 секунд
Забыл напомнить что в поле "URI интересующего Интернет-ресурса:"нужно ввести путь к своему файлу robots.txt на сайте.
Зато другие видят! Пишут следуещее: твой блог - это блог с окончанием КОМ и права подтверждены именно на него, а блог с окончанием РУ (также и с другими окончаниями) - это уже не твой блог, а левый блог, даже не зеркало, поэтому этих два разных блога поисковик может принять, как дубли друг друга, то есть плагиаторство, что крайне не любят поисковики...
Гугл воспринимает данное нормально, так как там что-то связано с тегом каноникал, а вот Яша никак не может разобраться, что делать с этим регионал редир...
А вообще-то, Яшка индексировать блог начнёт, но чуть позже!
П.С. Одни предлагают ставить в коды блога какие-то скрипты, помогающие решить данную проблему, но другие против таких скриптов... Разнобой!
Ждёмс, когда разгребут!
Ну так нужно то, чтобы все страницы индексировал, а не только одну
Добавлено спустя 04 минуты 55 секунд
Вот я и не знаю, нужно ли этот скрипт ставить или нет?! Ибо со скриптом по статистике переходы идут не с поисковых систем, а засчитываются как внутренние переходы.
fmzoid, радуйтесь, нашёл причину почему яндекс не хочет индексировать ваш блог. Причина вот в чем: для того чтобы яндекс проиндексировал ваш блог, ваш сайт должен возвращать поисковому боту яндексу такие заголовки:
HTTP/1.1 200 OK
Content-Type: text/html; charset=UTF-8
Date: Thu, 20 Jun 2013 05:28:04 GMT
Expires: Thu, 20 Jun 2013 05:28:04 GMT
Cache-Control: private, max-age=0
X-Content-Type-Options: nosniff
X-nonoframe-Options: SAMEORIGIN
X-XSS-Protection: 1; mode=block
Server: GSE
Connection: close
А на самом деле ваш сайт выводит эти заголовки:
HTTP/1.1 302 Moved Temporarily
Location:
Content-Type: text/html; charset=UTF-8
Date: Thu, 20 Jun 2013 05:28:04 GMT
Expires: Thu, 20 Jun 2013 05:28:04 GMT
Cache-Control: private, max-age=0
X-Content-Type-Options: nosniff
X-nonoframe-Options: SAMEORIGIN
X-XSS-Protection: 1; mode=block
Server: GSE
Connection: close
Если подробнее, то проблема кроется в этих залоловках:
HTTP/1.1 302 Moved Temporarily
Location:
Эти заголовки говорят поисковому роботу яндекс сделать перенаправление на другою страницу( в вашем случае это файл robots.txt). Но эти 2 заголовка поисковые системы игнорируют, посчитав что это ошибка. Поэтому у вас в яндекс вебмастере при попытке проиндексировать ваш сайт, выводит сообщение о попытке реддиректе.
Добавлено спустя 04 минуты 46 секунд
Поэтому обратитесь в тех поддержку конструктора блогспота, так как, это проблема возникла из-за проблем в сервере блогспота.
У мя уже АЖ 3 страницы, но со временем нагонит ещё парочку!
Скинь в вебмастер яши сайтмап блога - тоже длительный процесс, пока примет, но всё же хоть что-то... плюс рекомендуют в счётчике метрики прописа ть зеркала с разными рег. доменами (РУ, ДЕ и прочими)
Яшка вообще не очень к блогспоту хорошо относится в плане индексации, а с рег.редир. так вообще вынос мозга
Одна дама писала в своём блоге, что Гоша отрицательно к скриптам таким относится и может в БАН загнать блог!
Совет: Если ты реально блогом занялся, то купи домен и перенеси туда блог, а то не известно, сколько будет продолжаться этот бардак!
Это всё из-за рег редиректа, а не из-за блогспота... Яша имеет рускоязычный ИП, поэтому, отсылая запрос на сервер по адресу сайт.блогспот.КОМ/роботс.тхт, его перенаправляет на сайт.блогспот.РУ/роботс.тхт, поэтому он и пишет 302-редирект.
Проблема не в сервере блогспота. Это проблема разногласия в закондательстве стран. Россия в основном, требует
Но факт тот, что ответные заголовки отсылает сервер блогспота. Поэтому причину стоит искать в нём. Конечно это может и не ошибка может просто у сервака блогспота запрограммирована такая защитная функция по принципу:"Русским поисковикам вход запрещён".
Думаю, ничего они мне там путного не подскажут, но попробую конечно
Добавлено спустя 01 минуту 40 секунд
уже сделал)
Добавлено спустя 06 минут 45 секунд
Тоже так думаю. После того как поставил этот скрипт,в вебмастере все переходы шли не от поисковых систем, а воспринимаются как внутренние переходы + эти двойные перенаправления из ком в ру и обратно думаю не очень хороши, да и время загрузки сайта увеличивается
Добавлено спустя 07 минут 58 секунд
а что же делать уже с опубликованными и проиндексированными гуглом статьями?
Ах-ах, я вчера писал ответ, но так и забыл его опубликовать
Да!
Нет, не запрещён, а просто русскому IP отвечает сервак на русском, украинскому - на украинском, польскому - по польски и т.д...
support.google.com/blogger/answer/2402711?hl=ru
особо радует последний абзац:)
Хотя Гоша, вродь как, нормально индексирует, а вот Яшик голову морочит
Добавлено спустя 01 минуту 43 секунды
Почитай в интернете инфу о переносе блогспота на перс. домен!
support.google.com/blogger/troubleshooter/1233381?hl=ru#ts=1234251,1734115
Добавлено спустя 2 часа 30 минут 54 секунды
Пишут, что процедура длительная (на счёт переиндексирования), но впредь на много легче с персональным... Плюс у тебя Яша ещё толком блог не добавил в поиск, так что, если планируешь серьёзно и длительно блогом заниматся, то лучше перс.домен... Либо терпеливо ждать когда Яндекс соизволит проявить милость к твоему блогу:)
872.22 
Как подружить Яндекс и блогспот?
, но со временем нагонит ещё парочку!
