• Агентство интернет маркетинга Оптиваль
  • +7(987)084-0604
  • info@optiwahl.ru
  1. Optiwahl
  2.  
  3. Блог
  4.  
  5. Оптимизация сайтов
  6.  Доступ Googlebot к CSS и JS файлам

Что делать "Googlebot не может получить доступ к файлам CSS и JS на сайте"?

от Раздел Оптимизация сайтов

Суть проблемы

В конце июля 2015 многие владельцы сайтов получили сообщение из Панели вебмастера Google с предупреждением "Googlebot не может получить доступ к файлам CSS и JS на сайте".

Проблема заключается в том, что, в соответствии с настройками сервера, поисковая машина не может получить доступ ко всем ресурсам сайта, которые отображаются на странице. Следовательно Google не может корректно оценить оформление страницы, что в свою очередь может привести к неправильной оценке сайта в поиске.

Googlebot не может получить доступ к файлам CSS и JS на сайте

Ранее (в марте 2015) похожие сообщения получили владельцы сайтов, которые не были оптимизированы для просмотра на мобильных устройствах, а через месяц наличие такой версии стало важным фактором ранжирования поисковой выдачи для мобильных устройств. Поэтому стоит прислушаться к этому предупреждению и исправить ситуацию.

Как исправить?

Шаг №1. Определение заблокированных ресурсов

Чтобы определить какие ресурсы Googlebot не может сканировать (обычно это JavaScript, CSS и файлы изображений), необходимо зайти в Панель инструментов Google для веб-мастеров и выбрав интересующий сайт из списка перейти к функции Просмотреть как Googlebot. Эта функция моделирует процесс сканирования и отображения страниц и определяет список заблокированных ресурсов.

В разделе "Просмотреть как Googlebot" оставляем все поля без изменений и наживаем на кнопку "Получить и отобразить".

Посмотреть как Googlebot

В результате работы программы вы увидите изображение стартовой страницы с точки зрения бота и чуть ниже - самое ценное - это список заблокированных ресурсов.

Посмотреть как Googlebot

Шаг №2. Составляем список каталогов

Просматривая данный список не стоит заострять внимание на каждом из файлов. Главное - определить основные каталоги и типы заблокированных файлов.

Обычно все заблокированные файлы располагаются в одном или двух каталогах. особенно это верно, если ваш сайт работает на одной из известных CMS.

В нашем примере файлы с расширениями jpg и png находятся в каталоге "/images/"

Шаг №3. Редактируем robots.txt

Заносим сформированный список каталогов и типов файлов в разрешения в файле robots.txt.

В нашем случае:

Allow: /images/*.jpg

Allow: /images/*.png

Шаг №4. Проверяем robots.txt

В панели Вебмастера переходим в раздел "Сканирование" / "Инструмент проверки файла robots.txt" и проверяем исправленное содержимое.

Инструмент проверки файла robots.txt При положительном результате - сохраняем файл на сервер.

Шаг №5. Проверка

После всех операций стоит провести контрольную проверку как Googlebot и при необходимости повторить п.1-4.

Поделиться