Лайфхак: ускоренная индексация страниц для прохождения модерации Google Ads

11 декабря 2018
Лайфхак: ускоренная индексация страниц для прохождения модерации Google Ads

На днях коллеги не могли опубликовать несколько объявлений Google Ads. Вот с таким вот уведомлением:

При проверке сайт возвращает сообщение: Ошибки сканирования - они вызваны тем, что робот Google не смог обработать информацию об URL сайта.

Необходимо проверить настройки своего сайта и убедитесь, что в них нет запрета на сканирование роботом AdWords. Вы также можете выявить ошибки сканирования (https://support.google.com/webmasters/answer/35120) и открыть доступ к своим страницам при помощи Google Search Console. О том, как исправить файлы исключения, можно прочитать в этой статье(https://support.google.com/google-ads/answer/2404197#exclude).

Если ваш ресурс не заблокирован для робота AdWords, возможно, вы непреднамеренно ограничили работу нашей системы. В Google Search Console можно проверить, не установлена ли низкая скорость сканирования(https://support.google.com/webmasters/answer/48620). Если доступ к сайту по каким-либо причинам ограничен, попробуйте отправлять объявления на проверку небольшими партиями в течение нескольких дней.

Чтобы робот Googlebot правильно распознавал содержание сайта, откройте ему доступ ко всем ресурсам, например файлам CSS и JavaScript. Система индексирования Google обрабатывает HTML-код веб-страницы и все ее составляющие, такие как изображения, файлы CSS и JavaScript. Чтобы просмотреть ресурсы страницы, недоступные для сканирования роботом Googlebot, и протестировать инструкции в файле robots.txt, используйте разделы Просмотреть как Googlebot и Инструмент проверки файла robots.txt в Search Console.

После того, как сайт будет соответствовать правилам выше - Ваш сайт необходимо проиндексировать. Индексацию сайта Вам необходимо сделать самостоятельно с помощью повторного сканирования Вашего сайта в Инструментах для Вебмастеров.

Поскольку никаких значимых ошибок в Search Console не было, обратились в поддержку. И опять ответ не пролил свет на ситуацию:

Уточните, зарегистрирован ли сайт в Google Search Console?

Проверку необходимо осуществить там. Мы не можем сказать из-за какой конкретно ссылки объявления были отклонены. Если в Google Search Console написано, что ресурс чистый, то объявление должно пройти повторную проверку.

Ручная модерация не принесет результатов, так как модераторы не могут вручную одобрить объявления, если в системе указано, что есть проблемы со стороны целевой страницы.

Пришлось самим провести небольшое расследование и разобраться на какие же ссылки Гугл мог «ругаться». И нашлась пара кандидатов: ссылки на акции, которые до этого были скрыты на время проведения Чёрной Пятницы.

Судя по всему поисковик успел выкинуть их из индекса, а после включения заново ещё не проиндексировал.

Раз так, решение простое. В старой версии консоли в меню выбираем пункт «Сканирование» → «Просмотреть как Googlebot», вводим проблемный URL и нажимаем «Сканировать» (в выпадающем меню можно оставить «ПК», но на всякий случай позже повторим процедуру и для мобильной версии).

После этого можно запросить индексирование нажав соответствующую кнопку:

И вот, мы на финишной прямой! Подтверждаем, что мы не робот (лучше соврать, если это не так... никто не осудит) и сканируем только этот URL (чтобы быстрее).

Вскоре объявление можно снова отправлять на модерацию. На этот раз блокировать не должно.