Cправка - Веб-мастера/владельцы сайтов

Наша цель - предоставлять максимально релевантные результаты по каждому запросу. Результаты поиска формируются на основе данных нашего поискового индекса. Поисковый индекс все время растет, так как содержание в Интернете постоянно добавляется и изменяется. Изменение содержания, а также обновление наших алгоритмов определения рейтинга могут привести к изменению положения URL-адресов в результатах поиска и их удалению (хотя последнее маловероятно).

Мы понимаем, что такие изменения могут вызвать путаницу. Если на ваш сайт ссылается достаточно много других веб-сайтов, скорее всего, мы добавим его снова при следующем сканировании. Хотя мы не гарантируем, что та или иная страница будет постоянно присутствовать в нашем индексе или иметь определенный рейтинг, наше руководство для веб-мастеров содержит полезные советы, которые помогут вам сделать свой сайт удобным для сканирования. Выполнение этих рекомендаций увеличит вероятность того, что ваш сайт будет постоянно присутствовать в наших результатах поиска.

Если ваш сайт не появляется в результатах поиска Google или имеет более низкий рейтинг, чем раньше, определить и устранить проблему помогут приведенные ниже инструкции.

• Выполните поиск с использованием оператора site:

  Когда веб-мастера сообщают нам, что их веб-сайты перестали отображаться в результатах поиска, мы нередко обнаруживаем, что это не так. Чтобы быстро определить, включен ли сайт в наш индекс, просто выполните поиск сайта в Google, указав в качестве условия его полный URL. Например, поиск site:www.google.ru возвращает следующие результаты: http://www.google.ru/search?num=%100&q=site:www.google.ru. Обратите внимание, что добавлять пробел между оператором site: и названием домена не нужно. Мастер статуса сайта позволяет проверить статус вашего сайта в индексе, а также узнать, обращался ли робот Googlebot к главной странице вашего сайта в последнее время.

  Если ваш сайт появляется в результатах при выполнении поиска его URL-адреса в Google, значит, он включен в наш индекс.

  Однако если раньше ваш сайт индексировался, а теперь перестал, возможно, он был удален из индекса из-за нарушений нашего руководства для веб-мастеров. Просмотрите руководство, устраните проблемы и отправьте запрос на пересмотр.

• Убедитесь, что ваш сайт отображается в результатах поиска по названию домена

  Выполните поиск в Google по запросу www.[vashdomen].ru. Если ваш сайт отсутствует в результатах поиска или имеет низкий рейтинг, это указывает на то, что к вашему сайту могли быть применены штрафные санкции за нарушение нашего руководства для веб-мастеров. Если мы обнаружим определенные проблемы с вашим сайтом - например, вредоносное ПО, - то сообщим вам об этом посредством Центра сообщений. Также проверьте, соответствует ли ваш сайт рекомендациям для веб-мастеров. Убедившись, что все проблемы устранены, отправьте запрос на пересмотр.

• Известите нас о новом содержании своего сайта

  Если ваш сайт создан совсем недавно, возможно, мы еще не знаем о его существовании. Сообщите Google о своем сайте. Вы поможете Google быстрее обнаружить новые страницы, если отправите нам файл Sitemap. Даже если ваш сайт уже включен в индекс, файлы Sitemap - это замечательный способ сообщить Google о тех страницах, которые вы считаете самыми важными.

С помощью сканирования робот Googlebot обнаруживает новые и обновленные страницы, которые нужно добавить в индекс Google. Процесс сканирования начинается со списка URL-адресов веб-страниц, созданного на основе предыдущих сеансов сканирования. Его дополняют данные из файлов Sitemap, предоставленных веб-мастерами. Просматривая каждый из этих сайтов, робот Googlebot находит на каждой странице ссылки и добавляет их в список страниц, подлежащих сканированию. Робот отмечает все новые и обновленные сайты, а также неработающие ссылки. Полученная информация используется для обновления индекса Google.

• Проверьте, нет ли ошибок сканирования. На странице Ошибки при сканировании в инструментах для веб-мастеров можно просмотреть подробные сведения об URL-адресах вашего сайта, которые мы пытались просканировать, но не смогли получить к ним доступ. Просмотрите эти ошибки и по возможности исправьте их. Когда робот Googlebot будет сканировать ваш сайт в следующий раз, он отметит эти изменения и использует их для обновления индекса Google.
• Просмотрите свой файл robots.txt. Инструмент проверки файла robots.txt позволяет проанализировать ваш файл robots.txt и узнать, не заблокирован ли доступ робота Googlebot к URL-адресам или каталогам вашего сайта.
• Убедитесь, что URL-адреса не заблокированы метатегами.
• Проверьте структуру своего сайта и убедитесь, что она легко доступна. Большинство поисковых систем рассчитано на текстовую информацию. Если для реализации навигации и создания ссылок вы используете JavaScript, DHTML, изображения или мультимедийные элементы, например Silverlight, у робота Googlebot и других "пауков" могут возникнуть сложности со сканированием вашего сайта.
• Если вы недавно изменили структуру своего сайта или переместили его на новый домен, это также может негативно сказаться на вашем рейтинге. Чтобы избежать этого, используйте переадресацию 301 ("постоянную переадресацию") в файле HTACCESS для быстрой переадресации пользователей, робота Googlebot и различных "пауков" (при использовании сервера Apache это можно сделать с помощью файла HTACCESS ; на сервере IIS это делается через консоль администратора). Подробнее о переадресации 301 HTTP см. http://www.ietf.org/rfc/rfc2616.txt.
• Попробуйте создать и отправить файл Sitemap. Даже если ваш сайт уже проиндексирован, файлы Sitemap - это отличный способ известить Google о своем сайте и URL-адресах, которые вы считаете самыми важными. Файлы Sitemap особенно полезны, если на вашем сайте имеется динамическое или другое содержание, которое будет сложно обнаружить роботу Googlebot, а также если ваш сайт появился совсем недавно и на него указывает мало ссылок.

Робот Googlebot обрабатывает каждую сканируемую страницу, чтобы составить полный индекс всех найденных слов, а также отметить, где именно на странице они находятся. Кроме того, мы обрабатываем данные из основных тегов и атрибутов, например тегов заголовка и атрибутов alt. Google может обрабатывать множество типов содержания. Тем не менее, хотя мы и можем обрабатывать файлы HTML, PDF и Flash, работа с мультимедийными форматами, такими как Silverlight, вызывает гораздо больше затруднений (например, при сканировании и индексировании).

• Проверьте статистику индекса своего сайта. Эти данные показывают, как ваш сайт представлен в индексе Google.
• Проверьте структуру своего сайта. Система Google, как и большинство поисковых систем, рассчитана на текстовую информацию. Это означает, что робот Googlebot не сможет распознать текст в изображениях и большинстве мультимедийных файлов (кроме файлов Flash), а также на страницах, для которых требуется вход или которые вызываются сценариями JavaScript. Предоставив содержание, основанное на тексте и удобное для чтения, вы сделаете его доступным и для людей, и для робота Googlebot.

• Узнайте, как пользователи попадают на ваш сайт, просмотрев страницу Популярные поисковые запросы. В первом списке перечислены поисковые запросы Google, по которым ваш сайт показывается чаще всего. Во втором списке содержатся запросы, по которым пользователи попадали на ваш сайт. Эта информация особенно полезна, поскольку она позволяет понять, что ищут пользователи (первый список) и что побуждает их нажать ссылку на ваш сайт (второй список). Например, ваш сайт может часто показываться в результатах поиска Google по запросам гаджеты эспрессо и кофе-виджеты. Если запроса кофе-виджеты нет во втором списке, возможно, пользователям непонятно, имеется ли на сайте информация о кофе-виджетах. В этом случае попробуйте изменить содержание, сделав его более привлекательным и релевантным. Избегайте наполнения ключевыми словами, поскольку это может снизить рейтинг вашего сайта и произвести на читателей негативное впечатление.
• Узнайте, как Google видит ваш сайт. На странице Ключевые слова показаны ключевые слова и фразы, которые используются на других сайтах при размещении ссылок на ваш сайт. Понимание того, как другие видят ваш сайт, поможет вам выбрать для него наиболее подходящую целевую аудиторию.
• Изучите страницу Рекомендации по созданию HTML в Инструментах для веб-мастеров. Информация, которая содержится в тегах заголовка и метаописаниях, даст нам ценные сведения о содержании вашего сайта. Кроме того, этот текст может появляться на страницах результатов поиска, и полезный, информативный текст скорее привлечет внимание пользователей.
• Расскажите всем о своем сайте. Входящие ссылки на ваш сайт помогут Google определить его релевантность запросам пользователей. Естественные ссылки на ваш сайт появляются в силу свойственной Интернету динамики, когда владельцы других сайтов обнаруживают на вашем сайте ценное содержание, которое, как они думают, может заинтересовать их посетителей.
• Проверьте, не отмечено ли что-либо из вашего контента как содержание для взрослых. Для этого отключите Безопасный поиск. Фильтр Безопасного поиска Google удаляет из результатов поиска сайты, содержащие порнографию и материалы явно выраженного сексуального характера. Ни один фильтр не может гарантировать стопроцентную точность, однако функция Безопасного поиска использует новую запатентованную технологию, проверяющую ключевые слова и фразы, URL и другие категории Open Directory.
• Интересные изображения - отличное средство повышения посещаемости сайта. При публикации изображений рекомендуется думать в первую очередь о впечатлениях пользователя и следовать нашим рекомендациям по работе с изображениями.

Конкуренты практически никак не могут повлиять на ваш рейтинг или сделать так, чтобы ваш сайт был удален из индекса. Если вас беспокоит, что другой сайт ссылается на ваш, советуем вам обратиться напрямую к веб-мастеру этого сайта. Google собирает и упорядочивает информацию, размещенную на страницах в Интернете, но не отвечает за их содержание.

Иногда колебания в результатах поиска вызваны различиями в наших центрах данных. При выполнении поиска в Google для извлечения результатов ваш запрос отправляется в центр данных Google. В распоряжении системы имеется множество центров данных. То, в какой из них будет отправлен ваш запрос, определяется многими факторами (такими как географическое положение и поисковый трафик). Так как не все наши центры данных обновляются одновременно, результаты поиска могут немного варьироваться в зависимости от того, какой из центров обрабатывает запрос.