Неделю назад Эрик Энж опубликовал интервью с Мэттом Каттсом, руководителем отдела Гугл по борьбе со спамом. Давно Мэтт не давал таких обширных и крайне полезных интервью. Мэтт затронул очень много аспектов поисковой оптимизации:

• Индексация и объем краулинга сайта
• Отношение Гугл бота к ссылкам партнерских программ
• Важность архитектурного дизайна сайта
• Дублированный контент и его последствия
• Фасетированная или многогранная навигация
• Индексация PDF и сканирование JavaScript и др.

На русском языке интервью можно почитать на searchengines.ru (Часть I, Часть II), пока что опубликованы первые две части интервью, но, думаю, остальное тоже переведут.

Мне очень понравилась идея Рэнда Фишкина из SEOmoz.org визуально представить самые важные комментарии Мэтта Каттса. Это облегчает восприятие материала и добавляет развлекательный аспект. Поэтому я решила перевести и опубликовать иллюстрации Рэнда для русскоязычной аудитории.

#1. У Гугла нет фиксированного “потолка индексации”, но у объема краулинга сайта есть свои ограничения

Мэтт Каттс: “… количество страниц, которое мы краулируем, примерно пропорционально вашему PageRank.”

“Страницы, на которые часто ссылаются, имеют тенденцию к тому, имеют тенденцию к тому, чтобы их нашли и проиндексировали достаточно быстро. Страницы с более низким PageRank краулируются не так часто.”

#2. Дублированный контент может негативно сказаться на индексации сайта

“…дублированный контент не является самым значительным фактором, определяющим, какое количество страниц будет прокраулировано, но он может быть фактором.”

Мэтт Каттс:
“Идея состоит в том, что если у вас есть определенный показатель PageRank, мы только за то, чтобы проиндексировать как можно больше с этого сайта. Однако некоторые из этих страниц могут быть забракованы, что, в некоторой степени, будет излишней тратой. Также сайт может иметь ограничения по нагрузке на веб узел, когда мы не сможем просканировать такое большое количество страниц.”

Совет Мэтта: “Вы можете разместить рекламу целевых страниц в партнерской программе в отдельной URL директории, которую затем заблокировать, к примеру, через robots.txt файл. Как и реклама, в большинстве своем партнерские ссылки создаются для пользователей, а не для поисковых систем. Поэтому их очень легко отследить, и вам не нужно волноваться о том, что партнерские коды «просочатся» и создадут проблемы дублированного контента, если эти страницы никогда не краулируются в первую очередь.”

О каноническом теге:
“…идея канонического тега состоит в том, чтобы дать вам возможность показать поисковым системам, что 2 страницы контента являют собой одно и то же. Возможно, вы не хотите ставить различия между красной и черной версиями продуктов, если у вас в наличии продукт 11 разных цветов.

Вы можете захотеть создать только одну страницу продукта по умолчанию, которая будет умно организована с выпадающим меню или чем-то в этом роде. Хороший способ использования тега rel=canonical – это показывать минимальные различия продукта, отметив все эти страницы rel=canonical.”

#3. Ссылочный вес партнерок

Если Google бот видит партнерскую ссылку, как он ее рассматривает: как поддержку сайта или как рекламу?

#4. Редиректы 301 передают часть, но не весь ссылочный вес исходной страницы

#5. Низкокачественные, не уникальные страницы могут снизить индексацию сайта

#6. Фасетированная/многогранная навигация сайта и процесс постройки PageRank остаются противоречивыми темами

Мэтт Каттс: “Способов навигации по одному участку сайта может быть множество, но желательно, чтобы каждая страница контента имела свой отдельный адрес URL. Есть множество способов «нарезать» данные. Если вы можете самостоятельно решить, какой способ подачи отдельного участка контента самый важный, то тогда вы можете попытаться создать некую иерархию параметров URL.”

“По возможности хорошим приемом будет организация более простых промежуточных страниц. Если кому-то придется кликнуть 7 раз через 7 слоев навигации, чтобы добраться до одного-единственного продукта, он может просто потерять терпение.”

Читайте также:

1. Нововведения Google: более длинные снипеты и связанные запросы

Google в очередной раз обновил свой центр Инструментов для веб-мастеров.

Среди изменений:

• быстрый доступ к профилям сайтов с помощью выпадающего меню;
• возможность удаления ссылок сайта;
• рассмотрение запросов об удалении сайтов из результатов поиска по просьбе третьих лиц;
• неподтвержденные сайты теперь не отображаются на главной странице инструментов;
• сообщения об ошибках SSL сертификатов;
• возможность географической привязки доменов в зоне .me.

Пройдемся подробнее по основным новшествам.

Ссылки сайта

Одно из долгожданных нововведений – это раздел “Ссылки сайта”. С помощью этого раздела теперь можно заблокировать ссылки на внутренние страницы, отображаемые в результатах поиска Гугла.

Напомним, что ссылки сайта (они же – ссылки на внутренние страницы сайта) есть не на всех сайтах. Google создает их автоматически и, как правило, только авторитетные сайты получают такие ссылки от Гугла. Многие компании ждали возможности управлять этими ссылками аж с ноября 2008 года, когда Гугл только ввел показ внутренних ссылок в своем индексе.

Удаление URL

На приведенном ниже скриншоте видно, что теперь появилась ссылка на запросы удаления URL, “отправленные другими”. Таким образом, если третье лицо отправит запрос на удаление той или иной страницы вашего сайты, вы можете это увидеть в разделе Доступ для сканера (Конфигурация сайта->Доступ для сканера) и соответственно согласиться с запросом или не согласиться с ним, написав в Google.

Было бы хорошо еще увидеть, кто сделал тот или иной запрос на удаление страницы, но Google, конечно, не станет предоставлять такую информацию.

Ошибки SSL сертификатов

В конце августа некоторые веб-мастеры стали получать предупреждения от Google об ошибках SSL сертификатов. Вот текст сообщения, приходящего от Google:

Уважаемый вебмастер,

Имя хоста вашего сайта https: / / www.banknorwegian.no:443/, не соответствует ни одному из “Subject Names”, указанном в вашем SSL сертификате как:
* NotVerified

Это может стать причиной блокировки доступа на ваш сайт многими браузерами или показа посетителям сайта Предупреждения о безопасности сайта.

Для устранения этой проблемы, пожалуйста, получите новый SSL сертификат, где “Subject Name” или “Subject Alternative DNS Names” будут соответствовать имени вашего хоста.

Спасибо,
Google Web Crawling Team

По неофициальным словам одного из сотрудников Google, эти сообщения носят сугубо информационный характер и не влияют на сканирование, индексирование и ранжирование сайта.

Географическая привязка доменов в зоне .me

С 17 августа 2009 года появилась возможность настроить географический таргетинг сайтов с доменом в зоне .me на пользователей той или иной страны.

Как правило, Google не позволяет настраивать ксДВУ (коды стран доменов верхнего уровня) домены  на аудиторию другой страны, полагая, что если вы регистрируете домен в определенной стране, значит вы заинтересованы в ранжировании именно в этой стране.

До 17 августа владельцы сайтов в зоне .me не могли изменить географическую аудиторию и были привязаны только к Черногории, которая является владельцем .me зоны с 2006 года.

Некоторое время назад Google уже сделал исключение для доменов в зоне .tv. Теперь пришло время и для .me доменов, что открывает новые возможности и перспективы. Интересно, будет ли скачок в продаже доменов зоны .me в следущие полгода – год?

Читайте также:

1. 6 советов по работе с инструментами Google для веб-мастеров
2. Обновился центр веб-мастеров Google

10 июня официальный блог веб-мастеров Google объявил об изменении своего интерфейса для всех пользователей. Кроме этого, появилась пара новых инструментов: веб-мастера теперь могут сообщить Google об изменении адреса сайта и появилась возможность перенаправлять почту центра веб-мастеров на другой адрес электронной почты. Рассмотрим новшества Google подробнее.

Интерфейс центра веб-мастеров поменялся достаточно значительно. На панели инструментов, например, теперь отображаются сводки “Популярные поисковые запросы”, “Ошибки сканирования”, “Ссылки на ваш сайт” и информация о карте сайта (Файлы Sitemap).

Новый интерфейс был доступен для тестирования некоторым пользователям уже месяц назад.

Благодаря откликам первых пользователей до официального запуска Google усовершенствовал свою панель управления центра веб-мастеров, а также устранил найденные дефекты :

• Теперь по умолчанию показываются 100 строк в разделе “Ссылки на ваш сайт”
• Были устранены статистические различия по популярным поисковым запросом между старым и новым интерфейсами
• Изменился алгоритм показа ссылок в разделе “Ссылки на ваш сайт” (в новом интерфейсе не отображаются ссылки, сделанные с помощью переадресации)

А теперь об основном новшестве -- “Изменение адреса”. Это долгожданный инструмент может использоваться при изменении доменного имени сайта. Узнав о новом адресе вашего сайта, Google обновит проиндексированные ссылки на сайт и покажет в результатах поиска ваш новый адрес.

Для доступа к этому инструменту нужно войти в раздел “Конфигурация сайта” и выбрать “Изменение адреса”. Там можно ознакомиться с основными шагами, которые надо предпринять при изменении домена. Инструкции сейчас выглядят следующим образом:

1. Настройте новый сайт. Ознакомьтесь с нашим руководством по перемещению своего сайта на новый домен. Разместите свое содержание на новом домене, а затем убедитесь, что все внутренние ссылки указывают на него.

2. Перенаправьте весь трафик со старого сайта: воспользуйтесь переадресацией 301 для постоянной переадресации посетителей страниц вашего старого сайта на новый сайт. При этом вы сообщите пользователям и поисковым системам, что ваш сайт перемещен. Попросите веб-мастеров изменить ссылки, чтобы они указывали на ваш новый домен, и убедитесь, что входящие ссылки на ваш старый сайт правильно перенаправляются с помощью переадресации 301.

3. Добавьте свой сайт в инструменты для веб-мастеров. Убедитесь, что вы добавили и проверили свой новый домен.

4. Сообщите нам URL своего нового домена

5. После отправки изменения адреса периодически проверяйте свои данные инструментов для веб-мастеров, чтобы увидеть, был ли ваш новый сайт отсканирован и проиндексирован (если у вас есть Sitemap, то единственным способом определить это является проверка информации Sitemap для нового сайта, где можно увидеть, сколько страниц было отсканировано и проиндексировано).

В центр для веб-мастеров Google также добавлен инструмент, который позволяет сделать перенаправление писем из центра сообщений Google на свой личный адрес электронной почты. Важное условие -- адрес, на который вы хотите получать почту, должен обязательно быть зарегистрирован под вашей учетной записью Google.

Удобный инструмент, учитывая, что теперь Google стал письменно уведомлять об рассмотрении заявлений о проблемных, неиндексируемых сайтах (Запросы на пересмотр). Раньше приходилось только гадать, когда до тебя дойдет очередь и что из этого получиться. А сейчас через несколько дней после отправки сообщения Google будет приходить письмо, но, конечно же, без указания решения. Если после получения этого письма сайт через какое-то время появляется в результатах поиска Google, то все хорошо. Если нет, то можно сделать вывод, что не все требования для индексации сайта Гуглом учтены.

Видео Google об обновленном интерфейсе (на англ. языке)

www.youtube.com/watch?v=2WaJ7goqX7A

Читайте также:

1. 6 советов по работе с инструментами Google для веб-мастеров
2. Новый функционал инструментов Google

В конце марта Google объявил о двух нововведениях, которые изменили внешний вид страниц Google с результатами поиска:

• списки дополнительных поисковых запросов, так называемые “связанные” запросы
• расширенное описание результатов (более длинные “снипеты”) при “длинных” запросах

“Связанные” поисковые запросы

Это шаг Google в освоении технологии семантического поиска. Поисковый механизм Google выявляет концепцию запроса и выводит в результатах поиска словосочетания, связанные с основным термином. Например, при запросе “маркетинг” Google показывает связанные словосочетания, которые помогут найти пользователю то, что он ищет, а именно “основы маркетинга”, “книги по маркетингу”, “менеджмент”, “маркетинг лекции”, “marketing”, “маркетинг реклама”.

Согласно официальному блогу Google, “теперь предлагаемые варианты формулировок будут более точными и распространятся на большее количество запросов, языков, включая более длинные запросы”.

Длинные снипеты

Снипет – это текстовый фрагмент, отображающийся под названием найденной страницы. Это второе нововведение Google полезно при использовании длинных поисковых запросов, включающих более 3 слов. Известно, что при длинных запросах бывает нелегко получить представление о содержании страницы на основании стандартного снипета. Теперь для таких запросов снипеты автоматически удлиняются, что позволяет пользователям получить больше информации о содержимом страницы. Сам запрос, как и раньше, выделяется жирным шрифтом.

Для поисковой оптимизации под Google теперь стоит иметь в виду, что мета описание лучше делать более 160 знаков (примерная длина стандартного снипета).

Вот как выглядят результаты запроса на примере “Особенности поисковой оптимизации под Google, Yandex, Yahoo”:

Фото: Flickr/massless

Читайте также:

1. Иллюстрированные комментарии Мэтта Каттса о процессе индексации Google

Инструменты Google для веб-мастеров – это бесплатный источник ценной информации о сайте напрямую от Google. Для поисковой оптимизации (SEO) сайта эта служба является очень важной. После подтверждения того, что именно вы являетесь владельцем сайта, вы получаете доступ к статистике и диагностике сканирования и индексирования сайта, различным инструментам анализа содержания сайта и поисковым запросам.

Вот 6 основных советов по работе с инструментами Google, которые помогут лучше оптимизировать ваш сайт.

1. Регулярно проверяйте сайт на наличие ошибок
Google предоставляет статистику по самым всевозможным ошибкам сканирования сайта. Краткий список результатов сканирования вашего сайта отображается на панели инструментов. В разделе “Диагностика -> Ошибки сканирования” можно увидеть не только адреса URL, к которым Google не удалось получить доступ, но также и список URL страниц, уже индексированных Google, но которые больше не существуют на сайте. Наличие таких ошибок может сказаться на Google рейтинге сайта.

Гугл также показывает список страниц, о существовании которых ему известно, но эти страницы были запрещены для сканирования. Если вы специально настроили так файл robots.txt, то ничего страшного в этом нет. Это информация, однако, может быть полезной в случае, если заблокировано слишком много страниц.

2. Проверьте основные настройки сайта
Укажите, как Google должен показывать домен в результатах поиска (рекомендуется установить основной домен на уровне хостинга, используя редирект 301), выберите основной географический регион. До июня 2009 года была также настройка для указания, хотите ли вы, чтобы картинки с сайта показывались в Google поиске картинок, так называемом Маркировщике картинок Google. Но после обновления дизайна интерфейса Google убрал эту функцию. Google сам теперь решает, какие картинки индексировать.

3. Регулярно анализируйте мета-теги описания и заголовка
Google указывает список URL-адресов с такими проблемами, как дублирующие теги заголовков и мета-описаний, слишком короткие или длинные заголовки и мета-описания. Устранение этих проблем поможет улучшить рейтинг сайта в результатах поиска Google.

4. Анализируйте популярные поисковые запросы
Вы когда-либо задавались вопросом, как пользователи находят ваш сайт? Такого рода информацию можно найти в инструментах Google для веб-мастеров. Данный раздел показывает запросы, в ответ на которые Google отображает ссылки на ваш сайт и по которым к вам приходят посетители из Google, % вхождения каждого запроса в 20 наиболее популярных и самые высокие позиции, которые получила какая-либо страница вашего сайта по запросу за последнюю неделю. Вы можете фильтровать данные по типу поиска (веб, картинки, поиск для мобильных устройств) и географическому региону.

5. Управление ссылками сайта
Если вашему сайту повезло и вы получили дополнительный блок ссылок под результатами поиска, эти ссылки будут отображаться в инструментах Google для веб-мастеров. Добавить страницы в этот блок вы не можете, но убрать ошибочные или неприемлемые ссылки возможно именно в этом разделе. Блокировка действует в течение 90 дней.

На днях Гугл объявил о введении однострочных ссылок. Над URL адресом в результатах поиска могут отображаться до 4х внутренних ссылок. Это изменение охватит намного большее количество сайтов и повысит ваш шанс получения таких ссылок по некоторым из поисковых запросов.

6. Оптимизируйте свою страницу с ошибкой 404
С помощью небольшого кода JavaScript Google предлагает улучшить страницу ошибки 404. При загрузке страницы с ошибкой 404 появится окно поиска с информацией, помогающей пользователям найти нужные сведения. Google попытается угадать, что искал пользователь, используя данные по страницах, которые уже индексированы Google.

Эта функция была убрана из инструментов Google для веб-мастеров. Код для виджета 404 можно взять со страницы справки Google.

Это лишь некоторые из принципов работы с Инструментами Google для веб мастеров. Google продолжает добавлять дополнительных функций и возможности, и очень хочется надеяться, что Яндекс, Yahoo и другие поисковики также последует примеру Google и усовершенствуют свои интерфейсы.

Фото: Flickr/Basajaun

Читайте также:

1. Обновился центр веб-мастеров Google
2. Новый функционал инструментов Google

По данным Wall Street Journal компания HP рассматривает варианты использования операционной системы Андроид в своих бюджетных моделях нетбуков (мобильных ПК).

Андроид является открытой операционной системой Гугл (Google), которая построена на базе ядра Linux. В настоящее время большинство нетбуков используют программное обеспечение Майкрософта Windows XP. Хотя HP пробует также использовать Linux в модели Mini 1000 Mi.

Преимущество Андроида состоит в том, что за его использование HP не придется платить. В то время как каждый нетбук с Windows XP обходится компании примерно в $15 долларов за лицензию. Компания Овум (Ovum) провела исследование и предсказывает, что мобильные ПК с операционной системой Андроид появятся уже в 2009 году, так как производители ПК пытаются снизить среднюю цену на нетбук до $200.

Результаты многостороннего тестирования HP пока не известны. Если предположить, что тестирование Андроида пройдет успешно, то в будещем, вероятно, можно ожидать появления нетбуков со встроенным 3G или моделей, оснащенных сенсорным дисплеем… Нас, пользователей, это только бы обрадовало.

Фото: Flickr/techfever