Итак, как лучше продвигать сайт, статьями или ссылками? Каждая из техник имеет свои плюсы и свои минусы, давайте их рассмотрим.

Продвижение покупными ссылками

Отрицательная сторона: как правило, покупные ссылки выглядят неестественно. Они размещаются в футере страницы, в блоке с заголовком «Реклама», или где-либо на странице блоком, заполненным только ссылками. Поисковые системы активно ведут борьбу с покупными ссылками, это противоречит их идеологии — ссылки должны ставиться по доброй воле, а не за материальное вознаграждение. Сайты, продающие ссылки банятся поисковыми системами или попадают под фильтр.

Отследить покупные ссылки достаточно просто. Биржи размещают ссылки на страницах сайта относительно их URL, если добавить любой параметр к адресу, например /?some_param=foo, содержимое страницы не изменится, за исключением покупных ссылок, они исчезнут, т.к. URL изменился.

Положительная сторона: продвижение покупными ссылками, как правило, дает более быструю отдачу, чем продвижение статьями, так как ссылки покупаются на страницах с уже присвоенным рейтингом. Заплатив определенную сумму, можно разместить ссылку на странице, скажем с PR 7, которая будет перекачивать ссылочный вес на ваш сайт. И скорее всего после ближайшего АПа вы уже почувствуете положительный результат.

Я не спорю, без покупки ссылок очень сложно продвинуть сайт в ТОП по ВЧ и некоторым СЧ, но что если часть бюджета, выделяемого на покупку ссылок тратить на размещение статей?

Продвижение статьями

Что такое продвижение статьями я рассказывал ранее, но коротко все-таки поясню. Пишется тематическая статья, в тексте ставятся ссылки на продвигаемый ресурс. Далее статья размещается на площадке, как правило, на неограниченный срок. Индексируется и передает ссылочный вес реципиенту.

Отрицательная сторона: продвижение статьями более трудоемкий процесс, чем покупка ссылок. Статью необходимо написать, расставить в ней ключевые слова, найти тематические площадки, договориться о размещении и проверять ее индексируемость. Частично эти проблемы может решить биржа статей, о которой речь пойдет чуть ниже.

Продвижение статьями достаточно дорогостоящий метод, написание одной статьи может обойтись от 3$ до 15$, написание 20 статей уже обойдется в 60$-300$, а их ведь еще нужно разместить на площадках. Значительно сократить бюджет на написание статей поможет услуга «Размножение статей», заказать которую вы можете у нас.

Положительная сторона: ссылки в статьях смотрятся естественно! Они окружены полезным тематическим контентом, обогащенным ключевыми словами. На мой взгляд, это главное преимущество статей! Поисковики обожают уникальный контент и с доверием относятся к ссылкам в нем.

Я не могу предположить, каким методом можно определить, что статья размещена с целью умышленного воздействия на результаты поисковой выдачи. Вы фактически покупаете страницу на сайте, которая имеет реальный URL, статья никак не выдает своего предназначения, и площадка не подвергнется наказаниям со стороны поисковых систем.

Статьи, как правило, размещаются «навсегда», т.е. на все время существования площадки. Каждый раз, размещая статьи «навсегда», вы сводите к минимуму дальнейшие затраты на поддержку позиций сайта, так как размещенные ранее статьи никуда не делись, они работают и по прежнему передают ссылочный вес, за них не нужно платить дополнительные деньги. Периодически размещая статьи, вы увеличиваете постоянную ссылочную базу продвигаемого ресурса, которая будет подпитывать его на протяжении всего существования.

Продвижение статьями на практике

Я являюсь сторонником продвижения статьями. На практике убедился в эффективности этой методики и результаты радуют! Практически все проекты, над которыми я работаю, продвигаются размноженными статьями, и иногда только статьями, без применения иных методов.

Единственная сложность продвижения статьями — поиск тематических площадок, некоторые я нахожу на форуме SE, но этого бывает мало. Поэтому большинство статей я размещаю через биржу Liex.Ru, которая является, на мой взгляд, наиболее удобной для этих целей!

Особенно мне нравится пакетная загрузка статей, это очень актуально в моем случае, т.к. после размножения статей получается несколько сотен и вручную их размещать очень сложно.

Так же в Liex.Ru имеется возможность создания фильтров. Фильтры предназначены для выборки площадок в соответствии с пользовательскими требованиями. Вы можете выбрать все площадки, возрастом более одного года, размещенные в DMOZ и ЯК, с PR=6 главной страницы и т.д. Опций довольно много.

Найти качественные тематические площадки можно установив опции «принимает только тематические статьи» и «жесткая модерация».

Я произвожу размещение статей «навсегда», но в вашем случае, возможно, это не обязательно.

Работаю с Liex.ru уже довольно давно, да, конечно есть некоторые неудобства, но в целом она отвечает всем моим требованиям.

Заключение

Можно ли продвигать только статьями? Несомненно можно, но нужно подходить к этому с умом. Не стоит полагаться только на статьи, продвигая сайты в ТОП по ВЧ, все-таки при жесткой конкуренции без покупных ссылок не обойтись. Но размещение статей должно стать важной частью вашей стратегии продвижения, потому как создает постоянную базу качественных ссылок продвигаемому сайту!

В рамках акции «Обмен постовыми»:

• Как зависит тИЦ от тематики сайта?

Первый используется только веб-мастерами для индикации рейтинга, в то время как второй имеет непосредственное влияние на выдачу.

Но вернемся к вопросу.

Зависит ли PageRank только от количества входящих ссылок?

Ответ: нет.

Конечно, количество входящих ссылок имеет некоторое значение, но Google тщательно следит за их качеством и релевантностью.

Под качеством понимается трастовость сайта, ссылающегося на вас. Например ссылка со Стэндфордского университета будет гораздо качественнее ссылки с блога вашей сестры.

Под релевантностью понимается близость содержания ссылающегося сайта, к вашему контенту. Например, если у вас сайт о кошках, то ссылка с блога вашей сестры, которая пишет про кошек, будет более релевантная, чем ссылка со страницы квантовой физики Стэндфордского университета.

Рассмотрим другой пример. Допустим, вы запустили два блога: «блог А» и «блог Б». Оба блога тематики IT. Для «блога А» вы покупаете порядка 30 ссылок со страниц не релевантных вашему сайту и с низким PageRank или не имеющим его вообще. Для «блога Б» вы написали одну качественную статью, которая естественным путем получила входящие ссылки.

Если вы подождете 3 месяца и не будете ничего изменять на блогах, то с большей вероятностью, первый блог не получит PageRank вовсе, а второй, скорее всего будет с PR1 или выше!

Несколько интересных фактов о PageRank

• Получить PR5, когда у вас был PR3 или PR4 гораздо проще, чем прыгнуть с PR5 на PR6. Т.е. чем выше PageRank, тем сложнее его получить, и не значит, если вы для получения PR2 купили 50 ссылок, то для получения PR8 вам понадобится 200 ссылок.
• На самом деле, значение PageRank не то, что мы привыкли видеть: от 0 до 10, оно используется только для приблизительного обозначения. Google оперирует абсолютно иными значениями PageRank в своих алгоритмах.
• PageRank всего лишь один из множества факторов, влияющих на выдачу. Если у вас высокий PageRank, это не значит, что вы будете на первых местах по всем запросам.
• На значение PageRank влияют как внешние (входящие) ссылки, так и внутренние, поэтому внутренняя перелинковка важна!
• Содержание сайт и частота обновления контента никак не влияют на PageRank.

Интересно почитать:

• Реализация технологии масштабирования изображений Liquid Resize;
• Работа с веб-дизайнером: пять советов для гармоничной работы над веб-проектом.

В рамках акции «Обмен постовыми»:

• Portable soft — программы которые запускаются без установки и не нуждаются в регистрации.

На этой странице собраны ссылки на добавление сайтов и содержания различного типа (rss, video, maps) во все возможные сервисы Google.

Теперь Вам не нужно искать ссылки на добавления по всем сервисам. Вы сможете найти их все на странице Передача содержания!

Также был запущен официальный блог поддержки http://contentcentral.blogspot.com/, авторами которого стали представители YouTube, Book Search и команда самого проекта «Передача содержания».

На главной странице «Передача содержания» вы можете:

• Предложить URL для индексации (добавить сайт в поисковик).
• Добавить файл Sitemap через «Инструменты для веб-мастеров».
• Добавить компанию на карту Google в «Бизнес центре».

Список сервисов, куда вы можете добавить ваш контент: Content Types.

Описание изменений смотрим на seo-study.ru.

Я одержим поиском и очень любознателен. Мне всегда нравилось узнавать что-нибудь. Кроме того, я работаю в «Google» над поиском последние 9 лет и 3 месяца. Я очень часто пользуюсь поиском, но мне кажется, что каждый раз я нахожу только 20% того, что мог бы.

В прошлую субботу отслеживал вещи, звучавшие в разговорах, которые я хотел найти после, но не смог:

• Являются ли словами «fab», «goy» и «eely»?« (в это время шла игра в слова)
• В какое время открывается «J.C. Penney» по субботам?
• В какой школе есть команда «Banana Slugs»?
• Какой талисман у команды «San Jose State»?
• Какова мощность генераторов ГЭС?
• Какая фамилия у великого ирландского флейтиста с именем Джеймс?
• Как называется крупнейший город в России после Москвы и Санкт-Петербурга?
• Что старше: «секвойя» или «кипарис»?
• Какое существо является сейчас самым старым и сколько ему лет?
• Кто исполняет песню «Queen of Hearts»?
• Что там за птица летит?
• Магазин LF в Сан-Франциско находится на Union Square или Union Street?
• Как танцевать «чарльстон»?
• В какой день недели проходило «The Lawrence Welk Show»?
• Какие слова в песне «In the Mood»?
• Какая история связана с названием числа «googol»?

И это только те, что я помню. При просмотре этого списка становятся очевидными 2 вещи:

1. Я мог найти намного больше.
2. У поиска до сих пор есть возможности обновляться, меняться и прогрессировать.

Есть несколько путей развития поиска для удовлетворения нужд пользователя. Давайте рассмотрим несколько моих неотвеченных вопросов субботы и обсудим, как поиск может измениться за следующие 10 лет.

Способы

Во-первых, почему я не смог найти эти вещи тогда, когда мне это было нужно? Потому что поиск не достаточно доступен и прост. Поиск должен быть более мобильным, он должен быть доступен и легок в использовании в сотовых телефонах и автомобилях, а также в переносных устройствах, которых у нас даже ещё нет.

Например, когда вопрос о самом старом существе возникнет во время лодочной прогулки, всем беседующим будет интересно узнать ответ, но никто не захочет пользоваться неуклюжим и медленным устройством для его поиска. Было бы намного приятнее, если бы у нас было устройство с огромной коммуникабельностью, способное производить поиск без прерываний. Одна надуманная идея: «Как насчет переносного устройства, которое незаметно ведет поиск, основываясь на словах, получаемых из разговоров, а затем показывает связанные с ними факты?»

Эта идея показывает нам другой путь изменения способов поиска — голосовой поиск. Вы должны разговаривать с поисковой системой своим голосом. Также Вам нужна возможность задавать вопросы вербально, или печатая их, как естественные языковые выражения. Вы не должны разбивать всё на ключевые слова.

Кроме того, почему в поиске вообще должны участвовать слова? Почему я не могу представить свой запрос в виде изображения птицы, летящей мимо, и получить ответ поискового устройства, определившего, что это за птица? Почему я не могу записать аудио-отрывок и позволить поисковой системе идентифицировать и проанализировать его (песню или отрывок разговора), а затем рассказать мне любую информацию, связанную с ним? Сервисы, делающие часть этого, доступны сейчас, но они не просты в использовании.

В ближайшие 10 лет мы увидим радикальные улучшения в способах поиска, среди которых:

• мобильные устройства, предлагающие нам более легкий поиск;
• доступ к сети Интернет во многие устройства;
• разные способы ввода и объяснения запроса голосом, на естественном языке, изображением или звуком.

Понятно, что основанный на ключевых словах поиск очень мощен, но он также очень ограничен. Эти новые способы будут одними из самых крупных изменений в поиске.

Медиа

Ещё есть медиа-сторона. 10 синих ссылок, представленных как результаты интернет поиска, могут быть потрясающими и даже изменить Вашу жизнь, но когда Вы пытаетесь запомнить шаги для «чарльстона», текстовая веб-страница не будет даже близко стоять по полезности с видео. Формат результата играет большую роль.

Универсальный поиск, который мы представили в прошлом мае, был первым важным шагом, который включал в себя изображения, видео, новости, книги и карты — информацию в основных результатах поиска «Google».

Пока наше представление до сих пор очень линейно (результаты — это всего лишь список) и однородно. А что если страница результатов начнет полностью изменяться, чтобы на самом деле использовать эти разные типы результатов в чем-то более похожем на ответ, чем просто 10 независимых догадок? Что если страницы с результатами соберут лучшие медиа файлы вместе и покажут их так, что самые полезные будут не только первыми, но и самыми большими? Что если мы разместим наши результаты по столбцам, чтобы использовать больше поверхности экрана, доступной на новых, широких мониторах?

Мы всего лишь показали вершину айсберга нашим универсальным поиском, но это важный первый шаг для исследования всего, что мы сможем сделать с медиа-контеном.

В прошлом году нашей целью было использовать преимущества новых типов результатов и развивать дизайн интерфейса. Вы увидите плоды проделанных экспериментов в ближайшие месяцы, но даже эти изменения — только начало. За следующие 10 лет внешний вид поиска значительно изменится. Может быть, он должен содержать ещё больше видео и изображений, может он должен жестко различать относительный вес и точность результатов, может он должен быть более интерактивным во время изменений? Мы ещё не уверены, но мы знаем, что поиск не должен обладать одним качеством (особенно перед лицом взрывного роста популярности онлайн-медиа, который мы сейчас наблюдаем) — застоем.

Персонализация

Механизмы поиска через 10 лет будут намного лучше тех, что мы имеем сейчас. «Google» сам по себе становится немного лучше каждый день. Мы постоянно пишем и изменяем новые понятия, связанные с поиском, и выпускаем обновления практически ежедневно. Эти улучшения приводят нас к другим механизмам поиска, следовательно, эти механизмы через 10 лет будут заметно лучше. Настоящий вопрос не в том, будет ли поиск лучше, а в том, чем он будет лучше?

Понятно одно: поисковые механизмы будущего будут лучше частично из-за того, что они смогут понимать больше о Вас, отдельном пользователе. Конечно, Вы будете контролировать персональную информацию, и любая личная информация, которую использует поисковая система, будет предоставляться с Вашего разрешения. Но даже с самой элементарной информацией о пользователе, поисковые системы могут и будут достигать намного лучших результатов поиска.

Возможно, поисковые механизмы будущего будут знать, где Вы находитесь, может они будут знать, что Вы уже знаете или что Вы выучили сегодня, а может они полностью поймут Ваши предпочтения, потому что Вы решили поделиться информацией с нами. Мы неуверны в том, какие личные элементы будут наиболее ценными, но занимаемся исследованиями и экспериментами в персональном поиске сейчас, так как думаем, что это будет очень важно в будущем.

Местоположение

Ваше местоположение — это потенциально полезная сторона персональной информации. При просмотре моих вопросов, ответы на некоторые из них (В какое время открывается «J.C. Penney» по субботам? Какова мощность генераторов ГЭС?) позволяют поисковой системе узнать, что я был в Янктоне и Южной Дакоте, вводя эти запросы. Так как местоположение важно во многих поисковых запросах, принятие во внимание местоположение пользователя и контекст будет основным инструментом при повышении релевантности и легкости поиска в будущем.

Общество

Другой элемент персонализации — это социальная среда. Кто мои друзья и как я к ним отношусь? Как я могу использовать их знания более эффективно?

Например, у меня есть друг, который работает в магазине LF в Лос-Анджелесе (поэтому возник вопрос о LF в Сан-Франциско). Аббревиатура LF сама по себе очень многозначна. Согласно первой странице результатов поиска в «Google» она может относиться не только к магазину модной одежды моего друга, но и к «Leapfrog Enterprises», низкой частоте (low frequency), «Lebhar-Friedman», «Li & Fung Investment Group», «LF Driscoll Construction Management», крупному форматеу (large format), или дизайну будущего концепт-кара «Lexus».

Сейчас пользователь, набирающий «LF», должен выяснять, какой результат правильный, чтобы разобраться с многозначным термином, но это то, в чем поисковая система должна улучшиться. Например, мы поймем семантику вопроса о расположении LF в Сан-Франциско и сделаем вывод, что LF — это магазин. Или возможно, система сможет проанализировать мою социальную схему и понять, что один из моих друзей работает в LF, что я видел этого друга в выходные, и что в этом контексте LF относится к его месту работы. Алгоритмический анализ социальной схемы пользователя для дальнейшего улучшения запроса или его разбора может стать очень полезным в будущем.

Язык

Вышеописанные примеры показывают, как способы внедрения медиа-контента и различные формы персонализации помогают сильно улучшить поиск, но как же язык? Мы знаем, что есть случаи, при которых ответ существует в сети, но не на понятном Вам языке. Поэтому «Google» работает над машинным переводом. Мы хотим открыть мощь веб-поиска любому человеку, говорящему на любом языке. Основная идея — если ответ существует в сети где-либо на любом языке, мы получим его для Вас, переведем и возвратим на Вашем родном языке. Это очень перспективная идея, позволяющая действительно изменить способ освоения сети пользователями и их общения друг с другом, в основном на языках, в которых доступно не так много родных слов.

Заключение

Мы все знакомы с принципом «80—20», в котором последние 20% решения — это 80% работы. Поиск — это принцип «90—10». Сегодня у нас есть 90% решения. Я могу ответить на все мои неотвеченные субботние вопросы, не идеально и просто, но могу сделать это с помощью текущих средств поиска. Однако, оставшиеся 10% проблемы на самом деле требуют 90% (скорее всего больше 90%) работы.

Создание элегантных, подходящих и релевантных решений вопросов мобильности, способов поиска, медиа, персонализации, местоположения, социализации и языка займет десятилетия.

Поиск — это наука, которая будет развиваться и улучшаться сотни лет. Его можно сравнить с биологией и физикой в 15—16 веках. Это новая наука, в которой мы всё время делаем большие и интересные открытия. Однако, может пройти 100 или больше лет, пока мы получим микроскопы и понятие о так называемых молекулах и атомах поиска. Так же как и в биологии с физикой, несколько веков назад, крупнейшие достижения ещё не наступили. Это делает отрасль поиска в интернете такой захватывающей.

Итак, как звучит наше прямое определение идеальной поисковой системы?

«Ваш лучший друг с мгновенным доступом ко всем мировым фактам и фотографической памятью обо всём, что Вы видели и знаете»

Эта поисковая система может привязать ответы к Вам, основываясь на Ваших предпочтениях, существующих знаниях и лучшей доступной информации, она может попросить пояснений и представить ответы с любыми установками и в лучшем формате. Эта идеальная поисковая система могла бы легко и изящно утолить мою субботнюю жажду. Я очень горд тем, что «Google» за свои первые 10 лет изменил ожидания о качестве информации и того, как быстро и легко она должна получаться. Но я ещё сильнее заинтересован тем, чего «Google» может достичь в будущем.

Ранжирование веб-документов является ядром того, что делает поиск в Google таким эффективным. Но поиск не ограничивается одним ранжированием и включает много других составляющих.

В этой статье я опишу принципы, которым мы следуем при развитии всего механизма поиска, и то, как они связаны с ключевыми аспектами поиска. Также, я опишу, как мы убеждаемся, что находимся на верном пути в этих сложных и многочисленных экспериментах.

Позвольте представиться. Я Ben Gomes, работаю над поиском в Google с 1999 года и занимаюсь в основном оптимизацией качества поиска. Мне посчастливилось внести свой вклад в большинство аспектов механизма поиска, от просмотра сети до ранжирования. Чаще всего я занимаюсь разработкой интерфейсов и функций поиска.

Обычная реакция друзей на то, что я работаю над пользовательским интерфейсом поиска Google — это вопрос: «Чем ты занимаешься? Он же никогда не меняется». Затем они подозрительно смотрят на меня и говорят: «Лучшее — враг хорошего. Google хорош таким, какой он есть — простая и быстрая веб-страница. Зачем ее как-то изменять?»

Чтобы ответить на этот вопрос, позвольте начать с основной нашей цели в веб-поиске: предоставить веб-страницы, которые Вам требуются так быстро, как это возможно.

Поиск сам по себе не является конечной точкой — это всего лишь средство. Эта цель кажется очевидной, но она кардинально отличает механизм поиска от других сайтов в сети, успех которых измеряется тем, как долго пользователи остаются на них. Мы же измеряем наши достижения в поиске отчасти тем, как быстро Вы покинете наш сайт. Есть несколько правил, которые мы используем, чтобы предоставить нужную Вам информацию так быстро, как это возможно:

• Минимальный код веб-страницы

  Маленькая страница быстро скачивается и, как правило, быстрее показывается браузером. Это достигается минималистической эстетикой дизайна, использование дополнительных эффектов в интерфейсе замедляет страницу без получения большой выгоды.

• Простое представление сложных алгоритмов

  Многие функции поискового механизма требуют алгоритмов большой сложности и огромного количество анализируемых данных. Важно «спрятать» все эти сложности за понятным и интуитивным пользовательским интерфейсом.

  Коррекция написания запросов, выделение значимых частей в тексте, поиск ссылок на сайты — это примеры функций, которые требуют сложных алгоритмов, которые постоянно улучшаются и оптимизируются. С точки зрения пользователя изменения в поиске почти невидимы, Google просто работает лучше.

• Поиск, работающий везде!

  Расширенные возможности поиска должны быть сделаны так, чтобы алгоритмы и интерфейс можно было адаптировать для работы на всех языках и во всех странах. Например, проблема коррекции произношения в Китае, где пользовательские запросы часто не разбиваются на слова, или Иврит и Арабский язык, где текст пишется справа на лево.

• Принятие правильных решений

  Принятие правильных решений — опыт, опыт, много опыта. Мы стараемся убедиться в том, что получили правильные результаты экспериментов. Даже планы, выглядящие, как перспективные, могут провалиться на простых тестах.

С этим связаны несколько проблем. Например, показ большего количества текста (или изображений) для каждого результата может помочь Вам в выборе лучшего результата. Но страница результатов, содержащая слишком много информации, дольше загружается и визуально обрабатывается. Поэтому каждый кусок информации, который мы добавляем к странице результатов должен быть тщательно продуман, чтобы убедиться, что выгода для пользователя перевешивает затраты, связанные с этой дополнительной информацией. Это относится ко всем частям процесса поиска, от печатания запроса до результатов сканирования и дальнейших исследований.

С чего Вы начинаете поиск? С набора запроса. Очень часто, если Вы не знаете, как правильно пишется слово, результат разочаровывает Вас. Коррекция правописания, которая кажется простой и очевидной функцией, скрывает в себе множество технических проблем.

Например, ни в одном обычном английском словаре не будет корректного правописания Britney Spears. Мы провели огромный анализ миллиардов страниц в сети и логов наших запросов, чтобы определить какие слова являются «настоящими», а какие — орфографическими ошибками.

Система, выполняющая для Вас коррекцию правописания, должна за долю секунды рассмотреть огромное количество слов, которые Вы могли иметь ввиду (намного большее, чем в любом словаре, сделанном вручную) и выбрать наиболее похожие на запрос, набранный Вами.

Когда мы уверены, что Вы на самом деле хотели напечатать что-то другое, мы предоставляем результатам некоторую свободу, стараемся отвлечь Вас от просмотра первого результата на странице. Коррекция правописания находится на линии взгляда и окрашена в ярко-красный цвет. Мы убеждаемся, что ничто не окрашено красным цветом, кроме текста требующего внимания (пока что такого не было).

Алгоритмы, используемые в коррекции правописания, постоянно улучшаются. Сейчас они работают с большим количеством языков и намного лучше, чем раньше, определяют, когда пользователь сделал ошибку в правописании.

Следующей задачей после корректной формулировки запроса является правильный выбор страницы из списка результатов. Для каждой страницы мы представляем заголовок, URL и короткий фрагмент из ее содержимого. Страницы, не имеющие подходящего заголовка, часто игнорируются пользователями. Одно из самых больших недавних изменений — это поиск на странице правильного заголовка, который не включен в HTML-тег заголовка «title». Чтобы «увидеть» заголовок, который автор страницы задумал, мы анализируем HTML-код страницы специальным алгоритмом. Согласитесь, страница с отсутствующим заголовком может быть Вами проигнорирована, но если она содержит интересующее содержание? Поиск не указанного заголовка — это намного лучше, чем, если Вы будете игнорировать релевантную страницу из-за отсутствия заголовка.

После заголовка идет фрагмент страницы, и ключевым новшеством было то, каким образом Google определяет нужный фрагмент. В то время, как другие поисковики показывают Вам первые две строки веб-страницы, Google отображает фрагменты страницы, в которых встречаются ключевые слова Вашего поиска. Эксперты информационного поиска называют это «ключевые слова в контексте».

Выделение ключевых слов визуально практически неотличимо от более простых стилей фрагментов, но это то, что помогает в принятии Вами решения о том, на какую страницу зайти. Эта простота скрывает настоящую сложность, когда мы выбираем фрагмент страницы, который будет выводиться под заголовком, нам нужно просмотреть текст релевантного результата, чтобы найти самую подходящую часть (содержащую ключевые слова), вместо того, чтобы просто показать несколько первых строк.

Мы улучшаем поиск подходящих фрагментов страниц алгоритмами для определения релевантности частей страницы. Изменения колеблются от сложных (подсвечивание синонимов слов Вашего запроса в результатах) до более простых. Вот пример, на котором пользователь ищет «arod» и Вы видите, что Alex и Rodriguez выделены в фрагменте результата поиска, основываясь на нашем анализе того, что Вы могли действительно иметь ввиду его.

Как более очевидный пример, мы выделим и покажем Вам информацию о дате создания страниц, на которых она имеется. Эти даты отображаются в мириадах форматов, которые мы научились понимать и представлять единообразно, чтобы Вы могли их найти и понять.

Одна из самых распространенных нужд пользователей, когда Вы вводите название веб-сайта, который знаете, и мы представляем ссылки для быстрого вызова. Они позволяют добраться до ключевых разделов сайта и являются простым дополнением к результатам поиска, которое добавляет лишь небольшое, но заметное количество текста на страницу.

А что если Вы не нашли того, что искали, среди самых подходящих результатов? В этом случае Вам, вероятно, нужно попробовать другой запрос. Мы помогаем Вам в этом, представляя ряд измененных запросов с результатами, даже если среди них не будет нужного, они могут намекнуть на другие (вероятно более успешные) направления для улучшения запроса.

Измененные запросы, помещенные внизу страницы, не отвлекают пользователя, но помогают, если остальные результаты поиска не содержали требуемой информации.

Я описал несколько ключевых аспектов поиска, которые мы изменяем с каждым днем. Но как, делая эти изменения, мы понимаем, что они успешны и что мы не ошиблись? Мы постоянно оцениваем наши изменения, разделяя их с Вами! Запуская предполагаемые изменения для небольшой части наших пользователей, наблюдаем, помогают ли они поиску, или мешают. Есть много показателей, по которым определяется, на правильном мы пути или нет. Процесс измерения этих алгоритмов, сам по себе — наука с большим количеством потенциальных ловушек. Наша экспериментальная методология позволяет рассмотреть предел возможностей и запустить те, которые работают лучше всех. Для каждой запускаемой нами дополнительно функции поиска, проводим большое число экспериментов, скрытых от пользователей.

Итак, позвольте мне ответить на вопрос, с которого я начал: Мы действительно постоянно изменяем страницу результатов поиска в Google. И нет, мы не испортим то хорошее, что уже есть. Почему? Вы не дадите нам сделать это!

Оригинал статьи «Search quality, continued».

Самый недавний очерк о компании был написан в лондонской «Times», которая столкнула её лицом к лицу с «Google». Вкратце, репортер «Times» Марк Франчетти вместе с соучредителем и исполнительным директоров «Яндекса» Аркадием Волож позиционирует компанию, как серьезного конкурента «Mountain View», веб-гиганта евразийского масштаба. Например, она владеет 55% Российского рынка. «Google», в свою очередь, удерживает 21%.

Сейчас вызовы, бросаемые обеими сторонами, довольно интересно наблюдать. «Google» буквально в прошлом месяце купил российскую компанию контекстной рекламы «Бегун», которой ранее владел «Rambler Media», за 140 миллионов долларов. По-видимому это было сделано чтобы извлечь выгоду из уверенного роста российского интернет сектора и инвестировать в больший кусок «пирога поиска» в регионе. Хотя «Google» контролирует сегмент меньший, чем «Яндекс», его позиции не так непоколебимы, как в западных частях мира.

Конечно, «Яндекс» понимает это, и не теряет времени, а работает для собственного роста. Это проявляется как на российском рынке, так и вне границы России. На этой неделе было объявлено, что «Яндекс» значительно улучшил свои каналы данных к Украине. А немного раньше сообщили об апгрейде поискового механизма, для поддержки так называемых мировых стандартов, и усовершенствовании работы пользователя с видео, для достойной конкуренции с постоянно развивающимся «Google».

Пока еще рост «Яндекса» не сильно влияет на мировые позиции «Google», как замечают в «Times». 33 миллиона россиян сообщают, что пользуются Интернет. Эта цифра, по прогнозам, удвоится через 5 лет. И это, без сомнения, немалое количество. Однако, учитывая недавние оценки населения России, которое составляет примерно 142 миллиона, что ниже объявленных в 2002 году 145 миллионов, скорость освоения веб-сервисов даже близко не сравнить с западным населением. Например, в США, с населением около 300 миллионов, более 70% имеют доступ в Интернет, это 219 миллионов пользователей. Европа, в целом, находится в шаге от отметки 50%. Такие страны, как Германия, Норвегия, Великобритания, Швейцария, Дания и Швеция показывают результаты, подобные США. Франция — около 55%.

Как было сказано, «Яндекс» извлекает выгоду из постепенно растущего российского интернет-развития. Согласно поисковой компании «Quintura», «Яндекс» стал чем-то вроде нарицательного слова в своей родной стране, и планирует двигаться дальше в этом направлении, а так же обновить свой логотип, сделав его полностью кириллическим, вместо почти англоязычного, использующегося сейчас.

Без лишних слов становится понятно, что за последние годы Западный интернет-рынок стал очень интернациональным, а компании Китая и, в немного меньшей мере, России получили статус тяжеловесов или почти-тяжеловесов. Это относится к поиску так же, как и к социальным сетям, видео каналам или веб-программам. И ,наверное, можно с уверенностью сказать, что эти тенденции будут продолжаться. Конечно, очень маловероятно, что в результате «Google» останется в убытке.

Практически все крупные рынки по всему миру имеют область для расширения. Однако Китай и Россия имеют больше хорошей почвы, для того чтобы вырастить финансовое благополучие, так сказать.

Оригинал статьи — «Russian Search Leader Yandex is Hungry for International Renown».

В этой части рассказывается об алгоритмах автоматизации и искусственного интеллекта, применяемых в поисковой системе.

В моей прошлой статье я описал некоторые принципы, по которым Google производит ранжирование. Как продолжение обсуждения о качестве поиска, я бы хотел рассказать Вам подробнее о некоторых наших технологиях.

Основная технология нашей системы ранжирования пришла из области науки «Информационного поиска» (Information Retrieval или IR). IR-сообщество исследует поиск почти 50 лет. Оно использует статистику особенностей слов, таких, как частота слов, для ранжирования страниц. IR заложило для нас твердый фундамент, и мы построили на нем огромную систему, используя ссылки, структуру страниц и многие другие новшества.

В последнее десятилетие сущность поиска изменилась от «дайте мне то, что я сказал» до «дайте мне то, что я хочу». Ожидания пользователей от поиска справедливо выросли. Мы много работаем над удовлетворением ожиданий каждого пользователя, и для это нам необходимо как можно лучше понимать страницы сайтов, запросы и наших пользователей. За последнее десятилетие мы довели технологии до понимания этих трех компонентов (процесса поиска) до совершенно новых измерений.

На протяжении всей статьи, когда речь будет идти о запросах в Google, они будут заключены в квадратные скобки [ ], для обозначения начала и конца запроса. (Страницы и результаты поиска часто меняются, поэтому, со временем, некоторые примеры, используемые здесь, будут работать не так, как описано.)

Понимание страниц

За годы мы глубоко продвинулись в технологии краулинга и индексирования. В результате мы получаем очень большой и свежий каталог. Кроме размеров и актуальности, мы добавили в наш каталог и другие улучшения. Одна из ключевых технологий, которую мы разработали для понимания страниц, привязывает логически-важные понятия к странице, даже если она их не содержит.

Допустим, мы найдем официальный сайт Sprovieri Gallery в Лондоне по запросу на итальянском [galleria sprovieri londra], хотя на сайте нет ни слова London, ни Londra. В США пользователь, ищущий [cool tech pc vancouver, wa] найдет страницу www.cooltechpc.com несмотря на то, что нигде на странице не указано, что они находятся в Ванкувере. Другие нами разработанные технологии включают в себя распознавание более важных и менее важных слов на странице и свежесть информации на сайте.

Понимание запросов

Важно понимать, что ищут наши пользователи (больше, чем просто слова в их запросе). Мы достигли некоторых заметных успехов в этом направлении, включающих в себя лучшую в своем роде систему распознавания текстового содержимого, развитую систему синонимов и очень мощную систему анализирования.

Многие пользователи время от времени используют нашу систему распознавания содержимого. Системе известно, что кто-то, вводящий в строке поиска [kofee annan], на самом деле ищет мистера Кофи Аннана, и подсказывает ему об этом: Did you mean: kofi annan; тогда как если кто-то ищет [kofee beans], то ему на самом деле нужны coffee beans (кофейные бобы).

Сделать это для разных языков и с высокой точностью довольно сложно, но мы хорошо справляемся.

Синонимы — это фундамент нашей работы по пониманию запросов. Это одна из самых сложных проблем, решаемых нами в Google. Даже если что-то очевидно для человека, это может быть неразрешимой проблемой для автоматического языкового обработчика.

Как пользователь, я не хочу слишком много думать о том, какие слова мне использовать для запросов. Часто я даже не знаю, какие слова правильные. Здесь включается в работу наша система синонимов. Она может выполнять сложные модификации запросов, то есть она знает, что слово ‘Dr’, в запросе [Dr Zhivago], означает Doctor, в то время как в [Rodeo Dr] оно значит Drive. Пользователь, который ищет [back bumper repair] получает результаты для rear bumper repair. Для [Ramstein ab] мы автоматически получим результат для Ramstein Air Base, а при запросе [ b&b ab] мы будем искать Bed and Breakfasts in Alberta, Canada.

Мы достигли такого уровня понимания запросов для практически сотни различных мировых языков, этим я действительно горжусь!

Другая технология, которую мы используем в нашей системе ранжирования — это поиск идеи. Обнаружение главной идеи запроса позволяет возвратить намного более релевантные результаты. Например, наши алгоритмы поймут, что в запросе [new york times square church] пользователь ищет известную церковь на Times Square, а не статьи из New York Times. Но мы не останавливаемся на поиске идей, мы добавляем правильные идеи, когда, например, кто-то ищет [PC and its impact on people], то на самом деле он ищет impact of computers on society (влияние компьютеров на общество), а пользователю, ищущему [rainforest instructional activities for vocabulary], нужны rain forest lesson plans. Наши алгоритмы анализа запросов имеют множество встроенных современных методик, и, повторюсь, мы делаем это практически для всех языков, с которыми мы работаем.

Понимание пользователей

Наша работа по пониманию намерений пользователя нацелена на возврат результатов, которые действительно хотят пользователи получить, а не просто тех, которые они написали в своем запросе. Эта работа начинается с системы локализации мирового уровня. И добавляет нашу улучшенную технологию индивидуализации и несколько других больших шагов, таких как Универсальный Поиск, сделанных нами в понимании намерений пользователей.

Наш упор на принцип «наиболее релевантные запросу результаты» отражается в нашей работе по локализации. Один и тот же запрос, написанный в различных странах, даст абсолютно разные результаты. Пользователь, ищущий [bank] в США, должен получить Американские банки, в то время как пользователь в Великобритании ищет Bank Fashion line или British financial institutions. Результаты этого запроса должны содержать местные финансовые подразделения в других англоговорящих странах, таких как Австралия, Канада, Новая Зеландий, ЮАР.

Настоящее веселье начинается, когда этот запрос вводится в не-англоговорящей стране, например в Египте, Израиле, Японии, России, Саудовской Аравии, Швейцарии. Также, запрос [football] относится к совершенно различным видам спорта в США, Австралии и Великобритании.

Эти примеры в основном показывают, как мы получаем правильные местные версии одинаковых смысловых значений в различных странах (финансовые подразделения, спорт и т.д.). Однако, один и тот же запрос можно иметь совершенно разное значение в разных странах.

Например, [Côte d'Or] это географический регион во Франции, но это крупный производитель шоколада в соседней, франкоговорящей Бельгии; и да, эти вещи мы тоже получаем правильно.

Персонализация

Персонализация — это еще одна сильная особенность нашей поисковой системы, которая подгоняет результаты поиска для каждого пользователя.

Пользователи, которые "залогинились" во время поиска и имеют включенный журнал посещений, получают результаты, которые более релевантны для них, чем общие результаты Google. Например, пользователь, который имеет множество запросов, относящихся к футболу, получит более «футбольные» результаты на запрос [giants], тогда как другие пользователи могут получить результаты, относящиеся к бейсбольной команде. Аналогично, если вы стремитесь получить результаты из какого-то интернет-магазина, вам лучше искать товар на этом сайте. По нашим оценкам, пользователи, получающие персональные результаты, находят их более релевантными, чем неперсонализированные результаты.

Другой случай пользовательских намерений можно рассмотреть на примере запроса [chevrolet magnum]. Magnum на самом деле делается компанией Dodge, а не Chevrolet. Поэтому, мы показываем результаты для Dodge Magnum с пометкой See results for: dodge magnum.

Наша работа над Универсальным Поиском — это ещё один пример нашего толкования намерений пользователя для предоставления им того, что они (иногда) на самом деле хотят. Т.е., кто ищет [bangalore], получают не только нужные веб-страницы, также ему становится доступна карта, видео, жизнь на улицах Бангалоре и т.д., и плюч ко всему еще и новости/блоги о Бангалоре.

В заключение, позвольте мне коротко упомянуть последнее улучшение, сделанное нами в механизме поиска: Cross Language Information Retrieval (CLIR). Это позволяет пользователям сначала получить информацию не на их родном языке, а затем, используя технологию перевода Google, мы делаем информацию доступной. Я называю это улучшение «дайте мне то, что мне нужно, на любом языке». Пользователь, который ищет биографию Тони Блэра в России, набирающий [Тони Блэр биография] получает предложение посмотреть результаты, переведенные с английского. Аналогично, пользователь, ищущий песни из фильмов Дисней в Египте с запросом [أغاني أفلام ديزني], получит предложение посмотреть английские результаты.

Нам очень нравится CLIR, так как он действительно помогает нам в нашей миссии по организации информации в мире и приданию ей универсальной доступности и пользы.

Я могу продолжать показывать примеры современных технологий, которые мы разработали, чтобы сделать нашу систему ранжирования настолько хорошей, какой она является, но на самом деле решение проблемы поиска еще далеко за горами. Многие запросы до сих пор не получают удовлетворяющих результатов в Google, и наличие каждого такого запроса — это возможность улучшить и дополнить нашу систему ранжирования. Я уверен, что с таким количеством технологий, разрабатываемых нашей группой, мы сделаем большие улучшения в наших алгоритмах ранжирования в ближайшем будущем.

Заключение

Я надеюсь, что две мои статьи о ранжировании Google дали понять, что мы живем и дышим поиском, и нам это нравится больше, чем когда-либо. Наше старание служить пользователям по всему миру беспрецендентно. Мы гордимся сами собой, запуская очередной алгоритм в нашу систему ранжирования. Мы усердно работаем каждый день, чтобы сделать ее еще лучше.

Первая часть статьи: Инженер Google, об алгоритмах ранжирования

Сегодня проверял, как индексируется наш блог в поисковиках. И дело дошло до Яндекса, я ввел запрос «работа со строками javascript», в надежде увидеть в выдаче недавнюю статью об использовании строк в Javascript и был приятно удивлен. В выдаче блог оказался на 2-й позиции.

В URL статьи были использованы русские буквы: www.codeisart.ru/Работа-со-строками-в-javascript/. И в результатах выдачи ключевые слова были выделены в URL жирным шрифтом:

У меня появилась мысль, что если уж Яндекс находит ключевые слова в URL, то быть может он использует это в своих поисковых алгоритмах? Или же это выделение сделано только для удобства ориентирования в результатах выдачи?

Google применяет подобную практику и учитывает при ранжировании ключевые слова в URL, набранные латинскими буквами. Тогда я решил проверить, «понимает» ли русскоязычные URL Google? Оказалось, что понимает:

Но дает ли это дополнительный вес ссылке? Будем ждать, время покажет…

Позвольте представиться. Меня зовут Амит Сингал. Я работаю в Google руководителем команды, ответственной за ранжирование.

Вот уже восемнадцать лет я работаю в сфере поисковых технологий, начав в 1990 года выпускником по специальности «компьютерные науки». В научных кругах «поисковые алгоритмы» называют «Информационный поиск» (Information Retrieval или IR). Я пришел в Google в 2000 году и с тех пор работаю над алгоритмами ранжирования Google.

Ранжирование Google — это набор взаимосвязанных алгоритмов, используемых для поиска документов, наиболее релевантных для запроса пользователя. Мы используем эти алгоритмы для сотен миллионов запросов в день из набора миллиардов и миллиардов страниц. Эти алгоритмы работают для каждого запроса, введенного в большинство служб поиска Google.

Так как поиск в сети — это самая используемая служба Google, а также самая широкоизвестная, те же алгоритмы ранжирования используются, с некоторыми изменениями, в других службах поиска, таких как Images, News, YouTube, Maps, Product Search, Book Search и других.

Самый частозадаваемый мне вопрос о ранжировании Google: Как Вы это делаете?. Конечно, для создания такой современной системы как наша, требуется очень много, и я постараюсь рассказать о некоторых технологиях в следующей статье. Сегодня, я бы хотел вкратце объяснить основные принципы ранжирования Google:

1. наиболее релевантные запросу результаты;
2. стараться сделать алгоритмы как можно проще;
3. полная автоматизация, никакого ручного вмешательства в работу алгоритмов.

Первый принцип очевиден. Работая над поисковым движком, мы хотим быть абсолютно уверены в том, что каждый пользователь получит наиболее релевантные результаты своего запроса. Мы обычно называем это принципом «не пропустить ни один запрос». Всякий раз когда мы возвращаем менее, чем идеальные результаты для любого запроса пользователей на любом языке мира в любой стране — это вдохновляет нас на улучшение алгоритмов и приближение их к идеальным.

Второй принцип также очевиден. Разве не желает каждый программист или системный проектировщик, чтобы его система оставалась простой и понятной? Во время работы поисковой системы, когда мы получаем большое количество запросов от пользователей, на которые нужно ответить, и плюс ко всему учитывая все языки мира. И гораздо легче обрабатывать запрос множеством простых алгоритмов, результаты которых будут собраны и обработаны финальным.

Мы много работаем над упрощением нашей системы без ухудшения качества результата. Это постоянная проблема, но она стоит наших трудов. Мы делаем около десяти изменений алгоритмов ранжирования каждую неделю, тщательно рассматриваем их до запуска. Наши инженеры абсолютно точно понимают, почему страница была ранжирована именно таким образом для данного запроса. Система, в которой легко разобраться, позволяет нам быстро делать усовершенствования. Вот, что подразумевает принцип «Старайтесь делать проще«.

Ни одно обсуждение алгоритмов ранжирования Google не обходится без распространенного, но ошибочного, вопроса: Google вручную редактирует свои результаты?. Позвольте мне в ответ на это просто назвать наш третий принцип: «Никакого ручного вмешательства». На наш взгляд, сеть была создана людьми. Вы одни из тех, кто создает страницы и посещает их. Мы используем вклад человека в наших алгоритмах. Финальное упорядочение результатов определяется исключительно нашими алгоритмами, использующими достижения и разработки огромного Интернет-сообщества, а не вручную, т.е. весь процесс происходит полностью автоматически.

Мы считаем, что субъективное мнение каждого индивидуума является субъективным, а информация, выбранная нашими алгоритмами из огромной массы человеческих знаний, записанных на веб-страницах и ссылках на них гораздо выше, чем субъективное мнение.

Вторая причина, по которой мы принципиально против ручного вмешательство в результаты ранжирования — это то, что неверно обработанный запрос является поводом для улучшения наших алгоритмов.

Совершенствуя основной алгоритм, мы не просто улучшаем тот один запрос, мы совершенствуем целый класс запросов, причем всегда для всех языков мира. Однако, я должен добавить, что так же существуют правила для написания сайтов, рекомендованные Google, и мы принимаем меры в отношении сайтов, нарушающих наши правила или по некоторым другим причинам (таким, как требования закона, детская порнография, вирусы/вредоносное ПО, и т.д.).

В заключение хочу сказать, что наша страсть к механизмам поиска сейчас намного сильнее, чем когда-либо и моя работа лучшая в мире

Продолжение статьи (Часть 2): Технологии ранжирования Google