Илья Сегалович: Мы думаем прежде всего о поиске

Илья Сегалович: Мы думаем прежде всего о поиске

Алгоритм, определяющий релевантность сайтов – наша главная задача, и продолжим над ним работать и дальше

Технический директор компании «Яндекс» Илья Сегалович – особо секретная персона. Его никогда не отпускают одного к девушкам, особенно если девушка – журналист. В этот раз он тоже пришел не один. Поэтому Демфира Шакурова, воспользовавшись моментом, задала несколько вопросов ещё и руководителю пресс-службы «Яндекса» Михаилу Ушакову.

По образованию Вы геофизик, как с таким образованием Вы работаете в интернет-компании?

Илья Сегалович: По-моему, образование – это не панацея. Чем меньше у человека «красивых корочек», тем больше у него чувство неудовлетворенности и стремления к совершенству. У меня нет комплекса. Я, будучи студентом, занял второе место на «всесоюзке» (всесоюзной олимпиаде) по математике и всех мехматовцев, которые со мной выступали вместе, победил.

Так же как Яндекс победил конкурентов. 4 года назад в базе Яндекса было 15 миллионов страниц, сколько сейчас? Как много индексируется страниц в день?

Илья Сегалович: Поиск Яндекса индексирует порядка миллиарда страниц, но там очень много спама. Хотя этого добра в любой базе много. Мы измеряем число страниц в базе специальными способами. Для конференции WWW2006 мы писали на эту тему статью, мы, правда, не довели ее до ума, но там правильные вещи написаны…Можно понять, что мы измеряем и как. Мы следим за свежестью и чистотой поиска. Свежесть – это процент страниц, которые отвечают данному поисковому запросу и содержат искомое слово. Если доля таких страниц в выдаче равна 100%, значит, все страницы живые и содержат искомое слово.

А у вас какой процент сейчас?

Илья Сегалович: Сейчас хороший процент. Мы занимаемся расчетом базы сайтов и по отношению к нам, и по отношению к Google, Rambler, Апорту. Соответственно, видим, кто работает лучше, а кто – хуже, у кого какой прогресс. Yаhoo, например, прошлой осенью объявили, что у них самая большая база в мире. А им никто не поверил. Мы по нашим приборам не видели, что база Yаhoo больше. Мы просто заметили рост, а с зимы, она действительно стала больше. Интересно, что эти наши измерения подтвердил на конференции WWW2006 русский юноша из Израиля. Он, кстати, получил первое место среди юношеских докладов. Его методика очень похожа на нашу, но более аккуратна математически. Он сделал расчет и доказал всему поисковому сообществу, что базаYahoo все таки больше базы Google. Это просто информация – никакого личного наезда на товарища Долгова (генеральный директор Google Россия) и Google Россия. (смеется)

А какие у Вас личные отношения с Владимиром Долговым?

Илья Сегалович: Лично у меня никаких отношений нет. Сережа Бурков (руководитель центра разработок и исследований Google Россия), Лена (Колмановская) его знает, был в жюри Кубка Яндекса в Калифорнии. Владимир Долгов работал в Ozon.ru, и был аспирантом Андрея Себранта (директор компании «Яндекс» по специальным проектам). Я не знаю лично ни того, ни другого.

Рост вашей базы влияет на работу поискового движка?

Илья Сегалович: Влияет, тяжелее работать. Все очень пропорционально, чем больше база, тем труднее работать.

Успеваете апдейты делать?

Илья Сегалович: Успеваем, успеваем, успеваем. (задумчиво)

Михаил Ушаков: Кроме апдейтов, у нас еще идет технологическое обновление, то есть мы каждый день «кушаем» по 3 сервера: на завтрак обед и ужин.

Заменяете?

Михал Ушаков: Нет. Новые ставим. Сегодня в технопарке Яндекса около тысячи серверов.

Хороший аппетит у серверного парка. Но волнует нас и читателей не количество серверов, а технические проблемы, связанные с регулярным, массовым выпадением сайтов по разным запросам (с большой или маленькой буквы, с окончанием или без окончания)?

Илья Сегалович: Нестабильность есть, мы с ней боремся, но наша цель – удовлетворить не веб-мастера, а конечного пользователя. А что касается разницы выдачи по запросу с большой и маленькой буквой, то, это учет словоформы. Это нормально.

А выпадения из выдачи? Они не связаны с ростом базы, с тем, что не успеваете обновлять парк?

Илья Сегалович: Выпадение всех страниц сайта невозможно, потому что все проиндексированные страницы одного сайта не лежат на одном сервере. Если выпадет весь сайт, то это связано с пессимизацией. Да, действительно, нагрузки есть, с ростом базы возникают ситуации не очень стабильной работы, мы эту проблему понимаем, и действуем. Была, например, проблема – страницы одного сайта по-разному кешировались. Её пофиксили еще в начале весны.

Но, по отзывам оптимизаторов и клиентов, эта проблема, массовая и повторяется периодически?

Илья Сегалович: Да поймите, эта проблема есть, но она практически незаметна пользователю, в этом смысле она минорная. Мы сейчас сосредоточены на других проблемах . К сожалению, я должен извиниться перед веб-мастерами. Повторюсь, эта проблема у нас минорная и я понимаю их недобрые чувства, связанные с нестабильной работой Яндекса. Я просто подчеркиваю, что мы думаем, прежде всего, о поиске.
Мы предпринимаем какие-то шаги, чтобы этого не было, но полностью от этого «не излечишься». Да, причина в очень большой базе, однако, с точки зрения пользователя, это минимальный брак – для пользователя важно то, что на его запрос находится релевантный ответ, и не так важно, на каком именно сайте.

Вопросы наших читателей для Ильи Сегаловича:

Вадим М.:

Как вы можете прокомментировать, тот факт, что в выдаче поисковой системы «Яндекс» практически по любому низкоконкурентному запросу появляются сайты дорвеи, принудительно перенаправляющие пользователя на сайт www.rupoisk.ru? Когда кончится это безобразие и есть ли эффективные методы борьбы с этим злом?

Илья Сегалович: Да, действительно, редиректы на такие сайты, как www.rupoisk.ru и www.bloknotik.ru, появляются в выдаче Яндекса. Мы с этим боремся. Есть эффективные методы борьбы с этим злом. Думаю, ждать осталось не долго.

Мария И.: Ожидаются ли кардинальные изменения в поисковом алгоритме?

Илья Сегалович: Да.

Например, изменения в ссылочном ранжировании сайтов?

Илья Сегалович: Да.

Учете ссылок с главных страниц?

Илья Сегалович: Это детали, которые я не могу разглашать.

Павел К.: Насколько стабильно работают и будут работать алгоритмы ранжирования?

Илья Сегалович: Алгоритмы ранжирования работают стабильно, но у баз большая нагрузка. Мы стараемся, чтобы эта стабильность повышалась. Что касается стабильности временной, то алгоритмы будут меняться.

Дмитрий Р.: Почему сейчас приоритет отдается быстроте индексации страниц и количеству сайтов в базе поисковой системы, а не качеству выдаваемых пользователю страниц по запросу, их релевантности?

Илья Сегалович: Приоритет отдается качеству, и только на втором месте быстрота. Поэтому я не согласен с этим утверждением.

Почему «Яндекс» придумывает и развивает новые сервисы (поиск по картинкам, в блогах, погода разная, телепрограмма), а алгоритм, определяющий релевантность сайта, работает все хуже и релевантность выдаваемых сайтов все ниже?

Илья Сегалович: Работы над новыми проектами и над качеством поиска идут параллельно, ими занимаются разные люди и одно другому не мешает. Мы понимаем, что алгоритм, определяющий релевантность сайтов – наша главная задача, и продолжим над ним работать и дальше.

взято здесь

SEO-специалист Роберт Фьюсс делится своими секретами

Автор: Роберт Фьюсс,
http://www.spiderweblogic.com
Перевод с английского языка: Демьянчук Виталий.
http://vitaweb.pp.ru


Большинство из вас наверняка слышали о таком явлении как раскрутка сайта, но что это означает на самом деле? Каким образом раскручивать свой веб-сайт? И что будет, если добавить свой веб-сайт в тысячи поисковых машин или каталогов через некоторые службы раскрутки сайтов?

Какие сайты раскручивать?

Вы можете даже раскручивать свою домашнюю страницу. Многие поисковые системы обещают найти и проиндексировать всю остальную часть вашего сайта автоматически (в зависимости от их "свободного времени").
Но, если они не обещают Вам такой услуги, то вам придётся добавить в список индексации несколько страниц, индексация которых для вас важна.
Например, карта сайта для меня является той важной страницей, которую необходимо обязательно проиндексировать, т. к. на ней у меня содержатся прямые ссылки на остальную часть моего веб-сайта.

Вам следует указывать адрес этой важной для вас страницы и при регистрации в каталогах или других сайтах, где планируется публикация вашей ссылки.

Что вам надо сделать сначала?

Для начала вам необходимо удостоверится, что ваш веб-сайт хорошо оптимизирован под поисковые системы. По крайней мере, желательно дважды проверить мета-теги, чтобы убедиться в том, что заголовок (тег title), теги описания (meta description), и ключевые слова (meta keywords) полностью описывают веб-страницы, имея в себе тебе ключевые слова, которые мне необходимы. Желательно также запустить проверку сайта через сервис Website Validator для страниц, которые вы намереваетесь проиндексировать в поисковых системах, чтобы избежать возможных проблем при индексации всего сайта.

Для каталогов обычно заготавливают несколько часто запрашиваемых данных, необходимых при регистрации сайта. Этот метод очень помогает ускорить процесс регистрации в каталогах. Для этой цели я обычно использую самый примитивный текстовый процессор, такой как "Блокнот", и сохраняю все требуемые для регистрации данные, прежде чем приступать к непосредственной регистрации в каталогах и поисковых системах. Этот метод позволяет с лёгкостью заполнять необходимые поля формы для регистрации путём простой операции копирования - вставки через буфер обмена.

Обычно такой файл содержит:
Ваш e-mail;
URL вашего веб-сайта;
Хорошее название вашего сайта;
>Описание вашего веб-сайта.

Заметим также, что Yahoo теперь может регистрировать список URL-адресов, которые могут содержаться в текстовом файле или в RSS. Я бы Вам посоветовал приготовить такой список. Он должен находиться в корневой директории вашего сайта и обновляться тогда, когда вы делаете какие-либо изменения на ваших страницах. Поэтому, вы можете просто указать расположение этого файла, и позволить Yahoo автоматически найти остальную часть вашего веб-сайта. Этот способ здорово уменьшает время регистрации вашего сайта целиком. Лично мне нравится использовать этот способ: любое изменение на ваших страницах укажет Yahoo, какие страницы необходимо переиндексировать прежде всего.

Google использует такую же технологию, облегчающую поиск остальных страниц вашего веб-сайта. У Google она называется Google Site Maps. Однако, это тема уже для другой статьи. Об этой возможности вы можете узнать, ознакомившись с информацией на их официальном сайте. У Google эта процедура немного отличается от способа реализации на Yahoo. Следуйте их инструкциям. Если это для вас будет слишком сложно, то вы можете обратиться к веб-мастеру или SEO-специалисту, знакомому с процедурой настройки этого сервиса.
Где регистрироваться?

Я бы рекомендовал Вам регистрировать ваши страницы в крупных поисковиках самостоятельно. Однако, существуют определённые сервисы, которые могут это сделать за вас - это довольно-таки хорошо экономит ваше время. Я регистрирую свои страницы в следующих поисковых системах:
Google;
Yahoo;
MSN.

Для индексации сайта в Yahoo необходимо у них зарегистрироваться.

Не волнуйтесь, если вы не увидите результатов своей работы мгновенно. Сайт обычно появляется в результатах поиска: в MSN - спустя 6 недель, в Yahoo - через 8-12 недель, в Google - через 3 месяца (хотя, вы вряд ли получите сколько-нибудь значимый трафик от Google в течение первого года - однако продолжайте работать. Давно существующие сайты получают от Google 70-90% поискового трафика).

Также, если в вашем браузере установлен Alexa Toolbar, настройте в нём функцию проверки вашего веб-сайта, нажмите кнопку Info на панели инструментов. Затем, вам надо будет заполнить информацию о вашем сайте. После регистрации вы можете узнавать рейтинг вашего веб-сайта в этой системе.

Существуют слухи о том, что Google рассматривает описание вашего сайта в Alexa в своём поиске - так что убедитесь, что описание вашего сайта релевантное самому сайту.

Вам также следует добавить свой сайт в каталог Dmoz.com. Это большой каталог, который модерируется людьми. Ссылки с этого каталога дают большую весомость вашему сайту.

Также при регистрации в каталогах необходимо выбирать самую релевантную для вашего сайта категорию. Также запишите адрес директории, в которой вы планируете опубликовать ссылку на свой сайт.

Одни каталоги дают хорошие обратные ссылки на ваш сайт. Другие (такие как yahoo.com и dmoz.com) дают высокую релевантность ваших страниц в поисковых системах.

После того, как вы познакомитесь с этими каталогами, желательно также найти каталоги, которые сходятся по тематике с Вашим сайтом.

Регистрация в поисковых системах и каталогах не всегда гарантирует хорошее ранжирование вашего веб-сайта. Это лишь первый шаг. Этим Вы только даёте миру знать о себе.

Избегайте автоматической регистрации Вашего сайта в тысячах нетематических каталогах и каталогах с автоматической регистрацией в тысячах других каталогов. Они могут Вам дать много обратных ссылок, но все они временные. К тому же, это воспринимается как поисковый спам, за которым может последовать строгое наказание от поисковых систем. Не будьте занудой!

Эта статья написана автором Робертом Фьюссом и является его собственностью.
При публикации этой статьи на других сайтах указание имени автора перевода и оригинального автора, ссылка на сайт http://vitaweb.pp.ru (перевод статьи) и исходника http://www.spiderweblogic.com обязательны.

Прощай, SEO Push, здравствуй SEO Pull

Материал предоставлен отделом маркетига компании It-Online
Автор Майк Грехан
Источник Clickz Network
Перевод: Галеева Эльвира

Данная статья Майка Грехана посвящена обсуждению различных стратегий SEO оптимизации. Итак, рассмотрим результаты использования этих стратегий в свете современных тенденций развития маркетинга в сети Интернет.


Но для начала обратимся к самим поисковым системам и механизмам выдачи новых сайтов по запросам.

Специалистам SEO оптимизации хорошо известен феномен "песочницы". И это явление нельзя игнорировать. Многие связывают проблему "песочницы" с некими требующими внимания техническими вопросами. Общая теория такова: Google многие месяцы обходит вниманием новые сайты только потому, что они новые. И мало кто думает при этом о том, была ли применена при оптимизации сайта стратегия интегрированных маркетинговых коммуникаций. Кажется, люди уверены в том, что SEM существует в неком вакууме.

Джилл Вален, известный эксперт в этой области, даже утверждает, что требуется около девяти месяцев для того, чтобы запустить новый сайт и чтобы он появился в рейтинге Google. Однако неверно, что все новые сайты игнорируются в течение столь длительного времени. Многие компании часто запускают новые сайты совместно с оффлайновыми рекламными компаниями и эти сайты занимают неплохие позиции в выдаче поисковиков.

В качестве примера можно привести сайт поклонников победителя одного британского реалити-шоу. Сайт был создан в конце октября 2005 г., вошел в десятку лучших в ноябре и до сих пор там находится при поиске имени победителя.

Возможно, здесь сыграл свою роль фактор "звоночка" - заинтересованности пользователей. Большой интерес ведет к высокой посещаемости.
Действительно, маркетинг - это создание интереса для потребителя, который равняется информированности о продукте, и которая, в свою очередь, приводит к спросу.

Трудно представить себе ситуацию, что Google не хочет предоставлять новую и значимую информацию своим пользователям. Разве им не нужен выбор? Разве они не хотят, чтобы старые проверенные компании и сайты сочетались с новой продукцией, услугами и информацией? Неужели Google действительно решил, что его пользователей интересуют только сайты, созданные несколько месяцев назад?

Если поисковая система может зафиксировать поток запросов (т.е. спрос), по которым не выдается достаточно необходимой информации из кластерной индексной базы, можно быть уверенным, что она заполнит эту нишу. В противном случае, если конечные пользователи не найдут информацию здесь, они будут искать ее в другом месте. Они не будут ждать девять месяцев, пока Google включит новые сайты в свою систему выдачи.

Сейчас поисковые системы располагают более обширным объемом информации для поиска, нежели просто по ключевым словам и взаимосвязанным данным. Здесь можно назвать также предварительное кэширование и историю запросов, подобранные для определенных дней недели и времени дня и основанные на ссылающихся URL. Во внимание принимаются и динамика запроса, и общая информация о пользователе, основанная на подробном описании интересов. Теперь во внимание принимается и огромное количество информации о конечных пользователях.

Для сопоставления старых принципов SEO и нового подхода, сочетающего оптимизацию с маркетинговыми коммуникациями можно привести следующую аналогию. Для выбора маркетингового канала новые участники могут использовать "стратегию подталкивания" (SEO Push), "стратегию притяжения" (SEO Pull), или, при наличии ресурсов, классическую "стратегию подталкивания-притяжения". "Стратегия подталкивания" побуждает посредников продвигать и продавать Ваши продукты конечным пользователям. В результате конечные потребители информируются о продуктах и приобретают их. "Стратегия притяжения" использует рекламу и промоушн, чтобы побудить клиентов самих запрашивать информацию о продукте, таким образом, побуждая посредников его заказывать.

Так же и в SEO - маркетинге. Раньше при оптимизации использовались определенные технологические хитрости, выдвигающие web-сайт клиента в верхние позиции поисковых систем. Теперь это зачастую уже не работает. Однако, используя интегрированные маркетинговые методы для информирования пользователей, создания бренда и, в конечном счете, спроса, вы можете продвинуть сайты Ваших клиентов в эти списки.

Попытки рекламировать клиента с небольшим маркетинговым бюджетом по сравнению с его конкурентами на и так насыщенном рынке всегда будут проигрышными. Более 80% из всех рекламных кампаний потребительских товаров в США терпят неудачу. С таким количеством провалов в маркетинговом мире, нетрудно понять, что в поисковых системах результаты будут аналогичными.

Так что было бы по меньшей мере неразумно пытаться объяснить неудачи феноменом "песочницы". Есть десятки причин, по которым компании терпят неудачи в реальном мире. То же самое применимо и к Интернету.

Прежде чем заключить договор с клиентом, нелишне провести маркетинговое исследование и лучше понять то, с чем Вам предстоит столкнуться. Если клиент предлагает 50 000 $ за SEM на рынке, где конкуренты обычно тратят миллионы на телевидение, радио, прессу и интегрированную online-рекламу, стоит дважды подумать.

Сейчас многие крупные компании вводят расходы на SEM в свой рекламный бюджет. Уже не ведутся разговоры о том, чей сайт лучше оптимизирован. Сейчас говорят о том, кто лучше продает.

Так существует ли эффект "песочницы"? Или SEO - компании - это сектор маркетинга, неспособный функционировать на том же уровне сложности, что и средство, с которым они работают?

В конечном итоге, поисковые системы контролируются конечными пользователями, а не их оптимизаторами.


Статья взята здесь