Записки Димка

Личный блог Голополосова Дмитрия (dimok)

Bing получил уже 10% поискового рынка
бильряд
[info]dimokru

Bing стал самым быстро растущей поисковой системой в США, сделав за август 2009 года более 1 млдр. поисков и в следствие этого "вырос" аж на 22%.

http://blog.dimok.ru/flz/bing.gif

Если учесть тот факт, что выдача Bing теперь будет использоваться и на Yahoo, то Bing будет контролировать почти треть всего поискового трафика. Очень существенно. Я считаю, что именно Bing сможет составить достойную конкуренцию Гуглу и именно сейчас начинается это время.

И соответственно пришло время учитывать особенности оптимизации под Bing, которые постепенно будут исследоваться и формироваться.

А как вы думаете?


История поисковых технологий
бильряд
[info]dimokru

SearchEngineJournal опубликовал наглядную хронологию развития поисковых систем и технологий:

Полная картинка.

 

Read more... )

 


Twitter.com - поисковая система?
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Буквально только что обновилась главная страница Twitter.com:

Собственно, основная новость в том, что поиск теперь размещен на самом видном месте. Тем самым, твитер преподносится не просто как платформа микроблогинга, а как источник информации с удобным функциональным поиском.

Кроме того, отображаются основные тенденции: о чем пишут люди:

  • прямо сейчас
  • сегодня
  • за последнюю неделю

Не нужно регистрироваться, чтобы получить доступ к огромному количеству свежей, часто обновляемой информации. По скорости освящения различных событий твитер может легко конкурировать с поиском по блогам (равно как и записи в твитере с постами в блогах - банально, сделать твит размеров 100-140 символов гораздо проще, чем пост в блог).

Уверен, что поиск по твитеру в самое ближайшее время станет весьма популярным, а через какое-то время сможет конкурировать с основными игроками поискового рынка.

Лично мне эта тенденция нравится. Рекомендую всем, кто еще не присмотрел к твитеру, обратить особое внимание на этот сервис. Мой твитер можно почитать тут: http://twitter.com/dimokru.


Обзор сервиса Actual Keywords
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

На прошлой неделе мы официально запустили сервис Actual Keywords. Теперь получить киворды по любой тематике стало значительно проще. Обо всем по порядку.

После простой регистрации попадаем в админку сервиса и получаем доступ к следующим фичам:

  1. Скачать ключевые слова бесплатно
  2. Покупка готовых подборок ключевых слов
  3. Создание собственных проектов по кивордам

Бесплатные пакеты кивордов

На данный момент у нас есть 6 бесплатных пакетов кивордов на самые разные популярные темы. Вы можете оценить качество наших баз и объем доступных данных. Для скачивания необходимо лишь зарегистрироваться на сервисе.

Готовые пакеты

Цены сейчас такие же, как и до запуска сервиса. Однако мы полностью переформировали слова для выборки этих пакетов и фильтры (например, в пакете Furniture в фильт внесено слово periodic, чтобы к "столам" не подмешивались мусорные киворды типа "periodic table").

Создание собственного пакета кивордов

Есть быстрая форма прямо на Dashboard и есть расширенная в на странице Создать проект.

Здесь достаточно ввести лишь название проекта и запросы, по которым делать выборку кивордов, а также базу (по умолчанию установлена Non Adult база - самая востребованная). После заполнения формы мы попадаем на страницу подтверждения настроек проекта, где кроме всего прочего отображается оценка количества кивордов по запросу.

Generate отправляет проект в очередь на генерацию. Сам процесс генерации пакета занимает от одной минуты до часа в зависимости от количества кивордов в проекте и от количества проектов в очереди.

Сразу после отправки на ганерацию проект появляется на странице Your Projects. Как только у проекта будет статус "Generated" можно жать и оплачивать пакет через Webmoney, Paypal или пластиковой картой (через Paypal). Уведомление о том, что генерация проекта завершена, также приходит на е-мейл указанный при регистрации.

Содержимое пакета кивордов

Архив с кивордами организован так, чтобы покрыть бОльшую часть потребностей пользователя:

Project

  • Splitted by Words - в этой папке лежат файлы на каждый запрос, по которому делалась выборка из базы
  • Splitted by WordsCount - в этой папке киворды разбиты на файлы по количеству слов в киворде
  • _all.nostat - все киворды без статистики, отсортированные по алфавиту
  • _all.sorted_by_google.nostat - все киворды без статистики, отсортированные по количеству найденных документов в Гугл
  • _all.sorted_by_google - все киворды с полной статистикой, отсортированные по количеству найденных документов в Гугл
  • _all.sorted_by_popularity.nostat -все киворды без статистики, отсортированные по популярности
  • _all.sorted_by_popularity - все киворды с полной статистикой, отсортированные по популярности
  • _all - все киворды с полность статистикой, отсортированные по алфавиту
  • _filter - фильтры, которые были использованы для создания проекта
  • _words - фразы, по которым делалась выборка кивордов для проекта
  • info - информация о количестве кивордов, найденных по каждой фразе проекта
  • words_statistic - содержит все слова, которые встречаются в кивордах проекта, со статистикой встречаемости

Денежный вопрос

На сайте есть следующие варианты оплаты кивордов:

  1. Подписка на месяц/год, которая подразумевает возможность создания 10 проектов в сутки.
  2. Разовая покупка (всего 10 баксов) - можно создать проект и сразу его купить.
  3. Покупка готовых пакетов кивордов.

Сервис мощный и полезный. Приглашаю всех попробовать, а предложения по добавлению нового функционала и улучшению текущего можно оставлять в комментариях к данному посту или отправлять на actualkeywords@gmail.com.


Гугл рекомендует указывать карту сайта в robots.txt
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Некоторые вебмастера отмечают, что некоторые проверенные на корректность карты сайтов не принимаются сервисом Google Webmaster Tools. Выдается ошибка: "URL not allowed - This url is not allowed for a Sitemap at this location."

Susan Moskwa, член команды Google Webmaster Central, говорит, что они знают об этой проблеме, и она имеет место быть на аккаунтах с большим количеством сайтов. В качестве альтернативы предлагается указывать карту сайта в robots.txt.

Описание протокола robots.txt: Google Webmaster Help document. Необходимо просто добавить строку в файл robots.txt:

Sitemap: [путь к карте сайта]

Обсуждение на Google Groups

Думаю разумно делать эту запись на ВСЕХ сайтах.

Источник: Google Recommends robots.txt Sitemap Submission During Glitch


Социальный поиск: прогнозы
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

По заявлениям экспертов (выжимка с конференции SMX Advanced):

  • Социальный маркетинг пришел всерьез и надолго.
  • Google и Ask обрастают социальными фичами.
  • Если хотите прочного держаться в выдаче поисковиков, вам просто необходимо задействовать SMO: используя видео уроки, тематические блоги, сообщества или все это одновременно.
  • Просто кинуть ссылку на сайт или продукт в социальные сети уже недостаточно. Нужно работать над построением круга единомышленников, участвовать в сообществах, знать их особенности.
  • Методы сильно зависят от размера компании. Большие компании используют больше “спамных” методов, потому что цели размыты.
  • Определитесь со стратегией, прежде чем сабмитить статьи в социальные сети.
  • Не все заслуживает обсуждения, поэтому следите за словами.
  • Следите за реакцией сообщества!
  • Затраты на социальный маркетинг утроятся к 2011 году
  • Участие в социальных сетях останется бесплатным или очень дешевым

Уже читал где-то, что увлечение социалками становится не менее массовым, чем поиск порно в сети.

Я уверен, что сейчас еще не поздно начать работать в этом направлении. Все, что связано с социальными сервисами (блоги, обмен новостями, фотошаринг и т.д. и т.п.), пока развивается и постоянно появляются новоиспеченные лидеры.


Подчеркивание. Мнение других поисковиков
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Barry Schwartz поинтересовался у представителей Yahoo, MSN и Ask.com, какое значение они придают подчеркиванию в урлах. Вопрос стал актуальным после того, как Мэт Катс сообщил, что Google начал воспринимать подчеркивание как разделитель слов (аналогично с дефисом).

Microsoft, Ramez Naam:

Мы считаем подчеркивание разделителем слов в урлах. Так всегда было.

Yahoo, Priyank Shanker Garg:

Для разделения слов в урлах мы понимаем подчеркивание и дефис абсолютно одинаково, но это не единственные разделители слов, которые мы учитываем.

Ask.com, Peter Linsley:

Мы также понимаем подчеркивание как разделитель слов в урлах.

Такие новости. Так что те, кому урлы с подчеркиваниями нравятся больше, можете спокойно их использовать.


Мариса Майер о будущем поиска
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Вице президент по поиску Google, Мариса Майер (Marissa Mayer) рассуждает о будущем поиска на конференции Searchnomics 2007.

  1. Автоматический перевод. Гугл хочет стереть языковой барьер! Мариса упоминает технологию CLIR, которая позволяет автоматически переводить запрос на различные языки и переводить результаты поиска. В будущем по словам Марисы Гугл будет способен искать одновременно на всех языках и предоставлять все результаты на языке пользователя.
  2. Поиск по книгам от Гугл. Гугл уже оцифровал 16 крупнейших библиотек (в том числе и 6 международных). Мариса рассуждает о более сложных и полных индексах, которые позволят формировать более релевантную выдачу для пользователя. Для всех книг добавляются метаданные. Начало Semantic Web?
  3. Картинки и видео. Видео будет интегрировано в основной поиск.
  4. 1-800-GOOG-411. По этому номеру можно будет воспользоваться голосовым поиском. Бесплатно.
  5. Универсальный поиск. В поиск будут добавляться различные объекты: новости, картинки, видео.
  6. Карты и локальный поиск. Карты Гугл теперь показывают информацию о трафике, а кроме того недавно появился фича Street View, которая позволяет увидеть реальные изображения улиц.
  7. Клиентские приложения. Основные направления: Google Gears и Google Gadgets.
  8. iGoogle.

Всех нас ждет счастливое будущее! Спасибо Гугл!

Источник: Google’s Marissa Mayer on The Future of Search.


Web 2.0 от Ask.com
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Теперь незаслуженно подзабытый поисковик ask.com выглядит так:

или так:

Всего 10 дизайнов теперь есть.

Видимо, ask.com решил побороться за все растущий рынок. Кстати, Гугл то ой как не дремлет - уже вовсю рекламируется в Рунете.


Мэт Катс снова о платных ссылках
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Мэт Катс обновил свою запись How to report paid links (я писал о ней: Как сдать продавцов ссылок в Гугл), ответив на несколько самых частых вопросов, задаваемых в комментариях к этой записе (комментариев уже больше 600 - пожалейте свой трафик).

SearchEngineJournal публикует несколько интересных цитат:

О том, что такое платные ссылки

Так как я занимаюсь качеством выдачи Гугла и релевантностью выдаваемых результатов, для меня чистота и релевантность выдачи - основной ориентир. Поэтому, меня волнуют платные ссылки, которые перекачивают PR с сайта на сайт с целью поднять рейтинг в Гугле. Меня совершенно не заботят платные ссылки, которые не влияют на позиции в Гугле. Поэтому когда я говорю “платные ссылки” я подразумеваю ссылки, поставленные с целью повлиять на рейтинг в Гугле.

Ссылки с каталогов

Когда решаете, добавлять ли сайт в каталог, задайте себе несколько вопросов:

  1. Отклоняет ли каталог заявки? Если добавляется любая ссылка, то это очень похоже на обычный “список линков” или ФФА, что не есть хорошо.
  2. Насколько качественные ссылки в каталоге? Предположим каталог отклоняет 25% заявок, но все же оставшиеся 75% низкого качество или вообще спам. Это тоже пример плохого каталога.
  3. Если ли плата за добавление в каталог? На что она идет? Для каталогов высокого качества плата идет на поощрение человека, который просматривает, оценивает и рецензирует все подаваемые заявки.

Покупка ссылок

Если вы хотите купить ссылки, я советую делать это с целью получить трафик, дополнительных посетителей, а не с целью поднятия PR и позиций в поисковиках.

Всем боятся!

<input ... >


У Yahoo! хороший аппетит
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Давно не секрет, что поисковые боты прожорливы. И это не беда, а большая радость, когда они приходят индексировать ваш сайт. Но что делать, когда сайт не один?

Мне всегда нравилось смотреть за динамикой заходов поисковиков на новые сайты. Но на прошлой неделе огромный интерес у меня вызвала активность яхубота на ВСЕХ моих сайтах (онлайн магазины, порталы, каталоги, форумы, блоги и т.д.) - он просто озверел. Яхубот легко и непринужденно положил один из моих серверов многочисленными обращениями (и это при том, что сервак этот выдерживал посещаемость в миллионы юзеров в сутки).

Многие наверняка в курсе, что не так давно Яху побанил множество сайтов (и не только всякую грязь, но и нормальные сайты). А на прошлой неделе опомнился и начал все индексировать заново - мои сайты (часть из которых попала под бан) подверглись агрессивной индексации.

Пока самый действенный способ поддерживать сервер в адекватном состоянии - это блокировка в конфигах сервера ахубота (по юзер агенту). Уже сделали кеш для всех сайтов, оптимизировали все, что только могли, поставили кеш для пхп и прочие заморочки - сервак уже почти держит натиск яхубота (раньше умирал через 5 минут после активации яхубота в конфигах, а сейчас по полчаса держится). Продолжаем оптимизировать скрипты и придумывать дополнительные хитрости.

Яхубот - всегда гость желанный, он нам очень нужен, но бывают моменты, когда мы просто не можем его себе позволить. Запрашивает яхубот в сутки 3-5 лямов страниц - хз, зачем ему столько, но видимо очень хочется. Другие боты на порядок скромнее.

Забавных моментов еще много. Например, то, что до этого сервак держался не один год (и при текущем количестве сайтов все было в порядке) - индексировалось все, работало довольно шустро. Кстати, все это происходит при вполне адекватном отношении к сайтам со стороны прочих поисковиков - они индексят без "авралов".

Вот такие пироги. Желаю всем попасть в индекс Яху и не лопнуть от переизбытка чуйств :)

В продолжение: Как я боролся с Yahoo! Slurp

<input ... >


21 совет Мэта Катса по оптимизации сайтов
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Отличная подборка советов Мэта Катса по оптимизации:

1. http://www.mattcutts.com/blog/dashes-vs-underscores/
Мэт рекомендует использовать тире вместо подчеркивания для разделение слов в адресах страниц. 2005.

2. http://www.mattcutts.com/blog/seo-mistakes-sneaky-javascript/
Google убивает каждый отдельно взятый спам сайт как только находит его, но постоянно работает над алгоритмизацией этого процесса. Мэт рекомендует не использовать подозрительных JavaScript редиректов, потому что они могут попасть под пристальное внимание в ближайшее время. 2005.

3. http://www.mattcutts.com/blog/whats-an-update/
Google постоянно обновляет свои индексы - в том числе и беклинки и PageRank. Однако публикуют они новые беклинки и ПР примерно раз в 3 месяца. Поэтому новые беклинки и ПР ни о чем не говорят - их появление никак не связано с апдейтом. 2005.

4. http://www.mattcutts.com/blog/seo-mistakes-nearly-hidden-text/
Скрытый текст: делать цвет текста чуть отличным от цвета фона еще хуже, чем писать “белым по белому”. Испольщование “#EEEEEE” вместо просто белого на абсолютно белом фоне хуже, чем просто белый текст на белом фоне - очевидно же, что вы хотите что-то спрятать. 2005.

5. http://www.mattcutts.com/blog/q-a-thread-march-27-2006/
Если вы продаете ссылки, то Мэт рекомендует использовать “презервативы для ссылок”. Иначе репутация вашего сайта может сильно пострадать. Видимо, имеется в виду то, что исходящие ссылки перестанут учитываться (ака непот фильтр). 2006.

6. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Googlebot может обходить только общедоступные страницы, для доступа к которым не нужно логиниться. Поэтому не забывайте выкладывать в свободный доступ необходимые страницы. Ванесса Фокс. 2006.

7. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Если вам необходимо использовать флеш на сайте, то не забудьте сделать HTML версию. А флеш версию закройте от роботов через robots.txt. Ванесса Фокс. 2006.

8. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Используйте понятные все урлы типа “african-elephants.html”, а не бредни в стиле “343432ffsdfsdfdfasffgddddd.html”. Но не переусердствуйте — african-elephants-and-their-habitats-etc-etc-etc-etc.html. Ванесса Фокс. 2006.

9. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Задайте для каждой страницы уникальные, описывающие содержимое страницы заловки и теги TITLE. Ванесса Фокс. 2006.

10. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Количество редиректов при клике на урл сведите к минимуму. Ванесса Фокс. 2006.

11. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Количество параметров в урле сделайте минимальным - в идеале 1-2 параметра, если это возможно. Ванесса Фокс. 2006.

12. http://www.mattcutts.com/blog/guest-post-vanessa-fox-on-organic-site-review-session/
Неиспользуйте в урлах параметр “id=” для чего бы то ни было кроме идентификатора сессий. Иначе вы рискуете не попасть в индекс Гугла. Ванесса Фокс. 2006.

13. http://www.mattcutts.com/blog/text-links-and-pagerank/
Гугл не одобряет покупку ссылок с целью наращивание ПР и будет с этим бороться. 2006.

14. http://www.mattcutts.com/blog/google-analytics/
Черные оптимизаторы использует Google Analytics для своих сомнительных исследований, но обычных владельцев сайтов надо убеждать в пользе различных исследований сайта. 2006.

15. http://www.mattcutts.com/blog/text-link-follow-up/
Google борется с продажей и покупкой ссылок и Мэт отмечает, что они в этом преуспели - как алгоритмически, так и вручную. Сайты, продающие ссылки могут потерять доверие в поисковых системах. 2006.

16. http://www.mattcutts.com/blog/seo-mistakes-spam-in-other-languages/
В 2006 году Google уделяет особое внимение определению спама не только на английском языке, а на итальянском, испанском, китайском и других. 2006.

17. http://www.mattcutts.com/blog/seo-advice-discussing-302-redirects/
Используйте 302-й редирект для временного перенаправления пользователей и 301-й редирект для постоянного. В общем, если сайт переехал, то 301-й, если просто надо временно кидать на другие страницы, то 302-й. 2006.

18. http://www.mattcutts.com/blog/seo-advice-url-canonicalization/
Canonicalization (каноникализация?) - процесс выбора наиболее подходящего урла, обычно для отображения главной страницы, например, www.example.com или example.com или www.example.com/index.html. Потому как все эти урлы разные, то сервер может отдавать разный контент по каждому из них. Поэтому Google пытается выбрать лучший и отсечь остальные. Чтобы помочь Google используйте везде одинаковые урлы и ставьте 301-й редирект с неправильных на правильный. 2006.

19. http://www.mattcutts.com/blog/seo-advice-url-canonicalization/
Не стоит использовать “URL removal tool”, чтобы удалить урл domain.com, если вы волнуетесь о каноникализации и у вас в индексе два урла domain.com и www.domain.com. Так вы удалите весь сайт целиком! 2006.

20. http://www.mattcutts.com/blog/seo-advice-url-canonicalization/
Поисковые системы могут использовать механизм каноникализации для удаления ненужных слешей на конце урла, перевода верхнего регистра в нижний, удаления идентификаторов сессий на форумах и других подобны движках. 2006.

21. http://www.mattcutts.com/blog/sitemaps-interview/
404-я ошибка (документ удален, но может появиться) воспринимается как 410-я (удалени и никогда уже не появится). Большинство веб мастеров используют 404-ю именно как 410-ю. 2006.


SES San Jose 2006 - подробный обзор
бильряд
[info]dimokru

Originally published at Блог Димка. You can comment here or there.

Seroundtable не без помощи других блогеров сделали обзор всех сессий конференции в Сан Хосе:

Понедельник, 7 августа, 2006:
+ Social Search Overview: Yahoo!, Windows Live & Eurekster
+ Compare & Contrast: Ad Program Strategies
+ Searcher Behavior Research Update
+ Social Search: Up Close With Yahoo!

+ Leveraging Social Media (MySpace, YouTube, & Other Social Networks)
+ Does Demographic Targeting Matter?
+ Social Search: Up Close With Google (Google Co-op)
+ Communicating With Customers
+ Searchonomics: Serious & Fun Stats

+ Search and Branding
+ SEM Via Communities, Wikipedia & Tagging
+ The Search Laboratories
+ Domaining & Address Bar Driven Traffic

Вторник, 8 августа, 2006:
+ Can You Please Them All? (Google, Yahoo!, MSN & Ask.com)
+ Auditing Paid Listings and Click Fraud Issues
+ Reputation Monitoring & Management
+ Search Arbitrage Issues

+ Duplicate Content and Multiple Site Issues
+ Blog and Feed Search SEO
+ The Bot Obedience Course - New Yahoo! Site Explorer Tool Announced
+ News Search SEO
+ Search Algorithm Research
+ Search Engines: Friend or Foe?

Среда, 9 августа, 2006:
A Conversation With Google CEO Eric Schmidt
+ Big Site Big Brand SEM
+ Linking Strategies
+ Big Ideas For Small Sites & Small Budgets
+ When Search Engines Do Search Marketing (AOL, Business.com, Yahoo! & Local.com)

+ Link Baiting & Viral Search Success
+ Usability & SEO - Two Wins for the Price of One
+ SEM for Non-Profits & Charities
+ Pricing & Contracts For The Small SEM Shop

+ The Vice Presidents Of Search Marketing

Четверг, 10 августа, 2006:
+ Search APIs (Yahoo! Developer Network, YSM API, Google AJAX API & AdWords API)
+ Vendor Chat on Measuring Success
+ Search Engine Q&A On Links (Ramez MSN Search, Kaushal Ask.com, Adam Google & Rajat Yahoo!)

+ Balancing Organic and Paid Listings
+ Organic Listing Forums (Danny Sullivan In Costume)


Home