Кошке
А ты подписался на rss?

Что бы это значило или будущее интернет-поиска

by Игорь Лизунов 28.07.2009 17:28
Зачем Google нужен вики, а Microsoft — игры?

В связи с выходом в свет bing’а, тема поисковых движков стала гораздо живее обсуждаться в программистском сообществе. Я тоже решил ее коснуться, поскольку в связи с темой аспера это мне близко и я могу по-человечески объяснить некоторые вещи.

Я не буду говорить о технологической стороне поиска (federated search и т.д.), а остановлюсь на алгоритмической.

Вероятно, все обратили внимание, что в поиске у гугла появилась вики. С ее помощью можно поднимать понравившийся результат поиска или, наоборот, удалять из списка. Недавно bing запустил игру, которая призвана собрать информацию о соответствии запросов ответам.

Они хотят повысить релевантность (корректность выдачи) Догадливые коллеги догадались, что все это затеяно не просто так, а с великой и светлой целью — повысить релевантность поиска.

Каков идеально релевантный поиск? Это когда 1000 ваших копий перечитывают весь интернет и выбирают для вас 10 самых удачных страниц по запросу «сиськи Анны Семенович».
Для этого им нужно «обучить» машину думать как эксперта по поиску. А для этого им нужны обучающие данные (мы).

Каково приближение идеального поиска? Это когда 1000 людей, которые являются «идеальной выборкой человечества», перечитывают весь интернет и выбирают по 10 самых удачных страниц на каждый запрос.

Что такое идеальная выборка человечества? Это выборка, в которой доли людей по любому признаку совпадают с долями в человечестве в целом (столько же геев, столько же евреев, столько же айтишников и т.д.)

Как найти экспертов? Очень просто — нужно предложить людям простой способ оставлять свое мнение о поиске. Для этого и нужны вики и игры.

Как выбрать среди экспертов самых адекватных? Нужно выбрать экспертов, мнения которых минимально отличаются от мнений всех остальных экспертов.

Итак, мы получили группу экспертов, мнению которых можно доверять.

Что дальше делать с их мнением? В игру вступают алгоритмы классификации и машинного обучения. О них я поведаю чуть позже.

Результат? Смерть черного и серого SEO. Что же это значит для нас? Из поисковых результатов наконец-то выпадут спам и SEO-шные сайты. А останется только реальный контент.

По-моему это круто.
И махинации тут практически невозможны. А что может помешать махинациям?

О, ответ на этот вопрос самые внимательные читатели уже нашли. 

Допустим, злобные сеошники решат сделать ботов, которые будут в гугло-вики проставлять плюсы на их сайте. Попадут они в категорию экспертов? Нет! Потому что они будут отличаться от других людей (см. выше).

Значит придется делать ботов, которые как-то притворяются другими людьми и отмечают в вики свой сайт только в 1% от остальных действий. Тогда, возможно, они смогут попасть в результаты. Однако их также легко будет отсеять по активности на почте и т.д.
В итоге, по сути единственная адекватная возможность для CEO-шника — это заплатить реальным пользователям чтобы они поставили «+». А теперь вопрос, как вы думаете, сколько это будет стоить? =)
А может все-таки можно похимичить? Неа =)

А что если все-таки, а?

Дело в том, что компании интересует не сырое мнение экспертов (по запросу «титьки Анны Семенович» лидирует сайт http://machovik.ru ), это просто платформа для обучения машины классификации релевантен/нерелевантен. А значит что:

а) не нужна большая группа экспертов, достаточно данных, собранных например внутри компании Microsoft (ну по темам, в которых сотрудники компании адекватны)

б) не нужна постоянная подпитка информацией, на долго хватит данных, собранных за несколько месяцев

в) не нужна информация по всем запросам, т.к. машина сама научится работать как эти люди.

Итоги:
- SEO-шники идут лесом
- контент дорожает
- ссылки и реклама в поисковиках серьезно дорожает
Итак, что же нас ожидает после ввода в строй такой супер-машины.

Индустрия оптимизации сайтов, когда без реального контента можно было за счет ссылок, жирных шрифтов и бла-бла-бла продвинуть сайт в поиске практически изживет себя.

На ее смену придет индустрия, когда на сайте появляется реальный контент и сайт становится реально полезен. Для рядовых пользователей интернета это очень круто: меньше времени будут тратить на поиск. Для владельцев сайтов — это существенное удорожание рекламы и раскрутки.

Куда утекут деньги от SEO? Фирмы-то останутся, надо же еще племяннику директора порш кайен покупать. Очевидно что деньги начнут утекать в рекламу, и прежде всего в контекстную.
Я думаю что цены на показ баннеров и ссылок могут легко подняться в 2 раза. А купленные слова легко поднимутся в цене раз в 5.

Другой способ оптимизации — накачка реально полезного контента. Скорее всего существенно подорожает содержимое профессиональных блогов. Скорее всего его будут покупать за денежку.

Поэтому стоит приготовить сани летом. Такие вот пироги. А вы что думаете по этому поводу?

Комментарии

29.07.2009 9:02:45 #

samolisov

Мне кажется - это все лирика. Как быть с запросами, которые можно интерпретировать по-разному. Например человек ищет "коленвал". Что он хочет - купить коленвал, продать коленвал или узнать об устройстве коленвала? Боюсь никакой эксперт этого не определит.

Еще интересный момент. Человек вбивает в строку поиска "купить коленвал". Это значит, что нужно искать сайты, на которых есть слова "продажа коленвалов". С этим у существующих поисковых систем проблемы.

Да, еще вопрос. Откуда взялись цифры "в 2 раза", "в 5 раз"? Просто когда я активно покупал/продавал ссылки (был такой период в жизни) и Яндекс ввел новый алгоритм бана продажный ссылок - цены в том же Sape изменились не в 2 и не в 5 раз.

samolisov | Reply

29.07.2009 10:20:53 #

Игорь Лизунов

1. По поводу «коленвала». Классический пример кстати тут «Ягуар» Smile Об этой проблеме заговорили годах так в 80-х. И самое классное, что она решается. К примеру многие поисковики (bing, напр.) предложат несколько конкретизаций поиска (в соответствии с кластерами, имеющимися в результатах). Более того, эта проблема уже неплохо решается на «подлете» (грубо говоря, по истории запросов в текущей сессии и активности пользователя вообще).
На сколько хорошо она решается? Конкретные данные рыть лень (хотя я могу найти), в целом не плохо. Процентов 70 в промышленных масштабах отрабатывает нормально.

2. По поводу «купить» и «продажа». Этому баяну еще больше лет Smile Решается он опять же такими методами как «расширение запроса» (по топ10 результатов исходного запроса выделяются ключевые слова и запрос (внутри системы) расширяется. Еще один вариант — это сеть синонимов, которая строится опять же не вручную и работает еще быстрее.

3. Оценки «в 2 раза» — мои субъективные, основанные на примерных прикидках объемов рынков, их изменений в связи с нововведениями, и соответственно перетекании средств.

4. Социальный закладки и т.д. будут отмирать как и классификатор, который был у Yahoo!. Машины будут обрабатывать это все быстрееSmile Хотя, безусловно, такие проекты в ближайшее время будут создаваться/покупаться в качестве обучающих баз данных

Игорь Лизунов | Reply

29.07.2009 9:06:27 #

samolisov

Еще одно замечание. Как некий прототип описанной системы можно рассматривать поиск в социальных закладках. Найти нужную информацию там гораздо проще, чем в Google.

samolisov | Reply

20.07.2010 6:55:07 #

Wow Gold Tips

First Of All, let me commend your clarity on this subject. I am not an expert on this subject, but after studying your article, my understanding has developed considerably. Please permit me to snap up your rss feed to remain in touch with any potential updates. Solid job and will offer it on to admirers and my fans.

Wow Gold Tips | Reply

22.07.2010 7:25:35 #

wow gold

Hi. I read a few of your other posts and wanted to know if you would be interested in exchanging blogroll links?

wow gold | Reply

22.07.2010 7:43:39 #

Wow Gold Dupe

This is one of the most good blogs Ive read in a very long time. The amount of nice information in here is stunning, like you practically wrote the book on the subject. Your article is great for anyone.

Wow Gold Dupe | Reply

22.07.2010 7:47:06 #

Wow Warlocks

There are certainly a lot more details to take into consideration, but thanks for sharing this post.

Wow Warlocks | Reply

25.07.2010 0:27:25 #

wow gold

Hi there thanks a lot for a critical article, I really noticed your weblog in error when browsing on Google for something else closely connected, regardless before i ramble on too much i would just like to state how much I cherished your post, I've added your web blog and also obtained your Feed, Again thank you very much for the article carry on the good work.

wow gold | Reply

25.07.2010 1:16:22 #

wowhead talent

I wanted to drop a comment and say I'm feelin' what you're gettin at! You've made some good points and while I don't disagree with everything you've said I think you make a good argument. Keep up the good work 'cus I'll be checkin' up on you later. This blog is on my radar now and I'm interested to see what's next.

wowhead talent | Reply

25.07.2010 2:24:23 #

love story

Because film transfers for NTSC and PAL generally use exactly the same coded picture rate (24 fps) but PAL resolution is higher, the PAL version takes a lot more space on the disc. The raw improve prior to encoding is 20% (480 to 576), but the final result is closer to 15%, depending on encoder efficiency. This translates to an increase of 600 to 700 megabytes on PAL discs compared to NTSC discs.

love story | Reply

28.07.2010 16:50:44 #

wow gold

The Kreg Jig takes advantage of a technique called Kreg Joinery. Unlike other techniques, Kreg Jig requires no glue, no complicated math, and no small army of clamps to make wood joints that will last.

wow gold | Reply

28.07.2010 17:21:53 #

travel guide

I tried to get the feed for the RSS for this blog but it is not properly displaying in Google Chrome. Does anyone have any suggestions?

travel guide | Reply

28.07.2010 18:06:03 #

wow pvp

Thanks for sharing this important code with us.Keep posting us informative post to us.

wow pvp | Reply

02.09.2010 16:14:36 #

[/sale]<br/><br/><b><a href=other.txt target=_blank>����վ</a>��</b><br/>[other]wow gold EU

The Kreg Jig takes advantage of a technique called Kreg Joinery. Unlike other techniques, Kreg Jig requires no glue, no complicated math, and no small army of clamps to make wood joints that will last.

[/sale]<br/><br/><b><a href=other.txt target=_blank>����վ</a>��</b><br/>[other]wow gold EU | Reply

02.09.2010 16:59:23 #

Game News Site

Hello,I love reading through your blog, I wanted to leave a little comment to support you and wish you a good continuation. Wishing you the best of luck for all your blogging efforts.

Game News Site | Reply

02.09.2010 18:27:28 #

wow gold us

Hi Webmaster, commenters and everybody else !!! The blog was absolutely fantastic! Lots of great information and inspiration, both of which we all need!Keep 'em coming... you all do such a great job at such Concepts... can't tell you how much I, for one appreciate all you do!

wow gold us | Reply

03.09.2010 20:10:29 #

wow Hunter

I just came across this blog I was I am getting a 404 page not found when trying to access other posts I hope it gets fixed.  Thanks

wow Hunter | Reply

20.10.2010 7:09:19 #

cheap ugg boots

In World of Warcraft a Hunter is considered to be the best range DPS. What makes very interesting to play is that you have a huge number of pets to choose,

cheap ugg boots | Reply

22.10.2010 9:46:14 #

coach bags

I don’t usually reply to posts but I will in this case.

coach bags | Reply

13.11.2010 8:58:30 #

uggs on sale

nice blog..do well!!

uggs on sale | Reply

17.11.2010 9:27:38 #

timberland mens custom

Instead, we see people with ugly timberland shoes store problems in whom God is working so they can bloom beautifully — just like I now see in my orchids whether they are “lumps” or blossoms! On a certain timberland work shoes day at a certain hour, we will pull into the station. Bands will be playing and flags waving. Once we get there, so many wonderful dreams will come true and the pieces of our timberland wheat shoes lives will fit together like a completed jigsaw puzzle. How restlessly we pace the aisles, *ing the minutes for timberland for you loitering --waiting, waiting, waiting for the station. It is a good thing that the God Who made us is not impatient with people like me with my timberland shoe company orchid. He lovingly thinks about us all the time timberland boots and he even temporarily gave up His heavenly home and his timberland traditional handsewn hold on diety to die for the sins of timberland mens custom world nearly 2,000 years ago. His death back then covered the sins of every cheap timberland boots person who will ever live. He then rose to life after three mens timberland chukka days and ever since has wanted us to accept His gracious act by loving Him and also those around us. When we do this, we will see people in a totally different timberland 14 inch boots light — one that redefines what it means to be ugly or different or weird or strange. http://www.timberland4you.co.uk/ YQ

timberland mens custom | Reply

03.12.2010 12:17:56 #

dd

/post/2009/07/28/http://www.blu-ray-software.net/blu-ray-ripper/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-ripper/ blu ray ripper, /post/2009/07/28/www.blu-ray-software.net/blu-ray-ripper-for-mac/" rel="nofollow">www.blu-ray-software.net/blu-ray-ripper-for-mac/ mac blu ray ripper, /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-creator/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-creator/ blu ray burner, /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-copy/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-copy/ blu ray copy, www.blu-ray-software.net/blu-ray-video-converter/ blu ray converter and /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-player/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-player/ best blu ray player offer the best solution for blu-ray videos
Duplicate /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-ripper/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-ripper/ blu ray dvd with /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-copy/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-copy/ blu ray dvd copy, /post/2009/07/28/www.blu-ray-software.net/blu-ray-ripper-for-mac/" rel="nofollow">www.blu-ray-software.net/blu-ray-ripper-for-mac/ blu ray ripper mac for Mac OS and /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-creator/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-creator/ blue ray burner are good /post/2009/07/28/http://www.blu-ray-software.net/blu-ray-player/" rel="nofollow">http://www.blu-ray-software.net/blu-ray-player/ blu ray player software

dd | Reply

05.12.2010 10:33:48 #

wow gold

depending on your experience, you could also attend an advanced riding course. Doing this will show your insurance company tation. Or will it be used

wow gold | Reply

05.12.2010 10:34:51 #

cheap wow gold

depending on your experience, you could also attend an advanced riding course. Doing this will show your insurance company tation. Or will it be used

cheap wow gold | Reply

05.12.2010 10:36:40 #

buy wow gold

depending on your experience, you could also attend an advanced riding course. Doing this will show your insurance company tation. Or will it be used

buy wow gold | Reply

05.12.2010 10:37:23 #

cheapest wow gold

depending on your experience, you could also attend an advanced riding course. Doing this will show your insurance company tation. Or will it be used

cheapest wow gold | Reply

05.12.2010 10:39:06 #

world of warcraft gold

depending on your experience, you could also attend an advanced riding course. Doing this will show your insurance company tation. Or will it be used

world of warcraft gold | Reply

05.12.2010 10:39:56 #

ff14 gil

for that Sunday cruise or c the time you spend on the road.A sales representative, for example, who spends the majority of his day on the road would require a higher premium than an office worker. The reason for this is that the sale

ff14 gil | Reply

15.12.2010 15:04:47 #

who are the best payday loans

who are the best payday loans Хорватия | Reply

15.12.2010 15:41:05 #

direct lender payday loans in South Carolina

This website is very helpful one. I like the design of the website

direct lender payday loans in South Carolina Словакия | Reply

15.12.2010 16:13:24 #

payday loans with direct lenders in Oklahoma

n most cases I don't write comments on articles, but I would like to say that this article really inspired me to do so. Really nice info

payday loans with direct lenders in Oklahoma Португалия | Reply

15.12.2010 16:48:04 #

cash transfer payday loans

nice article, thank you

cash transfer payday loans Израиль | Reply

16.12.2010 0:27:48 #

cash fast loan now

good read. Added to bookmarks

cash fast loan now Эстония | Reply

16.12.2010 5:44:40 #

UGG Canada Boots

<p><a href="http://www.ugg-canada-boots.com/">UGG  Canada Boots</a> , UGG Canada Boots<br>
    <a href="http://www.ugg-sale.ca/">UGG Boots  Sale</a> , UGG Boots Sale <br>
    <a href="http://www.ugg-sale.ca/">Cheap UGG  boots</a> , Cheap UGG boots<br>
    <a href="http://uggboots-outlet.ca/">Discount  UGG boots</a>, Discount UGG boots<br>
<a href="http://uggs-canada-boots.com/">UGG  Boots Canada</a> , UGG Boots Canada</p>

UGG Canada Boots | Reply

16.12.2010 13:23:54 #

one hour payday loans in Louisiana

n most cases I don't write comments on articles, but I want to say that this article really inspired me to do so. Really nice post

one hour payday loans in Louisiana Панама | Reply

17.12.2010 11:21:00 #

same day payday loans in Michigan

same day payday loans in Michigan Греция | Reply

24.12.2010 4:42:56 #

juicy couture handbags

nice post!!!

juicy couture handbags | Reply

06.01.2011 6:37:23 #

need a payday loan same day

good read, I just passed this to a colleague that was doing a small amount of research on this matter

need a payday loan same day Республика Филиппины | Reply

06.01.2011 7:38:12 #

real payday loans no matching services in Nebraska

nice info, thanks

real payday loans no matching services in Nebraska Украина | Reply

06.01.2011 17:26:23 #

payday advance loans in South Dakota

n most cases I don't make comments on blogs, but I would like to say that this article really made me to do so. Amazingly nice information

payday advance loans in South Dakota Новая Зеландия | Reply

Добавить комментарий




biuquote
  • Комментарий
  • Предпросмотр
Loading



Спасибо BlogEngine.NET за основу блога.

Комментарии

Comment RSS