211service.com
Otwieranie wyszukiwania do semantycznych nowicjuszy
Nawet jeśli masz świetny pomysł na nową wyszukiwarkę, nie jest łatwo go uruchomić. Po pierwsze, największe talenty inżynierskie znajdują się w znanych firmach. Co ważniejsze, według niektórych szacunków, zakup i utrzymanie serwerów potrzebnych do indeksowania sieci w całości kosztuje setki milionów dolarów.
Jednak Yahoo niedawno udostępniło źródło, które może dać nadzieję innowatorom wyszukiwania i przedsiębiorcom. Nazywany Build Your Own Search Service (BOSS), umożliwia programistom korzystanie z indeksu Yahoo zawierającego miliardy stron, które są stale aktualizowane, usuwając w ten sposób prawdopodobnie największą barierę dla innowacji wyszukiwania. Otwierając swój indeks dla tysięcy niezależnych programistów i przedsiębiorców, Yahoo ma nadzieję, że BOSS rozpocznie projekty, którym brakuje czasu, pieniędzy i zasobów, aby się wymyślić. Prabhakar Raghawan , szef Yahoo Research i profesor konsultingu na Uniwersytecie Stanforda, twierdzi, że może to obejmować lepsze sposoby wyszukiwania filmów lub obrazów, narzędzia wykorzystujące sieci społecznościowe do pozycjonowania wyników wyszukiwania lub semantyczną wyszukiwarkę, która próbuje zrozumieć zawartość stron internetowych, a nie tylko zbiór słów kluczowych i linków.
Staramy się przełamać bariery dla innowacji, mówi Raghavan, chociaż przyznaje, że BOSS nie jest przedsięwzięciem altruistycznym. Jeśli nowa wyszukiwarka zbudowana przy użyciu indeksu Yahoo stanie się popularna i potencjalnie opłacalna, Yahoo zastrzega sobie prawo do umieszczania reklam obok swoich wyników.
Jak dotąd żadna strona obsługiwana przez BOSS nie odniosła takiego sukcesu. Jednak wiele start-upów zaczyna budować swoje usługi na bazie BOSS, a korzyści z tej platformy odnoszą w szczególności firmy korzystające z sieci semantycznej. Firmy te opracowują oprogramowanie do przetwarzania pojęć i znaczeń w celu lepszej organizacji informacji w sieci.
Na przykład, Hakia , firma z siedzibą w Nowym Jorku, rozpoczęła budowę semantycznej wyszukiwarki w 2004 roku. Jej algorytmy wykorzystują bazę danych pojęć – ludzi, miejsc, obiektów i nie tylko – do zrozumienia pojęć w dokumentach. Hakia tworzy również mapy łączące ze sobą różne dokumenty, takie jak strony internetowe, w oparciu o te pojęcia, aby zrozumieć ich wzajemne znaczenie. Riza Berkan, dyrektor generalny firmy, mówi, że skupienie się na znaczeniu stron, a nie tylko na linkach między nimi, może wyświetlać trafniejsze wyniki wyszukiwania i pomóc ludziom znaleźć treści, o których nawet nie wiedzieli, że szukają.
Jednak, aby zrobić to dobrze, Hakia musi mieć dostęp do jak największej liczby stron internetowych i tu właśnie pasuje BOSS. W przypadku danego zapytania Hakia używa indeksu Yahoo BOSS, aby określić zestaw odpowiednich wyników. Oprogramowanie Hakii następnie określa, czy te strony zostały już przeanalizowane przez oprogramowanie semantyczne firmy. Jeśli nie, zostaną przetworzone, a wyniki zostaną zapisane na serwerach Hakii. I tak przeszukujemy sieć, mówi Berkan. Ale bez indeksu Yahoo bylibyśmy w tyle w witrynach, których ludzie dzisiaj szukają. A im więcej popularnych stron skanuje Hakia, tym lepszy będzie jej indeks.
Kolejny start-up semantyczny, zwany Cluuz , z Ontario w Kanadzie, przyjmuje nieco inne podejście. Gdy użytkownik wyszukuje w Cluuz, zobaczy wyniki Yahoo BOSS, ale są one uporządkowane zgodnie z własną technologią wyszukiwania semantycznego startupu. Kiedy robisz zapytanie, mówi Alex Zivkovic, CTO w Cluuz, przekazujemy je do Yahoo BOSS i otrzymujemy listę wyników z powrotem… Następnie dla każdej z tych stron silnik Cluuz analizuje treść, wyodrębnia podmioty – osoby, firmy, numery telefonów i tego typu rzeczy. Wyjaśnia, że pojęcia te są następnie porównywane z pojęciami znalezionymi na innych stronach, a pojęcia, które pojawiają się najczęściej, są uważane za najistotniejsze.
Zamiast patrzeć na strony, do których prowadzą linki na podstawie fizycznych linków, patrzymy na nie pod kątem tego, czy mówią o tych samych koncepcjach, mówi Zivkovic. To prowadzi do innego doświadczenia użytkownika, dodaje. Na przykład terminy istotne dla zapytania wyszukiwania są pobierane z Internetu i podświetlane po prawej stronie strony wyników. Wyszukiwanie Kate Greene natychmiast wyświetla mój adres e-mail pod adresem Przegląd technologii , uniwersytet, w którym uczęszczałem, oraz wiele osób, z którymi przeprowadzałem wywiady w poprzednich historiach. Dodatkowo Cluuz zapewnia inne narzędzia, które umożliwiają łatwą wizualizację powiązań i relacji między różnymi koncepcjami semantycznymi.
Nawet biorąc pod uwagę siłę indeksu Yahoo stojącą za firmą, nie ma gwarancji, że Hakia lub Cluuz odniosą sukces. Ale jeśli wystartują, może to pomóc Yahoo, które wciąż pozostaje daleko w tyle za Google pod względem popularności, w odzyskaniu przewagi. Filozofia leżąca u podstaw [z BOSS] polega na tym, że nie będziemy w stanie sami wymyślić wszystkiego, mówi Raghavan. Powinniśmy więc ułatwiać innowacje.