Åbning af søgning til Semantic Upstarts

Selvom du har en god idé til en ny søgemaskine, er det langt fra nemt at få den i gang. For det første er det bedste ingeniørtalent bosat i store navnevirksomheder. Endnu mere væsentligt, ifølge nogle skøn, koster det hundredvis af millioner af dollars at købe og vedligeholde de servere, der er nødvendige for at indeksere internettet i sin helhed.





Yahoo har dog for nylig frigivet en ressource, der kan give håb for at søge innovatører og iværksættere. Kaldet Build Your Own Search Service (BOSS), det giver programmører mulighed for at gøre brug af Yahoos indeks over nettet – milliarder af sider, der løbende opdateres – og fjerner derved måske den største barriere for søgeinnovation. Ved at åbne sit indeks for tusindvis af uafhængige programmører og iværksættere, håber Yahoo, at BOSS vil sætte gang i projekter, som det mangler tid, penge og ressourcer til selv at opfinde. Prabhakar Raghavan , leder af Yahoo Research og en konsulentprofessor ved Stanford University, siger, at dette kan omfatte bedre måder at søge efter videoer eller billeder på, værktøjer, der bruger sociale netværk til at rangere søgeresultater, eller en semantisk søgemaskine, der forsøger at forstå indholdet af websider, snarere end blot en samling nøgleord og links.

Vi forsøger at nedbryde barriererne for innovation, siger Raghavan, selvom han indrømmer, at BOSS langt fra er et altruistisk foretagende. Hvis et nyt søgemaskineværktøj bygget ved hjælp af Yahoos indeks bliver populært og potentielt rentabelt, forbeholder Yahoo sig retten til at placere annoncer ved siden af ​​resultaterne.

Indtil videre er ingen BOSS-drevet side blevet så vellykket. Men en række startups begynder at bygge deres tjenester oven på BOSS, og især Semantic Web-virksomheder nyder godt af platformen. Disse virksomheder udvikler software til at behandle koncepter og betydninger for bedre at kunne organisere information på nettet.

For eksempel, Hakia , en virksomhed baseret i New York, begyndte at bygge en semantisk søgemaskine i 2004. Dens algoritmer bruger en database med begreber – mennesker, steder, objekter og mere – til at forstå begreber i dokumenter. Hakia laver også kort, der forbinder forskellige dokumenter, såsom websider, baseret på disse koncepter for at forstå deres relevans for hinanden. Riza Berkan, administrerende direktør for virksomheden, siger, at fokus på sidernes betydning, i stedet for blot på links mellem dem, kunne tjene mere relevante søgeresultater og hjælpe folk med at finde indhold, som de ikke engang vidste, de ledte efter.

Men for at gøre dette godt, skal Hakia have adgang til så mange websider som muligt, og det er her BOSS passer ind. For en given forespørgsel bruger Hakia Yahoos BOSS-indeks til at bestemme et sæt relevante resultater. Hakias software afgør derefter, om disse sider allerede er blevet analyseret af virksomhedens semantiske software. Hvis de ikke har, vil de blive behandlet, og resultaterne vil blive gemt på Hakias servere. Vi gennemsøger nettet alligevel, siger Berkan. Men uden Yahoos indeks ville vi være bagud på de websteder, som folk søger efter i dag. Og jo mere populære sider Hakia scanner, jo bedre bliver dens indeks.

Endnu en semantisk startup, kaldet Cluuz , fra Ontario, Canada, tager en lidt anden tilgang. Når en bruger søger med Cluuz, vil hun se Yahoo BOSS-resultater, men de er omorganiseret i henhold til opstartens egen semantiske søgeteknologi. Når du laver en forespørgsel, siger Alex Zivkovic, CTO for Cluuz, sender vi den videre til Yahoo BOSS, og vi får en liste over resultater tilbage ... Så for hver af disse sider analyserer Cluuz-motoren indholdet, udtrækker entiteter – mennesker, virksomheder, telefonnumre og den slags ting. Disse begreber, forklarer han, bliver så kontrolleret mod de begreber, der findes på andre sider, og de begreber, der opstår oftest, vurderes som mest relevante.

I stedet for at se på sider, der linkes ud fra de fysiske links, ser vi på dem i forhold til, om de taler om de samme begreber eller ej, siger Zivkovic. Dette fører til en anderledes brugeroplevelse, tilføjer han. For eksempel hentes termer, der er relevante for en søgeforespørgsel, fra nettet og fremhæves til højre på resultatsiden. En søgning efter Kate Greene henter straks min e-mailadresse på Teknologigennemgang , universitetet, jeg gik på, og en række af de mennesker, jeg har interviewet til tidligere historier. Derudover leverer Cluuz andre værktøjer, der gør det nemt at visualisere links og relationer mellem forskellige semantiske begreber.

Selv med kraften i Yahoos indeks bag en virksomhed, er der ingen garanti for, at Hakia eller Cluuz bliver en succes. Men hvis de tager fart, kan det hjælpe Yahoo, som stadig halter langt bagefter Google med hensyn til popularitet, med at genvinde kanten. Den underliggende filosofi [med BOSS] er, at vi ikke vil være i stand til at opfinde alt på egen hånd, siger Raghavan. Så vi bør fremme innovation.

skjule