Nieuwe zoekmachine 'begrijpt' natuurlijke taal

Reuters komt met een artikel over een nieuwe zoekmachine die nog beter met vragen in de natuurlijke taal kan omgaan. De ontwikkelaar InQuira Inc. uit Californië zegt dat de software is ontwikkeld om simpel gestelde vragen te beantwoorden, waarbij de zoekmachine onder andere besef heeft van grammaticale constructies en equivalente betekenissen. Het product van InQuira schijnt stukken beter te werken dan een vergelijkbare service als AskJeeves, die uiteindelijk toch het beste werkt met Booleaanse zoekopdrachten met AND- en OR-constructies. De software van InQuira is al in gebruik bij bedrijven als de Bank of America, Sun Microsystems en softwareontwikkelaar BEA Systems:

Software maker BEA said it recently incorporated InQuira's product into its corporate Web site, replacing a question-and-answer service made by Ask Jeeves IncASKJ.O . BEA's Web site is a source of information for large numbers of software developers, and the company says the InQuira software works better than Ask Jeeves in getting their questions answered.

While Ask Jeeves was a pioneer in this natural-language question-and-answer service, some users have and found its product actually works more like a regular search engine. BEA said the Ask Jeeves service also turned out to be very high-maintenance, since it worked partly by constantly analyzing incoming questions and updating the internal "knowledge base."

Reacties (24)

[zakalwe]

Een intelligente zoekmachine zal ook rekening moeten houden met het feit dat de meeste mensen eigenlijk niet weten wat ze precies zoeken...

Een betere zoekmachine zal dus ook niet alleen semantisch de boel moeten 'begrijpen', maar ook de 'concreetheid' van de gebruiker.

Dit kan bijvoorbeeld aangepakt worden de gebruiker de mogelijkheid te geven de zoekopdracht te verfijnen van 'vaag' naar 'concreet' en hierdoor een heleboel ruis alvast uit te filteren.

[Kama]

Semantisch dingen oppikken doet ie denk ik nog steeds niet. Het is gewoon een natural language -> logical language converter...

Als je zegt " Ik zoek het zwaarste huis uit de zwemmende kleur van de groene nacht"... gaat ie braaf zoeken...

[zakalwe]

Het blijft natuurlijk een beetje toekomstmuziek, maar ik denk dat het wel degelijk mogelijk is om beter bruikbare searchengines te ontwikkelen.

Maar laten we even verder dromen...

Maar als de searchengine dan een resultaat geeft waar jij als gebruiker de 'query' weer kan verfijnen dan is er niet zoveel aan de hand...

Stel je voor dat hij een grafiek presenteert, een veelhoek met op elk hoekpunt een van de 'gevonden' concepten. Daarna worden alle resultaten in hun relatie tot deze concepten op een lokatie geplaatst, zodat de gebruiker een overzicht heeft van het resultaat van zijn zoekopdracht...
Door op een van de concepten te drukken zal de searchengine de query zelf verfijnen en met betere resultaten komen...

[PowerFlower]

Kama, heb Jeeves daar eens op getest met jouw vraag:

I'm searching the heaviest house from the swimming color of the green night

Naast informatie over hoe je je haar verft, waar je in een encyclopedie iets over zwemmen vind en wat gesponsorde links over hypotheken krijg je natuurlijk ook nog een pagina "Planning to Sell or Buy a Home?".
Iets interessanter resultaat was een boek dat online staat, The Day Boy and the Night Girl
(The Romance of Photogen and Nycteris) door George MacDonald, en van wat ik er in gelezen heb klopte dat wel ongeveer met jouw vraag

Ik denk dat dit dan ook een typisch geval van "trash in, trash out" is (ook wel: "life is like a sewer-- what you get out of it, depends on what you put into it")

[Verwijderd]

Helaas nog steeds geen wondermachine die de mensen echt begrijpt *lol* kan trouwens denk ik ook niet. Het enige wat dat kan is verschillende soorten gramaticale als mede 'typo-correcties' uitvoeren en op basis daarvan constant vergelijkingen maken en kijken of het overeen komt met een bekend commando / stuk tekst... en verder niks.
Is niks meer dan een programma dat commando's kan uitvoeren maar nu met 'spellings controle' ingebouwd zodat ie gemaakte fouten wel 'begrijpt'! Anderszijds goed dat ze er mee bezig zijn en is natuurlijk wel vooruitgang maar ik zie het niet als een enorme doorbraak of zo.

[T.T.]

nog steeds geen wondermachine die de mensen echt begrijpt

Is een leuke discussie: of het in theorie wel mogelijk is om een machine te maken die echt begrijpt wat je zegt. Er zijn twee groepen eenvoudig gezegd.

één groep: nooit begrip van een computer, altijd een programma dat wordt uitgevoerd
andere groep: maar als we de hersenen van een mens tot op het kleinste niveau simuleren, kan er dan sprake zijn van begrip?

Voorbeeld: Chinese Kamer-experiment
Ik ga toch voor de eerste

[xces]

Mjah dat was al lang bekend. AskJeeves was een server-side script dat bepaalde frequenties in de klank kon herkennen, en geen daadwerkelijke voice-analyzer zoals bij InQuira is ingebouwd. Verder is InQuira vele malen sneller...

edit:
inderdaad jullie hebben gelijk, ik was in de war met voice-to-text software.

Although some customers report a success rate of 85 percent with the InQuira software, some analysts say they have still not seen any single leader emerge from a group of companies offering natural-language software products.

Dat is natuurlijk logisch, niet iedereen heeft dezelfde zinsbouw, iedere taal is anders (dus ook iedere gramatica)

edit:
Maar dit is nog wel on-topic...

[Verwijderd]

Hoe kom jij erbij dat dit iets met stemherkenning heeft te maken? Ik haal dat nergens uit de tekst.
Dit gaat gewoon over het feit dat je een vraag gewoon in mensentaal kan stellen en het programma vertaald dit naar een zoekopdracht over het internet. Zou inderdaad wel leuk zijn als je er voice-recognition aankoppeld.

edit:
PowerFlower was net iets eerder...

[PowerFlower]

Zou inderdaad wel leuk zijn als je er voice-recognition aankoppeld.

Valt wel mee... dat hebben ze ook al, via de telefoon kun je dan je search inspreken. Vooralsnog is het enige voordeel daarvan dat ze er makkelijk geld voor kunnen rekenen (0900-GOOGLE)

[PowerFlower]

Tis voor zover ik kan zien helemaal geen voice-analyzer. Je kunt gewoon een vraag in normale spreektaal typen (dus niet spreken):

its software enables customers to type plainly worded questions ...

wat ook weer verklaart waarom de "natural speech" vragen bij Jeeves beter werken als je een Bolean search doet met AND en OR's, tis niet dat die uitspraak beter herkend wordt maar de logica wel

[Slush]

Sorry, maar zover ik weet doen AskJeeves en de tool van InQuira niets anders dan stukken tekst analyseren. Of ze dat nu wel of niet goed doen laat ik even in het midden, maar je slaat de plank in ieder geval volledig mis door stellen dat ze iets met spraakherkenning doen....

edit:

3 zielen - 1 gedachte...

[Verwijderd]

Zou dat nou echt gaan werken? Er zijn al zoveel systemen die met spreektaal proberen te werken, maar spreektaal bevat ook nog zoiets als emotie. Dat kun je nooit in een systeem stoppen.

[PowerFlower]

Wat voor vragen typ jij in bij Jeeves dan? "en nu wil ik verdomme een hamburger" of zow? dan weet hij nog steeds wel een hamburger voor je te vinden hoor

* 786562 PowerFlower

[cablepokerface]

Beter dan AskJeeves ?

DAT lijkt me niet zo moeilijk ... Ik kan AksJeeves nou niet de meest geslaagde zoekmachine vinden. Het is inderdaad leuk dat ie een zinssyntax probeerd te achterhalen, maar of ie daar nu in slaagd ????

[off-topic]
Bovendien hebben ze sinds '97 al dat stomme butlertje staan op die site. Gruwelijk achterhaald.
[/off-topic]

[Verwijderd]

Ik weet niet of die jouw zinnen ook gaat begrijpen met al die taalfouten

[MacD]

Vooralsnog is het gewoon niet realistisch om "natuurlijke taal" zoekmachines te hebben. De parsing is gewoon niet goed genoeg..doe maar een paar testjes : dat geeft leuke resultaten

Op dit moment is een authority/link model gewoon veel nuttiger, zoals Teoma (www en .com) en in mindere mate google (die het tot nu toe meer van zn pagina scanning moet hebben).

[Kama]

Ik denk dat syntactisch gezien men vrij ver is met het parseren van natuurlijke taal... Maar zoals gezegd, een "semantische parser" bouwen is heel erg lastig.

Er zal best een zinnige logische bewering kunnen worden opgemaakt uit iedere natuurlijke taal query - wat ook al heel wat is - maar semantisch doet ie niks.

[BOOTZ]

met zo'n soort systeem heb ik op een kijkdag op de UU wel es zitten spelen. is best grappig, en het ding begrijpt ook nog es wat je intypt. gewoon hele volzinnen typen, en hij weet wat je vraag is en welk antwoord ie moet geven

[Verwijderd]

Zoiets is al door een Nederlands bedrijf (Q-go) gemaakt. Maar een publieke search engine bleek niet rendabel dus werd het B2B. Zo heeft de Postbank.nl site Q-go in gebruik voor hun zoeksysteem.

[-=bas=-]

Dus als ik op 'rode ferrari' zoekt krijg ik een webpagina over hete babes voor mijn neus
Of kan deze engine mijn psychologische behoeften nog niet opmaken uit mijn vraag

[timstegeman]

Lijkt wel verdacht veel op een Alice Bot. http://www.alicebot.org/