Kuidas Google teeb parandusi oma otsingu algoritm

Rajan Patel: Google'i otsingu algoritm on loodud mitmesajast signaalist, mille püüame panna kokku, et pakkuda igale kasutajale parimaid tulemusi. Amit Singhal: Alles eelmisel aastal käivitasime oma algoritmis üle 500 muudatuse. Nii et teatud arvestuse järgi teeme oma algoritmi peaaegu iga päev või peaaegu kaks korda ümber. Scott Huffman: Igat potentsiaalset muudatust ***üüsime tõesti väga hoolega, et olla kindel, et see on kasutajate jaoks õige. Mark Paskin: Esimene samm Google'i otsingu parandamisel on ideega välja tulla. Scott Huffman: Peaaegu alati on olemas hulk motiveerivaid otsinguid, mis ei toimi nii hästi, nagu sooviksime. Siis tulevad järjestusinsenerid välja hüpoteesiga, millise signaali ja millised andmed võiksime oma algoritmi lisada. Amit Singhal: Testime kõiki neid mõistlikke ideid rangelt teaduslikult. Mark Paskin: Esimene testimine toimub reideritega. Need on inimesed väljastpoolt, keda on koolitatud hindama, kas üks asetus on asjakohasem ja kvaliteetsem kui teine. Rajan Patel: Näitasime neile reideritele kõrvuti päringute abil, et inseneri katse võib päringuid mõjutada. Samuti kinnitame need muudatused reaalsete otsingueksperimentidega päris kasutajatega. Mark Paskin: Teeme seda kohas, mida nimetatakse liivakastiks. Saadame liivakastile pisikese osa Google'i tegelikust liiklusest. Teeme palju erinevaid mõõtmisi. Scott Huffman: 2010. aastal tegime üle 20 000 erineva eksperimendi. Seejärel evitas otsinguanalüütik kõik andmed inimhindamisest ja reaalsest otsingueksperimendist. Sangeeta Das: Iga projekti puhul määratakse alates sellest hetkest, mil räägime inseneridega, tavaliselt üks ***üütik, kes püüab tehtud muudatust uurida. Nagu näete, on mõju üsna väike. Mark Paskin: Seejärel peame käivitamisotsuse koosoleku, kus otsingutiimi juhid vaatavad andmeid ja teevad otsuse. Amit Singhal: Seda peaksime kindlasti parandama. Sangeeta Das: Lõppkokkuvõttes on otsingu hindamise ***üüsitiimi eesmärk pakkuda vaid teadlikku andmejuhitavat otsust ja erapooletut vaatenurka. Amit Singhal: OK? Seega pole heaks kiidetud. Tiim saab aru, mis toimub. Kui meie teaduslik testimine ütleb, et see on Google'i kasutajatele mõistlik, siis käivitame selle Google'is. Mark Paskin: Google on juba palju aastaid pakkunud soovitusi päringutele, mis sisaldavad kirjavigu või on valesti kirjutatud. Nii et mõnikord, kui sisestate päringu, võite näha teksti „Kas mõtlesite” ja seejärel alternatiivset päringut. Kui kirjutate oma ravimi nimetuse valesti ja ei klõpsa lingil „Kas mõtlesite”, võite saada tulemused, mis sisaldavad seda viga. Need ei kaldu olema ka kõrge kvaliteediga. Oleme seega mõelnud teist laadi liidesele, mida nimetame lehe täielikuks asendamiseks. „Kas mõtlesite” asemel näete oma lehe ülaosas teksti „Näitab tulemusi”. Juhul kui oleme teinud vea, on seal kõrval ka teine link „Otsi parem” koos teie sisestatud päringuga. Kutsume seda linki pagemisluugiks. Iga kord kui kasutaja klõpsab pagemisluugil, kuna õigekirjaalgoritm on teinud vea, soovime kindlad olla, et *** on veel 50 korda saanud õige soovituse ja ei pidanud klõpsama lingil „Kas mõtlesite”. Samuti vaadatakse reaalaja liikluse andmete järgi, kui sageli kasutajad sellel pagemisluugil klõpsavad, et olla kindel, et kasutaja signaal, mille saame reaalajas eksperimentidest, ühtib signaaliga, mille saame oma regulaarsetest hindamistest. Viisime selle käivituskomiteele ning reiderite hindamiste ja reaalajas eksperimentide põhjal oli üsna selge, et insenerid tegid seda, mida *** tegema pididki. Nii me selle käivitasimegi. Amit Singhal: Kui kõrvutate Google'i huvi kasutaja huviga, nii nagu meie seda tegime, juhtuvadki head asjad. Mark Paskin: Investeerisime tohutult sellesse, et mõista, mis kasutajate jaoks toimib. Rajan Patel: Kas see muudatus aitab üksnes Ameerika Ühendriikide või inglise keelt kõnelevaid, vaid ka kogu muu maailma kasutajaid? Scott Huffman: Arvan, et oleme vaimustuses, kui meile tundub, et tabasime ideed, mis aitab tõepoolest paljusid kasutajaid. Amit Singhal: Kasutajad tulevad ikka ja jälle Google'isse, kuigi neil on iga kord brauserit avades võimalik valida ka teiste otsingumootorite vahel.