Joka vuosi LoupVentures vertailee Google Assistantin, Alexan ja Sirin välillä esittämällä satoja kysymyksiä suorituskyvyn luokitteluun. Sirin suorituskyky aikaisemmissa kokeissa on ollut irtisanominen, Google-assistentin johtaessa pakkausta.
Tämän vuoden testien tulokset ovat näkyvissä ja asiat näyttävät lopulta olevan ruusuisilta Applen virtuaaliassistentilta. Vaikka Google Assistant johti tuloksia jälleen ja vastasi 86 prosenttia vastauksista oikein, Siri havaitsi suorituskykynsä parantuneen huomattavasti ja vastasi 79 prosenttia vastauksista oikein.
Vertailun vuoksi Applen virtuaaliassistentti onnistui vastaamaan vain 66, 1 prosenttiin kyselyihin oikein viimeksi, kun testi tehtiin viimeksi vuonna 2017. Se onnistui jopa ymmärtämään 99 prosenttia kyselyistä, kun se vuotta aiemmin oli 95 prosenttia. Tämä tarkoittaa, että Siri onnistui ymmärtämään sille esitettyjä 789 kysymystä eikä ymmärtänyt vain 11 kyselyä oikein.
Sirin vaikuttava kasvu vuoden aikana on ehdottomasti vaikuttava, vaikka se on edelleen Google Assistantin takana, joka ymmärsi 100 prosenttia kyselyistä ja vastasi 85, 5 prosenttiin oikein. Assistentti oli viime vuonna pystynyt vastaamaan 74, 8 prosenttiin kyselyihin oikein.
Sirin suorituskyky antaa sen Amazonin edelle, joka ymmärsi 98 prosenttia kyselyistä, mutta onnistui vastaamaan vain 52, 4 prosenttiin oikein. Microsoftin Cortana oli kaukana Siristä, assistentista ja Alexasta ja pystyi vastaamaan vain 52, 4 prosenttiin kyselyistä oikein.
Digitaalisille avustajille esitetyt kysymykset jaettiin viiteen eri luokkaan heidän erilaisten ominaisuuksiensa testaamiseksi.
- Paikallinen - Missä on lähin kahvila?
- Kauppa - voitko tilata minulta lisää paperipyyhkeitä?
- Navigointi - Kuinka pääsen bussilla keskustaan?
- Tiedot - Kenellä kaksoset pelaavat tänään?
- Komento - Muistuta minua soittamaan Stevelle tänään klo 14.00.
Vaikka Apple on ehdottomasti onnistunut parantamaan Siriä viimeisen vuoden aikana, Googlen avustaja on edelleen merkittävässä asemassa monissa kategorioissa Googlen ydinvoiman, haun ansiosta.
Google-avustajalla on reuna kaikissa luokissa paitsi komento. Sirin johto assistentin suhteen tässä kategoriassa on outo, koska he molemmat leivotaan puhelimen käyttöjärjestelmään sen sijaan, että eläisivät kolmannen osapuolen sovelluksella (kuten Cortana ja Alexa tekevät). Huomasimme, että Siri on hiukan hyödyllisempi ja monipuolisempi (reagoi joustavampaan kieleen) puhelimen, älykkään kodin, musiikin jne. Hallinnassa. Kysymyksissamme on myös kohtuullinen määrä musiikkiin liittyviä kyselyjä (älypuhelimien yleisimmät toiminnot) ). Juurilleen uskollinen Apple on taannut, että Siri pystyy soittamaan musiikkia sekä mobiililaitteissa että älykaiuttimissa.
Yksi suurimmista avustajien välisistä eroista oli informaatioluokassa, jossa Google saavutti suurimman prosenttimäärän oikeita vastauksia, joita olemme nähneet testauksessamme (93%). Tämän ei pitäisi olla yllätys ottaen huomioon yrityksen ydinosaamiset, mutta vastausten syvyys ja todellinen hyödyllisyys vaikuttivat meihin.
Kun Apple tuo Sirin nyt HomePodiin ja tekee siitä erottamattoman osan iOS: iin ja watchOS: iin, on todennäköistä, että yritys jatkaa työskentelyä kulissien takana parantaakseen äänesavustajaansa entisestään.
Otamme
LoupVenturesin suorittama testi tarjoaa ehdottomasti kuvan Sirin parannetusta suorituskyvystä, mutta siinä ei mainita, kuinka hyvä Applen puheavustaja on tullut äänten tunnistamiseen aksentilla tai muilla kielillä. Apple on keskittynyt parantamaan Siriä pääasiassa Yhdysvaltojen osalta, kun taas Google on jatkuvasti varmistanut, että avustaja toimii useamman kielen kanssa ja myös muiden kielten äänentunnistusominaisuudet ovat parantuneet ajan myötä.
Kuinka tyytyväinen olet Sirin ominaisuuksiin ja suorituskykyyn? Onko se mielestäsi yhtä hyvä kuin Google Assistant?
[Loup Venturesin kautta]