Każdego roku LoupVentures porównuje Asystenta Google, Alexę i Siri, zadając im setki pytań w celu oceny ich wydajności. Wydajność Siri w poprzednich testach została odrzucona, a Asystent Google prowadził.
Wyniki tegorocznych testów są już gotowe i wygląda na to, że wirtualna asystentka Apple'a wreszcie wygląda pozytywnie. Podczas gdy Asystent Google ponownie poprowadził wyniki i odpowiedział poprawnie na 86 procent odpowiedzi, Siri zauważyła znaczną poprawę wydajności i poprawnie odpowiedziała na 79 procent odpowiedzi.
Dla porównania, wirtualnemu asystentowi Apple udało się poprawnie odpowiedzieć na 66, 1 procent zapytań, kiedy ostatni raz przeprowadzono ten test w 2017 roku. Udało mu się nawet zrozumieć 99 procent zapytań, w porównaniu z 95 procentami rok temu. Oznacza to, że Siri zrozumiał 789 zadanych pytań i tylko nie zrozumiał poprawnie 11 zapytań.
Imponujący wzrost Siri w ciągu jednego roku jest zdecydowanie imponujący, choć wciąż pozostaje za Asystentem Google, który zrozumiał 100 procent zapytań i odpowiedział na nie poprawnie 85, 5 procent. W ubiegłym roku asystentowi udało się odpowiedzieć poprawnie na 74, 8 procent zapytań.
Wydajność Siri stawia ją przed Alexą Amazona, która rozumiała 98 procent zapytań, ale udało się odpowiedzieć tylko na 52, 4 procent. Cortana Microsoftu była daleko w tyle za Siri, Asystentem i Alexą i zdołała odpowiedzieć poprawnie tylko na 52, 4 procent zapytań.
Pytania zadawane asystentom cyfrowym zostały podzielone na pięć różnych kategorii w celu przetestowania ich różnych możliwości.
- Lokalny - gdzie jest najbliższa kawiarnia?
- Handel - Czy możesz zamówić mi więcej ręczników papierowych?
- Nawigacja - Jak dostać się do centrum miasta autobusem?
- Informacja - W co grają dziś Twins?
- Polecenie - Przypomnij mi, żebym zadzwonił dziś do Steve'a o godz.
Podczas gdy Apple zdecydowanie udało się ulepszyć Siri w ciągu ostatniego roku, Asystent Google nadal zajmuje wiodącą pozycję w wielu kategoriach dzięki głównej sile Google - wyszukiwaniu.
Asystent Google ma przewagę we wszystkich kategoriach oprócz Command. Przewaga Siri nad Asystentem w tej kategorii jest dziwna, biorąc pod uwagę, że obaj są wypieczeni w systemie operacyjnym telefonu, a nie żyją w aplikacji innej firmy (jak robią to Cortana i Alexa). Odkryliśmy, że Siri jest nieco bardziej pomocna i wszechstronna (reagując na bardziej elastyczny język) w kontrolowaniu telefonu, inteligentnego domu, muzyki itp. Nasz zestaw pytań obejmuje również sporo zapytań związanych z muzyką (najczęstsze działanie inteligentnych głośników) ). Apple, zgodnie ze swoimi korzeniami, zapewniło, że Siri jest w stanie odtwarzać muzykę zarówno na urządzeniach mobilnych, jak i inteligentnych głośnikach.
Jedną z największych rozbieżności między asystentami była kategoria Informacje, w której Google osiągnął najwyższy odsetek poprawnych odpowiedzi, jaki zaobserwowaliśmy w naszych testach (93%). Nie powinno to dziwić, biorąc pod uwagę podstawowe kompetencje firmy, ale zrobiła na nas wrażenie głębia odpowiedzi i prawdziwa użyteczność.
Ponieważ Apple wprowadza teraz Siri do HomePod i czyni go integralną częścią iOS i watchOS, firma prawdopodobnie będzie nadal pracować za kulisami, aby jeszcze bardziej ulepszyć swojego asystenta głosowego.
Nasze ujęcie
Chociaż test przeprowadzony przez LoupVentures zdecydowanie zapewnia wgląd w poprawioną wydajność Siri, nie wspomina o tym, jak dobry asystent głosowy Apple stał się w rozpoznawaniu głosów z akcentem lub innymi językami. Apple skupiło się na ulepszeniu Siri przede wszystkim w Stanach Zjednoczonych, podczas gdy Google stale zapewnia, że Asystent współpracuje z większą liczbą języków, a jego funkcje rozpoznawania głosu w innych językach również uległy poprawie w miarę upływu czasu.
Czy jesteś zadowolony z możliwości i wydajności Siri? Czy uważasz, że jest tak dobry jak Asystent Google?
[Via Loup Ventures]