Stone Temple Consulting (STC) опубликовал исследование, в котором он сравнил мобильные ответы на 3086 различных запросов в Siri, Google Now и Cortana, чтобы определить, как каждый из них представлен по отношению к другим. Google Now стал победителем с большим количеством прямых ответов и более полной информацией.
Ответственный за итоги Эрик Энге (Eric Enge) говорит, что это не было "сравнение персональных помощников". Скорее, это было сравнение "блока знаний" или "панели знаний". В исследовании их назвали "ответами".
Запросы в исследовании касались, в основном, фактов вроде "Какая гора самая высокая в мире?", "Когда следующий Кубок Стэнли?" и так далее. Были включены также вопросы вроде "Что такое любовь?".
STC отметил, что Google Now показывает более расширенные результаты по сравнению с результатами Cortana и Siri, когда задаваемые вопросы подразумевают такой результат ("блок знаний").
Google Now также победил с точки зрения обеспечения наиболее прямых и полных ответов на вопросы о фактах. В почти 90% случаев Google Now проделал лучшую работу, ответив на запрос четко и точно. В STC утверждают, что были очень строги в классификации этой части теста и не принимали в качестве правильных ответов те, которые содержали частичную или косвенную информацию.
Одним из наиболее интересных выводов стал факт, что Google Now представляет "ответ" из сторонних источников лишь в 25% случаев, в остальных 75% ответов источника не было.
STC делает вывод, что Google Now "имеет явное преимущество с точки зрения объема запросов и точности ответов на них, чем Siri или Cortana ... [и что] Google прогрессирует быстрее на всех фронтах".
Siri не является поисковой системой, но сочетание технологии естественного понимания языка и «искусственного интеллекта» помогают использовать стороннюю информацию. Siri "перенаправляет" запросы на информацию или ответы, используя в том числе результаты веб-поиска от Bing. В самом деле, это несколько парадоксально, что Microsoft занимается агрессивным маркетингом Cortana (против Siri) для продвижения Windows Phones, и при этом Bing является источником результатов веб-поиска Siri.
Оригинальность Siri состоит из умного голоса и нескольких структурированных источников данных. Появление Siri несколько лет назад стало одной из причин, которая направила Google к структурированной информации - в целях обеспечения лучших «ответов» в мобильных устройствах. Этот факт, а также общая тенденция к отходу от "10 синих ссылок" также мотивировали Google размещать больше блоков ответов и результатов сети знаний в результатах поисковой выдачи на ПК.
Движение в сторону ответов также является основным источником разочарования издателей и основная причина недавней антиконкурентной критики Google.
Два года назад Джин Мюнстер (Gene Munster) из Piper Jaffray провел сравнительный тест голосовых поисков: тогда Google получил «4+», Apple Siri – «2». Мюнстер сделал вывод, что по уровню обученности Siri более чем на два года отстает от Google.