ホーム知恵袋 HomePod の Siri が新しい AI テストでクエリの 52.3% に正解

HomePod の Siri が新しい AI テストでクエリの 52.3% に正解

2月 7, 2018

—

Loup Ventures が本日共有した新しいテストでは、Apple の HomePod が、Siri、音質、使いやすさなどのカテゴリーでテストされました。 Siri については、Loup Ventures の Gene Munster 氏は、AI アシスタントは要求されたクエリの 99.4 パーセントを理解したが、正しく答えたのは 52.3 パーセントにすぎないと報告しました。 Loup Ventures は 3 つの異なる HomePod をテストし、合計 782 のクエリを実行しました。

HomePod の Siri が新しい AI テストでクエリの 52.3% に正解

ライバルスピーカーのこれまでのテストと比較すると、HomePodはAIアシスタントのパフォーマンス部門で「トーテムポールの最下位」に位置している。 Google Homeの正解率は81％、AmazonのAlexaの正解率は64％、MicrosoftのCortanaの正解率は57％だった。

Munster 氏はこの情報をさらに細分化し、Siri は近くのコーヒーショップについて尋ねたり、新しい靴の購入を手伝ったりするなど、「地域」や「商業」のクエリに適していると述べました。この分野では、Siri は Alexa や Cortana を上回っていますが、依然として Google Home の Google アシスタントには及んでいません。

合計 782 件のクエリに正解する割合は低かったにもかかわらず、「HomePod の音楽焦点の範囲が限られていることを考慮すると」、Siri の全体的なパフォーマンスは予想を上回っていたとマンスター氏は述べました。

Loup Ventures 経由のチャート

研究者らは、HomePod と Siri は、カレンダー、電子メール、通話、ナビゲーションなどのクエリドメインを追加するだけで、時間の経過とともにライバルのアシスタントに匹敵する、あるいはそれを超えるまでに成長するはずだと説明しました。

ナビゲーション、カレンダー、電子メール、通話などの一部のドメインはサポートされていません。これらの質問には、「HomePod では ___ はできません。また、iPhone ベースの Siri が Google 検索結果を表示する場合でも、HomePod は「HomePod ではその答えを得ることができません」と答えます。これでは、電話を使用するか、質問を完全に放棄する必要があります。質問セットからナビゲーション、電話、電子メール、カレンダー関連のクエリを削除すると、正解率は 67% となり、全体の正解率 52.3% から上昇しました。

これは、これらのドメインのサポートを追加すると、HomePod のパフォーマンスが Alexa (64%) や Cortana (57%) を上回るものの、Google Home (81%) には及ばないことを意味します。ここでのメモからも明らかなように、Siri には HomePod ではできないあらゆる範囲のクエリに正しく答える能力があることがわかっています。 Apple による HomePod のドメインの制限は時間の経過とともに変更されるはずで、その時点ではスピーカーがより便利になり、他の Apple デバイスと統合されることが期待されます。

研究で判明したように、HomePod が優れていたのは、その「優れた」リスニングスキルでした。 HomePod を使用すると、スピーカーからの音楽が特に大きい場合でも、ユーザーは通常の音量で話すことができ、Siri がその声を拾ってユーザーの声を聞きます。「これは HomePod の最も優れた機能でした」と Munster 氏は言います。

Loup Ventures も HomePod の音質を高く評価し、「信じられないほど聞こえる」と述べました。このデバイスの他のレビューや感想と同様に、マンスター氏は HomePod の音質を楽しんでいたが、スピーカーの精彩を欠いた Siri のパフォーマンスによって相殺されており、それはすぐに変わるだろうと彼は考えている。

HomePod の音質重視のスマートスピーカーへの第一歩にだまされないでください。 Apple には、より良いサウンドの Echo を提供することよりも大きなビジョンがあります。 HomePod の最初のバージョンには存在しませんでしたが (つまり、HomePod で電話をかけることさえできません)、Apple の目標は、Siri をユビキタスなアンビエントな存在にして、接続されているすべてのデバイスとサービスを接続し、制御することであると考えています。そして、音声ファーストコンピューティングへの移行を飛躍的に進めることです。