Sierraのテストが測定したことと、わかったこと
10月21日、米国のカスタマーサービス用エージェント企業Sierraは、同社のテストセットτ-benchを拡張したτ-i18nを公開しました。英語に加えて、スペイン語、ブラジルポルトガル語、ヒンディー語、韓国語、中国語(標準語)の5言語で音声エージェントを評価します。三つの音声エージェント(GPT Live 1、Gemini 3.8 Live、Grok Voice Think Fast 2.0)で、各言語で航空、小売、通信の同じタスクについて2,700件の通話を行いました。
主な結果は次のとおりです。
- スペイン語はタスクでは健闘:スペイン語のタスク完了率は英語よりわずか2.4ポイント低いだけでした。ポルトガル語では差は6.4ポイントでした。
- 会話が弱点:通話の80 %以上で、GPT Live 1とGemini 3.8 Liveは顧客の発話に応答しない、応答が遅い、または話す番を譲らないといった問題がありました。Grok Voice Think Fast 2.0でこの問題が起きたのは通話の16 %でした。
- 反応すべきでないものに反応:エージェントによって、通話の26 %から60 %で、«うん»のような相づちや、エージェントに向けられていない声に3回以上反応していました。
- すべてで勝つものはない:GPT Live 1はタスク完了率(79.9 %)と言語の質でトップでした。Grokはやり取りの面でトップでしたが、言語の質は低めでした。Sierraの言葉を借りれば、最も速く応答するエージェントが、最も自然に話すエージェントとは限りません。
Sierraは、他の人が言語や地域ごとの言語変種を追加できるようコードを公開しました。
今週の新発表:MistralとElevenLabs
10月20日、フランスのMistral AIは、聞き取り、文字起こし、発話のためのモデル群Voxtral 3を発表しました。LiveKitをベースにした音声エージェント構築キットも付属します。Mistralによると、リアルタイム文字起こしの遅延は500ミリ秒未満、エージェントの各発話は1秒未満で完了し、スペイン語は対応言語に含まれ、電話はSIPで接続します。音声エージェントサービスは1分あたり0.04ドルからで、欧州のサーバーから利用することも、顧客のインフラに導入することもできます。
同じ日、ElevenLabsはエージェント向け初の音声対音声モデルEleven Realtimeを発売しました。低コストの会話向けのMiniと、サポートや見込み客の選別など複雑な業務向けのMaxの2種類です。同社は、最初の音声が出るまでの平均時間をMaxで0.57秒、Miniで0.62秒とし、90以上の言語に対応し、OpenAIのリアルタイムインターフェースと互換性があると発表しています。これらの数値はすべてメーカー発表です。
なぜ遅延が通話の成否を決めるのか
人同士の会話では、発話の間の沈黙はとても短いものです。音声エージェントの応答が遅れると、顧客は質問を繰り返したり、エージェントの発話にかぶせて話したり、電話を切ったりします。だから業界はミリ秒単位で競っています。聞く、考える、話すという各段階が遅延を積み重ね、さらに電話網とインターネットを音声が行き来する時間が加わります。
Sierraのテストは、速さだけでは足りないことを示しています。優れたエージェントは、顧客が話し終えたタイミングを判断し、雑音や他の人に向けた発言を無視し、途中で割り込まれても対応できなければなりません。OrangeやElisaなどの事業者が、利用者により近い自社ネットワーク内で音声AIを実行し始めているのも同じ理由です。
コロンビアと中南米の企業にとっての意味
スペイン語の電話対応を自動化したい企業にとっては良いニュースです。選択肢が増え、1分あたりの料金が下がり、タスクの性能も英語に近づいています。ただし、音声エージェントを契約する前に、プロバイダーに次の質問をすることをおすすめします。
- 実際の通話で応答までどれくらいかかりますか?Webのデモではなく電話網上で、顧客が話し終えてから応答が聞こえるまでの時間を測定してもらってください。
- 割り込みや相づちにどう対応しますか?途中で割り込む、«うん»と言う、隣の人と話すなどして試してください。
- コロンビアのスペイン語でテストしましたか?テストは一般的なスペイン語を使っています。なまり、固有名詞、身分証番号(cédula)、地元の住所は実際の通話で検証する必要があります。
- 音声と文字起こしはどこで処理・保存されますか?これらは個人データ保護法で保護される個人データです。
- どのように人へ通話を引き継ぎますか?それまでの会話の内容を引き継いだうえで、人間の担当者につなぐ手段が常に必要です。
19 80 TIC Cloudでは、AI音声エージェントを貴社の番号とクラウドPBXやコールセンターに接続し、自社の顧客で試しながら、必要なときは担当者に引き継げるようにします。



