Apple SpeechAnalyzer、Whisperを精度で上回る初のベンチマーク
Judul asli: Apple's new SpeechAnalyzer API, benchmarked against Whisper and its predecessor
Mengapa Ini Penting
AppleのオンデバイスASRがWhisperを超えたことで、モバイル音声認識の選択基準が変わる可能性がある。
Apple新APIのSpeechAnalyzerがLibriSpeech 5,559発話のテストでWhisper Smallを上回り、単語誤り率2.12%(クリーン音声)を記録。旧APIの9.02%から大幅改善。
AIワークスペースアプリInscribeの開発チームが、Apple M2 Pro(32GB、macOS 26.5.1)上でApple SpeechAnalyzer、旧API SFSpeechRecognizer、およびWhisperの3モデル(Tiny・Base・Small)を同一条件でベンチマーク測定した。
LibriSpeech標準テストセット(計5,559発話)における単語誤り率(WER)は、SpeechAnalyzerがクリーン音声2.12%・ノイズあり音声4.56%でトップ。Whisper Small(WhisperKit CoreML、約460MB)はそれぞれ3.74%・7.95%、旧SFSpeechRecognizerはクリーン音声9.02%で最下位となり、40MBの軽量モデルWhisper Tinyにも劣った。
処理速度はSpeechAnalyzerがWhisper Smallの約3倍高速で、全エンジンがリアルタイムの12〜40倍速で動作した。
Whisperは約30ロケールのSpeechAnalyzerに対して多言語対応とクロスプラットフォーム動作で優位性を保つが、英語・Apple端末に限れば精度の優位は失われた。開発チームは自社製品InscribeのAuto設定をSpeechAnalyzer優先に変更したと明記している。