Siri di HomePod Mengajukan 800 Pertanyaan dan Menjawab 74% dengan Benar vs. Hanya 52% Awal Tahun Ini

Analis Apple Gene Munster dari Loup Ventures baru-baru ini menguji keakuratan asisten digital pada empat speaker pintar dengan mengajukan serangkaian 800 pertanyaan kepada Alexa, Siri, Google Assistant, dan Cortana masing-masing di Amazon Echo, HomePod, Google Home Mini, dan Harmon Kardon Invoke.

Hasilnya menunjukkan bahwa Siri di HomePod menjawab dengan benar 74,6 persen pertanyaan, peningkatan dramatis dibandingkan tingkat keberhasilan pembicara 52,3 persen ketika Loup Ventures mengajukan 782 pertanyaan serupa pada Desember 2017.

Siri di HomePod tetap kurang akurat dibandingkan Asisten Google di Google Home, yang menjawab 87,9 persen pertanyaan dalam tes dengan benar. Sementara itu, Alexa di Echo dan Cortana di Invoke membuntuti Siri di HomePod, menjawab dengan benar 72,5 persen dan 63,4 persen pertanyaan dalam tes.

kapan update macos selanjutnya

Munster mengaitkan peningkatan akurasi HomePod dengan 'pengaktifan lebih banyak domain dalam satu tahun terakhir', karena serangkaian pembaruan perangkat lunak dalam beberapa bulan terakhir telah memungkinkan pembicara untuk membuat dan menerima panggilan telepon, menjadwalkan acara kalender, menyetel banyak pengatur waktu, mencari lagu dengan lirik, dan banyak lagi.

Metodologi

Loup Ventures mengatakan bahwa mereka menanyakan 800 pertanyaan yang sama kepada setiap pembicara cerdas, dan mereka dinilai berdasarkan dua metrik: apakah kueri itu dipahami dan apakah respons yang benar diberikan. Kumpulan pertanyaan dirancang untuk 'menguji kemampuan dan utilitas pembicara cerdas secara komprehensif' berdasarkan lima kategori:

• Lokal – Di mana kedai kopi terdekat?
  

• Commerce – Bisakah Anda memesankan saya lebih banyak handuk kertas?
  

• Navigasi – Bagaimana saya bisa sampai ke pusat kota dengan bus?
  

• Informasi – Siapa yang dimainkan si Kembar malam ini?
  

  tambahkan jenis latihan ke jam tangan apel

• Perintah – Ingatkan saya untuk menelepon Steve pada jam 2 siang. hari ini.

Perusahaan modal ventura itu mengatakan terus memodifikasi rangkaian pertanyaannya untuk mencerminkan perubahan kemampuan asisten digital. 'Ketika komputasi suara menjadi lebih fleksibel dan asisten menjadi lebih mampu, kami akan terus mengubah pengujian kami sehingga tetap lengkap,' kata Munster.

Hasil berdasarkan Kategori

Asisten Google di Beranda Google dengan benar menjawab pertanyaan paling banyak dalam empat dari lima kategori dalam pengujian, tetapi gagal memenuhi Siri di HomePod dalam kategori 'perintah', menurut Loup Ventures:

Keunggulan HomePod dalam kategori ini mungkin berasal dari fakta bahwa HomePod akan meneruskan permintaan SiriKit penuh seperti yang terkait dengan perpesanan, daftar, dan pada dasarnya apa pun selain musik ke perangkat iOS yang dipasangkan ke speaker. Siri di iPhone memiliki integrasi mendalam dengan email, kalender, perpesanan, dan area fokus lainnya dalam kategori Perintah kami. Kumpulan pertanyaan kami juga berisi cukup banyak pertanyaan terkait musik, yang menjadi spesialisasi HomePod.

cara mengaktifkan pesan di macbook

Loup Ventures menemukan bahwa HomePod dan Google Home berdiri 'di atas yang lain' dalam kategori 'lokal' dan 'navigasi' karena data kepatutan masing-masing di Apple Maps dan Google Maps. 'Data ini merupakan keunggulan komparatif jangka panjang yang potensial untuk Siri dan Google Assistant,' kata Munster.

Apa berikutnya

Kekurangan Siri secara brutal diekspos pada HomePod , yang hampir seluruhnya bergantung pada asisten untuk berfungsi, jadi bukti anekdot dari peningkatan adalah pertanda baik, tetapi Apple masih memiliki landasan yang signifikan untuk mengimbangi para pesaingnya.

Loup Ventures mengakui bahwa Siri tetap terbatas pada HomePod dibandingkan dengan kemampuannya yang diperluas pada iPhone. 'Ini sebagian karena posisi HomePod yang jelas dari Apple bukan sebagai 'speaker pintar', tetapi sebagai speaker rumah Anda dapat berinteraksi dengan menggunakan suara Anda dengan Siri onboard,' kata Munster.

Perusahaan modal ventura mengatakan akan terus membandingkan HomePod dengan speaker pintar lainnya dari waktu ke waktu di tengah kemajuan pesat dalam kecerdasan buatan.