VoiVision AI
tech· VoiVision AI Team

Bagaimana Kami Menyelesaikan Aksen Cina & Inggris ASR di Asia Tenggara (90%+ Akurasi)

Bahasa Cina dan bahasa Inggris Asia Tenggara membawa aksen yang berat - Bahasa Mandarin Singapura / Malaysia, Singlish, Manglish, Thai / Vietnam Inggris. SaaS generik ASR dan model open-source seperti Whisper dan ASR terbuka Microsoft berjuang di sana. VoiVision melatih kembali ribuan jam bicara aksen untuk mendorong aksen Mandarin dan Inggris melewati akurasi 90%.


Di Asia Tenggara, "Standard Accent " Tidak Ada

Untuk ASR Cina dan Inggris, mudah untuk mengasumsikan pelatihan korpus "Mandarin standar" dan "Inggris Inggris / Amerika" sudah cukup. Saat bisnis Anda mencapai Asia Tenggara, asumsi itu akan runtuh.

Di Asia Tenggara tidak ada "acent standar " - satu pertemuan dapat mencampur bahasa Mandarin Singapura, Mandarin Malaysia dan Singlish, dengan aksen, kata-kata pinjaman dan dialek yang terjalin. Model-model ASR generik hampir tidak dapat mengatasi.

Inilah sebabnya mengapa banyak tim globalisasi melaporkan: SaaS pengenalan suara yang bekerja dengan sempurna di dalam negeri tiba-tiba "tidak dapat memahami orang " di ruang pertemuan di Singapura, Kuala Lumpur dan Bangkok.

Mengapa Generic SaaS dan Model Open-Source Gagal

Kami menjalankan solusi umum off-the - shelf terhadap skenario nyata Asia Tenggara. Putusan itu konsisten:

Solusi: SolusiPerforma pada aksen SE-Asianakar penyebab
Generik SaaS ASRTingkat kesalahan kata yang lebih tinggiTerlatih dalam bahasa Inggris Mandarin / Inggris-Amerika standar; cakupan aksen yang lemah
OpenAI berbisikLebih banyak kesalahan di bawah aksen yang kuatModel dasar memiliki ketahanan aksen yang terbatas; membutuhkan fine-tuning yang ditargetkan
Microsoft open-source ASRKesalahan besar pada kata-kata yang dipinjam / pencampuran dialekTidak ada pemodelan khusus dari kata-kata dan aksen pinjaman multibahasa SE-Asia

Konflik inti: Kemampuan bahasa model-model ini dibangun di atas ucapan standar, sementara komunikasi sehari-hari di Asia Tenggara dibangun di atas lapisan demi lapisan pergeseran aksen.

  • Bahasa Mandarin Asia Tenggara: Bahasa Mandarin Singapura dan Malaysia menanamkan kata-kata bahasa Inggris secara langsung ("Saya memesan kamar lah") dan mencampurnya dengan istilah dialek Hokkien, Teochew, Hakka;
  • Bahasa Inggris SE-Asia: Singlish dan Manglish menggunakan intonasi gaya Cina; bahasa Inggris Thailand dan Vietnam berbeda tajam dari Inggris Inggris / Amerika dalam konsonan dan ucapan yang terhubung.

Model generik decoding oleh "suara standar" secara alami lonjakan dalam kesalahan pada masukan ini.

Pendekatan VoiVision: Pelatihan ulang selama ribuan jam

Alih-alih memaksa satu "model universal" untuk menangani setiap aksen, kami melatih kembali model dengan suara sendiri dari Asia Tenggara:

  1. Mengumpulkan pidato di wilayah: membangun korpus bahasa Mandarin + bahasa Inggris Ribuan jam yang mencakup beberapa aksen nasional, yang diambil dari komunikasi nyata di Singapura, Malaysia, Thailand, Vietnam dan banyak lagi;
  2. Pelatihan ulang aksen-adaptif: menerapkan adaptasi aksen di atas kemampuan dasar sehingga decoder belajar pergeseran pengucapan umum, nada dan pola kata-kata yang dipinjam dari wilayah tersebut;
  3. Injeksi Domain kata kunci: secara dinamis menyuntikkan istilah industri pelanggan, nama dan singkatan sebagai kata kunci untuk lebih memotong tingkat kesalahan kata dalam skenario profesional;
  4. Insinyur untuk produksi: pasangan dengan pemrosesan di perangkat dari ASR Recognition Optimization solution kami (AGC / AEC / ANC + injeksi layar OCR kata kunci) untuk menjalankan model yang dilatih ulang di tempat pelanggan.

Hasil: Aksen Mandarin & Aksen Inggris keduanya ≥ 90%

Diukur pada pertemuan pelanggan Asia Tenggara yang sebenarnya dan audio call-center:

  • Aksen Mandarin (Singapura / Mandarin Malaysia, dll.) Akurasi ≥ 90%;
  • Aksen Bahasa Inggris (Singlish, Manglish, Thai / Vietnam Inggris, dll) Akurasi ≥ 90%;
  • Tingkat kesalahan kata pada ucapan yang dipinjam-kata dan dicampur-dialek turun tajam dibandingkan SaaS / Whisper generik.

Kuncinya bukan "model yang lebih besar" tetapi "model yang memahami suara tanah ini." Ribuan jam pidato di wilayah mengubah "tidak bisa mengerti " menjadi" mendengar dengan jelas. " "

Teknik & Kepatuhan: Persyaratan Keras untuk Going Global

Asia Tenggara seringkali melibatkan kepatuhan lintas batas dan batas-batas data-residensi. Model yang dilatih ulang VoiVision tidak bergantung pada inferensi awan publik:

Kasus Penggunaan Tipis

  • Pertemuan-pertemuan multinasional: tim di seluruh Singapura, Kuala Lumpur dan Bangkok dalam satu panggilan, secara akurat ditranskripsi meskipun aksen campuran;
  • Call Center Asia Tenggara: auto-transkripsi suara dan QA dari panggilan dukungan bahasa Inggris Thailand / Vietnam;
  • Pelatihan dan lokakarya lintas batas: penangkapan terstruktur dari diskusi multi-aksen dan pelatihan.

Rekomendasi Rollout

  • Penilaian terlebih dahulu: Kirimkan kami rekaman nyata dari tim Asia Tenggara Anda untuk tolok ukur pengenalan aksen untuk melihat kesenjangan kesalahan kata saat ini;
  • Retrain: membangun retrain khusus wilayah ditambah penyesuaian kata kunci pada ribuan jam pidato aksen;
  • Deploy: pergi pribadi, mengintegrasikan dengan OA yang ada dan sistem rekaman.

Perlu penilaian pengakuan aksen untuk bisnis Asia Tenggara Anda? Book a Demo dan tim teknis kami akan memberi Anda rencana pelatihan ulang yang konkret dan baseline akurasi.

FAQ

Q: Apa sebenarnya yang membuat pengenalan suara Asia Tenggara begitu sulit?

A: Ini adalah campuran dari aksen + kata-kata yang dipinjam + dialek. Bahasa Mandarin Singapura dan Malaysia banyak meminjam dari bahasa Inggris dan dialek Cina selatan; Bahasa Inggris Asia Tenggara (Singlish, Manglish, Thai / Vietnam Inggris) sangat berbeda dari Inggris Inggris / Amerika dalam fonologi, nada dan pidato yang terhubung. Model generik yang dilatih pada ucapan "standar" hanya salah mengenali aksen ini secara massal.

Q: Mengapa Whisper dan open-source ASR Microsoft berkinerja buruk di Asia Tenggara?

A: Model dasar mereka dilatih terutama pada standar Mandarin dan Inggris / Amerika, dengan cakupan aksen yang lemah. Tanpa adaptasi khusus aksen mereka memiliki tingkat kesalahan kata yang tinggi pada aksen yang kuat seperti Mandarin Singapura atau Singlish; adaptasi yang efektif membutuhkan korpus aksen yang ditargetkan untuk fine-tuning.

Q: Bagaimana VoiVision mencapai akurasi 90%+?

A: Intinya adalah "pelatihan ulang pada ribuan jam pidato aksen Asia Tenggara. " "Kami mengumpulkan audio Mandarin dan Inggris yang mencakup beberapa aksen nasional, kemudian menerapkan adaptasi aksen ditambah injeksi domain kata kunci untuk melatih kembali model sehingga decoder memahami pergeseran pengucapan umum dan kata-kata yang dipinjam - memberikan akurasi 90%+ untuk aksen Mandarin dan aksen Inggris.

Q: Aksen spesifik mana yang didukung?

A: Kami sudah mencakup aksen khas Asia Tenggara - Mandarin Singapura, Mandarin Malaysia, Singlish, Manglish, Thai English, Vietnam English - dan mendukung penyesuaian aksen per negara / per industri dan peningkatan kata kunci.

Q: Dapatkah ia digunakan secara pribadi dengan latensi rendah?

A: Ya. Ya. Kapal model dengan [Speech Engine (software only)](/id/products/engine) dan [VV05 / VV10 on-prem servers](/id/products/vv10) kami, berjalan sepenuhnya di tempat (ruang server atau cloud) dengan latensi end-to - end di bawah 1 detik dan tidak ada data yang meninggalkan tempat - memenuhi kebutuhan kepatuhan perusahaan yang memperluas ke luar negeri dan lembaga multinasional.

#Asia Tenggara ASR#Pengakuan aksen (accent recognition)#Whisper (bisik)#Microsoft open-source ASR#ASR pelatihan ulang#globalisasi (globalisasi)

Memesan Demo yang Dipersonalisasi

Beritahu kami tentang skenario pertemuan dan kebutuhan kepatuhan Anda - dapatkan rencana yang disesuaikan.

Pesan sekarang
Live Chat