VoiVision AI
tech· VoiVision AI Team

Come risolviamo accentuato cinese e inglese ASR nel sud-est asiatico (90%+ accuratezza)

Il cinese e l'inglese del sud-est asiatico portano accenti pesanti - mandarino singapurese / malese, singlese, manglese, inglese tailandese / vietnamita. Il SaaS generico ASR e i modelli open-source come Whisper e l'aperto ASR di Microsoft lottano lì. VoiVision riaddestra migliaia di ore di discorso accentuato per spingere accentuato mandarino e inglese oltre 90% di accuratezza.


Nel sud-est asiatico non esiste l'accento standard

Per il cinese e l'inglese ASR, è facile presumere che i corpi di formazione di "Mandarin standard" e "Inglese britannico / americano" siano sufficienti. Nel momento in cui il tuo business raggiunge il sud-est asiatico, quell 'ipotesi crolla.

Nel sud-est asiatico non esiste un "accento standard" - un incontro può mescolare il mandarino singapuriano, il mandarino malese e il singlese, con accenti, parole prese in prestito e dialetti intrecciati. I modelli generici ASR a malapena si comportano.

Ecco perché molti team di globalizzazione riportano: il SaaS riconoscimento vocale che funzionava perfettamente a livello nazionale improvvisamente "non riesce a capire le persone " nelle sale riunioni di Singapore, Kuala Lumpur e Bangkok.

Perché i modelli SaaS e open source generici falliscono

Abbiamo eseguito le soluzioni comuni off-the - shelf contro scenari reali del sud-est asiatico. Il verdetto era coerente:

SoluzionePrestazioni su accenti SE-asiaticiCausa radice
SaaS generico ASRTasso di errore di parola più altoFormazione in standard mandarino / inglese britannico-americano; copertura di accento debole
OpenAI WhisperPiù errori sotto accenti fortiIl modello di base ha una robustezza accentuata limitata; necessita di una messa a punto mirata
Microsoft open source ASRGrandi errori su parole prese in prestito / miscelazione dialetticaNessuna modellazione dedicata di parole e accenti in prestito multilingue dell ' Asia Sud-Est

Il conflitto fondamentale: La capacità linguistica di questi modelli è costruita sul linguaggio standard, mentre la comunicazione quotidiana nel sud-est asiatico è costruita su strato dopo strato di cambiamento dell 'accento.

  • Mandarino asiatico: il mandarino singapure e malese incorporano direttamente parole inglesi ("Io prenotavo la stanza lah") e mescolano termini dialettici Hokkien, Teochew, Hakka;
  • Inglese asiatico: Singlish e Manglish usano l'intonazione in stile cinese; Thai e vietnamita inglese differiscono nettamente da inglese britannico / americano in consonanti e discorso collegato.

I modelli generici che decodificano con il "suono standard" naturalmente aumentano in errore su questi input.

L'approccio di VoiVision: formazione su migliaia di ore

Invece di costringere un "modello universale " a gestire ogni accento, abbiamo addestrato il modello con la voce del Sud-Est asiatico:

  1. Raccogliere il discorso in-regione: costruire un corpus di Migliaia di ore in mandarino + inglese che abbraccia accenti nazionali multipli, tratti da comunicazioni reali a Singapore, Malesia, Thailandia, Vietnam e altro ancora;
  2. Accento-adattamento: applicare l'adattamento dell ' accento in cima alla capacità di base in modo che il decoder impari i comuni cambiamenti di pronuncia, toni e modelli di parole in prestito della regione;
  3. Iniezione di dominio parola chiave: iniettare dinamicamente termini, nomi e abbreviazioni del settore del cliente come parola chiave per ridurre ulteriormente il tasso di errore di parola in scenari professionali;
  4. Ingegnere per la produzione: abbinare con l'elaborazione sul dispositivo del nostro ASR Recognition Optimization solution (AGC / AEC / ANC + schermo OCR iniezione parola chiave) per eseguire il modello addestrato nelle sedi del cliente.

Risultato: Mandarino accentuato e inglese accentuato entrambi ≥ 90%

Misurato su veri meeting dei clienti del Sud-Est asiatico e audio del call center:

  • Mandarino accentuato (Mandarin singaporeo / malese, ecc.) Accuratezza ≥ 90%;
  • Inglese accentuato (Singlish, Manglish, Thai / Vietnamese inglese, ecc.) Accuratezza ≥ 90%;
  • Il tasso di errore di parole su parole in prestito e pronunciazioni mescolate con dialetto scende nettamente rispetto al SaaS / Whisper generico.

La chiave non è "un modello più grande " ma" un modello che capisca il suono di questa terra. "Migliaia di ore di discorso in una regione trasformano il" non riesce a capire " in "sentire chiaramente ". "

Ingegneria e Compliance: requisiti difficili per andare a livello globale

Il sud-est asiatico spesso comporta la conformità transfrontaliera e i limiti di residenza dei dati. Il modello addestrato di VoiVision non si basa sull 'inferenza del cloud pubblico:

Casi tipici di utilizzo

  • riunioni multinazionali: team di Singapore, Kuala Lumpur e Bangkok in una sola chiamata, trascritti con precisione nonostante accenti misti;
  • Call Center asiatici: auto-trascrizione vocale e QA delle chiamate di supporto in inglese in Thai / Vietnamese;
  • Formazione transfrontaliera e workshop: cattura strutturata di discussioni multi-accento e formazione.

Raccomandazioni Rollout

  • Valutazione prima: inviateci registrazioni reali dei vostri team del Sud-Est asiatico per un benchmark di riconoscimento degli accenti per vedere l'attuale divario di errore di parola;
  • Retrain: costruire un retrain specifico per la regione e la personalizzazione parola chiave su migliaia di ore di discorso accentuato;
  • Deploy: diventa privato, integrandosi con i sistemi di registrazione OA esistenti.

Hai bisogno di una valutazione del riconoscimento dell 'accento per la tua attività nel Sud-Est asiatico? Book a Demo e il nostro team tecnico vi forniranno un piano di addestramento concreto e un baseline di precisione.

FAQ

Q: Cosa rende il sud-est asiatico riconoscimento vocale così difficile?

A: È il mix di accento + parole prese in prestito + dialetto. Il mandarino di Singapore e il malese prendono pesantemente in prestito da dialetti inglesi e cinesi meridionali; l'inglese del sud-est asiatico (singlese, manglese, inglese tailandese / vietnamita) differisce nettamente dall 'inglese britannico / americano in fonologia, tono e discorso connesso. I modelli generici addestrati al linguaggio "standard" semplicemente riconoscono male questi accenti in massa.

Q: Perché Whisper e l'open source ASR di Microsoft sono meno performanti nel Sud-Est asiatico?

A: I loro modelli base sono addestrati principalmente in mandarino standard e inglese britannico / americano, con una copertura di accento debole. Senza un adattamento specifico per accento hanno alti tassi di errore di parola su accenti forti come il mandarino singapuriano o il singlese; un adattamento efficace richiede corpi accentuati mirati per la messa a punto.

Q: Come fa VoiVision a raggiungere una precisione del 90%?

A: Il nucleo è "riaddestramento su migliaia di ore di discorso con accento sud-est asiatico. "Raccogliamo l'audio in mandarino e inglese che copre più accenti nazionali, quindi applichiamo l'adattamento dell ' accento e l'iniezione di dominio parola chiave per addestrare il modello in modo che il decoder comprenda i comuni cambiamenti di pronuncia e le parole prese in prestito, fornendo una precisione del 90%+ sia per il mandarino accentuato che per l'inglese accentuato.

Q: Quali accenti specifici sono supportati?

A: Copertiamo già gli accenti tipici del Sud-Est asiatico - mandarino singapuriano, mandarino malese, singlese, manglese, inglese tailandese, inglese vietnamita - e supportiamo ulteriori personalizzazioni per accento per paese / per settore e il miglioramento parola chiave.

Q: Può essere implementato privatamente con bassa latenza?

A: Sì, sì. Il modello viene fornito con le nostre [Speech Engine (software only)](/it/products/engine) e [VV05 / VV10 on-prem servers](/it/products/vv10), che funzionano interamente on-premise (server room o cloud) con latenza end-to - end inferiore a 1 secondo e nessun dato che lascia le sedi, soddisfacendo le esigenze di conformità delle aziende in espansione all 'estero e delle istituzioni multinazionali.

#Sud-Est asiatico ASR#Riconoscimento accento#Whisper#Microsoft open source ASR#ASR Riformazione#Globalizzazione

Scarica una demo personalizzata

Raccontaci il tuo scenario di riunioni e le tue esigenze di compliance - ottieni un piano su misura.

Prenota ora
Live chat