VoiVision AI
tech· VoiVision AI Team

Como Resolvemos ASR Chinês e Inglês Acentuado no Sudeste Asiático (90%+ de Precisão)

Chinês e inglês do sudeste asiático têm sotaques pesados - Cingapurês / Malaio Mandarin, Singlish, Manglish, inglês tailandês / vietnamita. O SaaS genérico ASR e modelos de código aberto como Whisper e o ASR aberto da Microsoft lutam lá. O VoiVision re-treina em milhares de horas de fala com sotaque para empurrar o sotaque em mandarim e inglês além de 90% de precisão.


No Sudeste Asiático, o "acento padrão" não existe

Para o chinês e inglês ASR, é fácil assumir que os corpus de treinamento de "Mandarin padrão" e "Inglês britânico / americano" são suficientes. No momento em que seu negócio atinge o sudeste da Ásia, essa suposição colapsa.

No Sudeste Asiático não existe um "acento padrão" - uma reunião pode misturar o mandarino de Singapura, o mandarino da Malásia e o singlish, com acentos, palavras emprestadas e dialetos entrelaçados. Modelos genéricos ASR mal lidam.

É por isso que muitas equipes de globalização relatam: o SaaS reconhecimento de fala que funcionava perfeitamente em casa, de repente "não consegue entender as pessoas " em salas de reuniões em Cingapura, Kuala Lumpur e Bangcoc.

Por que os modelos genéricos de SaaS e open source falham

Nós executamos as soluções comuns off-the - shelf contra cenários reais do Sudeste Asiático. O veredito foi consistente:

SoluçãoDesempenho em sotaques asiáticosCausa raiz
SaaS genérico ASRTaxa de erro de palavra mais altaTreinado em inglês padrão mandarim / britânico-americano; cobertura de sotaque fraco
O OpenAI WhisperMais erros sob sotaques fortesO modelo base tem robustez de acento limitada; precisa de ajuste fino direcionado
Microsoft Open Source ASRGrandes erros na mistura de palavras emprestadas / dialetosNenhum modelo dedicado de palavras emprestadas multilingües e acentos do SE-Ásia

O conflito central: A capacidade de linguagem desses modelos é construída sobre a fala padrão, enquanto a comunicação diária no Sudeste Asiático é construída sobre camada após camada de mudança de sotaque.

  • Mandarino da Ásia: Cingapurense e malaio mandarim incorporar palavras em inglês diretamente ("Eu reservo o quarto lah") e misturar em termos do dialeto Hokkien, Teochew, Hakka;
  • Inglês do SE-Asian (em inglês): Singlish e Manglish usam entonação de estilo chinês; inglês tailandês e vietnamita diferem fortemente do inglês britânico / americano em consoantes e fala conectada.

Modelos genéricos decodificando por "som padrão" naturalmente pico em erro nestas entradas.

Abordagem da VoiVision: treinamento em milhares de horas

Em vez de forçar um "modelo universal " a lidar com cada sotaque, nós treinamos o modelo com a própria voz do Sudeste Asiático:

  1. Coletar discurso na região (em inglês): Construa um corpus de Milhares de horas em mandarim + inglês, abrangendo vários sotaques nacionais, extraídos de comunicação real em Cingapura, Malásia, Tailândia, Vietnã e muito mais;
  2. Reformação adaptativa (em inglês): Aplicar a adaptação de sotaque em cima da capacidade de base para que o decodificador aprenda as mudanças comuns de pronúncia, tons e padrões de palavras emprestadas da região;
  3. Injeção de domínio palavra-chave: injetar dinamicamente os termos, nomes e abreviaturas da indústria do cliente como palavra-chave para reduzir ainda mais a taxa de erro de palavra em cenários profissionais;
  4. Engenheiro para Produção (em inglês): emparelhamento com o processamento no dispositivo do nosso ASR Recognition Optimization solution (AGC / AEC / ANC + injeção OCR tela palavra-chave) para executar o modelo treinado nas instalações do cliente.

Resultado: Mandarim acentuado e Inglês acentuado ambos ≥ 90%

Medido em reuniões reais com clientes do Sudeste Asiático e áudio do call center:

  • Mandarino acentuado (Cingapura / Mandarino da Malásia, etc.) Precisão ≥ 90%.;
  • Inglês acentuado (Singlish, Manglish, inglês tailandês / vietnamita, etc.) Precisão ≥ 90%.;
  • A taxa de erro de palavra em enunciados de palavras emprestadas e dialetos mistos cai acentuadamente em comparação com o SaaS / Whisper genérico.

A chave não é "um modelo maior ", mas" um modelo que compreenda o som desta terra. Milhares de horas de discurso na região transformam o "não entende " em" ouve claramente ". "

Engenharia e conformidade: requisitos difíceis para se tornar global

O Sudeste Asiático muitas vezes envolve conformidade transfronteiriça e limites de residência de dados. O modelo retreinado do VoiVision não se baseia em inferência de nuvem pública:

Casos de uso típicos

  • Reuniões multinacionais: equipes em Cingapura, Kuala Lumpur e Bangkok em uma chamada, transcrita com precisão apesar de sotaques mistos;
  • Call Centers da Ásia: auto-transcrição de fala e QA de chamadas de suporte em inglês tailandês / vietnamita;
  • Formação e workshops transfronteiriços: captura estruturada de discussões e treinamento multi-acento.

Recomendações de Rollout

  • Avaliação primeiro: envie-nos gravações reais de suas equipes do Sudeste Asiático para um benchmark de reconhecimento de sotaque para ver a lacuna de erro de palavra atual;
  • Reformação: constrói um retrain específico para a região, além de personalização palavra-chave em milhares de horas de fala acentuada;
  • Implementação: será privado, integrando-se com os sistemas OA e de gravação existentes.

Precisa de uma avaliação de reconhecimento de sotaque para o seu negócio no Sudeste Asiático? A Book a Demo e a nossa equipe técnica lhe darão um plano de treinamento concreto e uma linha de base de precisão.

FAQ

Q: O que exatamente torna a reconhecimento de fala do Sudeste Asiático tão difícil?

A: É uma mistura de sotaque + palavras emprestadas + dialeto. Cingapurense e malaio mandarim emprestado fortemente do inglês e dialetos do sul da China; Inglês do sudeste asiático (Singlish, Manglish, inglês tailandês / vietnamita) difere fortemente do inglês britânico / americano em fonologia, tom e fala conectada. Modelos genéricos treinados no discurso "padrão " simplesmente reconhecem esses sotaques em massa.

Q: Por que o Whisper e a ASR de código aberto da Microsoft têm um desempenho inferior no Sudeste Asiático?

A: Seus modelos base são treinados principalmente em mandarim padrão e inglês britânico / americano, com cobertura de sotaque fraco. Sem adaptação específica de sotaque, eles têm altas taxas de erro de palavra em sotaques fortes como o mandarino de Singapura ou o inglês; adaptação eficaz requer corpos acentuados direcionados para ajuste fino.

Q: Como o VoiVision alcança uma precisão de 90%+?

A: O núcleo é "retreinar em milhares de horas de discurso com sotaque do sudeste asiático. "Recolhemos áudio em mandarim e inglês abrangendo vários sotaques nacionais, em seguida, aplicamos adaptação de sotaque e injeção de domínio palavra-chave para treinar o modelo para que o decodificador compreenda as mudanças comuns de pronúncia e palavras emprestadas - entregando 90% de precisão para tanto o sotaque mandarim como o sotaque inglês.

Q: Quais acentos específicos são suportados?

A: Nós já cobrimos sotaques típicos do sudeste asiático - mandarim de Singapura, mandarim da Malásia, inglês singapuriano, inglês manglish, inglês tailandês, inglês vietnamita - e suportamos mais personalização de sotaque por país / por indústria e aprimoramento palavra-chave.

Q: Pode ser implantado de forma privada com baixa latência?

A: Sim. O modelo vem com nossos [Speech Engine (software only)](/pt/products/engine) e [VV05 / VV10 on-prem servers](/pt/products/vv10), funcionando totalmente on-premise (sala de servidor ou nuvem) com latência de ponta a ponta de menos de 1 segundo e sem dados saindo das instalações - atendendo às necessidades de conformidade de empresas que se expandem no exterior e multinacionais.

#Sudeste Asiático ASR#Reconhecimento de acento#sussurro#Microsoft Open Source ASR#Reformação ASR#Globalização

Reserve uma demo personalizada

Conte-nos o seu cenário de reunião e as necessidades de conformidade - obtenha um plano personalizado.

Agendar agora
Live Chat