jogo de sinuca online gratis

Jovens que ensinam a IA a admitir a linguagem da mão

Com a ajuda do poder científico e tecnológico, eles tentaram fazer mais pessoas surdas "ouvirem" e "entender"

Repórter Repórter Lei Yan, Li Ting, irmã Liang

Em maio deste ano, no local da Conferência Mundial de Inteligência, um "canto da linguagem de sinais" atraiu muitas pessoas para parar.Enquanto a linguagem de sinais for tocada na frente da câmera, uma tradução de texto coerente semântica aparecerá na tela atrás de você.Esse conjunto de "Sistemas de tradução de tempo de tempo de sinais chineses" (a seguir denominada "sistema de tradução de tempo real da linguagem de sinais"), que foi desenvolvido em conjunto pela Universidade de Tecnologia e Escola de Computação de Tianjin, cobriu educação, consultoria legal, catering e o transporte.

Wang Jianyuan é um dos membros da equipe de P&D.Ele é uma criança surda que cresceu na família surda.Ao longo do caminho para 22 anos, a surdez nunca o fez se sentir inferior; , ele encontra desde tenra idade para encontrá -lo desde tenra idade.

Um dos exemplos mais típicos é ver um médico. A maioria dos médicos não solicita uma linguagem de sinais.

Yuan Tian Tian é o professor de Wang Jianyuan e o chefe da equipe do projeto do "sistema de tradução real de tempo de linguagem de sinais".Assim que se formou na pós -graduação em 2006, trabalhou no Departamento de Departamento de Computação do Surdo Artificial College.Por 15 anos, Yuan Tian Tian não conseguiu se lembrar de quantas vezes e recebeu uma ligação da faculdade em um ou dois da manhã, deixando -a acompanhar seus alunos para consultar um médico e ajudar a fazer tradução para a linguagem de sinais.Hoje, ela já é a vice -presidente da faculdade.

Ela não tinha medo do trabalho duro, então tinha medo de adiar sua linguagem de sinais.Yuan Tiantian é uma pessoa auditiva (a abreviação de uma pessoa saudável), e a linguagem de sinais é autônoma depois de ir à posição de ensino. semi -tremor.

Os estudantes de deficiência auditiva têm a auto -confiança e tentam superar seu inconveniente físico.No entanto, Yuan Tian Tian e Wang Jianyuan obviamente queriam contar uma "história de ficção científica": eles queriam ensinar computadores a aprender a linguagem de sinais, deixar a máquina substituir as pessoas e se tornar "traduções de linguagem de sinais" que podem ser usadas no tempo e preciso .

O computador de Yuan Tiantian nasceu.Eles querem transformar o sistema de tradução real da linguagem de sinais em uma ponte.

Esse objetivo parece magnífico e é difícil alcançá -lo, mas eles ainda decidem experimentá -lo.

Nova ponte

Ajude os surdos a se comunicar com a audição de Jian.

Em 2007, Fu Zhiwei, vice -presidente da Associação de Surdos Chineses, publicou um artigo acadêmico intitulado "Eu assisto" Informações Surdas ".Ele escreveu no texto: "Espero desenvolver uma máquina no futuro. Pode ser o mesmo que a câmera em miniatura atual, entrar na linguagem oral em uma extremidade e exibir texto do outro lado da tela pequena ... espere Até que esse tipo de máquina esteja sendo lançado, as informações surdas estão chegando e as informações surdas estão chegando e as informações surdas estarão disponíveis, as informações surdas estarão disponíveis e as informações de surdos estarão disponíveis. O ambiente sem barreira será muito alterado.

Olhando para esta passagem dez anos depois, descobrirei que Fu Zhiwei espera a máquina, o que é quase exatamente o mesmo que o aplicativo de reconhecimento de voz comum nos smartphones hoje.Os beneficiários da tecnologia de reconhecimento de voz não se limitam mais a grupos de deficiência auditiva -veja quantas pessoas ao seu redor estão usando métodos de entrada de voz.

Yuan Tiantian liderou o "Sistema de Tradução Real -Time de linguagem de sinais" desenvolvido pela equipe, semelhante ao "método de entrada de voz" da versão da linguagem de sinais.No entanto, o último é a voz de entrada, o reconhecimento de máquinas e convertido em texto, enquanto o primeiro deve entrar em movimentos e expressões de linguagem de sinais, reconhecimento de máquinas e depois se traduzir em texto- "Old Bridge" e "New Bridge", semelhante e diferente .

Yuan Tian Tian não esperava que a existência de "Old Bridge" se tornasse a "resistência" da equipe do projeto para construir uma "nova ponte".

"Por que eu tenho que me envolver na tradução da linguagem de sinais? Os surdos não conseguem ouvir, há reconhecimento de voz agora! Algumas pessoas surdas não podem falar, posso apenas digitar telefones celulares?" Eles estão desenvolvendo desenvolvimento.Mas quando falaram sobre isso, questionaram a necessidade do projeto e sentiram que as traduções de linguagem de sinais não tinham outro significado, exceto "fazer coisas boas".Palavras semelhantes ouvem demais. , então não faça progresso? jogo de sinuca online gratis

Yuan Tian Tian disse que até hoje a linguagem de sinais ainda é a expressão mais natural e eficiente de muitas pessoas com deficiência auditiva.Se os seres humanos devem dominar um idioma, eles sempre serão limitados por níveis cognitivos, memória e outros aspectos. No. 1, nº 1 Uma reação é pensar se ela pode romper com o nível técnico."Sinto que, se a tecnologia estiver lá, a memória da máquina e sua capacidade de aprendizado são muito mais fortes que as pessoas. Portanto, se a máquina puder aprender a linguagem de sinais, deve ser mais do que a tradução da linguagem de sinais 'semi -tremor'. ”

Atualmente, o sistema de tradução real da linguagem de sinais ainda está no estágio de teste.Idealmente, quando os resultados da pesquisa realmente chegaram, desde que as pessoas da audição abrem o programa de tradução da linguagem de sinais, elas podem se comunicar diretamente com a "linguagem de sinais".

Mas para Yuan Tian Tian e a jovem equipe de P&D, não é fácil alcançar esse "estado ideal".Como estudante de deficiência auditiva no projeto, o especialista em computadores de Wu Lije no especialista em computadores de Wang Jianyuan e o Suraf Artificial College têm cada vez mais energia na tecnologia de reconhecimento de linguagem de sinais e tradução.Eles abriram uma conta pública do WeChat que promoveu e popularizou toda a sociedade.Quando a conta do escritório estava no escritório, seus pensamentos eram abrir uma janela e deixar o povo surdo "ver".Agora, eles estão ocupados fazendo pontes e querem fazer com que os auditores "entendam".

Beleza da linguagem de sinais

Além de estudantes de deficiência auditiva, também há uma equipe de projeto "Signal Language Real -Time Translation System".Seja um usuário diário de linguagem de sinais, há um consenso entre eles: a linguagem de sinais é uma linguagem bonita.

Os sentimentos intuitivos da beleza de Yuan Tian Tian dos oponentes vêm de seus alunos.A Alma Mater de Yuan Tiantian é a Universidade Normal de Tianjin. Disfunção.Quando entrei para o emprego, a velha professora da faculdade também a elogiou: "É incrível, ouso" pintar "com os alunos assim que vou ao pódio!"

Yuan Tiantian tem uma personalidade típica em Tianjin.Só sinto que, como quero ser professor e ensiná -lo a deficiência auditiva, a linguagem de sinais é uma ferramenta obrigatória para a aula. Sem obstáculos, certo? "

Quando costumava aprender, descobriu que a linguagem de sinais natural usada pelo uso diário surdo é muito mais simples como "mais do que pintar".Tem sua própria sequência e gramática tem o senso único de espaço, a mesma palma, os cinco dedos de se reuniram a espalhados, simulando o gesto da fonte de luz, o significado do interior é a luz e pode se referir ao sol na mesma frase "Dialetos" versões; a expressão da linguagem de sinais é mais rica.

"É realmente uma bela língua!"Aqueles que viram a mão de Wang Jianyuan e Wuliejie -falam que os sentimentos de Yuan Tian Tian não são exagerados.

Wang Jianyuan nasceu em uma família surda em Qingdao, e seus pais eram pessoas com deficiência auditiva.Antes de ser admitido no major de engenharia de rede do Surdy Artificial College em 2018, ele foi educado na escola de surdos o tempo todo.

Quando ele era criança, seu pai era como outros pais ensinavam seus filhos a falar com Wang Jianyuan seriamente.Seu pai não achava que era uma língua "especial". 'Os oponentes afetaram Wang Jianyuan.Ele nunca evitou o uso da linguagem de sinais em público e nunca escondeu sua identidade surda.Na sua opinião, a linguagem de sinais é a linguagem de sinais, não um tipo de "deficiência".Os surdos podem usá -lo para expressar seus pensamentos internos e ouvir as pessoas, desde que eles dominem esse idioma, eles também podem usá -lo para se comunicar como linguagem de sinais como qualquer outro idioma, é uma ferramenta para eliminar obstáculos e se comunicar com com um ao outro.

Wulieje é um cara mongol de Qinghai, "Home fica do lado de Chaka Salt Lake" -se for proficiente em linguagem de sinais, ele também pode se comunicar em linguagem falada, mas sua voz é um pouco rouca e baixa.

Comparado com Wang Jianyuan, que entrou no mesmo ano, a experiência escolar de Wulieje é mais complicada.Na fase do ensino fundamental, ele confia nos aparelhos auditivos e na capacidade de sua leitura nos lábios, e estudou a escola por três anos com seus filhos: "Três anos são os primeiros da classe".Essa experiência exerceu sua adaptabilidade e capacidade de falar.Mais tarde, ele deixou Qinghai, completou uma escola no segundo escolar de Wuhan e chegou à Universidade de Tecnologia de Tianjin através de um único teste.Tão resultado de "risos e orgulhosos heróis" entre os filhos de colegas de família o fizeram acreditar que "os surdos não são piores do que ninguém".Uma vez, ele usou diretamente "Suraf Sound" como seu próprio apelido de WeChat em inglês, Suraf tinha o significado de surdos.

Seja um curso profissional, promovendo a linguagem de sinais ou fazendo pesquisas científicas, esse jovem mongol de pele de bronze tem um "Horse First".

Dificuldade técnica

Wang Jianyuan e Wu Lijie foram convidados por Yuan Tian Tian para se juntar à equipe do projeto.Em 2019, os dois estavam no segundo ano e foram responsáveis ​​por coletar linguagem de sinais, escrever frases em conformidade com a linguagem e sequências de sinais naturais.A linguagem de sinais é uma linguagem visual. Tarefas é repetir a linguagem de sinais na câmera.

Por que são eles?

Devido à dificuldade da tecnologia de tradução em tempo real, é precisamente a beleza da linguagem de sinais:

O sistema gramatical independente significa que o sistema desenvolvido pela equipe, além de identificar o significado de um único vocabulário de linguagem de sinais, também precisa transformar a ordem de linguagem de sinais em um prefácio de língua chinesa de escuta saudável e ajustar a "extinção do fogo" da linguagem de sinais para "incêndio em extinção de incêndio que extingue os incêndios de incêndio". Apenas para completar a tradução; A casa, as luzes da casa "; a expressão da expressão significa que o reconhecimento de mangueira não é como o reconhecimento de voz. Apenas colete os" materiais de aprendizagem "de" som ". É necessário treinar inteligência artificial em uma linguagem de sinais qualificada Tradução.Portanto, ser capaz de entender e mostrar completamente a beleza da linguagem de sinais é a pessoa mais adequada para a inteligência artificial como "professor". jogo de sinuca online gratis

As habilidades de Wang Jianyuan e Wulieje "da máquina de ensino" de "ensinar pessoas". jogo de sinuca online gratis

Apesar da tenra idade, sua experiência de ensino de linguagem de sinais pode ser descrita como rica.Assim que ele estava em seu primeiro ano, eles descobriram que não havia algumas pessoas que preferiam seus preconceitos.Não apenas as pessoas da audição, mesmo dentro dos estudantes de deficiência auditiva, há muitos estudantes, porque foram afetados pela visão de que "o idioma de caça é reconhecer que ele tem deficiência" e "falar como uma pessoa normal", e A linguagem do oponente é conflito.

Portanto, pouco depois de entrar na escola, Wang Jianyuan e Wulieje começaram a ensinar através dos clubes de idiomas de sinais da faculdade, por meio de suas contas do WeChat e por meio de plataformas de vídeo curtas para ministrar aulas através de canais offline e online.Como todos os professores que ensinam idioma, falando, palavras, padrões de frases ... duas pessoas começaram a estudar mais conhecimento da linguagem da linguagem de sinais "super esboço": na bolsa escolar de Wang Jianyuan, um livro "Research on Signal Language" e cursos profissionais do livro foi montado, e ele tirou quando teve tempo.Wulieje simplesmente concorreu para participar do curso de treinamento de backbone de backbone da National General Language, organizado pela Federação de Pessoas com Deficiência da China.

No começo, eles fizeram tudo isso, mas só queriam "corrigir o nome" para esse idioma e queriam contar a todos: a linguagem de sinais tem suas características, mas não é "especial". seu usuárioEles não esperavam que a "lição de casa extra" daqueles que aprenderam a linguagem da mão para ensinar as pessoas fossem combinadas com seu respectivo conhecimento profissional para se tornar uma arma para ensinar "AI" a aprender a linguagem da mão.

"Nossa vida de deficiência auditiva conhece a estrutura gramatical da linguagem de sinais e alguns de seus elementos básicos, como em que medida a expressão na face é expressa, quando a linguagem do membro superior deve ser usada, todos eles entendem. Então eles fazem TI.Principal."Yuan Tian Tian valoriza o papel dos surdos na equipe do projeto"."

Devido à falta de participação surda, no campo da tecnologia de reconhecimento e tradução de linguagem de sinais, os círculos acadêmicos em vários países passaram por desvios: por exemplo, tentando estabelecer um Gardine de idiomas de sinais através de luvas de dados.Como sensor comum, a aplicação de luvas de dados na tecnologia de reconhecimento de gestos tem sido relativamente madura -embora o custo seja alto, parece que o "gesto" é coletado com luvas e a precisão deve ser garantida.Infelizmente, a linguagem de sinais não é um gesto simples: além de expressões e grandes movimentos, mesmo que o mesmo gesto, o ponto de apontar é um pouco diferente e pode haver significados muito diferentes.

Percebendo isso, nos últimos anos, os projetos de reconhecimento e tradução de linguagem de sinais promovidos por países nos últimos anos adotaram o método de visão computacional.Os problemas mais comuns nesta fase são que as amostras coletadas são muito pequenas e o conjunto de dados não é grande o suficiente.A segunda é que o conjunto de dados foi coletado, mas o corpus não foi rastreado e marcado em alta qualidade.Para dizer claramente, o corpus é "ruim".

Yuan Tian Tian disse que o processo de inteligência artificial é um pouco como ensinar as crianças a falar. A tia e a tia disseram, todos são chamados de mães. "Repita a mesma ação, o computador pode" lembrar ".

Muitas equipes estrangeiras estabeleceram traduções de linguagem de sinais em cenas complexas."E nossa equipe é contra a faculdade artificial surda. Muitos membros são usuários de linguagem de sinais. Eles têm vantagens na coleta de linguagem de sinais naturais".

"Mas, para dizer a verdade, também construímos um conjunto de dados" Hard -to -Make ". Corpus que eles coletaram na época era o gesto chinês e não a linguagem de sinais natural.O gesto chinês é baseado no prefácio da língua chinesa que é usada no hábito de ouvir, não uma conjunção simbólica do prefácio da linguagem de sinais.

"Por exemplo," o amor é a nossa linguagem comum ". Linguagem, sim, 'não precisa lutar. jogo de sinuca online gratis

"É inútil traduzir o gesto chinês como preciso. O povo surdo geralmente não toca isso!"Primeiro, de acordo com o prefácio da linguagem de sinais, e depois traduzem -a de acordo com os hábitos de fala. "caminho correto.

"Vamos fazer essa pesquisa, não querem explodir nosso conjunto de dados com as pessoas, e não queremos dizer a altura dos papéis que publicamos, podemos usá -lo: ele pode ser usado".

Ano da colheita

Para Yuan Tian Tian e sua equipe, 2019 e 2021 são dois nós principais.2019 é o ano de sua startup.Yuan Tian Tian está muito feliz.

Em 2021, pode -se dizer que é o ano da equipe.

Yan Siyi ainda se lembra do clima quando passou pela estrutura de código do sistema de manuseio pela primeira vez no início deste ano."É como se você estivesse montando uma máquina, as peças já estão ortográficas, mas por causa de uma variedade de pequenos problemas, como alguns parafusos que não se apertaram, não podem funcionar normalmente. Estou no laboratório todos os dias, um por Um, um por um depois que os parafusos são fortemente apertados.

Yan Siyi estudou na Segunda Escola Ratial da Escola de Computação da Universidade de Tecnologia de Tianjin. Construindo um modelo de quadro de algoritmo de identificação de linguagem de sinais.Se você usa a metáfora de ensinar seus filhos a falar, as etapas que aprofundaram repetidamente a impressão durante o estágio da pré -escola. Trabalho de casa e artigos -Yan Siyi é um dos "professores" que compilam "livros didáticos" e ajudam a IA, um "colega de classe" a resumir a lei da linguagem de sinais.

"Esta parte do requisito técnico é feito principalmente pelos professores e alunos da escola de computadores da nossa escola".No campo do reconhecimento e tradução para a linguagem de sinais, você pode aprender muita experiência e o progresso dos pares é semelhante.A equipe do projeto refere -se ao algoritmo do sistema de tradução de linguagem de sinais naturais de previsão alemã.

Yan Siyi entrou na sala do computador às 8:30 da manhã todos os dias."Eu acho que nosso projeto é significativo, então quero fazer resultados em breve e posso pousar" Ajude, mas execute o código.Apenas um pouco de exploração, um pouco de "parafuso apertado".

Em maio deste ano, Wang Jianyuan e Wuliejie levaram os resultados da pesquisa para a Conferência Mundial de Inteligência; .

Seu projeto "Gold Getting" é chamado de "baleia", e o nome completo é "Sistema de reconhecimento de sinal automático multi -modal da Whale Modi -Modal".O reconhecimento automático de marcação é as etapas iniciais da tradução da linguagem de sinais, e "Whale Can Language" depende do "sistema de tradução de tempo real da linguagem de sinais" -eles transformam a experiência de "Máquinas de ensino e a linguagem de sinais de aprendizado" nos últimos dois anos em Seus próprios projetos de ciência e tecnologia, ele pessoalmente construiu a "ponte" para a "ponte de surdos e saúde" para sua imaginação.

No dia das finais, Yuan Tiantian elogiou seus alunos, um por um no círculo de amigos.Como instrutora de "baleia", ela gosta desse nome gentil e poderoso.

As palavras das baleias são derivadas da história de "52 Herz Whales".Mas, de fato, se você puder quebrar a senha de 52 Hz, descobrirá que não é uma ilha isolada, ela também cantará e terá seu próprio idioma.Wang Jianyuan sentiu que a baleia era como um grupo de companheiro de audição.

Vários sinais de jovens deficientes auditados projetaram a "baleia", como uma baleia branca flutuando em um oceano azul, e como pessoas que montam os polegares e os dedos indexados quando são "melhores"."Quando construímos uma biblioteca de mão, precisamos resumir a forma de mão de ação da linguagem de sinais em linhas tão simples. É essa linha que suporta o sistema de 'linguagem de baleia' e realiza o reconhecimento do oponente".

A intenção original que eles desenvolveram o sistema de reconhecimento de linguagem de sinais era ajudar a "baleia 52 Hzhz", obtendo a capacidade das palavras e o direito de "entender" ...

(Participe de escrever: Wu Zeyun)