微软用语音分辨将讲课内容即时转成文字,让听力受损学生学习无障碍
2018-04-09 11:31:51 | 来源:ithome | 投稿:阿呆 | 编辑:dations

原标题:微软用语音分辨将讲课内容即时转成文字,让听力受损学生学习无障碍

图片来源:

微软

微软5日于官方的博客发表用AI技术协助失聪学生学习的成果Presentation△Translator,通过语音分辨技术,将课堂上教授的演讲内容转为文字,来帮助失聪的学生可以同步得到最完整且准确的资讯,并通过AI技术来实现翻译,目前可超过支援60种语言,系统能够即时翻译成不同的语言,让学生选择自己较熟悉的语言来学习。

微软团队在去年开始,与美国纽约州罗彻斯特理工大学的美国国家聋人技术学院合作,为了打造出能够正确分辨课堂上学术名词的模型,研究团队收集了该学院超过10年的课堂讲座资料,包含教授在简报中的文字和注解,通过AI技术分辨每个特定领域专有名词的念法,当教授在课堂上说出专有名词,系统就能成功自动识别,并即时提供文字。

通常课堂上有听力障碍的学生时,学院会聘请一位手语翻译,将教授在课堂上所讲述的内容,转换成手语,以帮助学生理解上课的内容,但是也因为口语和手语之间的转换,让学生没办法即时跟上教授上课的内容,常常学生还在通过手语翻译了解方程式的资讯时,教授的投视频已经换到下一页,再加上有些学生其实不太熟悉手语,导致在课堂上的学习困难重重。

而微软与罗彻斯特理工大学的美国国家聋人技术学院合作,该理工学院大约有1,500名听力受损的学生,微软在简报软件Power△Point中加入即时上字幕(Real-time△captions)的功能,通过语音分辨的技术,将教授所说的话,包括术语、口语的话,转成有标点符号的文句,呈现在投影幕上,现在可支援超过60种翻译语言,学生也可以在自己的电脑或平板上,选择自己较熟悉的语言来学习。

学院中一位一年级的学生Joseph△Adjei就表示,刚进到学校上课时,花了很多心力在手语上,当他第一次在课堂上接触到这套即时语音转文字的服务时,他认为,通过这语音转文字,可以跟听得见的同学在同一时间接收到资讯,举例来说,在生物课堂上,能够让他跟上课程,并且还能学习正确地拼写那些课堂上的专有名词。

除此之外,Joseph△Adjei认为语音转文字的服务是额外辅助学习的工具,当他看不懂手语或是从手语翻译那端漏掉讯息后,还可以看语音转文字来辅助。不过,他指出,目前还是有些字会分辨错误,像是“I”和“Eye”,但是有文字可以参考总比没有好。

此外,Joseph△Adjei还在智能手机上使用了微软的翻译App,当课堂讨论时,有时候同学讲话太快,不容易读唇语,微软翻译App则可以显示出同学讲话的内容,让他更能够参与课堂上的讨论。

?

来看看Joseph△Adjei怎么说:

?

tags:

上一篇  下一篇

相关:

助消费用户抵御勒索软件,微软Office 365的OneDrive新增档案还原功能

图片来源: 微软 微软周四(4/5)宣布,将把OneDrive商务版中的档案还原(Files△Restore)功能扩张至Office△365的家用与个人方案,同时于Office△365中提供勒索软件的侦测与复原功能,协助Office△365用户防御勒索软

微软要以联网解决方案助企业加速改造,未来4年砸50亿美元发展IoT

示意图,与新闻事件无关。 图片来源: 微软 微软周三(4/4)宣布,未来4年将针对物联网(Internet△of△Things,IoT)编列50亿美元的预算,以强化微软的技术平台及各种支援IoT的专案。负责云端平台的微软副总裁Juli

微软小冰学会对话的艺术,能和人类像朋友一样对谈

微软在自然语言技术上又有新突破,微软的社交型对话机器人小冰,现在学会人类对话的艺术,预测人类接下来可能会说的话,自然地与人类对谈,还能随时切换,执行不同任务。现今人类与虚拟助理Chatbot对话时,比较像是与

春假没事做吗?来来来,微软手把手教你开发人工智能应用

微软的线上专业计划(Professional△Program)添加两门课程,除了入门级的软件开发课程外,还有由浅入深的人工智能课程,帮助学习者强化软件以及人工智能应用的开发能力。入门级软件开发课程的第一堂课为逻辑与系统性

美国通过云端法案,美司法部要求最高法院撤销微软存取爱尔兰资料的诉讼案

示意图,与新闻事件无关。 美国国会与美国总统特朗普(Donald△Trump)在上周通过了可厘清海外资料存取的云端法案(Cloud△Act),该法案的建立有赖于微软拒绝将存放于爱尔兰资料中心的客户通讯纪绿交给美国政府所

站长推荐: