关注 | 国内首款少数民族语言AI合成主播首秀成功
7月17日,由蒙古文智媒体技术联合实验室与内蒙古奥云信息技术服务有限公司联合研发的国内首款蒙古语“奥云AI合成主播”小道首秀成功。
“‘奥云AI合成主播’以蒙古文或汉文新闻稿件为输入,通过蒙汉相互自动翻译技术自动生成蒙汉双语稿件,并通过AI合成技术自动生成与蒙古文稿件对应的主播视频和双语字幕,可以对虚拟主播音视频生产编排,一键生成蒙古语音视频智能播报。”参与研发的内蒙古大学计算机学院副教授飞龙介绍,该AI合成主播采用蒙古语语音合成、蒙汉机器翻译、人脸关键点检测、人脸特征提取、人脸重构、唇语识别、手势姿态合成等多项前沿技术,结合语音、图像等多模态信息进行建模训练后,生成与真人无异的蒙古语AI分身模型,进而提高信息表达和传递的效率。
据了解,“奥云AI合成主播”的技术成功突破对蒙古文智能信息化和自治区智媒体发展具有重要意义。