该AI可以完美地复上海立信会计金融大学制印度语言的视频
2022-06-12 16:26:23 来源：盛楚鉫鉅网
印度公民在互联上观看了许多视频。依据《华尔街日报》的一份陈述，印度人均匀花费超越8.5GB的移动数据，其间大部分用于视频。 YouTube上一年表明，超越95%的内容消费是运用区域言语。很天然地，人们对文言视频很感兴趣，可是并不是一切的创作者都知道一切印度语。
一种处理方案是配音。上星期，就在Parasite获得了奥斯卡金像奖之后，母亲琼斯宣称配音优于翻译字幕。可是让我告知你，这很糟糕。我看过许多用印地语配音的英语电影，我要么受不了，要么死于笑。口型同步一般不可用，配音好像很不天然。
现在，来自印度南部城市海得拉巴的世界信息技能学院的研讨人员开发了一种新的AI模型，该模型能够将视频从一种言语翻译成语音同步并以另一种言语正确同步。
该小组表明，咱们现已具有从视频中获取翻译的文本或语音输出的技能。可是，配音进程中会丢掉视觉转化(如嘴唇移动)。为了处理这个问题，印度研讨人员开发了一种名为LipGAN的新式对抗性生成络(GAN)。虽然它能够匹配原始视频中翻译文本的唇部动作，但它也能够校对配音电影中的唇部动作。
为了翻译视频，该模型运用语音辨认来转录视频中的语音。然后，它运用为印度言语练习的专门模型来翻译文本，例如从英语翻译成印地语。然后语音辨认模型将其转化为语音。语音到语音翻译再加上LipGAN，构成了整个模型。研讨人员指出，他们的翻译模型比Google Translate更精确。
简历教授IIIT-H研发部主任Jawahar表明，这项技能将有助于以地区性言语创立更多内容：
从头开始手动创立本地言语内容，乃至手动翻译和仿制现有视频都无法以创立数字内容的速度扩展。这便是为什么咱们期望它是全自动的。
麻省理工学院和其他享有盛誉的组织针对各种主题制作了精巧的视频，仅因他们无法了解口音而无法为更多的印度观众所用。忘了农村人，即便我也不明白!
团队弥补说，该模型仍然在视频中移动或多张面孔方面挣扎。除了处理这些问题外，团队还期望在翻译后改进面部表情。
咱们现已看到GAN仅运用一张相片就能够重塑脸部或身体的动作。可是大多数研讨是用单一言语进行的。最有可能是英语。这些AI模型经过了几回迭代，才变得令人信服。因而，虽然上述模型有其缺陷，但它是运用多言语模型的少量GAN之一。跟着时刻的推移，它肯定会跟着更多数据的改从而改进。
上一年，进修假货因其负面用处而广为人知。可是，用于教育或文娱意图的视频修正AI是该技能的重要用例。这个模型便是一个很好的比如。
“走马消息,分享精选全球有价值的财经新闻”的新闻页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题，请与
我们联系删除或处理，客服邮箱，稿件内容仅为传递更多信息之目的，不代表本网观点，亦不代表本网站赞同
其观点或证实其内容的真实性。
- 声音提醒
- 60秒后自动更新
中国8月CPI年率2.3%，预期2.1%，前值2.1%。中国8月PPI年率4.1%，预期4.0%，前值4.6%。
08:00【统计局解读8月CPI：主要受食品价格上涨较多影响】从环比看，CPI上涨0.7%，涨幅比上月扩大0.4个百分点，主要受食品价格上涨较多影响。食品价格上涨2.4%，涨幅比上月扩大2.3个百分点，影响CPI上涨约0.46个百分点。从同比看，CPI上涨2.3%，涨幅比上月扩大0.2个百分点。1-8月平均，CPI上涨2.0%，与1-7月平均涨幅相同，表现出稳定态势。
08:00【 统计局：从调查的40个行业大类看，8月价格上涨的有30个 】统计局：从环比看，PPI上涨0.4%，涨幅比上月扩大0.3个百分点。生产资料价格上涨0.5%，涨幅比上月扩大0.4个百分点；生活资料价格上涨0.3%，扩大0.1个百分点。从调查的40个行业大类看，价格上涨的有30个，持平的有4个，下降的有6个。 在主要行业中，涨幅扩大的有黑色金属冶炼和压延加工业，上涨2.1%，比上月扩大1.6个百分点；石油、煤炭及其他燃料加工业，上涨1.7%，扩大0.8个百分点。化学原料和化学制品制造业价格由降转升，上涨0.6%。
08:00【日本经济已重回增长轨道】日本政府公布的数据显示，第二季度经济扩张速度明显快于最初估值，因企业在劳动力严重短缺的情况下支出超预期。第二季度日本经济折合成年率增长3.0%，高于1.9%的初步估计。经济数据证实，该全球第三大经济体已重回增长轨道。（华尔街日报）
08:00工信部：1-7月我国规模以上互联网和相关服务企业完成业务收入4965亿元，同比增长25.9%。
08:00【华泰宏观：通胀短期快速上行风险因素主要在猪价】华泰宏观李超团队点评8月通胀数据称，今年二、三季度全国部分地区的异常天气（霜冻、降雨等）因素触发了粮食、鲜菜和鲜果价格的波动预期，但这些因素对整体通胀影响有限，未来重点关注的通胀风险因素仍然是猪价和油价，短期尤其需要关注生猪疫情的传播情况。中性预测下半年通胀高点可能在+2.5%附近，年底前有望从高点小幅回落。
08:00【中国信通院：8月国内市场手机出货量同比环比均下降】中国信通院公布数据显示：2018年8月，国内手机市场出货量3259.5万部，同比下降20.9%，环比下降11.8%，其中智能手机出货量为3044.8万部，同比下降 17.4%； 2018年1-8月，国内手机市场出货量2.66亿部，同比下降17.7%。
08:00土耳其第二季度经济同比增长5.2%。
08:00乘联会：中国8月份广义乘用车零售销量176万辆，同比减少7.4%。
08:00央行连续第十四个交易日不开展逆回购操作，今日无逆回购到期。
08:00【黑田东彦：日本央行需要维持宽松政策一段时间】日本央行已经做出调整，以灵活地解决副作用和长期收益率的变化。央行在7月政策会议的决定中明确承诺将利率在更长时间内维持在低水平。（日本静冈新闻）
08:00澳洲联储助理主席Bullock：广泛的家庭财务压力并非迫在眉睫，只有少数借贷者发现难以偿还本金和利息贷款。大部分家庭能够偿还债务。
08:00【 美联储罗森格伦：9月很可能加息 】美联储罗森格伦：经济表现强劲，未来或需采取“温和紧缩”的政策。美联储若调高对中性利率的预估，从而调升对利率路径的预估，并不会感到意外。
08:00美联储罗森格伦：经济表现强劲，未来或需采取“温和紧缩”的政策。美联储若调高对中性利率的预估，从而调升对利率路径的预估，并不会感到意外。
08:00美联储罗森格伦：鉴于经济表现强劲，未来或需采取“温和紧缩的”政策。
08:00
