|企服解答
AIGC可以实现视频生成。
AIGC可以实现视频生成吗
在美国波士顿举办的科技峰会EmTech Digital上,一支名为“虎年春晚上的中国文化”的两分钟技术演示视频,是依托大模型技术由AI自动生成的,背后的技术来自百度研究院的智能视频合成平台VidPress。
百度美国研发中心副总经理李幸在演讲中详细解读了VidPress背后的技术。由百度研究院孵化VidPress它是业内第一个支持通用和大规模生产的智能视频合成平台。用户只需点击输入新闻图形内容链接,即可自动完成视频制作,整个制作过程可在几分钟内完成。
VidPress工作原理与编辑制作视频的步骤相似:先准备文本脚本,然后收集媒体材料,然后将材料处理成视频片段,将脚本配音与视频对齐,最后编辑检查。通过AI技术,VidPress可以实现文字分析和摘要、视频内容搜索、素材智能化处理、音视频对齐,以及智能剪辑等5个步骤的自动化。
用户输入文本内容后,平台将使用多种自然语言处理模型来分析文本内容。通过文本摘要模型,平台可以自动生成符合要求的解释词,适合视频呈现,并通过百度文本到音频服务(TTS)通过语义理解模型,平台识别故事中的关键信息。随后,根据对原文的理解,平台将通过自己的视频数据库和准确的搜索能力,智能聚合最新、最合适的内容,从同一主题相关新闻中提取更多的材料及其语义表征,充分保证材料内容的丰富性和相关性。对于收集到的视频素材,平台基于图像识别、视频内容理解等计算机视觉技术进一步解析和理解,自动剪切和精选视频素材。通过VidPress特有的时间轴对齐算法,选取出文本中的兴趣锚点,再将媒体片段与兴趣锚点进行相关度打分,将优质媒体片段优先放入时间轴,并结合适当的素材搭配组织,以此保证视频的整体观感和用户兴趣的持续激发。当时间轴生成完毕之后,数据转交给渲染器,从而生成一个完成的视频。
目前,AIGC(人工智能内容生产)正成为越来越重要的新型内容生产方式。这不仅会提升效率,也会打开更多内容创作的想象空间。
[免责声明]
文章标题: AIGC可以实现视频生成吗
文章内容为网站编辑整理发布,仅供学习与参考,不代表本网站赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题,请及时沟通。发送邮件至36dianping@36kr.com,我们会在3个工作日内处理。