文字|于蕾 来源|智能相对论(aixdlun)。 今年世界杯至今最大的冷门无疑是卫冕冠军德国0-1不敌墨西哥,几乎0-2甚至0-3。世界杯的魅力在于,各种看似不可能的事情总会发生,所以留下了很

AI剪辑的“so great” 和“too weak”

文字|于蕾

来源|智能相对论(aixdlun)。

今年世界杯至今最大的冷门无疑是卫冕冠军德国0-1不敌墨西哥,几乎0-2甚至0-3。世界杯的魅力在于,各种看似不可能的事情总会发生,所以留下了很多精彩的瞬间让球迷们津津乐道。

如何快速组装这些奇葩,第二次引爆粉丝?

某视频网站在6月14日世界杯开幕前正式发布了最新的“AI黑科技”——AI直播剪辑官,参与了世界杯精彩短视频的直播剪辑。其实在年初的2018足协杯资格赛中,就应用了人工智能编辑,完全自动化,无需人工审核、实时抓取、实时编辑。

不仅仅在体育领域,AI剪辑最早应用于电影制作,但两者在应用上存在一些差异,并呈现出一系列问题,下面笔者将对此进行分析。

AI剪辑体育视频《太棒了》,剪辑电影《太弱了》。

说到电影剪辑,不得不提王家卫。据说他拍电影不需要剧本,靠后期剪辑。在电影《花样年华》中张可颐接受记者采访时,他坦言,“拍他的戏很无奈,因为你永远不知道他接下来会怎么走,你根本无法准备。不过,每次看完片段,都会很惊讶,也很开心。”

这充分说明了剪辑在电影中的重要地位,类似于观音菩萨吹响最后一口气让泥人成真。

运动往往是体育锻炼,AI更多的是人脸识别和剪辑前学习相关动作,但电影是对话艺术,不仅是人脸识别,还有语音语义识别。同时,运动是在既定的规则框架下进行的,所以AI不需要花时间判断是否是犯规,但是AI剪辑电影之前,需要判断表演好坏和拍摄质量,还需要能够识别打卡镜头。两者的难度系数可想而知。

因此,目前AI剪辑在体育领域的使用远高于电影领域,更多的是作为电影剪辑的辅助。

早些时候,IBM的人工智能系统沃森为摩根编辑了预告片,细节在v.qq.com/x/page/n0353003wy9.html.被戳中

具体过程是给沃森看100个恐怖电影预告片,准确的说,他们是在剪辑或者分离这些电影的场景。沃森分析了这些预告片的画面、声音和构图,并标注了相应的情绪。随后,工作人员将电影《摩根》导入,华生迅速挑选出10个场景,组成一部6分钟的电影。最后,在编辑的帮助下,这些镜头被编辑成最后的片段。

预告片并不优秀,甚至有点“土”但不“有品位”。但它在营销和生产周期上的意义深远,原本应该从10天持续到1个月的生产周期缩短到了24小时,获得了极大的曝光。除此之外,没有什么特别的意义。《摩根》于2016年上映。从那以后,很少听说电影用人工智能做预告片。

AI编辑更多的是“成品”而不是“作品”。

据说,战地记者在拍摄时,由于不熟悉情况,有时得不到第一手资料。这个时候,让当地人去拍就容易多了。对于看新闻的人来说,只要把新闻事件完整呈现出来,就不会太在意视频是否抖得厉害,画质是否清晰。

显然,对于很多粉丝来说,呈现比创造更有意义。及时看到世界杯的进球和精彩收藏是最重要的。有了足够刺激的音乐,粉丝们就不会再在意别的了。

2018年NBA总决赛尘埃落定后,某视频网站实时推出了杜兰特的《十一年精彩回顾》。粉丝对这部电影的要求不亚于一部电影的标准,但扪心自问,绝对不是一个精彩的片段。整个过程节奏平淡,层次感不清晰。看完之后,心里没有一丝波澜。好的编辑可以直接戳人心,而AI编辑显然离优秀的编辑差远了。AI编辑只是“成品”而不是“作品”。

AI编辑的发展轨迹。

电影剪辑不仅重要,而且程式化和耗时。AI的加持无疑有助于提高视频编辑的效率。据aixdlun分析师于蕾介绍,AI编辑一般遵循以下三条运行轨迹。

第一步:图片识别,缩短素材收集时间。

这是AI对视频最基本的认知,这里的AI主要识别视频画面中的物体。以世界杯为例,主要是实时定位和检测高速运动中的明星面部。比如这个视频,几秒钟出现的明星是梅西,这个视频是阿圭罗等。,可以提取他们的视频。

2016年,Miles Deep使用了一种特殊的深度卷积神经网络,可以取其精华,去其糟粕,让你看黄色电影更加方便。它可以删除所有不包含性接触的场景,或者编辑和删除特定的性行为。它是分类或编辑色情视频的好工具。大家应该不会感兴趣,但是你可以戳github.com/ryanjay0/miles-deep学习。

另一方面,有数据显示,2025年全球数据量将达到163ZB,这将使人们整理视频数据越来越麻烦。但是对于AI来说,已经很容易从整个网络中提取出包含特定关键词的视频片段,进行截取,统一整理。AI在这一步类似于一个小秘书。

第二步:了解镜头语言,学习人体镜头剪辑。

AI需要将视频深入理解为镜头的内容和镜头语言的使用,学习编辑规则,通过深度学习模仿人类的编辑技巧,实现基础编辑。比如在世界杯中,需要准确识别进球、射门、角球、红牌、黄牌、庆祝等各种动作。,模仿者自动剪辑出进球、射门、犯规、传球人等精彩片段。

比如我们经常吐槽粗制滥造的网剧,素材和电影的比例大概是10: 1,编辑可能不会花那么多精力去剪辑。但是真人秀不一样,素材和成本的比例惊人。比如《爸爸在哪里》的摄制组拥有40多个座位,一个大全景、一个大特写、一个小全景等多个场景同时启动。每个90分钟的节目有1000多个小时的素材。前期从几十个座位的素材中快速找到最终剪辑需要的镜头是一个费时费力的过程,而AI的使用可以辅助人们进行筛选,从而简化了流程。

第三步:在一定程度上替代人,做一些创造性的工作。

这就要求AI能够自行梳理素材之间的链接,并根据学习到的镜头组装规则自动为特定目标剪辑视频。典型的好莱坞电影拍摄手法是以长镜头为主拍,然后分别拍摄特写镜头、反应镜头、切入镜头和切出镜头。最后,编辑根据要求进行编辑。

斯坦福大学和Adobe的人工智能可以自行同步同一场景的视频。然后自动识别和分析演员所体现的人物。最后,AI根据导演的风格要求,根据数据库中成熟的剪辑风格和镜头语言,自动选择和组装视频。

图中显示了四种不同形式的剪辑。

它只需3秒钟就能剪辑出一段71s的视频,而一个有经验的编辑可能需要几个小时。但是编辑质量的关键点不细致,很细腻。

结局

毫无疑问,AI编辑已经越来越广泛地渗透到文化体育行业。自从第一部电影诞生以来,影视行业已经变得成熟和便捷。剪辑是以一群编辑的名字命名的,他们用剪刀剪下视频电影,然后把它们拼接成图像。随着影视数字化,编辑的工具从剪刀变成了电脑。AI编辑让编辑的工具更方便,帮助他们创作更多更好的作品。

然而,在让编辑工作更加便捷的同时,编辑的职业门槛也在不断降低。会拍视频的人越来越多,电影电视的制作周期可能会更短。至于质量?只为粉丝买单。

[结束]

智能相对论(微信id:aixdlun):深挖人工智能之井,判断咸味,分辨黑白,分辨vb深度。重点领域:AI+医疗、机器人、智能驾驶、AI+硬件、物联网、AI+金融、AI+安全、AR/VR、开发者及其背后的芯片、算法和人机交互。

上一篇:AI人工智能是如何改变视频流的?    下一篇:AI卓伟之李小璐微博里的那只手    

Powered by 国产一这里只有精品 @2018 RSS地图 HTML地图

2013-2021 版权所有