从妙鸭爆火到老片修复,大模型已经开始干活了

自AIGC热潮涌现以来,敏锐的科技巨头们纷纷下场,推动着海内大模子赛道一起狂奔。

然而,手艺自己很难直接缔造价值,训练大模子只是一个起点,沸沸扬扬的“百模大战”,也或多或少夹杂了一丝“重复制造轮子”的意味。

对大模子而言,嵌入应用场景,从而实现成熟的商业化落地,才是终点所在——而随着大模子赛道的逻辑从训练转向落地,AIGC应用正逐渐在各个领域涌现。

7月,AI写真应用妙鸭相机爆火出圈,不仅在社交平台里疯狂刷屏,更是激起了科技语境的普遍讨论。许多此前不太熟悉科技语境的用户,也从中*次真切地感受到AIGC的魅力。

8月,抖音及火山引擎提议了“经典影像修复设计”,首次将AIGC视觉大模子应用于老片修复场景,设计修复100部香港老影戏,还原民众影象中的香港影戏,最初的、最清晰的容貌。

这意味着,大模子已逐渐走出了“实验室”,走入人们的视野。

妙鸭相机与老片修复,藏着大模子的谜底

妙鸭相机的爆火,对当下仍困于落地的大模子赛道无疑有着启示作用。

着实,从手艺路径来看,妙鸭相机背后的AIGC图像天生能力,并没有太高的手艺壁垒,亦不及Midjourney、Stable Diffusion等主流应用周全。

只是,诸如Midjourney等应用有着极高的上手门槛,需要用户不停试探提醒词(Prompt),在此历程中难免发生消费障碍。

而妙鸭相机则将前述繁琐的步骤封装、简化为一键操作,用户仅需上传一张正面半身照,以及不少于20张的弥补照,便能凭证设定模板一键天生林林总总的写真,易用性大幅提高。

从中不难窥见,前沿手艺若想实现大规模落地,不仅需要找准应用场景,更需解决响应场景过往的痛点与难点。这正是火山引擎切入“老片修复”场景的主要缘故原由。

一直以来,老片修复都是影像领域的主要议题,凭证来自65个国家跨越130影戏资料馆统计,影戏自降生以来平均存活率不外 10%。

背后的逻辑在于,早期影戏拍摄后多数储存于胶片上,可胶片作为储存介质可谓相当懦弱,不仅对储存环境的温度、湿度要求极高,亦极易在使用、搬运等历程遭受物理和化学损伤,从而发生褪色、撕裂、脏点、霉变、酸变等问题。

一个简朴的例子,现在许多早期影戏的画面色调经常偏红或偏紫,除却导演自己艺术表达的因素,更多是影戏胶片因保留欠妥而患上醋酸综合征的显示——胶片褪色变红的同时,还会释放出刺鼻的酸味,加剧保留环境的恶化。而酸化一旦最先,便很难完全逆转。

此外,影戏在制作、分发历程中,胶片往往会履历频频翻印,每次翻印都市带来细微的画面细节损失,而随着翻印次数增添,画质衰减将愈发严重。基于种种因素,多数港片的画面显示远不及当下的高清视频,用户的观影体验难言友好。

另一方面,传统修复手艺主要仰仗于人工举行——先将胶片转制为数字名堂,再由修复师一帧一帧地处置画面上的霉斑、污渍等问题。

然而,一部影戏通常包罗数十万帧画面。若完全依赖人工修复,不仅成本高昂,效率也难以令人知足。以《东邪西毒》为例,王家卫曾回忆道,由于胶片受潮,那时的修复花费了整整四年时间。只管云云,照样由于修复不实时,使《东邪西毒*版》的少少数片断仍有花片的情形泛起。

换言之,传统影像修复手艺,难以举行大规模修复。而若无法实现规模化,影戏资料馆修复胶片的效率,或许难以追赶数十万卷胶片在时光荏苒下逐渐褪色的速率。

在此靠山下,AIGC视觉大模子,成为了影视领域老片修复“心病”的解药。

火山引擎的大模子答卷

这八个区县,「击败」全国90%的城市

这八个区县,「击败」全国90%的城市,对于一座城市而言,城区经济代表着区域经济发展“火车头”,亦是牵引城市能级、形象提升的重要力量。从这一维度而言,如何理解顶级城区正在经历的变化?面向下半年,这些区县“天花板”又将如何实现再突破?

行使AI深度学习算法修复影像,着实并不是什么新鲜事。早在几年前,海内影像垂直论坛上,便已有影像发烧友通过深度学习算法提升老片分辨率,以提升画面观感。

然而,已往的影像处置算法虽能在一定水平上起到提升画质的作用,但并不足以支持严肃的商业应用场景,以现阶段基于Stable Diffusion的开源大模子为例,其主要针对图片天生义务,对偏向于退化修复的老片修复场景的针对性较差,很难简朴套用。

基于此,火山引擎在现有成熟大模子的基础上,叠加了自身的老片修复网络,对模糊、失焦、人像、色彩等常见修复问题举行了针对性优化,使得大模子可以充实感知和顺应老片场景。

一个简朴的例子,通报角色的情绪状态和心里天下的人像镜头,在影戏语言中尤为主要。对此,火山引擎针对差异画面质量的影片,自顺应使用了差异人像解决方案。

针对制作时间久远,影片画质较差的老影戏,火山引擎使用基于天生式的人像修复模块,在保持人像真实特征的条件下,举行高清五官重修;针对中高质量的人像,火山引擎则使用了人像超清模块,优化五官清晰度,实现了对睫毛、眉毛、发丝和肤质等脸部细节*水平地还原和纹理增强。

值得一提的是,除了面向泛化老片修复场景的调优,火山引擎此次更是针对港片的特征,打磨出了更垂直细分的修复能力。

以武打场景为例,差异于外洋影戏“直截了当”的斗殴,打戏作为贯串香港影戏黄金年月的怪异标志,更像是华美的舞蹈,强调每一招每一式的对垒,有着极强的辨识度。

可武打场景,对AIGC模子而言却是不小的磨练。一方面,画面中迅速转变的动作和快速运动,往往会造成较大的帧间位移,进而导致光流模子的准确性下降,从而发生拖影;另一方面,庞大的武感动作更容易导致插帧效果的失真,发生伪影,直接影响了观众的视觉体验。

为此,火山引擎自研了智能插帧算法,通过对前后帧的内容举行光流估量,凭证光流信息将前后帧像素转换到中央帧,然后举行整合,天生中央帧,提升视频帧率;通过针对性优化,降低处置大运动时的盘算肩负,从而提升模子的稳固性和效果。

而武侠元素,向来是香港影戏的主要组成部门,但由于早期影戏拍摄制作方式较为简陋,部门武打排场往往会有威亚的部门残留,从而损坏了画面的完整性。对此,火山引擎行使去噪点和去划痕等算法批量处置画面瑕疵的同时,亦针对威亚优化了去划痕算法,在消除威亚痕迹的同时保证了画面主体人物的完整性。

据中国影戏资料馆副馆长张小光先容,此次影戏修复也约请了影戏的主创职员介入到修复流程中,既通过手艺还原影像的“形态”,亦还原影片原本的“灵魂”,使其“修旧如旧”。

背后的逻辑在于,影戏修复并不仅是前沿手艺的找寻落地场景的实验,更是一种商业行为。而“修旧如旧”,正是经典影戏触动民众情怀、叫醒团体影象,从而提升商业化价值的要害。从中不难窥见,火山引擎务实的手艺观。

飞入寻常国民家

只管AIGC初期发作初期,互联网语境曾困于手艺与应用的猛烈争论,但妙鸭相机与火山引擎却证实了,二者着实并纰谬立。

一方面,前沿手艺的演化不停扩展着应用的界线,既使普罗民众无需肩负写真馆高昂的价钱,便能看到自己的多元面目;也使昔日陈旧的影像脱节了生计危急,穿越时空焕发了新的生命力。

另一方面,前沿手艺从研发到落地往往需要履历较长的周期,已往更多活在“实验室”里、商业化遇冷的大模子,更是需要这些深入人心的内容来赋予它们生命,以此真正走入人们的生涯。

面临前沿手艺落地的桎梏,玩家们不决绝出的答卷,对行业无疑有着主要的参考价值。

出圈的妙鸭相机,一改已往前沿手艺落地“苦大仇深”的面目,通过贴近通俗用户的场景与更易上手的功效,以更活跃、轻快的姿态切入了C端市场。

无独占偶,火山引擎亦在不停探索落地场景。早在2021年,火山引擎便基于画质增强手艺,将哪吒、葫芦娃、黑猫警长等童年影象中的经典动画修复为4K版本;去年,其则是使Beyond乐队在红磡体育馆的演唱会,时隔30多年于民众视野中重现。

换言之,从还原经典动画,到演唱会重映,再到港片修复,有如一个个锚点,昭示着火山引擎在商业化应用领域的落地生根。时至今日,火山引擎已打磨出不俗的手艺力,并已在内部营业线以及外部企服市场,实现了规模化实践与批量规模化生产应用。

归根结底,妙鸭相机也好,火山引擎也罢,均在通过更多元、天真的应用,解构了AIGC的科技高墙,使活在科技语境里的前沿手艺,演变为了用户触手可及的现实。可以预见,在这批务实派玩家的动员下,AIGC未来或将以更厚实的形态,飞入寻常国民家。

【本文由投资界相助同伴微信民众号:光子星球授权公布,本平台仅提供信息存储服务。】若有任何疑问,请联系(editor@zero2ipo.com.cn)投资界处置。

原创文章,作者:APP软件开发,如若转载,请注明出处:https://www.yuanma666.com/archives/59671.html

(0)
APP软件开发APP软件开发
上一篇 2023年8月18日
下一篇 2023年8月18日