2024CTIS-文章详情页顶部

影视AI修复 :视觉大模型修复经典老港片 | 创新场景

最大的挑战不是算法技术,而是如何保留影片原有的艺术风格。

图片由AI生成

图片由AI生成

痛点

电影修复工艺繁杂琐碎,即便是经验丰富的修复师,也需要1个月的时间。火山引擎首次将视觉大模型应用于老片修复场景,借助其强大的生成能力和丰富的先验知识,实现修复效果在清晰度、色彩、流畅度和瑕疵消除等方面的全方位提升。

解决方案

针对老旧电影修复的特殊场景,火山引擎对视觉大模型做了三方面算法优化:在图像生成方面,通过控制模型的边界条件、强化高质量生成空间等手段,显著提升大模型的图像输出质量;在视频场景里,通过采用设计时域的自编码器、光流特征对齐、时域条件约束等技术手段,让大模型在修复的过程中可以使用前后帧的信息,更好地处理视频任务;火山引擎还联合Intel在算法和工程上进行了多项优化,显著提升大模型在4K场景下的处理效率并兼顾算力成本。

老港片修复最大的挑战不是算法技术,而是如何保留影片原有的艺术风格。火山引擎和中国电影资料馆不断测试和反复调优,才达到算法服务于艺术的理想效果。以色偏和色彩的处理为例,此前的AI算法能够完成和优化一系列客观上色彩的问题,但对于部分艺术色彩上的还原容易产生偏差,火山引擎摸索了一种AI加速艺术修复的方案,能通过学习人工修复片段的数据获得更理想的色彩方案效果,从而加速修复进程。

成效

整体来看,大模型生成能力强,修复效果优于之前的算法,画面细节更自然;同时,大模型具有非常强的信息结构化能力,在学习了海量数据后,可以在其中提炼出大量的知识并“存储”在模型参数之中,其生成空间更丰富,能够应对更多的修复场景。

「关于创新场景50」

场景不是案例,它更加精准、也更加抽象。数字化就是创新场景的不断叠加和迭代。

在此背景下,钛媒体重磅推出「创新场景50」评选,每年遴选并解读50个全行业与业务深度融合的创新性场景及其解决方案,并在钛媒体年度ITValue Summit 数字价值年会上隆重颁奖、深度交流。

目前场景正在征集中,更精准的解读、更广泛的曝光、更强大的品牌势能,欢迎你提出问题,更欢迎你留下解决的方法和工具。点击这里投递更多场景信息

转载请注明出处、作者和本文链接
声明:文章内容仅供参考、交流、学习、不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里

敬原创,有钛度,得赞赏

赞赏支持
发表评论
0 / 300

根据《网络安全法》实名制要求,请绑定手机号后发表评论

登录后输入评论内容

快报

更多

17:48

杭州萧山区、临平区发放新一轮购车补贴,共计7000万元

17:48

李强致电祝贺米舒斯京连任俄罗斯联邦政府总理

17:33

京基智农:截至4月底公司母猪存栏约11.46万头

17:32

中国汽研:国家车联网信息安全产品质量检验检测中心已基本完成建设

17:01

天娱数科:公司董事长、总经理被留置

16:54

抖音调整商业推广账号授权功能,涉巨量广告、巨量千川及本地推账户

16:49

阳普医疗:公司董事长兼总经理解除留置

16:00

海峡创新:收到《行政处罚事先告知书》 公司股票5月13日停牌一天

15:58

欧盟27国就对乌克兰安全承诺草案达成共识

15:56

中科蓝讯:2023年拟10派8.3,股权登记日5月16日

15:41

特发信息:收到行政处罚及市场禁入事先告知书

15:35

美国邮政服务计划将大批量包裹运输价格提高25%

15:28

国家防总:苏皖防汛抗旱形势严峻复杂,淮河流域或有较重汛情

15:26

因地磁风暴影响,SpaceX“星链”卫星服务出现退化

15:25

国盛证券:预计2024年各地陆续出台支持低空经济发展配套政策

15:10

雄安新区:以更大力度引进在京央企二、三级子公司或创新业务板块

14:46

上海市副市长陈杰:加快运用AIGC等新一代信息技术手段赋能品牌

14:43

2024中国品牌价值榜发布:字节跳动、腾讯、工商银行位列前三

14:41

中国南水北调原副总经济师樊新中接受审查调查

14:23

辽宁锦州一药企突发大火致2人死亡

5

扫描下载App