新知榜官方账号
2023-11-23 22:20:15
近日,弗吉尼亚理工学院和Facebook的科学家研发出一款最新的AI算法,该算法可以让视频里任意物体完全消失。该算法在视频去水印、物体移除、画面扩展等方面均有出色地表现。
该算法通过一种叫做光流引导的方法实现。光流法(OpticalFlow)描述的是观察者眼里物体的运动情况,观察者可以是肉眼,也可以是摄像头。光流法据此来估计物体发生了怎样的运动,从而把它从背景里抠掉。此外,AI还需要对扣掉的空白部分进行修补,通过视频前后帧中已有的光流,将空白的光流平滑推测出来,并且在光流指导下对空白处进行色彩修复。
与之前的技术相比,该算法通过在梯度域进行操作来生成无痕结果。以往的基于光流的方法往往无法保持运动边界的清晰度,使得修复后的画面不够平滑。论文的方法首先提取并完成运动边缘,然后使用它们引导具有锐利边缘的分段平滑流完成。另外,由于此前的方法是在相邻帧之间的局部光流连接中传播色彩,但并非所有视频中被水印、物体遮住的区域都可以通过这种方式恢复,就会造成伪影。论文的方法通过引入非局部流连接来缓解这个问题,算法从光流当中提取出轮廓线,如果提取的边界不完整,就再把被遮挡部分平滑地修复出来,使得视频内容能够在运动边界上传播。
光流法的精进是在底层视觉核心算法上的突破,依托该算法,从体感上视频修复已经可以做到无痕抹除水印、无恒补全画面残缺,在目标识别和影视后期中,具备巨大发挥空间。
相关工具
相关文章
相关快讯
推荐
300美元的AI男友来了!马斯克的情感生意从女友做到男友
2025-08-01 17:56
Agent智能体:2025年企业新员工,月薪仅需一度电?
2025-07-30 17:49
国产GLM-4.5把AI价格打到地板价,实测强到离谱!
2025-07-30 09:08
用AI批量生成治愈系漫画,月入2000+
2025-07-29 09:59
千亿市场规模背后,AI短剧商业化迎来爆发期?
2025-07-17 09:19
15个作品涨粉26万!AI历史账号又出王炸案例!
2025-07-09 09:37
亲测真香!这6个AI工具让工作效率翻倍,同事追着问链接
2025-06-17 16:21
FLUX.1 Kontext 一出,AI生图领域 “地震” 了!
2025-06-06 15:38
用Deepseek写AI绘图提示词,像呼吸一样简单!
2025-02-19 16:12
你以为AI绘画是黑科技?其实早成了“路边摊生意”!
2025-02-19 10:15