换天造物,秒变科幻大片!华人学者推出视频修复AI新玩法
本文插图
作者 | 贝爽
AI修图到底有多强?
前几日 , Adobe Max 大会刚刚结束 , Photoshop 2021版便登上了国外各大媒体版面 。
其原因是 , 新版Ps工具中内置了AI驱动工具 , 诸如“天空置换”等高难度修图问题 , 现在点点鼠标就可以轻松实现 , 而且效果远超手动操作 。
无论是拍人拍景或是其他 , “天空”都可以说是摄像中的关键元素 。 比如 , 一张平平无奇的景色图加上落日余晖的天空色调 , 是不是有内味了?
本文插图
对于短视频爱好者来说 , 如果也能达到如此处理效果岂不是更佳?
没错 , 今天小编就是要给大家介绍一款基于原生视频的AI处理方法 , 不仅可以一键切置换天空背景 , 还可以打造任意“天空之城” 。
1 AI视频修复新玩法
这项AI处理方法来自密歇根大学的一位华人博士后的最新研究 。 该方法基于视觉技术可一键调整视频中的天空背景和天气转换 。
比如 , 《星际迷航》等科幻电影中经常出现的浩瀚星空、宇宙飞船 , 也可以利用这项技术融入随手拍的视频中 。
本文插图
公路片秒变科幻片 , 画面毫无违和感 。
视频中的蓝色的天空背景也随飞船变成了灰蒙蒙的色调 , 一种世界末日的即视感有木有?
本文插图
当然它的玩法还不止如此 。
动漫迷也可以创建自己的移动城堡 。 喜欢《天空之城》《哈尔的移动城堡》的朋友应该对这一幕应该非常熟悉 。
本文插图
又或者在视频中挂一个超级月亮 , 又是另一番景象 。
本文插图
好像只要脑洞够大 , 利用这项AI技术 , 视频创作就有无限种玩法 。
另外 , 它还具备天气转换的功能 , 比如晴空万里、阴雨绵绵、雷雨交加等各种天气都可以在视频中随意切换 。
本文插图
本文插图
喜欢玩Vlog的朋友听着是不是非常心动了?研究人员表示 , 现在已经在考虑将其制作成插件/脚本的形式 , 方便相关从业者或行业使用 。
在此之前 , 这项技术的AI代码已经在Github开源 , 懂技术的朋友可以优先安装体验了~
本文插图
Github地址:https://github.com/jiupinjia/SkyAR
2 技术原理
不同于传统研究 , 研究人员提出了一种完全基于视觉的解决方案 。 它的好处就是可以处理非静态图像 , 同时不受拍摄设备的限制 , 也不需要用户交互 , 可以处理在线或离线视频 。
上述实验视频 , 均是通过手持智能手机和行车记录仪在野外拍摄的 。 经过该方法处理后 , 其在视频质量、运动动态、照明转换方面都达到了较高的保真度 。 比如在浮动城堡 , 超级月亮样例中 , 使用单个NVIDIA Titan XP GPU卡 , 该方法可以在输出分辨率为640 x 320时达到24 fps的实时处理速度 , 在854 x 480时达到接近15 fps的实时处理速度 。
- 心迪的穿搭衣橱|今年秋冬“复古风”又火了!多尝试这3种元素,秒变街头潮人
- 柳絮时尚|柳絮时尚:一身少女系连身裙,辣妈秒变女神
- 充电头网 让苹果MagSafe秒变立式磁吸无线充,市面惊现十元廉价支架
- |让老师压力山大的课本插图,杜甫“全副武装”,墨子秒变俏萝莉!
- 动漫星际|《天官赐福》花城歪扎马尾秒变成楚雨荨,发量堪忧太危险
- 湖南卫视我是大美人|女明星最爱的细软塌发救星!8秒让鸡窝头秒变柔顺飘逸!用一次就爱上了!
- 陈小春|37岁应采儿产二胎后恢复惊人 10天秒变蚂蚁腰
- 吴声造物吴声:忘掉边界,共创商业地产「新物种浪潮」
- 手机办公达人资讯大神偷偷收藏的6个实用app,能让手机秒变黑科技,请低调收藏
- 时尚|金星采摘都这么会穿,黑T恤搭阔腿裤显霸气,戴上遮阳帽秒变优雅