[讨论] Google AI 降噪算法 RawNeRF

楼主: chickengod (鸡大侠)   2022-08-24 16:29:41
Google 发表的 AI 降噪算法 RawNeRF
是 NeRF (Neural Radiance Fields)
针对低光照环境研发的版本
可以从数十或数百张 有噪点 的多视角 RAW 照片
重建场景并降噪 产生相当清晰的照片
降噪效果好的不可思议
夜拍也没有例外
demo 影片:
https://bmild.github.io/rawnerf/img/grid2x2_crf25.mp4
https://www.youtube.com/watch?v=JtBS4KBcKVc
paper:
https://bmild.github.io/rawnerf/
如果能应用在 pixel 手机上 夜拍应该无敌了吧..
来源:
https://techcrunch.com/2022/08/23/nerf-in-the-dark/
作者: skyangle0607 (skyangle)   2022-08-24 16:34:00
难得会是pixel7的黑科技!?
作者: abc21086999 (呵呵)   2022-08-24 16:36:00
反观其他厂商,什么算法都掏不出来
作者: nekoares   2022-08-24 16:41:00
Pixel现在需要的是善用新的镜头,而不是更高级的降噪Pixel6a用旧的镜头照出来跟P6P一样的照片,笑死人50M的新镜头形同虚设
作者: weepingkito (哭泣的牙签)   2022-08-24 16:49:00
夜景模式要定住不动 NERF模式要原地划圈
作者: skyangle0607 (skyangle)   2022-08-24 16:49:00
楼上讲反了吧,现在pixel需要的是新的算法,就的算法让新感光元件拍出来跟旧的没两样
作者: nekoares   2022-08-24 16:54:00
不管是新的算法还是怎样,但看到RAW档照得这样好,结果AI跑出来照片都一样实在很心酸。P6相机可以更好的尤其现在P6照人像的过度修图感实在太over
作者: zaa0210 (ZAA)   2022-08-24 16:57:00
再降下去....单眼都快没行情了...orz
作者: aegis43210 (宇宙)   2022-08-24 17:01:00
P7P的卖点来了
作者: cluster   2022-08-24 17:10:00
pixel gogo!
作者: abc0922001 (中士abc)   2022-08-24 17:16:00
我有看到,超酷的
作者: ufo206062 (金恩)   2022-08-24 17:17:00
看起来这算法蛮猛的
作者: ymx3xc (U文多多)   2022-08-24 17:32:00
太神啦 谷哥!!!
作者: sx4152 (呵呵)   2022-08-24 17:44:00
看起来有料 调整过后像是游戏画面
作者: tnit (碌碌碌碌)   2022-08-24 17:45:00
好神奇 希望会在Pixel 7出现
作者: sakala (Akou)   2022-08-24 17:46:00
所以我说 什么时候能用?
作者: ayuhb (ayuhb)   2022-08-24 17:50:00
希望这次google能锁好,不然又被一堆破机偷去用
作者: Gauss (Gaussss_Physics)   2022-08-24 17:54:00
单眼真的要没落了
作者: wed1979 (舞抖米哲夭)   2022-08-24 17:56:00
代工厂太雷,又热续航又差,镜头跟sony一样热毙,再好的算法有用吗?
作者: opengaydoor (开甲门)   2022-08-24 18:00:00
ALL IN GOOGL囉
作者: kai08130623 (Sadaharu)   2022-08-24 18:08:00
反串还没没落
作者: avans (阿纬)   2022-08-24 18:16:00
推 好厉害的演算,虽然画面感觉太完美,有点像游戏中画面w
作者: tommy123310 (tommy)   2022-08-24 18:31:00
google可以把算法套入街景做成散步模拟器吗
作者: fiiox3 (飙速宅男)   2022-08-24 18:57:00
镜头素质有限,要跟单眼比还早...
作者: tk1211 (THE FRUSTRATED)   2022-08-24 19:06:00
等你AI快门拉到1/125以上也有这种效果再来 zzzzz
作者: riverScorpio (河蝎)   2022-08-24 19:07:00
哇,这运算量很可怕耶
作者: mimic13 (米米客)   2022-08-24 19:09:00
这满猛的了吧
作者: bcs (= ="frailty..gggg XD)   2022-08-24 19:12:00
还好,GitHub有py code算的能多慢。重点是其它篇的AI DENOISE,现在移植版叫不出ai denoise也没有tpu ,Google 不乎让他们玩。
作者: killdidee (Fafafaa)   2022-08-24 19:23:00
厉害
作者: windowsliu (Ptt2me)   2022-08-24 19:29:00
pixel要加强的是系统整合能力。解bug能力
作者: Hakan (夫人,我说不要)   2022-08-24 19:43:00
感觉很像游戏画面馁XD
作者: rhox (天生反骨)   2022-08-24 19:44:00
现代黑魔法
作者: fujisawa (Feel the RUSH)   2022-08-24 19:47:00
以后就不是拍照片 是画照片了吧
作者: xzcb2008 (非常森77牛)   2022-08-24 20:34:00
我还是买个机体用个好镜头就好...
作者: rz759 (rz)   2022-08-24 20:38:00
反串还没没落xD不过看下来倒是满可以期待的
作者: AAAWhoAmI   2022-08-24 21:04:00
谷歌好狠
作者: siegfriedlin (齐格飞)   2022-08-24 21:07:00
品质跟全片幅还是不能比啦 但若能用在手机上已经很猛了 靠cpu来补刚刚好
作者: longtimens (阿卷)   2022-08-24 21:09:00
算法强 手机一堆bug不能用 算法有跟没有有什么区别
作者: nathan2000 (风间仁)   2022-08-24 21:48:00
讲的好像每个人都全片幅出门动不动就调色修图,现在连入门级的可换镜都快死光了...
作者: louis925 (稚空)   2022-08-24 22:18:00
这要商品化还是满困难的,主要是 nerf 需要知道每张图拍摄的位置和角度,然后通常需要拍100张不同角度的照片
作者: fiiox3 (飙速宅男)   2022-08-24 22:19:00
就要求品质的继续用单眼咯,说单眼死也太早...等婚摄都用手机再说吧
作者: louis925 (稚空)   2022-08-24 22:19:00
最后是计算量现在比传统的neural network 方法高太多了学术研究时,大多都是用桌机GPU跑几分钟才出来的nerf 也还无法处理有物体移动的场景
作者: oneheat (等待)   2022-08-24 22:22:00
数十张,哈哈哈,是打算转多久
作者: Qlily (lilyQ)   2022-08-24 22:29:00
能解码马赛克再说
作者: oldk13 (OldK)   2022-08-24 23:11:00
要认真计较画质的不会对手机有啥期待,还不用扯入门级相机。厂商主打的傻瓜auto正好被手机打爆,再正常不过
作者: hsyr (北极)   2022-08-24 23:26:00
无反射镜的微单要没落了
作者: nathan2000 (风间仁)   2022-08-24 23:56:00
婚摄你拿手机拍拿的到钱???低光录影跟低光拍动态物体目前就小感光的死穴,怎么也算不出来,手机再加一堆补光周边就直接拿单眼了,也更有架势。
作者: Kayusumi (Left)   2022-08-25 00:05:00
叠图叠的够多的确可以让噪声降到很低...最近工作刚用到但是时间qq
作者: milkool   2022-08-25 01:41:00
手机算法算图与单眼相机的光学发展是不同的技术方向根本没有所谓的没落
作者: ksng1092 (ron)   2022-08-25 01:44:00
我很好奇影片里那些动起来的片段是怎么拍出来的
作者: Tahuiyuan (mata)   2022-08-25 02:45:00
除了夜视模式,平常能无限接近肉眼所见就好,很不喜欢太浓郁、太冷或太暖的成像风格,目前各家的技术跟人眼的差距还是相当大。
作者: Mchord (Mchord)   2022-08-25 06:42:00
影片结尾那个镜头移动是合成的不是拍的这种小角度摇一摇是Nerf常见的demo方式
作者: ww (刘文听)   2022-08-25 08:23:00
未看先猜根本不是降噪而是抹掉重画
作者: IM71   2022-08-25 09:49:00
坐等GC超进化
作者: shsh946 (大哥是对的!)   2022-08-25 09:57:00
单眼怎么会和手机比 笑死
作者: yangwen5301 (大番薯)   2022-08-25 11:20:00
不可能赢单眼啦,细节直接被打趴,不过如果是网络压缩传图应该是看不出来没错
作者: Xperia (X霹雳鸭)   2022-08-25 11:50:00
p6a跟p6p还是有差的,自己去看阿哲的影片
作者: zx87202 (mimi)   2022-08-25 11:58:00
大家有发现他测资是用iPhone拍的吗?XD
作者: payne   2022-08-25 13:01:00
我是old school 觉得拍照和后制还是应该分清楚 不过应该越来越没人在乎了
作者: wardraw   2022-08-25 14:13:00
以后用烂镜头拍影片 回家再用算法回推高解析3D场景就好
作者: h810185 (......)   2022-08-26 20:21:00
夏天户外拍五十张就热到五十度,相机去势变阉狗。单眼有那么不济吗?

Links booklink

Contact Us: admin [ a t ] ucptt.com