[讨论] 关于XR的单镜头景深/人像功能

楼主: subgn ( )   2018-09-15 10:09:31
很多人关心的是XR虽然号称与其他两个同梯同样有景深与人像摄影功能,
但是只有单镜头会不会比较弱,我认为可以从Developer网站里看出一些端腻
https://tinyurl.com/ydbkxguh
On iOS devices with a back-facing dual camera or a front-facing TrueDepth
camera, the capture system can record depth information.
意思是只有双镜头或是TrueDepth镜头才能获得深度资讯。
我们已经知道XR后镜头是单镜头了,那他是不是TrueDepth呢?
官网关于XR的介绍
https://www.apple.com/iphone-xr/cameras/
如果你先转到英文版网页再去看XR的相机介绍,你会发现只有前镜头是
“7MP TrueDepth front camera”
但是后镜头就只有写“12MP rear camera”
所以很明显后镜头没有TrueDepth,没办法靠镜头处理深度资讯
所以后镜头拍出来的照片应该是靠软件来推算出影像中的深度资讯
至于软件效果跟硬件效果的差距有多少,可能就有待专业评测网站测试了。
另外可以再回去看去年发表会里的一个影片
https://developer.apple.com/videos/play/wwdc2017/507/
提到iPhone 7的双镜头如何计算出景深
(可以直接去下载投影片看34页开始的地方)
作者: yellowocean (walk to the sea)   2018-09-15 10:18:00
效果一定有差啊,不然何必双镜头,但是至少把软件景深的功能下放了,其实软件可解,下放到8跟7应该也可以,只是这样新手机就不用卖了……
作者: onollll (onollll )   2018-09-15 10:32:00
靠神经网络A12是八核心 11只有双核心A12 单镜头能够人像是因为背后有八核心的神经网络A11根本没办法做到单镜头人像 神经网络 差好几倍
作者: eyecolor (欸)   2018-09-15 10:35:00
可以啦...苹果不下放而已....
作者: onollll (onollll )   2018-09-15 10:36:00
楼上 你自己去查A12跟A11神经网络差几倍你就知道为何苹果不下放
作者: eyecolor (欸)   2018-09-15 10:37:00
那没差啦...演算这个又不需要什么深奥技术
作者: onollll (onollll )   2018-09-15 10:39:00
https://i.imgur.com/D9B579u.jpg重点标出了 你看不懂我也没办法
作者: eyecolor (欸)   2018-09-15 10:40:00
跟你说没差还不信 XDDD
作者: onollll (onollll )   2018-09-15 10:40:00
建议你去查A11跟A12 神经网络差在哪
作者: siegfriedlin (齐格飞)   2018-09-15 10:40:00
等focos更新比较快 依苹果的惯性,一定不满意简单计算的结果
作者: kivan00 (Kivan)   2018-09-15 10:43:00
就算苹果不下放 反正过阵子第三方APP就会仿出类似的东西
作者: onollll (onollll )   2018-09-15 10:43:00
算了 懒得跟你说 A11跟A12差别搞不清楚 在辩下去也只是鬼打墙
作者: eyecolor (欸)   2018-09-15 10:44:00
举例一下..你以为Animoji需要face ID的结构光技术?No..一颗镜头就可以Animoji..我把结构光遮光只剩一颗镜头...照样可以Animoji
作者: siegfriedlin (齐格飞)   2018-09-15 10:46:00
投影片第86页,有可能是启动OIS机制→造成optical center位移→产生disparity→计算z depthdisparity越小,z depth误差越大,所以需要神经网络cover?
作者: fiiox3 (飙速宅男)   2018-09-15 10:49:00
那pixel怎玩的?pixel有多加芯片?
作者: gy6543721 (元气小馒头)   2018-09-15 10:54:00
苹果就是喜欢拿一些无关紧要的科技来唬人 偏偏有些人就是会被唬 没在思考没在了解科技还指责别人不懂苹果 这种人非常多
作者: eyecolor (欸)   2018-09-15 10:54:00
作者: ohmylove347 (米特巴爾)   2018-09-15 11:01:00
on大的消息源在哪?只有说可以用在那些方面就代表那些方面一定有用到?这是属于上对下的问题了
作者: JuiFu617 (小夫)   2018-09-15 11:01:00
手机的景深什么的还不都是模拟合成来的,要浅景深去买单眼好吗?
作者: eyecolor (欸)   2018-09-15 11:02:00
会持续加强AI神经网络的演算能力.为的是自驾车手机这种小应用..A11就够用了啦
作者: jasonpttt   2018-09-15 11:08:00
坦白说,很多技术我相信只是苹果的商业策略考量不愿意下放而已
作者: eyecolor (欸)   2018-09-15 11:19:00
图像分析都是为了自驾车而来.需要快速演算的神经网络AI手机需要判断的资讯量没那么大..所以A11其实够用完全是商业考量不下放罢了不然难道说其实A11我们也有这功能喔? 那谁还来买A12?
作者: ooxxboy (ooxxboy)   2018-09-15 11:37:00
其实单镜头本来就能用后制做出景深,我相信前几代的处理器就能有这样的本事,这在影像处理上不是很难的事情,只要能选出主题的边缘后虚化模糊就能做到,苹果的处理器不会比安卓差,且这主要靠软件的影响比较大,当然做出来的效果会很看相片本身质的好坏影响后制侦测的结果,这也是单镜头跟双镜头的差别
作者: yellowocean (walk to the sea)   2018-09-15 11:37:00
如果下放,可能多花一点时间成像而已,但是使用体验可能不会太好,但是苹果财报也不会太好,大家就没动力买新机啦
作者: eyecolor (欸)   2018-09-15 11:39:00
我已经说过了.这种程度的演算并不需要用到A12这么快AIA11的AI处理肯定也不会让各位发现比较慢..A11对手机而言都效能过剩了..何况A12的AIA12的AI主要是给自驾车去使用的~~
作者: ooxxboy (ooxxboy)   2018-09-15 11:40:00
苹果新功能旧款能做却不愿下放也不是第一次,就像XR明明就能给双镜头却不愿给你双镜头一样
作者: ShauEn (What Can I Do)   2018-09-15 11:43:00
不管单或是双镜头,效果看起来都是假
作者: ooxxboy (ooxxboy)   2018-09-15 11:46:00
苹果在考量产品定位及利润最大化的情况下,往往会做出这种旗舰价格却缺东缺西的决定,通常入门价格往往都要再往上买个一级才够用,就像i6从16G起跳一样,当年32G早就渐渐成为主流,多少人买了16G后使用苦不堪言?
作者: eyecolor (欸)   2018-09-15 11:48:00
因为很多人协助洗脑说16GB就够用了 XDDDD
作者: frfreedom (modenwils)   2018-09-15 11:49:00
虚化很早就有,但各家正确率各有差异
作者: eyecolor (欸)   2018-09-15 11:50:00
自己有在用微单..其实这种假浅景深我都看不太下去
作者: ooxxboy (ooxxboy)   2018-09-15 11:51:00
买XR又在意镜头的要想清楚,双镜头已经是很普及的规格,
作者: eyecolor (欸)   2018-09-15 11:51:00
....一看就知道是后制的...用过几次就不用了
作者: eyecolor (欸)   2018-09-15 11:52:00
双镜头的好处是远距拍照会清晰点.如课堂上的黑板板书数位放大跟光学还是有差别的
作者: ZzoozZ (Mi)   2018-09-15 11:58:00
大大你文件好像没看完整,里面sample code:AVCaptureDevice.default(.builtInWideAngleCamera, for: .video, position: .unspecified) 只选WideAngleCamera 下面再设定一下就可以拿到景深的东东了
作者: bcs (= ="frailty..gggg XD)   2018-09-15 12:21:00
XR的景深是可调,p2那个就一般景深,那个景深模式其它卓卓机也可以用,但就是要等他合成。
作者: YongLunLin (YongLunLin)   2018-09-15 12:30:00
劝某人不要这么呛!
作者: eyecolor (欸)   2018-09-15 12:33:00
单颗镜头google采用的是PDAF相位对焦去取得深度图再来用立体算法下去跑出一个浅景深图像~:~ 被骂这么呛先脱离讨论了 bye
作者: cowbar5566 (靠爸56)   2018-09-15 13:24:00
实机都还没出来,就讲的头头是道的小心被打脸
作者: cute15825 (Westdo0r)   2018-09-15 13:39:00
笑了 一直扯a11不够用 那845的pixel怎算出来的?
作者: ethan5566 (伊森伍陆)   2018-09-15 13:49:00
笑死 a11是两大四小核 共六核心 谁跟你双核心 要比全部加起来的核心就是6核和八核 少在那里用a11的大核数量去比a12的全部核心数营造那种升级感很大的感觉 另外神经网络也只是从六千亿次提升到3兆次 我相信大多数人都不会用到或感受到差别
作者: onollll (onollll )   2018-09-15 14:19:00
A11神经网络确实是双核心啊 请问eth你是在搞笑吗?A12神经网络 八核心 速度是A11的9倍麻烦ethan5566 看清楚字好吗我从头到尾都是在说神经网络如果不相信 请自行Google 看A11 “神经网络”是几核心记得顺便查一下A12 “神经网络”几核心两个差9倍 人像模式怎么下放到iPhone 8
作者: w60904max (自宅警备队员)   2018-09-15 14:34:00
举例pixel 845的就够算?..goolge 有另外再加AI芯片好吗不下放的举例也超矛盾 他技术直接放下就能拔一个镜头那他A11 i8+干嘛不早单镜头省钱
作者: eyecolor (欸)   2018-09-15 14:37:00
双镜头主要不是景深运算.而是光学长焦应用.你误会了吧
作者: onollll (onollll )   2018-09-15 14:38:00
作者: w60904max (自宅警备队员)   2018-09-15 14:38:00
这篇不是讨论单镜头的景深吗?
作者: onollll (onollll )   2018-09-15 14:39:00
我很好心的帮你找 也帮你画线 自己看iPhone Xr 人像就是靠神经网络 懂了吗?
作者: eyecolor (欸)   2018-09-15 14:39:00
不必...规格早就知道..多此一举
作者: onollll (onollll )   2018-09-15 14:40:00
A11神经网络根本没办法跑单镜头人像 苹果才没有下放eye就是有人看不懂啊 所以我丢上来让他看好看满
作者: w60904max (自宅警备队员)   2018-09-15 14:41:00
不过我觉得 i8那时候NN model还没train好也是原因
作者: onollll (onollll )   2018-09-15 14:42:00
还有 当初iPhone 8Plus“人像光线”出来的时候很多国外网友在问为何iPhone 7Plus没有支援有网友自己去测试发现 iPhone 7+不是不支援人像光线是因为根本跑不动 所以苹果才没有下放给iPhone 7+iPhone Xr能够单镜头拍出人像 iPhone 8却不行就是差在一个“双核心”神经网络 与“八核心” 神经网络苹果也说过iPhone Xr 是靠神经网络下去 才能拍人像这也就说明 不是苹果不支援 是8根本不行而且8的内存2GB iPhone Xr是3GB 也不够跑
作者: peatle ( ̄︶ ̄)/\( ̄︶ ̄)   2018-09-15 14:50:00
铁粉出现XDDDDApple说什么就信什么
作者: onollll (onollll )   2018-09-15 15:07:00
楼上一定是没看完我说什么不然你说说看 市面上有哪一款手机 内存2GB并且单镜头 能拍出人像摄影的
作者: BigQs (BigQs)   2018-09-15 15:27:00
请问内存是什么?跟外放是一体两面的东西吗
作者: fiiox3 (飙速宅男)   2018-09-15 15:58:00
话说速度几倍,可以单看核心数来看,太神了话说,手机内应该都是放train好的model。这样只差一代的真的不可能下放吗?再找找看国外相关文章好了
作者: hidexjapan (hide0504N￾ )   2018-09-15 22:29:00
iPhone X的双镜头景深合成算法很怪,拍出来先不提油画感,那景深比较像小DC的景深,有种说不出的诡异
作者: Wampire (韦恩派尔)   2018-09-16 00:58:00
我比较觉得奇怪的是:有必要为了长焦摄影多塞一整组包括感光元件、镜头和防手震组件吗?既占空间又提高成本、太大才小用了吧! 连景深都能用算的,变焦何不就数位变焦裁切后补差点运算就好?
作者: fiiox3 (飙速宅男)   2018-09-16 10:46:00
数位变焦一直都是补点啊,但那个画质更屎一样我还宁愿裁切广角的照片...
作者: ridges (我想妳,无时无刻)   2018-09-17 00:10:00
脑补很强

Links booklink

Contact Us: admin [ a t ] ucptt.com