找回密码
 注册

QQ登录

只需一步,快速开始

搜索
查看: 11742|回复: 8

手机背后那不是“浴霸”,是 3D 大众化的通行证

[复制链接]
  • 打卡等级:已臻大成
  • 打卡总天数:401
发表于 2020-3-6 23:47 | 显示全部楼层 |阅读模式

马上注册,查看更多内容,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?注册

×
005001pb2zrqpr61z2r1n1.jpg

平凡照片一秒变「3D」,并非仅仅是噱头。
假如乔布斯看到最新的 iPhone 11 Pro 后面的三颗吐出来的「浴霸」造型摄像头,不知道会作何感想。固然,不管「乔帮主」大概会怎么看,摄像头个数代表手机档次,已经成为一个潜规则。固然捐躯了部门造型,但确实给手机带来了新的功能,例如获得深度信息,这也是为什么出现了 iPhone 拥有双摄之后,出现了可以或许虚化配景的「肖像模式」。
新功能需要新玩法,两年前,Facebook 推出了 3D 照片的新功能,正是通过双摄手机的「肖像模式」,让 2D 照片出现「部门 3D」的结果。遗憾的是,当时拥有双摄旗舰机的人还是少数的。几天前,Facebook AI 发布博客,表示通过神经网络练习,现在 Facebook 已经可以将平凡单摄手机拍摄的 2D 照片,转化成具有 3D 结果的图片。
除了用户在手机页面停顿更长时间,「3D 照片」功能背后的积累,可以落地在更多场景,例如 AR 场景以及无人驾驶。鉴于 Facebook 对于 VR 的野心依旧,这项新功能将怎样实现扎克伯格「10 亿人共 VR」的梦想,也令人颇为期待。

005001fssdiws6zicommzh.jpg


005001blvpnign9hrxih3u.jpg

2D 照片怎样变 3D
同样是 3D 照片,两年时间有什么不一样的?答案是,深度信息。2018 年的 3D 照片功能要依赖当时手机双摄「肖像模式」带来的深度信息,而现在 Facebook AI 可以直接将任何时候拍摄的 2D 照片转化出 3D 结果,不需要深度信息。
抛开深度信息来制造 3D 结果的照片,需要面对两个挑战,一个是练习模型来推测各种物体的 3D 位置,另一个是优化体系来让各种移动装备都能在短时间内将功能跑起来。为此,团队使用卷积神经网络(CNN)练习了数百万对的 3D 照片以及对应的深度信息;同时,利用 Facebook AI 团队之前的开发 FBNet 和 ChamNet 的优化方式,来将功能推广到更多的装备上。
通过这个方式,给出恣意一张尺度的 RGB 图像,卷积神经网络可以估算出任一像素到摄像头的隔断。现在,iPhone 7 及之后的装备,都可以使用 3D 照片功能。
在攻克 2D 照片的深度信息猜测算法之后,Facebook AI 团队表示正在实验将实验扩大到视频范围,后者的挑战在于每一帧画面的深度必须与前后帧的保持一致,同时好消息是,由于视频通常有同一物体的不同视角,可以或许用来提供更准确的深度信息猜测。而这些实验将让团队强化算法在深度、物体外貌以及空间方面的推测本领,并终极将其使用到及时场景之中,例如手机端的 AR 应用上。
假如通过这些方式,能让机器更好的明白立体的现实环境,也会对无人驾驶车辆大概无人机的导航提供帮助。

005001rccj5nonlj5n5hxn.jpg

YouTube 和 3D 民主化
十五年前的 2005 年,YouTube 的三位首创人创建这个平台的时候,最开始的想法是做成视频相亲网站,很难说当时假如他们坚持谁人方向,是不是还会酿成现在这个视频界的谷歌。当时数码装备尚未流行,员工常常需要跑到用户家里去取用户想要上传的视频的光盘,拿回到公司帮忙上传,可想而知平台前几年发展有多艰难。假如没有后来智能手机的发作,估计也不会有现在的 YouTube 了。
从 2014 年收购 Oculus,Facebook 在 VR 上下了重注,但是行业发展显然没有扎克伯格当时签支票时预料的那么快。视频 3D 结果的创意,其实早在几年前 Facebook 360 视频团队就曾经实验过,由于 Facebook 360 项目终极停滞,相干的内容也难以见到了。
这折射了 VR 和 AR 行业发展的一个瓶颈,假如平凡用户无法用手机便捷的创建 3D 内容,那么他们大概不会对 VR 大概 AR 产生太大的爱好。固然收购了一家又一家 VR 游戏公司,但是用 PGC 的方式生产 VR 内容,毕竟速率和数目都和视频的 UGC 不在一个数目级上。
另一个对 VR 和 AR 抱以厚望的巨头谷歌,曾经收购过 VR 第一个热门应用 Tilt Brush,后者堪称是 VR 时代的「画图板」。该应用曾经吸引了不少国际着名艺术家,在 VR 中挥毫泼墨,吸引了平凡用户。但是题目还在于,Tilt Brush 还是需要戴上 VR 头显才华使用,依然有局限性。
带来大概办理方案的,反而是一直闷声积累 AR 实力的苹果公司,后者在 iPhone X 上使用了前置 3D 摄像头模组,用户不但可以利用其解锁手机,同时还能创建一个模仿自己脸部动态的 3D 动画形象。不外,苹果对于 iPhone「齐刘海」的 3D 摄像头功能控制的很严,无法恣意使用,好在 Android 手机厂商随后跟进,将前置 3D 摄像头酿成标配。曾经有人用小米手机的前置 3D 摄像头,扫描出物体的大致 3D 模型。
3D 打印厂商清锋科技曾经告诉极客公园(id:geekpark),未来盼望人们能使用手机摄像头来扫描自己的双脚,通过得到的 3D 数据,来使用 3D 打印机来制作完全贴合自己脚型的活动鞋。要让手机的 3D 摄像头到达 3D 打印需要的精度,大概还需时日,不外,大致扫出一个物体的模型,现在基本可以做到了,只是手机厂商们仍未想好是否要开放这个功能。
可以想象,有一天你可以像照相一样,任意一扫就可以制作出眼前事物的模型,肯定会第一时间分享给朋友,大概上传到 3D 版的 instgram 大概 YouTube 上。不外,在那之前,你现在可以先在 Facebook 上,提前体验一下未来。
责任编辑:卧虫
图片泉源:Facebook、视觉中国网站

005002ubya2992qq2krt15.jpg


005002et77s63bzl2tt3nn.jpg


005002c4vttdx2etw3tbww.jpg


005002x8ir73w23ppmedeq.jpg


005002wkguik7g3ibdnlif.jpg
  • 打卡等级:已臻大成
  • 打卡总天数:394
发表于 2020-3-7 16:28 | 显示全部楼层
看看
回复 支持 反对

使用道具 举报

发表于 2020-3-7 19:19 | 显示全部楼层

太感谢了,谢谢分享了
回复 支持 反对

使用道具 举报

  • 打卡等级:自成一派
  • 打卡总天数:350
发表于 2020-3-7 19:40 | 显示全部楼层


太感谢了,谢谢分享了
回复 支持 反对

使用道具 举报

  • 打卡等级:已臻大成
  • 打卡总天数:384
发表于 2020-3-7 21:56 | 显示全部楼层
路过看看,感谢楼主分享。
回复 支持 反对

使用道具 举报

  • 打卡等级:圆转纯熟
  • 打卡总天数:10
发表于 2020-3-8 01:28 | 显示全部楼层
看看先
回复 支持 反对

使用道具 举报

  • 打卡等级:略有所学
  • 打卡总天数:3
发表于 2020-3-8 10:47 | 显示全部楼层
看看了
回复 支持 反对

使用道具 举报

  • 打卡等级:已臻大成
  • 打卡总天数:388
发表于 2020-3-8 11:05 | 显示全部楼层
看看
回复 支持 反对

使用道具 举报

  • 打卡等级:初学乍练
  • 打卡总天数:2
发表于 2020-3-8 18:30 | 显示全部楼层
这个太贵用了起
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则

文字版|手机版|小黑屋|RSS|举报不良信息|精睿论坛 ( 鄂ICP备07005250号-1 )

GMT+8, 2025-4-6 21:09 , Processed in 0.236927 second(s), 8 queries , Redis On.

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表