新AI相机：通过光子时间差构建3D图像，单像素成像、每秒可达1000帧
想象一下这样的场景，对动物大声喊叫，然后就能从回音中分辨出它是狗还是马。也许你会以为这样的事情离我们很遥远，但是一个科学团队已经完成了这种摄影效果。
近期发表在 Optica 期刊上的一篇新论文中，英国、意大利和荷兰的研究人员描述了一种全新的制作动画 3D 图像的方法： 通过捕捉光子的时间信息，而不是其空间坐标 。
研究人员通过调整光线反射到一个探测器上的时间，来提取出一个场景的三维图像，这项被称为时间成像的新技术展示了一种机器学习的重要用途。
时间成像系统比普通成像具有一定的优势。例如， 新系统取像会非常快 ，可能以每秒 1000 帧的速度工作；而且这种粗略而快速的 3D 成像 可能具有多种应用 ，如用作自动驾驶 汽车 的摄像头，以提高寻路的准确性和应急速度，以及用于移动设备和 健康 监视器发展 360° 感知能力；最重要的是， 这种收集时间数据的单点探测器体积小、重量轻且价格便宜。
照片和视频通常是通过使用数字传感器捕获光子（光的组成部分）来制作的，即环境光会反射物体，镜头将它聚焦在由微小的光敏元件或像素组成的屏幕上。图像是由反射光产生的亮斑和暗斑形成的图案。
以最普通的数码相机为例，它由数百像素组成，这些像素通过检测光在每个空间点的强度和颜色来形成图像。
同时，可以通过在物体周围放置若干个摄像机，并从多个角度对物体进行拍摄，或者利用光子流扫描物体，并在三维中重建它来生成 3D 图像。但无论使用何种方式，图像都是通过收集场景的空间信息来构建的。
近几十年来，研究人员发明了一种更巧妙的方法，仅利用单个像素探测器即可捕捉到图像。为了做到这一点，他们不是把物体暴露在均匀的光照下，而是暴露在不同的光照模式下，这些闪光类似于包装上的方形条形码。
每个图案都会反射出物体的不同部分，因此像素测量的光强度会随图案的变化而变化。通过跟踪这些变化，研究人员可以重建物体的图像。
现如今，格拉斯哥大学的数据科学家 Alex Turpin 和物理学家 Daniele Faccio 及他们的同事，发明了一种方法来生成具有单个像素但是没有图案化闪光的 3D 图像。他们利用闪电般快速的单光子探测器，以均匀的闪光照亮了一个场景，并简单地测量了反射时间。
探测器的精度为四分之一纳秒，可以计算出到达的光子数量与时间的函数关系，研究人员仅凭这些信息即可重建场
这是一种新奇的方法，因为原则上场景中物体的排列和时间信息之间没有一一对应的关系。例如，从探测器 3 米远的任何表面反射的光子，无论朝向表面的任意方向，都将在 10 纳秒内到达。
而所谓的飞行时间相机可以增加深度，通过精确计算从物体反射到不同像素的闪光时间来制作 3D 图像。
新型的 3D 成像设备从一个简单、廉价的单点检测器开始，这种探测器被调整为充当光子的秒表。与测量颜色和强度空间分布的相机不同，探测器仅记录由瞬间激光脉冲产生的光子从任意给定场景中的每个物体反弹并到达传感器所需的时间。 物体距离越远，每个反射光子到达传感器所需的时间就越长 。
有关场景中反射的每个光子的时间信息（研究人员称为时间数据）都收集在一个非常简单的图表中。
然后，借助复杂的神经网络算法将这些图转换为 3D 图像。研究人员对算法进行了训练，向它展示了团队在实验室中移动和携带物体的数千张常规照片，以及同时由单点检测器捕获的时间数据。同时，他们还使用了一个非飞行时间的摄影机来拍摄场景的真实 3D 图像。
最终，这种神经网络已经足够了解时间数据与照片的对应关系，从而仅凭时间数据就可以创建高度准确的图像。它与飞行时间相机相比，时间图像模糊且缺乏细节。然而，却清楚地揭示了人们的形态。
加州大学伯克利分校的计算机科学家兼电气工程师 Laura Waller 表示：“乍一看，这种模棱两可的方法似乎使问题无法解决。单像素成像，当我第一次听到这个概念时，我想，这应该行得通。但仔细一想，这应该不起作用。”
格拉斯哥大学计算科学学院数据科学研究员 Alex Turpin 博士说：“如果我们只考虑空间信息，而单点探测器没有空间信息，所以单像素成像是不可能的。然而，这样的探测器仍然可以提供有价值的时间信息。与传统图像制作不同的是，我们的方法能够完全将光与过程分离。”
而且为了能实现这一目的，Alex Turpin及其同事采用了一种称为神经网络的机器学习程序，在使用数据集训练神经网络后，该程序能够自行对场景中移动的人进行成像。
与传统的摄像机不同的是，收集时间数据的单点探测器体积小、重量轻且价格便宜，这意味着它们可以轻松地添加到现有系统中， 例如被用作自动驾驶 汽车 的摄像头，以提高寻路的准确性和刹车反应速度 。
另外，它们可以增强移动设备中现有的传感器，例如 Google Pixel 4，该传感器已经具有基于雷达技术的简单手势识别系统，甚至可以用下一代技术来监视医院患者胸腔的上升和下降，提醒着患者的呼吸变化或跟踪运动，从而用符合数据安全的方式了来确保他们的安全。
Alex Turpin 博士补充说：“我们对自己开发的系统的潜力感到非常兴奋，我们期待着继续挖掘其潜力。我们的下一步目标是开发一个独立的、便携式的即装即用系统，我们迫切希望开始研究我们的选择，并通过商业合作伙伴的帮助进一步开展研究。”
https://www.sciencemag.org/news/2020/08/time-camera-generates-3d-images-echoes-light
https://phys.org/news/2020-07-imaging-pictures.html
https://www.osapublishing.org/optica/abstract.cfm?uri=optica-7-8-900
新AI相机:通过光子时间差构建3D图像,单像素成像、每秒可达1000帧_百 ...
而所谓的飞行时间相机可以增加深度，通过精确计算从物体反射到不同像素的闪光时间来制作 3D 图像。新型的 3D 成像设备从一个简单、廉价的单点检测器开始，这种探测器被调整为充当光子的秒表。与测量颜色和强度空间分布的相机不同，探测器仅记录由瞬间激光脉冲产生的光子从任意给定场景中的每个物体反弹并到达...
2021游戏销售排行榜(2021腾讯游戏活跃排行榜)
1、Redmi9A具备6.53英寸的大屏幕和5000mAh的大电量,还具有1300万像素的AI相机和HelioG25八核处理器。售价:599元2、苹果12具备A14的仿生芯片和OLED全面屏,以及优秀的双摄系统,支持5G,售价:5599元3、荣耀Play5T具备了8GB+128GB的大内存,以及22.5W的超级快充和5000mAh的超大电池。1300万的高清AI双摄,售价:1199元4...
拉曼光谱仪是测什么的?它的原理是什么?
1. 拉曼光谱基本原理 当一束频率为V0的单色光照射到样品上后，分子(或原子)可以使入射光发生散射或者反射。大部分光只是改变方向发生散射，而光的频率仍与激发光的频率(即V0)相同，这种散射称为瑞利散射(，大约占据99%左右;约占总散射光强度的 10E-6～10E-10的散射，不仅改变了光的传播方向，而...
法菲益迈： 谁说拍照只能拍眼前的景像、躲在墙后的影像就拍不出来? MIT Media Lab最新呈现的镭射相机可能会打破大家对拍照的印象,透过发出镭射光,让光子经由墙壁扩散打到被射体身上、最后再由相机接收反射回来的光子、借此描绘出3D影像....
怀宁县17841806168： VR阳光的参数 - ？
法菲益迈： 1.浑浊度: 控制空气的干净程度,其值在2-20 之间,值越大阳光受干扰越大,呈暖调黄色或红色,越小越干净,呈蓝色.一般正午取3-5,下午取6-9,晚上取15.2.臭氧: 设置臭氧层的稀薄程度,值越大,臭氧层越稀薄,阳光强度就越低,光...
怀宁县17841806168： 3dmax光子图的抗锯齿类型为固定,在出大图的时候把固定改为自适应DMC有 - ？
法菲益迈： 有,一般小图用固定,大图用自适应细分,颜色与噪波阈值可以给小值,渲染质量高些
怀宁县17841806168： MAX提供了几套全局光照方案?它们分别用于什么场合 - ？
法菲益迈： 3d max 建筑表现技术专题——全局光照(GI)详解 在一个场景中,根据照明中光能的来源,分为直接光照和间接光照,直接光照是有光源所发出的光能直接照射到场景中物体上所形成的照明效果,间接照明是光源发射的光能经由场景中其他物...
怀宁县17841806168： 3D max中的间接照明是什么意思 - ？
法菲益迈： 你确定是间接照明而不是全局开关?间接照明其实不用管采用一般默认的就行,渲染光子图,通过光子图渲染最终图像的时候二次反弹可以选择灯光缓冲并降低倍增值0.9左右,通过渲染光子图渲染速度快,当渲染单一产品的时候二次反弹用发光贴图,提供丰富环境.首次是对物体的直接照射,二次反弹是照射到物体上后反射折射出来的光再打到其他物体上
怀宁县17841806168： 爱ing斯坦法 发明什么 - ？
法菲益迈： 爱因斯坦的主要成就是创立相对论,提出光子假设,成功解释了光电效应,阐明了物质不灭定律和能量守恒定律的实质,指出了两条定律之间的密切关系.而根据爱因斯坦创立的科学理论而衍生出的发明创造,几乎涵盖了现代文明的每一个角...
怀宁县17841806168： 3D里跑光子图怎么跑.具体怎么设置? - ？
法菲益迈： 保存光子前设置 , 因为渲染出图是在光子图的基础上在进行光子能量运算的,所以最好是光子渲染时设置
