
—— 青亭网

分享
原创 2022-08-12
Esther | 编辑
近几十年来,相机不断小型化,使其能够广泛用于医学成像、安全技术、智能手机、机器人和自动驾驶汽车。小一个数量级的相机还可以在微创医学、纳米机器人、可穿戴设备或 AR 和 VR 中实现许多新应用。不过,现有的小型相机方案受到基本的技术局限,比如透镜体积难以缩小。
一些无镜头相机设计通过振幅掩膜来替换光学元件,以缩小相机尺寸,缺点是空间分辨率有限,图像采集时间长。
而为了解决上述问题,近期普林斯顿和华盛顿大学组成的科研团队研发出粗盐粒大小的相机。其原理基于超表面人工光学材料,其特点是厚度小于波长,可灵活控制电磁波振幅、相位、极化方式、传播模式。
目前,这项实验技术已经受到关键机构和科技巨头关注,包括获得美国国家科学基金会、美国国防部、UW Reality Lab支持,其中UW Reality Lab的资助方包括Futurewei(前身为华为在美国的研发团队)、Meta、谷歌、亚马逊等。
细节方面,该方案将神经算法与纳米结构集成。利用微型圆柱结构取代透镜。偏振不敏感的纳米光学成像方案,色域在400到700纳米之间,成像范围40°,最大光圈f2。
在《自然》期刊中,科研人员发表了一篇名为“应用于高质量薄透镜成像的神经纳米光学方案”的论文,详细阐释了这款微型相机的原理和拍摄效果,并指出如果用数千个这样的微型摄像头组成阵列,则可实现全场景感知,为物理表面带来成像功能。
据了解,超表面技术可制造薄如发丝的微型透镜(Metalens),应用于摄像头、医疗器械、车载传感器/雷达、AR/VR、全息显示等场景。超表面工艺有望成为未来创新光学的基础,就像晶体管缩小电子产品体积那样,对于光学系统小型化具有重要意义。
普林斯顿大学和华盛顿大学研发的微型相机模组附着了160万个微型圆柱(大小相当于一个HIV病毒),其制作工艺接近计算机芯片。
科研人员表示:微型相机可以集成处理器单元,其潜在应用场景如:微创内窥镜、超小型医疗机器人,用于检测人体内部健康、诊断和治疗疾病。与以往的微型摄像头技术相比,这项全新的超表面方案可捕捉的图像更清晰、扭曲更少,效果相当于体积大50万倍的传统摄像头组,支持全彩色捕捉。
据科研人员称,与机器学习算法结合后,其研发的微型摄像头具有视场角大、成像质量高等优势,效果超过现有的超表面相机方案。
以往的微型相机效果vs最新的超表面微型相机,左边的图像拍摄范围有限,图像质量模糊、扭曲更少,效果相当于体积大50万倍的传统摄像头组,支持全彩色捕捉。
在这项研究中,超表面微型相机的关键创新在于将光学表面与信号处理算法集成,从而提升了相机在自然光条件中的表现。而以往的超表面相机方案,通常需要采用激光光源,在理想的实验室环境中才能生成高质量图像,在自然光环境的成像效果不佳。也就是说,这个全新的方案不仅缩小了相机传感器的体积,还有望降低微型相机的成本和使用门槛。
通常,传统相机采用一系列玻璃或塑料材质的曲面透镜,通过折射原理进行光学对焦。相比之下,超表面相机通过微型圆柱来捕捉光线,功能类似于光学天线,即将光线信号传递至计算机并转化为图像。这些圆柱结构的特点是形状各不相同,目的是形成特定的波阵面。经过实验,科研人员发现超表面微型相机的成像效果与采用六个折射透镜的复合相机足够接近,只有画面边缘略模糊。
科研人员表示:超表面微型相机基于纳米结构,而设计和设置这种结构对我们是一大挑战。我们需要探索将数百万个微型圆柱与算法同步结合的方式,来实现大范围RGB图像捕捉。
为了解决上述问题,论文的主要合著者之一Shane Colburn创建了一个自动的计算模拟模型,来测试不同的纳米圆柱配置。实际上,考虑到圆柱天线的数量、传递光线的复杂结构,这种计算模拟模型通常占用大量内存和计算时间,而Colburn创建的模型(包含可微分纳米散射体模拟器、基于神经特征的重建架构)提升了计算的效率,模拟超表面成像的准确性足够高。在实验测试中,其对于标称波长范围之外的图像重建误差比现有方法低一个数量级。
与此同时,论文的合著者James Whitehead,设计了一种基于氮化硅(玻璃状材料)的超表面制造工艺,可兼容制造计算机芯片采用的标准半导体制造方法,因此更容易实现量产,而且成本比传统相机镜头更低。与此前以来手工设计和重建的方案制造工艺相比,这组科研人员利用端到端可微分成像模型,同时优化超表面和反卷积算法。
前美国陆军研究实验室高级研究员兼首席科学家Joseph Mait表示:超表面光学设计并不是全新的技术,而华盛顿大学与普林斯顿科研人员研发的方案,是首个将表面光学技术与神经系统结合的方案。
接下来,科研人员计划进一步提升超表面微型相机的计算能力,优化图像质量、物体识别,以及医学和机器人相关的传感等功能。此外,还计划打造基于微型相机阵列的“传感表面”,比如将手机背面变成一组超级大的复合摄像头模组,取代现有的三摄、四摄方案。
为了不断提升拍照效果、3D AR定位等功能,配备类似于“浴霸”的摄像头阵列已经成为一种趋势。如果将传统的移动摄像头布满整个手机背面,会带来成本、重量等挑战,而如果用超表面微型相机取代现有的摄像头,这些挑战有望得到解决。与此同时,配备更多的摄像头也可以提升移动端AR、3D测距和空间传感的质量。
长期来看,微型摄像头也可以应用于AR/VR头显,从而进一步降低AR/VR硬件的整体体积。不仅如此,超表面技术还可以降低AR/VR透镜/光学模组的体积。
比如此前青亭网就曾报道,BRELYON联合创始人兼CTO Reza Khorasaninejad展示超表面透镜工艺在AR/VR领域的应用优势,并表示超表面透镜可以与普通镜片集成,具有超薄平面外观(厚度仅600纳米),还可以多层叠加。除此之外,国内的AR眼镜厂商亮亮视野、AR光学厂商鲲游光电也在探索基于超表面光学模组的AR方案。
参考:
https://engineering.princeton.edu/news/2021/11/29/researchers-shrink-camera-size-salt-grain
( END)
* 文章为作者独立观点,不代表数艺网立场转载须知
广告 欺诈 淫秽 色情 侵权 骚扰、辱骂、歧视 敏感 违法 犯罪 反动、政治 其它
数艺网是一个信息获取、分享及传播的平台,我们尊重和鼓励数艺网用户创作的内容,认识到保护知识产权对数艺网生存与发展的重要性,承诺将保护知识产权作为数艺网运营的基本原则之一。
本条款原则如下:
1. 用户在数艺网上发表的全部原创内容(包括但不仅限于文章、案例/项目和评论),著作权均归用户本人所有。用户可授权第三方以任何方式使用,不需要得到数艺网的同意。
2. 数艺网上可由多人参与编辑的内容,包括但不限于案例/作品的认领、企业/机构的认领,所有参与编辑者均同意,相关知识产权归数艺网所有。
3. 数艺网提供的网络服务中包含的标识、版面设计、排版方式、文本、图片、图形等均受著作权、商标权及其它法律保护,未经相关权利人(含数艺网及其他原始权利人)同意,上述内容均不得在任何平台被直接或间接发布、使用、出于发布或使用目的的改写或再发行,或被用于其他任何商业目的。
4. 为了促进知识的分享和传播,用户将其在数艺网上发表的全部内容,授予数艺网免费的、不可撤销的、非独家使用许可,数艺网有权将该内容用于数艺网各种形态的产品和服务上,包括但不限于网站以及发表的应用或其他互联网产品。
5. 第三方若出于非商业目的,将用户在数艺网上发表的内容转载在数艺网之外的地方,应当在作品的正文开头的显著位置注明原作者姓名(或原作者在数艺网上使用的帐号名称),给出原始链接,注明「发表于数艺网」,并不得对作品进行修改演绎。若需要对作品进行修改,或用于商业目的,第三方应当联系用户获得单独授权,按照用户规定的方式使用该内容。
6. 数艺网为用户提供「保留所有权利,禁止转载」的选项。除非获得原作者的单独授权,任何第三方不得转载标注了「禁止转载」的内容,否则均视为侵权。
7. 在数艺网上传或发表的内容,用户应保证其为著作权人或已取得合法授权,并且该内容不会侵犯任何第三方的合法权益。如果第三方提出关于著作权的异议,数艺网有权根据实际情况删除相关的内容,且有权追究用户的法律责任。给数艺网或任何第三方造成损失的,用户应负责全额赔偿。
8. 如果任何第三方侵犯了数艺网用户相关的权利,用户同意授权数艺网或其指定的代理人代表数艺网自身或用户对该第三方提出警告、投诉、发起行政执法、诉讼、进行上诉,或谈判和解,并且用户同意在数艺网认为必要的情况下参与共同维权。
9. 数艺网有权但无义务对用户发布的内容进行审核,有权根据相关证据结合《侵权责任法》、《信息网络传播权保护条例》等法律法规及数艺网社区管理规定对侵权信息进行处理。
侵权举报
1.处理原则
数艺网作为新媒体艺术领域的分享交流平台,高度重视自由表达和个人、机构正当权利的平衡。依照法律规定删除违法信息是数艺网社区的法定义务,数艺网社区亦未与任何中介机构合作开展此项业务。
2.受理范围
受理数艺网社区内侵犯机构或个人合法权益的侵权举报,包括但不限于涉及个人隐私、造谣与诽谤、商业侵权。
a.涉及个人隐私:发布内容中直接涉及身份信息,如个人姓名、家庭住址、身份证号码、工作单位、私人电话等详细个人隐私;
b.造谣、诽谤:发布内容中指名道姓(包括自然人和机构)的直接谩骂、侮辱、虚构中伤、恶意诽谤等;
c.商业侵权:泄露机构商业机密及其他根据保密协议不能公开讨论的内容。
3.举报条件
用户在数艺网发表的内容仅表明其个人的立场和观点,并不代表数艺网的立场或观点。如果个人或机构发现数艺网上存在侵犯自身合法权益的内容,可以先尝试与作者取得联系,通过沟通协商解决问题。如您无法联系到作者,或无法通过与作者沟通解决问题,您可通过点击内容下方的举报按钮来向数艺网平台进行投诉。为了保证问题能够及时有效地处理,请务必提交真实有效、完整清晰的材料,否则投诉将无法受理。您需要向数艺网提供的投诉材料包括:
a. 权利人对涉嫌侵权内容拥有商标权、著作权和/或其他依法可以行使权利的权属证明,权属证明通常是营业执照或组织机构代码证;
b. 完整填写的通知书;附供下载的:侵权投诉通知书;
c. 举报人的身份证明,身份证明可以是身份证或护照;
d. 如果举报人非权利人,请举报人提供代表权利人进行举报的书面授权证明。
e. 为确保投诉材料的真实性,在侵权举报中,您还需要签署以下法律声明:
(1) 我本人为所举报内容的合法权利人;
(2) 我举报的发布在数艺网社区中的内容侵犯了本人相应的合法权益;
(3) 如果本侵权举报内容不完全属实,本人将承担由此产生的一切法律责任,并承担和赔偿数艺网因根据投诉人的通知书对相关帐号的处理而造成的任何损失,包括但不限于知乎因向被投诉方赔偿而产生的损失及数艺网名誉、商誉损害等。
4.处理流程
出于网络平台的监督属性,并非所有申请都必须受理。数艺网自收到举报的七个工作日内处理完毕并给出回复。处理期间,不提供任何电话、邮件及其他方式的查询服务。 出现数艺网已经删除或处理的内容,但是百度、谷歌等搜索引擎依然可以搜索到的现象,是因为百度、谷歌等搜索引擎自带缓存,此类问题数艺网无权也无法处理,因此相关申请不予受理。您可以自行联系搜索引擎服务商进行处理。 此为数艺网社区唯一的官方侵权投诉渠道,暂不提供其他方式处理此业务。 用户在数艺网中的商业行为引发的法律纠纷,由交易双方自行处理,与数艺网无关。
免责申明
1.数艺网不能对用户发表的回答或评论的正确性进行保证。
2.用户在数艺网发表的内容仅表明其个人的立场和观点,并不代表数艺网的立场或观点。作为内容的发表者,需自行对所发表内容负责,因所发表内容引发的一切纠纷,由该内容的发表者承担全部法律及连带责任。数艺网不承担任何法律及连带责任。
3.数艺网不保证网络服务一定能满足用户的要求,也不保证网络服务不会中断,对网络服务的及时性、安全性、准确性也都不作保证。
4.对于因不可抗力或数艺网不能控制的原因造成的网络服务中断或其它缺陷,数艺网不承担任何责任,但将尽力减少因此而给用户造成的损失和影响。
协议修改
1.根据互联网的发展和有关法律、法规及规范性文件的变化,或者因业务发展需要,数艺网有权对本协议的条款作出修改或变更,一旦本协议的内容发生变动,数艺网将会直接在数艺网网站上公布修改之后的协议内容,该公布行为视为数艺网已经通知用户修改内容。数艺网也可采用电子邮件或私信的传送方式,提示用户协议条款的修改、服务变更、或其它重要事项。
2.如果不同意数艺网对本协议相关条款所做的修改,用户有权并应当停止使用数艺网。如果用户继续使用数艺网,则视为用户接受数艺网对本协议相关条款所做的修改。
阅读并同意此认领协议方可认领案例
*认领案例的操作记录无法自行删除,请务必确保您参与该案例身份的真实性