0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

ADI和Microsoft为3D成像启用飞行时间威廉希尔官方网站

李秀兰 来源:Advantech视频 作者:Advantech视频 2022-07-27 08:02 次阅读

Analog Devices (ADI) 和 Microsoft 联手生产飞行时间 (ToF) 3D 成像解决方案,目标是在任何场景条件下都提供更高的精度。ADI 将利用 Microsoft 的 Azure Kinect 3D ToF 威廉希尔官方网站 并添加其威廉希尔官方网站 IC 和系统专业知识,以创建更易于采用的解决方案。目标是在工业 4.0、汽车、游戏、增强现实以及计算摄影和摄像等领域覆盖广泛的受众 。

行业市场分析师估计,在具有挑战性的环境中使用的 3D 成像系统将出现强劲增长,并且需要人类协作机器人、房间映射和库存管理系统等尖端应用来实现工业 4.0。 还需要ToF 应用 来创建具有占用检测和驾驶员监控功能的更安全的汽车驾驶环境。

在接受 EE Times 采访时,增强成像和解释高级总监 Tony Zarola 和 ADI 公司战略营销经理 Carlos Calvo 强调了此次合作的基础。 Zarola 表示:“微软已成为图像传感器制造商 3D ToF 性能的基准,并为 ADI 提供核心像素威廉希尔官方网站 ,这是 ADI 正在构建的传感器和解决方案的基础。几十年来,他们开发了在智能边缘或智能云上运行的最佳数据捕获和革命性算法所需的专业知识。我们期待结合微软和 ADI 在芯片、系统、软件和光学方面的最佳能力。”

3D ToF 设计

手势识别是设备识别人体一系列动作的能力。电子威廉希尔官方网站 基于相机和 IC 的帮助,用于识别和扫描 2D 或 3D 轮廓中的场景。ToF 威廉希尔官方网站 包括向目标发送激光束并分析信号的反射。

3D ToF是一种没有扫描仪的光探测和测距 (LiDAR),它使用纳秒级的高功率光脉冲从场景中捕获深度信息(通常是短距离)。各种 IC 解决方案在手势识别软件算法的帮助下,创建接收到的图像的深度图,实时响应身体运动。手势识别威廉希尔官方网站 的主要优点是个人和控制系统之间不需要物理接触。

ToF 相机通过调制激光照射物体和激光波长敏感传感器来捕获反射光,从而测量距离。传感器测量从光发射到相机接收到反射光之间的时间延迟。有几种测量时间延迟的方法,其中两种已经很常见:连续波 (CW) 方法和脉冲方法。绝大多数 ToF 传感器是 CW 并使用 CMOS 传感器。

有许多混杂因素使 ToF 测量变得困难:干扰环境光、由场景中物体反射的光导致的多路径效应破坏真实距离、温度效应和范围模糊。“挑战的范围从硅片开发到创建一个完整的系统,该系统的性能与部件的理论总和一致,”Calvo 说。“孤立地看待每个组件是不可能的。例如,具有最佳传感器但配备未优化镜头的 ToF 相机的整体系统性能会很差。

“从表面上看,ToF 相机与 RGB 相机有相似之处,”他补充道。“一个关键的区别是,根据应用程序,RGB 相机的图像质量是以一定程度的主观性来判断的;其他应用程序只能通过高级后处理启用。ToF 相机测量一个客观的物理量(距离),根据应用,用户可能会严重依赖图像的准确性。RGB 相机中的一些光学缺陷(例如镜头眩光)会产生有时被认为是艺术性的伪影(例如,阳光眩光)。在 ToF 系统中,镜头光晕即使没有大幅减少,也会在物体强烈反射的情况下削弱整个系统的性能。”

用于 ToF 的 CMOS 传感器由发射器和接收器组成;它能够以接近 160 fps 的性能以单像素级别计算对象的距离。

“在芯片级别,必须考虑信号链的关键元素:激光驱动器、集成读出的 ToF 图像传感器,最后是深度计算引擎,”Calvo 说。“挑战始于在图像传感器本身中设计具有高响应度和高调制对比度的像素,并以形成可由下一个应用层解释的 3D 点云结束。

“除了组件之外,深度相机的设计和生产还面临着关键挑战,因为光机设计、校准、电气设计和软件实施都非常耗时且具有挑战性,”他补充道。“Analog Devices 为我们的客户应对这些挑战,以简化他们的设计流程。”

图 1:ToF 框图。

像素从场景的不同部分收集光,它们的重组将构成重建图像。所有传感器像素都由解调和调制块之间的相关性控制。每个像素都可以用图 2所示的模型来近似。

通过激活相关控制信号,电流在积分时间内被引导至节点 A (Da) 或节点 B (Db)。在解调停止的情况下进行读取,以便系统可以读取整个位序列。ClkA 和 ClkB 在时间 tInt1 以选定的调制频率进行 180° 异相调制。接收到的关于 ClkA 和 CLkB 时钟的光的相位决定了 DA 和 DB 信号。在积分结束时,ClkA 和 ClkB 关闭,读取阶段通过对积分信号 (BitlineAInt1-BitlineBInt1) 进行采样来进行。

光子到电流的转换受泊松分布的量子过程控制。让我们了解系统优劣的参数是量子效率。也就是说,产生的电子数量与激活相应像素的光子数量之间的比率。电子的数量取决于实际调制的光和对应于噪声效应的环境光。设计 ToF 系统时要选择的参数是视野 (FoV)。必须根据场景的覆盖范围适当地选择FOV。

图 2:像素的电路和时序。

为了在高频下实现高效率,可以使用 0.13-μm 混合信号低功耗 CMOS 工艺制造芯片,并稍作修改,以支持高效的 ToF 操作。

ADI 和微软

微软与 ADI 的合作旨在增强 ToF 威廉希尔官方网站 :ADI 正在设计一系列新的 ToF 3D 图像传感器,该传感器将提供小于 1 毫米的精度,并将与微软的深度、智能的雷德蒙德巨头生态系统兼容。云和智能边缘平台。

“我们坚信这种合作将影响所有主要行业——消费、工业、医疗保健和汽车,”Zarola 说。“到目前为止,微软开发的威廉希尔官方网站 还没有广泛用于规模化的商业应用程序。我们相信,由微软成像威廉希尔官方网站 提供支持的 ADI 解决方案将全面改变游戏规则。”

安全系统在增强面部识别方面有着明显的应用,同时为更高效的工厂自动化采取了先进的安全措施。工业 4.0 将通过协作机器人与人类一起安全地工作,而不会在“无人”区域被隔离,并且通过 ToF 精度来确定箱子和托盘尺寸的进一步优化物流。

Zarola 补充说:“更复杂的占用检测将提高能源效率、安全系统和人机交互。从家庭到汽车,我们与微软的 ToF 合作将为新的游戏体验提供在现实世界中放置虚拟对象并与之交互的能力,改变我们与汽车的交互方式,并通过监控驾驶员和乘客来提高安全性。ToF 威廉希尔官方网站 的潜在用例广泛且不断发展,因此今天的主要应用预计将在明天被新想法所取代。”

Zarola 和 Calvo 已经表明他们的客户希望在很宽的温度范围内实现毫米级深度分辨率和精细的空间分辨率。实现这种性能需要在硬件和软件层面实现极端水平的时间同步。“控制激光器的信号和传感器中的像素之间 10 ps 的时序错位会导致最终距离估计出现 1.5 毫米的误差,”Calvo 说。“如果这还不够困难,还需要在很宽的温度范围内保持 ToF 系统准确,这需要联合设计的高级处理和校准算法。”

对 ToF 系统的一个具体批评是它们可以运行的调制频率以及 ADI 最集中的位置。大多数深度估计误差的来源往往被调制频率“划分”。“我们的目标是提高 ToF 系统的平均调制频率,这将允许以更低的深度噪声进行测量,并减少多路径或环境光散粒噪声的不利影响,”Zarola 说。“ADI 还在寻求解决使深度相机的设计和生产既耗时又困难的关键挑战。我们正在处理机械对准、光学设计、校准、电气设计和软件实施以及图像捕获中的传统障碍。”

微软在 HoloLens 混合现实设备中使用的 ToF 3D 威廉希尔官方网站 和 Azure Kinect 开发套件与 ADI 的定制解决方案相结合,将使新一代高性能应用程序得以实施和扩展,同时优化上市时间。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2550

    文章

    51071

    浏览量

    753341
  • ADI
    ADI
    +关注

    关注

    146

    文章

    45821

    浏览量

    249869
收藏 人收藏

    评论

    相关推荐

    uvled光固化3d打印威廉希尔官方网站

    说到UVLED光固化3D打印威廉希尔官方网站 ,那可是当下3D打印领域的一股清流啊!这项威廉希尔官方网站 利用紫外线和光固化树脂来制造3D打印模型,原理简单又高效。UV
    的头像 发表于 12-24 13:13 78次阅读
    uvled光固化<b class='flag-5'>3d</b>打印<b class='flag-5'>威廉希尔官方网站
</b>

    傅里叶光场显微成像威廉希尔官方网站 —2D显微镜实现3D成像

    近年来,光场显微威廉希尔官方网站 的应用越来越广泛,针对光场显微镜的改进和优化也不断出现。目前市场各大品牌的2D显微镜比比皆是,如何在其基础上实现三维成像一直是成像领域的热门话题,本次主要讨论
    的头像 发表于 10-31 08:05 356次阅读
    傅里叶光场显微<b class='flag-5'>成像</b><b class='flag-5'>威廉希尔官方网站
</b>—2<b class='flag-5'>D</b>显微镜实现<b class='flag-5'>3D</b><b class='flag-5'>成像</b>

    飞行时间和激光雷达 - 光学前端设计应用说明

    电子发烧友网站提供《飞行时间和激光雷达 - 光学前端设计应用说明.pdf》资料免费下载
    发表于 09-13 10:40 1次下载
    <b class='flag-5'>飞行时间</b>和激光雷达 - 光学前端设计应用说明

    石头科技扫拖机器人采用英飞凌和湃安德的混合飞行时间系统

    的REAL3飞行时间(ToF)成像仪。该威廉希尔官方网站 能够缩小产品尺寸并提高可靠性。与传统扫拖机器人约100 毫米的机身高度相比,R
    发表于 09-06 11:34 226次阅读
      石头科技扫拖机器人采用英飞凌和湃安德的混合<b class='flag-5'>飞行时间</b>系统

    OPT8320 3D飞行时间传感器(短)数据表

    电子发烧友网站提供《OPT8320 3D飞行时间传感器(短)数据表.pdf》资料免费下载
    发表于 08-15 11:19 0次下载
    OPT8320 <b class='flag-5'>3D</b><b class='flag-5'>飞行时间</b>传感器(短)数据表

    OPT8241 3D飞行时间传感器数据表

    电子发烧友网站提供《OPT8241 3D飞行时间传感器数据表.pdf》资料免费下载
    发表于 08-15 10:27 0次下载
    OPT8241 <b class='flag-5'>3D</b><b class='flag-5'>飞行时间</b>传感器数据表

    OPT9221飞行时间控制器数据表

    电子发烧友网站提供《OPT9221飞行时间控制器数据表.pdf》资料免费下载
    发表于 08-15 10:04 0次下载
    OPT9221<b class='flag-5'>飞行时间</b>控制器数据表

    裸眼3D笔记本电脑——先进的光场裸眼3D威廉希尔官方网站

    随着科技的不断进步,裸眼3D威廉希尔官方网站 已经不再是科幻电影中的幻想。如今,英伦科技裸眼3D笔记本电脑将这一前沿科技带到了我们的日常生活中。无论你是专业的3D模型设计师,还是希望在视频播放和模型
    的头像 发表于 07-16 10:04 523次阅读

    直接飞行时间(dToF) SiPM LiDAR 平台SECO-测距仪-GEVK数据手册

    电子发烧友网站提供《直接飞行时间(dToF) SiPM LiDAR 平台SECO-测距仪-GEVK数据手册.rar》资料免费下载
    发表于 04-26 16:03 1次下载
    直接<b class='flag-5'>飞行时间</b>(dToF) SiPM LiDAR 平台SECO-测距仪-GEVK数据手册

    意法半导体宣布推出一款全能型、直接式飞行时间3D激光雷达模组

    在直接飞行时间(dToF)传感器领域处于前沿地位,二十亿颗FlightSense™ dToF传感器产品销量,意法半导体再次发力,针对相机辅助功能、增强现实(AR)/虚拟现实(VR)、3D网络摄像头、机器人、智能建筑等重点目标应用,推出直接
    的头像 发表于 03-06 09:34 684次阅读

    意法半导体的多区飞行时间(ToF)传感器系列介绍

    VL53L5、VL53L7、VL53L8都是基于意法半导体(ST)的FlightSense威廉希尔官方网站 的多区飞行时间(ToF)传感器。
    的头像 发表于 02-28 09:53 888次阅读
    意法半导体的多区<b class='flag-5'>飞行时间</b>(ToF)传感器系列介绍

    多区飞行时间(ToF)传感器的特点

    ‍‍‍‍‍‍‍‍ VL53L5、VL53L7、VL53L8都是基于ST的FlightSense威廉希尔官方网站 的多区飞行时间(ToF)传感器。
    的头像 发表于 02-25 09:41 1146次阅读
    多区<b class='flag-5'>飞行时间</b>(ToF)传感器的特点

    飞行时间传感器:威廉希尔官方网站 原理与多元应用

    回来时,我们停止计时,获得光飞行时长,借此确定物体与我们之间的距离(以毫米单位)。这项威廉希尔官方网站 被称为光飞行时间距离测量(flightsense),该
    的头像 发表于 02-19 12:23 820次阅读
    <b class='flag-5'>飞行时间</b>传感器:<b class='flag-5'>威廉希尔官方网站
</b>原理与多元应用

    高精度彩色3D相机:开启崭新的彩色3D成像时代

    近年来,机器人威廉希尔官方网站 的快速发展促使对3D相机威廉希尔官方网站 的需求不断增加,原因在于,相机在提高机器人的性能和实现多种功能方面发挥了决定性作用。
    的头像 发表于 01-15 14:09 538次阅读
    高精度彩色<b class='flag-5'>3D</b>相机:开启崭新的彩色<b class='flag-5'>3D</b><b class='flag-5'>成像</b>时代

    友思特分享 | 高精度彩色3D相机:开启崭新的彩色3D成像时代

    3D成像的新时代 近年来,机器人威廉希尔官方网站 的快速发展促使对3D相机威廉希尔官方网站 的需求不断增加,原因在于,相机在提高机器人的性能和实现多种功能方面发挥了决定
    的头像 发表于 01-11 09:57 419次阅读
    友思特分享 | 高精度彩色<b class='flag-5'>3D</b>相机:开启崭新的彩色<b class='flag-5'>3D</b><b class='flag-5'>成像</b>时代