NVIDIA助力Telexistence在全家便利店部署补货机器人

总部位于东京的初创企业 Telexistence 宣布将在日本数百家全家（FamilyMart）便利店部署NVIDIA AI驱动的智能机器人来为货架补货。

全日本共有 56000 家便利店，密度居全球第三。其中约 16000 家由全家经营。Telexistence 希望为这些商店节省时间，将重复性的工作（如为货架补充饮料）交给机器人，使店员能够处理与顾客互动等更复杂的任务。

这只是 Telexistence 机器人的功能之一，这些机器人在NVIDIA Jetson 边缘 AI 和机器人平台上运行。该公司还在开发能够使用机器人分拣包裹的 AI 仓储物流系统。

Telexistence 首席执行官 Jin Tomioka 表示：“我们希望将机器人部署到各个支持人们日常生活的行业，首先就是便利店这个我们在日常生活中离不开，但却面临着劳动力短缺问题的行业，尤其是在便利店星罗密布的日本。”

这家成立于 2017 年的公司下一步准备扩张到美国的便利店。美国的零售业同样受到劳动力短缺的困扰，该国目前有 15 万家便利店，超过一半的消费者表示他们每月至少去一次便利店。

Telexistence将在全家便利店

部署补货机器人

Telexistence 将于 8 月开始在 300 家全家便利店部署名为 TX SCARA 的补货机器人，并计划在未来几年将这种自主机器人部署到更多的全家便利店以及其他主要的连锁便利店。

Tomioka 表示：“为了给货架补货，便利店店员在里屋耗费了大量本该在外面与顾客打交道的时间。机器人服务可以让店员有更多的时间与顾客接触。”

TX SCARA 一边在轨道上运行，一边通过多个摄像头扫描每个货架并使用 AI 识别数量过少的饮料，然后规划补货路线。这套 AI 系统为饮料自动补货的成功率达到 98% 以上。

即便在极少数情况下，该机器人对饮料的摆放位置判断失误或者饮料翻倒，店员也不需要放下手中的工作来让机器人重新运转。待命的 Telexistence 远程操作人员会通过使用 NVIDIA GPU 进行视频流传输的虚拟现实（VR）系统进行手动控制，为便利店迅速解决问题。

Telexistence 估计，一家繁忙的便利店每天需要补充 1000 多份饮料。TX SCARA 的云系统会根据机器人在运行过程中的补货名称、日期、时间和数量来维护一个产品销售数据库，使 AI 能够根据过去的销售数据考虑哪些商品需要优先补货。

使用 NVIDIA Jetson 进行边缘 AI 处理

TX SCARA 内置多个 AI 模型。物体检测模型可以识别商店里的饮料类型，确定哪种饮料属于哪个货架，并且与另一个模型一起帮助检测机器人手臂的运动，使机器人可以拿起饮料并准确地将其放在货架上的产品之间。第三个模型负责异常检测，即识别饮料是否掉落或离开货架。还有一个模型负责检测每个货架区域中哪些饮料的数量不足。

Telexistence 团队将自定义的预训练神经网络作为基础模型，通过添加合成和注释的真实世界数据来微调应用的神经网络。该团队使用一个interwetten与威廉的赔率体系 环境创建了 8 万多张合成图像用于增强他们的数据集，使机器人能够学会检测任何颜色、图案、照明环境中的饮料。

该团队依靠NVIDIA DGX Station来训练 AI 模型。机器人本身使用两个 NVIDIA Jetson 嵌入式模块：用于边缘 AI 处理的NVIDIA Jetson AGX Xavier以及用于传输视频串流数据的NVIDIA Jetson TX2模块。

在软件方面，该团队使用用于边缘 AI 的NVIDIA JetPack SDK和用于高性能推理的NVIDIA TensorRT SDK。

Telexistence 首席机器人自动化官 Pavel Savkin 表示：“如果没有 TensorRT，我们的模型就无法快速运行，也就无法高效地检测店里的商品。”

Telexistence 使用半精度浮点格式（FP16）来进一步优化其 AI 模型，而非单精度浮点格式（FP32）。