0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

CMUcam5 Pixy视觉相机传感器简介

李巍 来源:DevicePlus 作者:DevicePlus 2023-03-01 18:01 次阅读

这篇文章来源于DevicePlus.com英语网站的翻译稿。

poYBAGPzE3SAY3vXAAxGe6Xb97M137.png

PixyMon 和 Arduino

该项目的目标是向您介绍CMUcam5 Pixy,并展示如何在您自己DIY的项目中实现相机功能,您会发现即使对于一个复杂的机电系统(比如轮式自主机器人)来说,这也是非常简单易执行的操作。Pixy是一种灵活、紧凑、可调节且易于设置的相机传感器,能够检测并传递某些类型对象的信息。我们将介绍有关相机的基础知识,并了解在Pixy和Arduino之间进行通信的一般方法。

硬件

Arduino Uno (您可以使用任何 Arduino)

CMUcam5 Pixy 相机

伺服电机 (S06NF)

一小块木头(用来将相机安装到伺服上, 我将只使用螺丝安装)

线缆 (用于相机USB MINI 以及Uno USB B)

用于伺服的外接5V电源(警告!如果您将伺服连接到您的Arduino上,并通过USB供电,您的 Arduino将会被烧坏)。

软件

Arduino IDE 1.6.9

PixyMon 软件

用于Arduino的PixyMon库

pYYBAGPzE3iAbAMzAAnLVXYiGHU439.png

图1:CMUcam5 Pixy相机

CMUcam5 Pixy是一款小型、易于操作、成本低且开源的相机。它拥有独立的处理器,每秒可对探测到的信息进行50次输出。它还可以与Arduino、Raspberry Pi等连接。CMUcam5 Pixy使用非常常见的接口,例如SPI、12C、UART以及USB,并且具有一个自定义程序,可让您连接到您的设备上,点击此处可以免费下载

设置Pixy

点击此处下载软件PixyMon并安装。安装时,请通过USB连接Pixy,然后检查RGB Led灯是否亮起。

打开PixyMon,并确保Pixy是通过USB进行连接的。如果所有连接正确,它将输出相机所“看到”的内容。例如,我放置了一个紫色的盖子作为测试对象,来检查Pixy相机的输出。

poYBAGPzE3qAIhrAAAKHyJfHQhI642.png

图2:Pixy Raw输出图像

进入“Action”子菜单,并点击“Set Signature 1”,视频将会停滞,您可以选择想要用相机检测的颜色/对象。

pYYBAGPzE3yAQrvDAAD3mtxQ7Rs020.png

标记好颜色/对象后,视频将会开始播放,并且相机传感器将会对颜色/对象进行检测,如图3所示。在同一时间,您最多可以设置7个想要检测的对象/颜色。如果您进行了正确标记,并且设置了视野范围,就可以实现对多个对象/颜色的检测。

pYYBAGPzE32ABPIdAAKwN5szKfQ512.png

图3:Pixy检测下的视图

如果想要清除预设标记,您可以点击Action -> Clear All Signatures,直接清除所有标记 ,或者选择Clear Signature 来对标记一一清除(在控制页面输入标记编号)。

点击Settings -> Signature 1进行调整,您可以修改Pixy视野尺寸的大小。

其他设置(File -> Configure

通过更改相机亮度,您可以在黑暗环境中进行信息探测。

Camera 选项中,您可以调整白平衡,这非常有用。

使用 Action -> Default 程序,您将只看到所检测到的颜色,没有视频输出。

有一个专用于在您的Arduino上使用Pixy的自定义库。我使用的是Arduino Uno,但是您可以使用任何版本。这个库非常有用,不仅为初学者提供了简单的示例,也为专家提供了绝佳的开发平台。

首先,我们要设置一个检测对象,类似于我们之前在设置相机时所进行的操作。

点击此处下载Arduino库(在“Arduino libraries and examples ”文件夹下)。[https://www.cmucam.org/attachments/download/1157/arduino_pixy-0.1.7.zip]。这将实现您的Arduino和Pixy相机之间的通信。然后,将其添加到Arduino IDE(Sketch -> Include Library -> Add .zip Library)。

点击Example->Pixy->hello_world,打开一个名称为hello_world的简单示例。

poYBAGPzE3-AJ9qaAADYlCkBtL0097.png

将其上传到您的开发板上,并打开终端(Tools -> Serial Monitor)。

此时,您将看到一条信息,显示“Starting… ”,然后将显示有关检测到的对象的信息。

hello_world代码释义

setup() 函数中,对编号和pixy进行初始化和相关设置。

loop() 函数包含几个变量,这些变量用于打印以及从pixy获取模块。使用 pixy.getBlocks() 函数,我们可以获取检测到的对象。if (i%50==0) 代码可以用来设置我们想要获取信息的FPS。如果我们想要每秒钟获取一条信息,就要写 %1 而不是 %50

/*
 *  explaining the (((pixy.blocks[j].x)/2)+10)-60
 *  with pixy.blocks[j].x we get the x position of the object detected
 *  we divide it because the max value it can read is 320
 *  I did the + 10 for small adjustments 
 *  the -60 is used for rotating away from the object
 */
 
#include 
#include 
 
Servo myservo;  // create servo object to control a servo
Pixy pixy;  	// create pixy object for controlling the pixy camera
 
// function for testing the servo
void test_camera(){ 
  myservo.write(0);
  delay(1000);
  myservo.write(90);
  delay(1000);
  myservo.write(180);
  delay(1000);
  myservo.write(90); // get the camera centered
}
 
void setup() {
  //Serial.begin(9600); // initialize serial
  myservo.attach(9);	// attaches the servo on pin 9 to the servo object
  test_camera();    	// executing testing for the servo
  pixy.init();      	// initing the pixy camera
}
 
void loop() {
  //variables
  static int i = 0;
  int j;
  uint16_t blocks;
  char buf[32]; 
  int32_t xpos;
  
  // grabing the blocks
  blocks = pixy.getBlocks();
  
  // If there are detect blocks
  if (blocks)
  {
	i++;
 
	// we are using 50FPS 
	if (i%50==0)
	{
  	sprintf(buf, "Detected %d:n", blocks);
  	for (j=0; j 180 || ((((pixy.blocks[j].x)/2)+10)-60) < 0 ) 
    	{
      	myservo.write(90);  // if at min or max go to the middle
    	}
    	else{
 
    	// if there is no problem with min and max
    	myservo.write((((pixy.blocks[j].x)/2)+10)-60);
    	}
  	}
	}
  }
}

sprintf(buf, “Detected %d:n”, blocks); 输出由ID检测到的当前对象,并将必要的数据放入缓冲区。在for循环中,我们将会获得所有类型的信息,包括检测对象、宽度、高度、x、y以及标记信息。

poYBAGPzE4GAH2bsAAGnXtETRqI138.png

通过伺服进行控制

现在,Pixy已经成功连接到了Arduino,我将做一个简单的实验,将Pixy连接到伺服,并且在相机“看到“某种类型的颜色/对象时让伺服控制离开。

在本实验中,我将把Pixy的检测对象设置为圆形紫色容器,然后进行编程,这样一来,每当这种容器进入相机的视野,伺服就会控制离开这个物体。

装置结构:

poYBAGPzE4WAFDi4AAlTWQBELaU503.png

图4:已完成的装置结构

我使用的是S06NF伺服,并且用小螺丝钉将伺服连接到相机上,如图5所示。

pYYBAGPzE4iAK3tDAAor_9-Zsno432.png

图5:相机与伺服电机连接

对于硬件部分,仅进行简单的接线。将SPI线缆连接到相机上,将伺服与Arduino连接。我使用引脚9来控制伺服。

poYBAGPzE4qActJuAALlCa0I-9s452.png

图6:接线图

警告!

不要忘记连接GND。如果您没有将电源、伺服和Arduino GND连接在一起,伺服器将会奔溃!

这里,我使用的是用于5V电源的旧型适配器。

总结

在本教程中,我们介绍了PixyMon相机的基础知识,并且开发了一个简单的伺服驱动应用。我们创建了一个会离开检测对象而不是对象追踪的系统。在第二部分中,我们会继续深入拓展这个理念,开发出一种具有多个伺服的交互系统,通过将一个球作为对象,实现对桌子方位的控制。

如果您有任何意见或疑问,请在Google +上留言,并关注我们的动态。

继续阅读本文的第二部分 >

审核编辑黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 电源
    +关注

    关注

    184

    文章

    17718

    浏览量

    250189
  • 传感器
    +关注

    关注

    2551

    文章

    51106

    浏览量

    753616
  • Arduino
    +关注

    关注

    188

    文章

    6469

    浏览量

    187093
收藏 人收藏

    评论

    相关推荐

    Sony偏振传感器加持 Blackfly S工业相机突破视觉成像反光难题

    Q为什么采用传感器偏振?A:视觉系统一直都在试图克服玻璃、塑料和金属等反光表面产生的动态或多余光线、反射、朦胧和眩光影响。TeledyneFLIR的BlackflyS机器视觉工业相机
    的头像 发表于 12-27 17:02 190次阅读
    Sony偏振<b class='flag-5'>传感器</b>加持 Blackfly S工业<b class='flag-5'>相机</b>突破<b class='flag-5'>视觉</b>成像反光难题

    从2D走向3D的视觉传感器

    电子发烧友网报道(文/黄山明)作为机器视觉系统的主要信息源,视觉传感器一直在众多视觉设备中占据重要位置。尤其是通过视觉
    的头像 发表于 12-27 00:22 968次阅读

    ZC1202速度传感器温度传感器视觉传感器加速度传感器的作用

    速度传感器、温度传感器视觉传感器和加速度传感器在各自的应用领域中发挥着不可替代的作用,为现代工业、汽车、医疗、安防等领域的发展提供了有力的
    的头像 发表于 10-11 15:11 306次阅读

    网络研讨会: Teledyne FLIR IIS Forge 5GigE高速高精度机器视觉工业相机

    51camera的合作伙伴TeledyneFLIRIIS即将举办关于5G工业相机的网络研讨会,为大家展示机器视觉领域的最新威廉希尔官方网站 ——TeledyneFLIRIIS的Forge5GigE高
    的头像 发表于 10-11 08:06 267次阅读
    网络研讨会: Teledyne FLIR IIS Forge <b class='flag-5'>5</b>GigE高速高精度机器<b class='flag-5'>视觉</b>工业<b class='flag-5'>相机</b>

    精密制造的革新:光谱共焦传感器与工业视觉相机的融合

    在现代精密制造领域,对微小尺寸、高精度产品的检测需求日益迫切。光谱共焦传感器凭借其非接触、高精度测量特性脱颖而出,而工业视觉相机则以其高分辨率、实时成像能力著称。两者的融合,不仅解决了传统检测方式在
    的头像 发表于 09-26 11:47 339次阅读

    使用霍尔效应传感器进行过渡检测应用简介

    电子发烧友网站提供《使用霍尔效应传感器进行过渡检测应用简介.pdf》资料免费下载
    发表于 09-13 09:38 0次下载
    使用霍尔效应<b class='flag-5'>传感器</b>进行过渡检测应用<b class='flag-5'>简介</b>

    康耐视In-Sight SnAPP视觉传感器的应用案例

    In-Sight SnAPP视觉传感器,凭借其前沿的嵌入式AI威廉希尔官方网站 和强大的图像分析能力,已成为制造商自动化检测的理想选择。该传感器通过直观易用的引导式设置,让用户能够轻松实现从开箱到生产线自动运行的快速配置,极大提升了生产效率和
    的头像 发表于 08-08 11:34 654次阅读

    简单认识CMOS图像传感器

    为电信号的器件。随着科技的进步,CMOS图像传感器在多个领域得到了广泛应用,包括但不限于数码相机、智能手机、机器视觉、安防监控、智能交通等。以下是对CMOS图像传感器的详细简述,内容将
    的头像 发表于 07-17 16:49 5311次阅读

    机器视觉系统如何选择图像传感器

    图像传感器是所有机器视觉(MV)系统的核心,这是负责将物理世界的信息转换为数字数据的基本元件,在确保机器视觉操作的准确性、可靠性和高效率方面起到了关键作用。在这篇博文中,安森美探讨了为机器视觉
    的头像 发表于 07-05 10:49 580次阅读

    解读工业机器人避障常用的视觉传感器、激光传感器、红外传感器、超声波传感器

      移动机器人需要通过传感器实时获取周围的障碍物信息,包括尺寸、形状和位置信息,来实现避障。避障使用的传感器有很多种,目前常见的有视觉传感器、激光
    的头像 发表于 06-19 17:06 1805次阅读
    解读工业机器人避障常用的<b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>、激光<b class='flag-5'>传感器</b>、红外<b class='flag-5'>传感器</b>、超声波<b class='flag-5'>传感器</b>

    浅谈传感器和镜头的匹配设计

    理解相机传感器和成像镜头之间的相互作用是设计和实现机器视觉系统的重要部分。这种关系的优化常常被忽视,它对系统整体分辨率的影响很大。
    发表于 04-07 14:33 1387次阅读
    浅谈<b class='flag-5'>传感器</b>和镜头的匹配设计

    常见的传感器威廉希尔官方网站 汇总简介

    传感器威廉希尔官方网站 是现代信息威廉希尔官方网站 的关键组成部分之一,涉及到物理学、化学、生物学等多个学科领域,其应用范围广泛,包括工业自动化、环境监测、医疗保健、智能家居等领域。下面将介绍一些常见的传感器威廉希尔官方网站 : 温度传感器
    的头像 发表于 01-12 14:05 1102次阅读

    视觉传感器的应用有哪些?

    视觉传感器视觉检测系统提供基于图像的自动化检测,方便进行各种工业和制造应用。虽然2D和3D视觉传感器不是一项新威廉希尔官方网站 ,但现在通常用于自动检测
    的头像 发表于 01-09 08:36 996次阅读

    视觉传感器的定义、结构和原理、作用及应用

    视觉传感器是一种常见的传感器,它可以将光学信号转化为数字信号,用于实现图像采集、处理和分析等功能。在当今智能化的时代,视觉传感器在各个领域都
    的头像 发表于 01-04 08:44 4691次阅读
    <b class='flag-5'>视觉</b><b class='flag-5'>传感器</b>的定义、结构和原理、作用及应用