0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

RGBD相机模型与图片处理

新机器视觉 来源:博客园 2023-05-15 11:33 次阅读


			

图像

ebe160ee-f2ce-11ed-90ce-dac502259ad0.png

灰度图

灰度是描述灰度图像内容的最直接的视觉特征。它指黑白图像中点的颜色深度,范围一般从0到255,白色为255,黑色为0,故黑白图像也称灰度图像。灰度图像矩阵元素的取值通常为[0,255],因此其数据类型一般为8位无符号整数,这就是人们通常所说的256级灰度。 灰度图:一个像素的灰度可以用8 位整数记录,也就是一个0~255的值。

深度图

当我们要记录的信息更多时,一个字节就不够了。 在RGB-D相机的深度图中,记录了各个像素与相机之间的距离。这个距离通常是以毫米为单位,而RGB-D 相机的量程通常在十几米左右,超过了255。 人们会采用16 位整数(C++ 中的unsigned short)来记录深度图的信息,也就是位于0~65535 的值。换算成米的话,最大可以表示65 米,足够RGB-D 相机使用了。

彩色图

彩色图像的表示则需要通道(channel)的概念。在计算机中,我们用红色、绿色和蓝色这三种颜色的组合来表达任意一种色彩。于是对于每一个像素,就要记录其R、G、B 三个数值,每一个数值就称为一个通道。例如,最常见的彩色图像有三个通道,每个通道都由8 位整数表示。在这种规定下,一个像素占据24 位空间。 通道的数量、顺序都是可以自由定义的。在OpenCV 的彩色图像中,通道的默认顺序是B、G、R。也就是说,当我们得到一个24 位的像素时,前8 位表示蓝色数值,中间8 位为绿色,最后8 位 为红色。同理,亦可使用R、G、B 的顺序表示一个彩色图。如果还想表达图像的透明度,就使用R、G、B、A 四个通道。

RGB彩色图与灰度图之间的转换

彩色图像转换为灰度图像时,需要计算图像中每个像素有效的亮度值,其计算公式为: Y = 0.299R + 0.578G + 0.114B

双目相机通过视差来计算深度。RGBD相机则可以主动测量每个像素的深度。

  1. 通过红外结构光(Structured Light)来测量像素距离的。例子有Kinect 1 代、Project Tango 1 代、Intel RealSense 等。

  2. 通过飞行时间法(Time-of-flight,ToF)原理测量像素距离的。例子有Kinect 2 代和一些现有的ToF 传感器

RGBD相机原理图 ebf5ba62-f2ce-11ed-90ce-dac502259ad0.png

深度图的保存

那么如何从RGBD相机提取像素的深度信息呢? 下面是一个简单的小程序,可以显示像素的深度信息.

#include 
#include 
#include 
using namespace std;

float depthscale = 1.0f/1000; //尺度因子,表示一个像素对应多少实际中的米
int main(int argc, char **argv)
{
    cv::Mat  depth = cv::imread("img.jpg");
    depth.convertTo(depth,CV_32FC1,depthscale); //这个转换很重要

    for (int v = 0; v < depth.rows; v++)
    {
        for (int u = 0; u < depth.cols; u++) {
            unsigned int d = depth.ptr<unsigned short>(v)[u]; // 深度值
            if (d == 0)
                continue; // 为0表示没有测量到
            else
            {
                cout<"";
                if(v%50==0||u%50==0)
                    cout<<endl;
            }
            
        }
    }
    return 0;
}

ConvertTo()函数

需要注意,其中的ConvertTo函数作用如下:
img: 图像数据来源,其类型为Mat。
注意: 不是所有格式的Mat型数据都能被使用保存为图片,目前OpenCV主要只支持单通道和3通道的图像,并且此时要求其深度为8bit和16bit无符号(即CV_16U),所以其他一些数据类型是不支持的,比如说float型等。如果Mat类型数据的深度和通道数不满足上面的要求,则需要使用convertTo()函数和cvtColor()函数来进行转换。
convertTo()函数负责转换数据类型不同的Mat,即可以将类似float型的Mat转换到imwrite()函数能够接受的类型。
而cvtColor()函数是负责转换不同通道的Mat,因为该函数的第4个参数就可以设置目的Mat数据的通道数(只是我们一般没有用到它,一般情况下这个函数是用来进行色彩空间转换的)。
另外也可以不用imwrite()函数来存图片数据,可以直接用通用的XML IO接口函数将数据存在XML或者YXML中。

具体含义,缩放并转换到另外一种数据类型:

  1. dst:目的矩阵;

  2. type:需要的输出矩阵类型,或者更明确的,是输出矩阵的深度,如果是负值(常用-1)则输出矩阵和输入矩阵类型相同;

  3. scale:比例因子;

  4. shift:将输入数组元素按比例缩放后添加的值;
    dst(i)=src(i)xscale+(shift,shift,...)

审核编辑 :李倩
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像数据
    +关注

    关注

    0

    文章

    52

    浏览量

    11279
  • 函数
    +关注

    关注

    3

    文章

    4329

    浏览量

    62586
  • 模型
    +关注

    关注

    1

    文章

    3236

    浏览量

    48823

原文标题:RGBD相机模型与图片处理

文章出处:【微信号:vision263com,微信公众号:新机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    AD8275 spice模型“AD8275.cir”自动生成了一个LTspice模型用来仿真,仿真时弹出图片所示窗口如何处理

    我用官网的AD8275 spice模型“AD8275.cir”自动生成了一个LTspice模型用来仿真,仿真时弹出图片所示窗口,如何处理
    发表于 06-04 12:27

    #硬声创作季 相机标定任务概述 哥伦比亚大学相机模型与标定系列课程(1)

    相机模型机器学习
    Mr_haohao
    发布于 :2022年10月12日 15:15:21

    #硬声创作季 相机标定算法详解 哥伦比亚大学相机模型与标定系列课程(3)

    相机模型机器学习
    Mr_haohao
    发布于 :2022年10月12日 15:16:01

    #硬声创作季 相机的内参和外参矩阵 哥伦比亚大学相机模型与标定系列课程(4)

    相机模型机器学习
    Mr_haohao
    发布于 :2022年10月12日 15:16:37

    基于LABVIEW对数码相机图片处理研究

    希望有经验的各位培养们给这个论文——基于LABVIEW对数码相机图片处理研究 ,做解说,谢谢!
    发表于 05-09 22:51

    基于LABVIEW对数码相机图片处理研究

    我的毕业论文的题目是——基于LABVIEW对数码相机图片处理研究,希望大家给给帮助!
    发表于 05-09 22:52

    工业相机USB传输图片问题

    ,现在想用这根线把相机直接连接到一块FPGA开发板上不经过电脑了,直接把图片传输到FPGA处理,但是开发板上没有USB 接口,请问我直接买一个USB模块扩展的话这个模块还需要USB芯片吗,应该怎么去把
    发表于 05-04 10:34

    数码相机定位

    数码相机定位:本文对数码相机的定位情况进行了分析。首先运用matlab 软件对像的图片进行数据处理,采用最小二乘法拟合出像的边缘二次曲线方程。以小孔成像原理和空间转换
    发表于 11-18 11:51 44次下载

    迷你图片处理工具

    图片处理工具,可以修改图片编码格式,能够处理JAVA不能识别的图片
    发表于 03-24 14:52 4次下载

    JAVA教程之图片的拖动处理

    JAVA教程之图片的拖动处理,很好的学习资料。
    发表于 03-31 11:13 7次下载

    图片数字化FFT处理以及应用

    图片数字化FFT处理以及应用说明。
    发表于 05-31 15:15 11次下载

    面向边缘计算和AI应用的智能工业相机

    设计的相机中进行图片处理,增强了图像的可靠性,减少了线缆数量,降低了系统成本。图片边缘处理,降低了带宽和存储容量,因此降低了系统的总成本。
    的头像 发表于 06-16 15:54 1982次阅读

    如何学习相机模型与标定?

    相机标定是通过输入带有标定patter的标定板来获得相机参数的一个过程。实际的光学成像是一套非常复杂的过程,从三维世界投影到相机中的二维图像。相机标定就是用抽象的数学
    的头像 发表于 06-01 14:36 761次阅读
    如何学习<b class='flag-5'>相机</b><b class='flag-5'>模型</b>与标定?

    如何区分工业相机与普通相机

    工业相机输出的是裸数据(raw data),其光谱范围也往往比较宽,比较适合进行高质量的图像处理算法,例如机器视觉(Machine Vision)应用。而普通相机拍摄的图片,其光谱范围
    发表于 07-10 09:10 791次阅读
    如何区分工业<b class='flag-5'>相机</b>与普通<b class='flag-5'>相机</b>

    谷歌模型怎么用PS打开文件和图片

    谷歌模型本身并不是用Adobe Photoshop(简称PS)打开的文件和图片格式。谷歌模型通常是用于机器学习和深度学习的模型文件,如TensorFlow
    的头像 发表于 02-29 18:25 1441次阅读