0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

2D转3D威廉希尔官方网站 的便利性和方法

tUM2_ADA 来源:djl 作者:ADAS 2019-08-08 17:21 次阅读

为什要进行2D转3D?

传统的数字高清2D电视已经不能满足人们对视频的真实感的要求,迎接3D电视的到来。

3D视频的内容主要来自三个个方面,其一,立体摄像机直接产生的视频;其二,将原有的2D视频信号转换为3D视频信号;其三,计算机生成图像(CGI);

好处:

1.目前存在大量的传统2D视频,重现银幕经典。

2.威廉希尔官方网站 尚未完全成型,特别是在3D电视方面,如果研究出很好的算法,有很大的商业潜力!

3D 成像的基本原理

基本原理:人类的左眼和右眼在水平方向上有5~6.5cm的位移,因此左右眼所看见的画面中对应实际物体上同一点存在一定距离,通过这种差别判断物体的远近和深度,即视差parallax原理。

根据“视差”原理,把同一景像用两只眼睛视角的差距制造出两个影像,然后让两只眼睛各看到对应自己一边的影像,就能刺激大脑产生3D(3Dimensions)立体效果的。

2D转3D威廉希尔官方网站
的便利性和方法

举例:

1、大家可以轮流闭上一只眼试试--看同一个东西,侧面不同

2、单眼对笔尖--比双眼困难很多

2D转3D威廉希尔官方网站 分析

简单的说就是从场景的一副图像或者一系列图像中,推导出该场景的精确的三维几何描述,并定量地确定场景中物体的性质。

主要步骤:

1.生成灰度图

2.生成主轮廓图,表示出图像中重要物体的边缘(图像分割威廉希尔官方网站 )

3.生成深度图,表示出以观看者为中心的图像中各物体的深度

4.3D呈现,表示出图像中各物体的空间几何结构

5.最终的3D表示所谓的3D图像对,即略微不同的图像,其中一个为左眼图像,另一个为右眼图像。

几个关键词

深度线索:用来提取三维信息的图像特征

深度图:通常表示为灰度图,每一个像素点的值即为该点的深度

零视差、正视差、负视差:一个点落在银幕上、一个点介于银幕与观看者之间、一个点看起来在银幕平面远离观看者。

3D图的表示方法:一种是采用双目视差图方式的3D图像对;另一种是采用2D图加深度图的方式

视差图与深度图的关系

2D转3D威廉希尔官方网站
的便利性和方法

深度几何关系

z为实物到眼睛的距离,即为深度;B为左眼与右眼的距离;XL 与XR 分别为三维世界中的点 P 在左眼图像中的银幕坐标与点 P 在右眼图像中的银幕坐标。 D 为眼睛与银幕之间的距离。

通过控制视差d我们可以达到控制可视深度的目的,通常的做法是将作为左眼图像,并通过增加视差来产生右眼图像。

2D转3D的基本框架

2D转3D威廉希尔官方网站
的便利性和方法

图像分割

图像分割的主要目标是将图像划分为与其中含有的真实世界的物体或区域有强相关性的组成部分。

图像分割算法一般是基于亮度值的两个基本特征之一: 不连续性和相似性。

分割的越细致,通过后期的深度提取与深度赋值产生的3D世界就越有深度感。

从深度线索中提取深度

基于深度提取算法所依赖的深度线索我们可以将深度提取算法分为12类。

2D转3D威廉希尔官方网站
的便利性和方法

根据立体的效果,要不断的调整获取的深度信息,人工很浪费时间。

双目视差深度线索

原理:从两个不同视点拍摄得到的同一个场景的两幅图像之间存在双目视差。双目视差interwetten与威廉的赔率体系 了人眼观察实物的机制,是深度感知的重要线索,通过立体匹配的方法在两幅图像中寻找对应的像素,计算双目视差,视差越大,场景越近,视差越小,场景越远;将双目视差转换为场景深度

2D转3D威廉希尔官方网站
的便利性和方法

P l 与P r 是3D 世界中点 P 在左图像和右图像上的投影, O l 与 Or 是左摄像机与右摄像机坐标系统中的原点

点P的深度值Z可通过如下公式计算:

Z= f*T/d

其中 d= x r -x l

阴影深度线索

原理:人类的大脑能够非常好的利用阴影及一般情况下的明暗度提供的线索。检测到的阴影不仅明确地指示了隐藏边缘的位置和与其邻近的表面的可能方向, 而且一般的敏感度性质对于导出深度信息有重要的价值。

一个典型的例子是人脸的照片, 从直接的2D 表示, 我们的大脑可以很好的猜出其可能的照明模型, 进而推断出人脸的3D 性质。

分析

这些方法都是在实际操作时科研人员发现的单目深度威廉希尔官方网站 比较困难,有时仅仅有一幅图像得到的仅仅是深度关系,而不是实际的深度。

目前的主流算法是利用双目深度线索,结合多幅图像在空间维度与时间维度上相关性来获取场景的深度信息,特定环境下采用单目威廉希尔官方网站 。

没有一个系统的普遍的算法,这也是2D转3D威廉希尔官方网站 研究中的难题。

由深度图进行3D图合成!

从深度图进行3D图合成

过程:从深度图到立体图像对生成, 实际上是从原始图像结合深度图生成左眼图像与 右眼图像。而左右眼图像是通过对分割后物体的平移操作获得的。

最初的是将原始的2D图像作为一个眼的图像,平移得到另一个眼的图像。

现在

原始的2D素材被当作介于左右画面的中间画面,左右眼的图像都是经过的平移得到的。

减小了因为计算造成的画面变形。

后期制作

得到3D图像对之后,根据3D效果要对前面的步骤不断的微调,已达到最好的3D效果。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 3D
    3D
    +关注

    关注

    9

    文章

    2878

    浏览量

    107522
  • 图像分割
    +关注

    关注

    4

    文章

    182

    浏览量

    17999
  • 深度
    +关注

    关注

    0

    文章

    12

    浏览量

    8840
收藏 人收藏

    评论

    相关推荐

    针对显示屏的2D/3D触摸与手势开发工具包DV102014

    手势功能并与2D PCAP多点触摸设计实现无缝结合而言,GestIC威廉希尔官方网站 可谓是一款复杂极低的解决方案。利用这一方案,设计人员现在可以轻松地结合2D
    发表于 11-07 10:45

    为什么3D2D模型不能相互转换?

    AD17.1.5软件,3D2D模型不能相互转换,按3可以进入3D模型,按2不可以进入2D模型,
    发表于 09-20 05:35

    2D3D视频自动转换系统

    完成系统界面的设置及控制、显示等功能,其DSP处理器实现图像分割和渲染等核心算法,实现了1个高效的2D3D视频的视频转换系统。2D3D
    发表于 03-06 14:20 1次下载
    <b class='flag-5'>2D</b>到<b class='flag-5'>3D</b>视频自动转换系统

    适用于显示屏的2D多点触摸与3D手势模块

    本视频将展示结合多点触摸与3D手势模块的Microchip显示解决方案。支持2D/3D功能的显示屏是Microchip基于GestIC®威廉希尔官方网站 的最新解决方案。显示屏上结合了
    的头像 发表于 06-06 02:45 5142次阅读

    如何把OpenGL中3D坐标转换成2D坐标

    在OpenGL中,一切事物都在3D空间中,但我们的屏幕坐标确实2D像素数组,OpenGL大部分工作就是把3D坐标转换成适应屏幕的2D像素。3D
    的头像 发表于 07-09 10:40 8592次阅读

    3D 机器视觉为什么将逐步取代 2D 识别威廉希尔官方网站

    不难判断,在此趋势下,3D 机器视觉将面临较快的增长趋势,3D 视觉未来将逐步取代 2D 识别威廉希尔官方网站 ,在许多“痛点型应用场景”中大显身手,发展成为主流视觉系统。
    的头像 发表于 08-21 10:33 5108次阅读

    阿里研发全新3D AI算法,2D图片搜出3D模型

    导购等领域的门槛。该研究成果已被AI顶会NeurIPS 2020收录。 尽管3D打印、VR等应用场景逐渐成熟,但以3D搜索为代表的3D智能威廉希尔官方网站 依旧处于早期研究阶段。例如,受限于
    的头像 发表于 12-04 15:49 3536次阅读

    谷歌发明的由2D图像生成3D图像威廉希尔官方网站 解析

    谷歌发明的由2D图像生成3D图像的威廉希尔官方网站 ,利用3D估计神经网络图像信息的补全以及预测,融合了拍摄角度、光照等信息,让生成的3D图像看起来更加逼
    的头像 发表于 12-24 12:55 4765次阅读
    谷歌发明的由<b class='flag-5'>2D</b>图像生成<b class='flag-5'>3D</b>图像<b class='flag-5'>威廉希尔官方网站
</b>解析

    3d人脸识别和2d人脸识别的区别

    首先是3d人脸识别和2d人脸识别图像数据获取不同。3D人脸识别是以3D摄像头立体成像,而2D是以2D
    发表于 02-05 16:00 4.6w次阅读

    基于神经网络的2D3D的机器学习

    FSD beta所采用的voxel 3D NN的威廉希尔官方网站 细节并未得到披露,从类似的一般的公开方法来说,从2D单个图像中恢复出voxel
    发表于 10-11 15:32 754次阅读

    探讨一下2D3D拓扑绝缘体

    这样的物理规范,具有很高的普适,applicable 到所有维度空间。对二维 2D 拓扑绝缘体 (2D - TI) 和三维 3D 拓扑绝缘体 (3
    的头像 发表于 11-23 10:23 2508次阅读

    2D3D视觉威廉希尔官方网站 的比较

    作为一个多年经验的机器视觉工程师,我将详细介绍2D3D视觉威廉希尔官方网站 的不同特点、应用场景以及它们能够解决的问题。在这个领域内,2D3D视觉
    的头像 发表于 12-21 09:19 1129次阅读

    一文了解3D视觉和2D视觉的区别

    一文了解3D视觉和2D视觉的区别 3D视觉和2D视觉是两种不同的视觉模式,其区别主要体现在立体感、深度感和逼真度上。本文将详细阐述这些区别,并解释为什么
    的头像 发表于 12-25 11:15 3037次阅读

    介绍一种使用2D材料进行3D集成的新方法

    美国宾夕法尼亚州立大学的研究人员展示了一种使用2D材料进行3D集成的新颖方法
    的头像 发表于 01-13 11:37 1065次阅读

    有了2D NAND,为什么要升级到3D呢?

    2D NAND和3D NAND都是非易失存储威廉希尔官方网站 (NVM Non-VolatileMemory),属于Memory(存储器)的一种。
    的头像 发表于 03-17 15:31 1016次阅读
    有了<b class='flag-5'>2D</b> NAND,为什么要升级到<b class='flag-5'>3D</b>呢?