平码五不中公式规律
  • / 20
  • 下载费用:30 金币  

3D图像感测装置与3D图像感测的方法.pdf

关 键 ?#21097;?/dt>
图像 装置 方法
  专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
摘要
申请专利号:

CN201410008686.9

申请日:

2014.01.07

公开号:

CN103916660A

公开日:

2014.07.09

当前法律状态:

授权

有效性:

有权

法?#19978;?#24773;: 授权|||实质审查的生效IPC(主分类):H04N 13/02申请日:20140107|||公开
IPC分类号: H04N13/02; G06F3/01 主分类号: H04N13/02
申请人: 义明科技股份有限公司
发明人: 张鸿德; 吴高彬; 蔡坤隍; 洪尚铭; 庄政达; 方智仁; 郭蔡增
地址: 中国台湾新竹市
优?#28909;ǎ?/td> 2013.12.19 TW 102147226; 2013.01.07 US 61/749,864
专利代理机构: 北京市柳沈律师事务所 11105 代理人: 史新宏
PDF完整版下载: PDF下载
法律状态
申请(专利)号:

CN201410008686.9

授权公告号:

||||||

法律状态公告日:

2016.05.04|||2014.08.06|||2014.07.09

法律状态类型:

授权|||实质审查的生效|||公开

摘要

3D图像感测装置与3D图像感测的方法。该3D图像感测装置包含一光源、一感测模块及一信号处理模块。该感测模块包含一像素阵列、一控制单元及一光源驱动器。该光源产生具有一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;?#30340;闪烁光。该像素阵列取样该闪烁光产生一取样结果。该控制单元对该取样结果执行一图像处理以产生对应该取样结果的一频谱;该光源驱动器根据该K倍闪烁噪声的?#24503;?#25110;该预定?#24503;剩?#39537;动该光源。该信号处理模块输出该预定?#24503;?#25110;根据该频谱,产生并输出该K倍闪烁噪声的?#24503;?#33267;该光源驱动器,且根据该取样结果包含该光源开启时的多个第一图像与该光源关闭时的多个第二图像,产生一深度信息。

权利要求书

权利要求书
1.  一种3D图像感测装置,包含:
一光源,用以产生具有一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;?#30340;一闪烁光,其中K为一正实数,且该闪烁噪声由一交流电源产生;
一感测模块,包含:
一像素阵列,用以取样该闪烁光以产生一取样结果,其中该取样结果包含该光源开启时的多个第一图像与该光源关闭时的多个第二图像;
一控制单元,对该取样结果执行一图像处理以产生对应该取样结果的一频谱;及
一光源驱动器,用以根据该K倍闪烁噪声的?#24503;?#25110;该预定?#24503;剩?#39537;动该光源;及
一信号处理模块,耦接于该感测模块,用以根据该频谱,产生该K倍闪烁噪声的?#24503;剩?#19988;根据该多个第一图像与该多个第二图像,产生一深度信息,其中?#22791;肒倍闪烁噪声的?#24503;?#22312;一预定?#24503;史?#22260;内时,该信号处理模块输出该K倍闪烁噪声的?#24503;?#33267;该光源驱动器,或?#22791;肒倍闪烁噪声的?#24503;?#22312;该预定?#24503;史?#22260;外时,该信号处理模块输出该预定?#24503;?#33267;该光源驱动器。

2.  如权利要求1所述的3D图像感测装置,其中该光源是一红外线光源或一红外线激光光源。

3.  如权利要求1所述的3D图像感测装置,其中该控制单元包含:
一模拟数字转换器,用以根据该取样结果,产生一数?#20013;?#21495;;及
一离散傅立叶(discrete Fourier transform,DFT)转换器,用以根据该数?#20013;?#21495;,产生对应该取样结果的该频谱。

4.  如权利要求1所述的3D图像感测装置,其中该信号处理模块包含:
一闪烁噪声鉴别器,用以根据该频谱,决定对应于2倍交流电?#24503;?#30340;该闪烁噪声,以及用以根据该闪烁噪声,产生对应于该K倍闪烁噪声的?#24503;?#30340;一控制信号;及
一?#24503;?#20135;生器,耦接于该闪烁噪声鉴别器,用以根据该控制信号,产生该K倍闪烁噪声的?#24503;省?BR>
5.  如权利要求4所述的3D图像感测装置,其中该?#24503;?#20135;生器是一延迟时间振荡器(delay time oscillator)、一阻容振荡器(RC oscillator)、一锁相回路、 一晶体振荡器、一共振器(resonator)或一分频器。

6.  如权利要求1所述的3D图像感测装置,其中该像素阵列在该光源开启时的曝光时间等于该像素阵列在该光源关闭时的曝光时间。

7.  如权利要求1所述的3D图像感测装置,其中信号处理模块另用以根据该多个第一图像中的一第一图像与对应于该第一图像的一第二图像,判断一使用者的手势。

8.  如权利要求1所述的3D图像感测装置,其中该感测模块还包含:
一红外线滤波器,用?#36816;?#20943;红外线之外的其他光波。

9.  如权利要求1所述的3D图像感测装置,其中该频?#36164;?#23545;应于该取样结果内该光源关闭时的多个第二图像。

10.  如权利要求1所述的3D图像感测装置,其中K为N或,其中N为一大于1的正整数。

11.  一种3D图像感测的方法,其中应用于该方法的3D图像感测装置包含一光源、一感测模块及一信号处理模块,该方法包含:
该感测模块根据一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;剩?#39537;动该光源产生具有该K倍闪烁噪声的?#24503;?#25110;该预定?#24503;?#30340;一闪烁光,其中K为一正实数,且该闪烁噪声由一交流电源产生;
该感测模块对该闪烁光取样以产生一取样结果,其中该取样结果包含该光源开启时的多个第一图像与该光源关闭时的多个第二图像;
该感测模块对该取样结果执行一图像处理以产生对应该取样结果的一频谱;
该信号处理模块直接输出该预定?#24503;剩?#25110;根据该频谱,产生并输出该K倍闪烁噪声的?#24503;?#33267;该感测模块;及
该信号处理模块根据该多个第一图像与该多个第二图像,产生一深度信息。

12.  如权利要求11所述的方法,其中该感测模块对该取样结果执行该图像处理以产生对应该取样结果的该频?#35013;?#21547;:
根据该取样结果,产生一数?#20013;?#21495;;及
根据该数?#20013;?#21495;,产生对应该取样结果的该频谱。

13.  如权利要求11所述的方法,其中该信号处理模块根据该频谱,产生并输出该闪烁噪声的?#24503;?#33267;该感测模块包含:
根据该频谱,决定对应于2倍交流电?#24503;?#30340;该闪烁噪声;
根据该闪烁噪声,产生对应于该K倍闪烁噪声的?#24503;?#30340;一控制信号;及
根据该控制信号,产生该K倍闪烁噪声的?#24503;?#33267;该感测模块。

14.  如权利要求11所述的方法,其中该像素阵列在该光源开启时的曝光时间等于该像素阵列在该光源关闭时的曝光时间。

15.  如权利要求11所述的方法,其中?#22791;肒倍闪烁噪声的?#24503;?#22312;一预定?#24503;史?#22260;内时,该信号处理模块输出该K倍闪烁噪声的?#24503;?#33267;该光源驱动器,或?#22791;肒倍闪烁噪声的?#24503;?#22312;该预定?#24503;史?#22260;外时,该信号处理模块输出该预定?#24503;?#33267;该光源驱动器。

16.  如权利要求11所述的方法,其中K为N或,其中N为一大于1的正整数。

说明书

说明书3D图像感测装置与3D图像感测的方法
技术领域
本发明涉及一种3D图像感测装置与3D图像感测的方法,尤其涉及一种利用整数倍闪烁噪声的?#24503;?#25110;预定?#24503;?#28040;除背景光的噪声的3D图像感测装置与3D图像感测的方法。
背景技术
随着移动装置的人机界面的演进,人机界面具有朝向自然使用者界面(natural user interface,NUI)的趋势,其中手势辨识是最重要的自然使用者界面科技之一。可利用不同的2D图像处理执行手势辨识。然而,2D图像传感器并无法决定图像的深度,导致大大影响手势辨识的能力。因此,利用包含深度信息的3D图像感测是往后执行手势辨识较佳的方法。
背景光传感器(Ambient light sensor,ALS)和邻接传感器(proximity sensor,PS)?#36824;?#27867;使用在大多数移动装置上(例如智能?#21482;?#25110;平板计算机)。因为对于任?#25105;?#21160;装置而言,新元件设置在印刷电路板的空间都将大幅增加移动装置的成本,所以任?#25105;?#21160;装置都具有整合背景光传感器、邻接传感器、色温传感器或温度传感器与手势辨识至同一集成电路的需求。然而,现有技术并无法提供整合的解决方案给使用者。
发明内容
本发明的一实施例提供一种3D图像感测装置。该3D图像感测装置包含一光源、一感测模块及一信号处理模块,其中该感测模块包含一像素阵列、一控制单元及一光源驱动器。该光源是用以产生具有一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;?#30340;一闪烁光,其中K为一正实数。该像素阵列是用以取样该闪烁光以产生一取样结果,其中该取样结果包含该光源开启时的多个第一图像与该光源关闭时的多个第二图像;该控制单元对该取样结果执行一图像处理以产生对应该取样结果的一频谱;该光源驱动器是用以根据该K倍闪烁噪声的?#24503;?#25110;该预定?#24503;剩?#39537;动该光源。该信号处理模块是耦接于该感测模块, 用以根据该频谱,产生该K倍闪烁噪声的?#24503;剩?#19988;根据该多个第一图像与该多个第二图像,产生一深度信息,其中?#22791;肒倍闪烁噪声的?#24503;?#22312;一预定?#24503;史?#22260;内时,该信号处理模块输出该K倍闪烁噪声的?#24503;?#33267;该光源驱动器,或?#22791;肒倍闪烁噪声的?#24503;?#22312;该预定?#24503;史?#22260;外时,该信号处理模块输出该预定?#24503;?#33267;该光源驱动器。
本发明的另一实施例提供一种3D图像感测的方法,其中应用于该方法的3D图像感测装置包含一光源、一感测模块及一信号处理模块。该方法包含该感测模块根据一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;剩?#39537;动该光源产生具有该K倍闪烁噪声的?#24503;?#25110;该预定?#24503;?#30340;一闪烁光,其中K为一正实数;该感测模块对该闪烁光取样以产生一取样结果,其中该取样结果包含该光源开启时的多个第一图像与该光源关闭时的多个第二图像;该感测模块对该取样结果执行一图像处理以产生对应该取样结果的一频谱;该信号处理模块直接输出该预定?#24503;剩?#25110;根据该频谱,产生并输出该K倍闪烁噪声的?#24503;?#33267;该感测模块;该信号处理模块根据该多个第一图像与该多个第二图像,产生一深度信息。
本发明提供一种3D图像感测装置与3D图像感测的方法。相较于现有技术,因为该3D图像感测装置整合一感测模块与一信号处理模块至同一集成电路,所以本发明具有较低的成本与较有效率。另外,因为一光源可产生具有整数倍闪烁噪声的?#24503;?#25110;一预定?#24503;?#30340;一闪烁光,所以本发明?#19978;?#38500;一背景光的噪声,导致本发明的深度感测与手势辨识的能力可被提高。
附图说明
图1是本发明的一实施例说明一种3D图像感测装置的示意图。
图2和图3是说明当光源产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,信号处理模块可产生不受背景光影响的深度信息的示意图。
图4是说明信号处理模块利用光源所产生的具有K倍闪烁噪声的?#24503;?#30340;闪烁光,判断使用者的手势的示意图。
图5是本发明的另一实施例说明一种3D图像感测装置的示意图。
图6是本发明的另一实施例说明一种3D图像感测装置的示意图。
图7是本发明的另一实施例说明一种3D图像感测装置的示意图。
图8是本发明的另一实施例说明一种3D图像感测装置的示意图。
图9是本发明的另一实施例说明一种3D图像感测的方法的流程图。
【符号说明】
100、400、500、600、700  3D图像感测装置
102   光源
104、404 感测模块
106、506、606、706   信号处理模块
1042  像素阵列
1044  控制单元
1046  光源驱动器
10442 模拟数字转换器
10444 离散傅立叶转换器
1062  闪烁噪声鉴别器
1064  ?#24503;?#20135;生器
1066  ?#19988;资源?#20648;器
4042  背景可见光传感器
4044  邻接传感器
4046  色温传感器
4048  温度传感器
5062  触控控制器
508   触控传感器
6062  数字图像处理器
608   外部图像传感器
708   惯?#28304;?#24863;器
7062  感测集线器
AF    闪烁噪声的?#24503;?
CS    控制信号
DS    数?#20013;?#21495;
IS    红绿蓝图像
SR    取样结果
SP    频谱
TS    信号
800-816  步骤
具体实施方式
请参照图1,图1是本发明的一实施例说明一种3D图像感测装置100的示意图。如图1所示,3D图像感测装置100包含一光源102、一感测模块104和一信号处理模块106,其中感测模块104包含一像素阵列1042、一控制单元1044和一光源驱动器1046,且控制单元1044包含一模拟数字转换器10442与一离散傅立叶(discrete Fourier transform,DFT)转换器10444。光源102是一红外线光源或一红外线激光光源(例如一红外线发光二极管或一红外线激光二极管),且是用以产生具有一K倍闪烁噪声的?#24503;?例如100Hz或120Hz)或一预定?#24503;?#30340;一闪烁光,其中像素阵列1042在光源102开启时的曝光时间等于像素阵列1042在光源102关闭时的曝光时间,K为一正实数(例如K为N或,其中N为一大于1的正整数),且闪烁噪声由一交流电源产生。但在本发明的另一实施例中,光源102是一可见光源。像素阵列1042是一G乘H的互补式金属氧化物半导体(Complementary metal-oxide-semiconductor,CMOS)图像感测像素阵列,其中G和H是正整数。但本发明并不受限于像素阵列1042是一互补式金属氧化物半导体图像感测像素阵列,亦即像素阵列1042也可是一电荷耦合元件(Charge-coupled Device,CCD)图像感测像素阵列。像素阵列1042包含一红外线滤波器,所以像素阵列1042可衰减红外线之外的其他光波。在本发明的一实施例中,光源102所产生的闪烁光的波长是850nm。当光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,感测模块104的像素阵列1042是用以取样光源102所产生的闪烁光以产生一取样结果SR,其中像素阵列1042所产生的取样结果SR包含光源102开启时的多个第一图像与光源102关闭时的多个第二图像,且光源102和像素阵列1042可同?#25509;?#27599;一画面的起点。当像素阵列1042产生取样结果SR后,控制单元1044对像素阵列1042所产生的取样结果SR执行一图像处理以产生对应像素阵列1042所产生的取样结果SR的一频谱SP,其中频谱SP是对应于取样结果SR内光源102关闭时的多个第二图像。如图1所示,控制单元1044所执行的图像处理包含模拟数字转换器10442根据像素阵列1042所产生的取样结果SR,产生一数?#20013;?#21495;DS,以及离散傅立叶转换器10444根据模拟数字转换器10442所产生的数?#20013;?#21495;DS,产生对应像素阵列1042所产生的取 样结果SR的频谱SP。另外,光源驱动器1046是用以根据K倍闪烁噪声的?#24503;?#25110;一预定?#24503;剩?#20135;生方波以开启或关闭光源102,其中光源驱动器1046所产生的方波具有K倍闪烁噪声的?#24503;?#25110;一预定?#24503;省?
如图1所示,信号处理模块106是耦接于像素阵列1042和控制单元1044。因为像素阵列1042所产生的取样结果SR包含光源102开启时的多个第一图像与光源102关闭时的多个第二图像,所以信号处理模块106可根据光源102开启时的多个第一图像与光源102关闭时的多个第二图像,产生一深度信息。亦即信号处理模块106利用多个第一图像的每一第一图像减去多个第二图像的一相对应的第二图像,产生深度信息。请参照图2,图2是说明当光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,信号处理模块106可产生不受背景光影响的深度信息的示意图。如图2所示,当闪烁光具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#26102;,信号处理模块106根据多个第一图像(光源102开启)所产生对应于背景光(例如室内日光灯)的面积和(区块I和区块III)会等于根据多个第二图像(光源102关闭)所产生对应于背景光的面积和(区块II和区块IV)。因此,如式(1)所示,信号处理模块106便可通过多个第一图像和多个第二图像,消除室内日光灯(100Hz或120Hz)的能量波形的影响。如式(1)所示,式(1)在不同的起始相位角θ和不同的曝光时间X都?#38378;ⅰ?#21478;外,信号处理模块106所产生的深度信息大约和距离的平方成反?#21462;?
光源102开启
∫0Xcos(t+θ)dt+∫πX+πcos(t+θ)dt=sin(t+θ)|0X+sin(t+θ)|πX+π=(sin(X+θ)-sinθ)+(-sin(X+θ)+sinθ)=0---(1)]]>
光源102关闭
∫π/2X+π/2cos(t+θ)dt+∫3π/2X+3π/2cos(t+θ)dt=sin(t+θ)|π/2X+π/2+sin(t+θ)|3π/2X+3π/2=(cos(X+θ)-cosθ)+(-cos(X+θ)+cosθ)=0]]>
其中0<X<π/2
另外,式(2)是对应于式(1)的一般通式:
光源102开启
∫0+2π*1/K+θX1+2π*1/K+θcos(t)dt+∫0+2π*2/K+θX1+2π*2/K+θcos(t)dt+...+∫0+2π*K/K+θX1+2π*K/K+θcos(t)dt=sin(t)|0+2π*1/K+θX1+2π*1/K+θ+sin(t)|0+2π*2/K+θX1+2π*2/K+θ+...+sin(t)|0+2π*K/K+θX1+2π*K/K+θ=0---(2)]]>
光源102关闭
∫0+2π*1/K+θX2+2π*1/K+θcos(t)dt+∫0+2π*2/K+θX2+2π*2/K+θcos(t)dt+...+∫0+2π*K/K+θX2+2π*K/K+θcos(t)dt=sin(t)|0+2π*1/K+θX2+2π*1/K+θ+sin(t)|0+2π*2/K+θX2+2π*2/K+θ+...+sin(t)|0+2π*K/K+θX2+2π*K/K+θ=0]]>
如式(2)和图3所示,X1为光源102开启时的积分时间,X2为光源102关闭时的积分时间,以及θ起始相位角,其中K可以为N或1/N,但N是不为1的正整数,且K*(X1+X2)不大于1/120Hz或1/100Hz。
如图1所示,信号处理模块106包含一闪烁噪声鉴别器1062与一?#24503;?#20135;生器1064,其中?#24503;?#20135;生器1064是一延迟时间振荡器(delay time oscillator)、一阻容振荡器(RC oscillator)、一锁相回路、一晶体振荡器、一共振器(resonator)或一分频器。闪烁噪声鉴别器1062是用以根据频谱SP,决定对应于2倍交流电?#24503;?#30340;闪烁噪声,以及用以根据对应于2倍交流电?#24503;?#30340;闪烁噪声,产生对应于K倍闪烁噪声的?#24503;?#30340;一控制信号CS;?#24503;?#20135;生器1064是耦接于闪烁噪声鉴别器1062,用以根据控制信号CS,产生K倍闪烁噪声的?#24503;蔄F至光源驱动器1046,其中?#24503;?#20135;生器1064所产生的K倍闪烁噪声的?#24503;?#26159;在一预定?#24503;史?#22260;内。另外,当?#24503;?#20135;生器1064所产生的K倍闪烁噪声的?#24503;?#22312;预定?#24503;史?#22260;外时,?#24503;?#20135;生器1064直接输出预定?#24503;?#33267;光源驱动器1046。
请参照图4,图4是说明信号处理模块106利用光源102所产生的具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光,判断一使用者的手势的示意图。如图2所示,当光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,信号处理模块106可利用像素阵列1042所产生的多个第一图像的每一第一图像减去多个第二图像的一相对应的第二图像,产生深度信息。然后,信号处理模块106可再从深度信息中,判断使用者的手势。
请参照图5,图5是本发明的另一实施例说明一种3D图像感测装置400的示意图。如图5所示,3D图像感测装置400和3D图像感测装置100的差别在于3D图像感测装置400的感测模块404还包含一背景可见光传感器 4042、一邻接(proximity)传感器4044、一色温传感器4046以及一温度传感器4048。因此,整合背景可见光传感器4042、邻接传感器4044、色温传感器4046以及温度传感器4048的感测模块404具有较少的元件数、占据较少的电路板空间以及较低的成本。另外,因为感测模块404整合背景可见光传感器4042、邻接传感器4044、色温传感器4046以及温度传感器4048,所以3D图像感测装置400的信号处理模块106的深度感测与手势辨识的能力可被提高。
?#21271;?#26223;可见光足够且光源102关闭时,像素阵列1042所产生的取样结果SR仍然可藉由背景可见光产生一物件的轮廓。相反地,?#21271;?#26223;可见光被调暗时,此时,光源102必须开启以使像素阵列1042产生用以深度感测与手势辨识的取样结果SR。因此,背景可见光传感器可?#26500;?#28304;102的工作周期(dutycycle)动态调整。如此,3D图像感测装置400可进一步?#26723;?#20809;源102的开启时间以及最佳化3D图像感测装置400的深度感测与手势辨识的整体功耗。然而,在大多数的情况中,信号处理模块106还是根据光源102开启时的多个第一图像与光源102关闭时的多个第二图像,产生一深度信息,其中深度信息对于信号处理模块106辨识物件与背景相当有用。
邻接传感器4044是根据光源102的开启与关闭,检测物件与邻接传感器4044之间的平均距离。因为邻接传感器4044可用以检测物件与邻接传感器4044之间的近似距离,所以邻接传感器4044可使3D图像感测装置400整体的功耗较少以及反应时间较快。
在本发明的一实施例中,阻隔红外线与彩色滤光涂层是包含在色温传感器4046,其中色温传感器4046可藉由对应于阻隔红外线与彩色滤光涂层的光谱,测量背景光。一般说来,阻隔红外线与彩色滤光涂层可阻隔具有约700nm波长的红外光。另外,色温传感器4046可检测背景可见光的色温,其中背景可见光的色温可用于一显示装置的动态调整白平衡以及增强一图像提取装置的图像?#20998;省?
温度传感器4048是用以测量周围环境的温度。然而,测量周围环境的温度亦用以背景光与色彩测量的温度补偿。如图5所示,信号处理模块106具有一?#19988;资源?#20648;器(例如一快闪存储器)1066。信号处理模块106可根据从一目前取样结果SR所萃取的特征与存储于?#19988;资源?#20648;器1066的预录(pre-recorded)特征的差异,执行手势辨识。当差异够小时,信号处理模块106 可得到一正向辨识(positive recognition)。
请参照图6,图6是本发明的另一实施例说明一种3D图像感测装置500的示意图。如图6所示,3D图像感测装置500和3D图像感测装置400的差别在于3D图像感测装置500的信号处理模块506还包含一触控控制器5062。整合手势辨识与触控控制器5062的好处是具有较低的集成电路成本。
另外,3D图像感测装置500具有下列优点:第一、触控控制器5062主要用?#28304;?#29702;一产生?#28304;?#25511;传感器508的信号TS,其中产生?#28304;?#25511;传感器508的信号TS可代表触碰一触控面板的物件(例如一?#31181;?的位置或触控面板邻近物件(未触碰触控面板)的位置。像素阵列1042可用以产生物件的指示方向。因此,不论物件是否触碰或远离触控面板,结合触控与手势辨识可使一使用者具有能力追踪显示面板上的一项目。第二、在本发明的一实施例中,使用者的一?#31181;?#27491;在触碰显示面板上的一项目时,使用者的另一只手可执行一3D手势以操作显示面板上被触碰的项目。例如,显示面板所显示的一地图中的一建筑物可被使用者触碰而确认,然后使用者的另一只手的3D手势将可执行使用者相对于地图中的建筑物想要移动的方向(例如上、下、左、右?#29615;?#22823;或缩小)或地图中的建筑物观察方向的一指令。
请参照图7,图7是本发明的另一实施例说明一种3D图像感测装置600的示意图。如图7所示,3D图像感测装置600和3D图像感测装置400的差别在于3D图像感测装置600的信号处理模块606还包含一数字图像处理器6062。如图7所示,一外部图像传感器608可用以提取一物件的2D红绿蓝图像IS。数字图像处理器6062包含一些正常的图像处理功能,例如图像压缩和防手振?#21462;?
另外,3D图像感测装置600具有下列优点:第一、信号处理模块606不仅可利用深度信息也可利用2D红绿蓝图像IS执行手势辨识。因为外部图像传感器608的红绿蓝图像传感器具有较高的解析度,所以信号处理模块606可更有效率地从一前景中区别一物件。另外,深度信息和2D红绿蓝图像IS的重叠部分可大大地增强萃取特征的准确性。第二、当使用者处于一特定状况时(例如使用者戴一黑色?#31181;?#22871;),黑色?#31181;?#22871;将会减弱?#31181;?#25152;反射的红外光。然而,外部图像传感器608的红绿蓝图像传感器有能力从背景?#36335;?#20013;区别黑色?#31181;?#22871;。因此,外部图像传感器608的红绿蓝图像传感器与像素阵列1042中的红外线传感器的互补效果将可增强3D图像感测装置600的手势辨 识能力的准确性。
请参照图8,图8是本发明的另一实施例说明一种3D图像感测装置700的示意图。如图8所示,3D图像感测装置700和3D图像感测装置400的差别在于3D图像感测装置700的信号处理模块706包含一惯?#28304;?#24863;器708的感测集线器(sensor hub)7062,其中惯?#28304;?#24863;器708包含微机电?#20302;?Micro Electro Mechanical Systems,MEMS)加速度计、陀螺仪、磁力仪以及高度计。惯?#28304;?#24863;器708是作为一惯性测量单元(inertial measurement unit,IMU),其中惯性测量单元对于室内导航而言是相当重要的。因为信号处理模块706整合惯?#28304;?#24863;器708的感测集线器7062以及手势处理器,所以信号处理模块706是一个更有效率的集成电路。
另外,3D图像感测装置700具有下列优点:第一、惯?#28304;?#24863;器708的感测集线器7062可辨别?#21482;?#20351;用者的位置、方向和倾斜。感测模块404包含背景可见光传感器、邻接传感器、色温传感器以及温度传感器。因此,使用者的位置和周围环境可被3D图像感测装置700辨识,以及根据使用者的位置和周围环境,可产生许多应用。第二、因为使用者可围绕本身移动?#21482;?#25152;以可藉由陀螺仪和磁力仪执行测量的?#21482;?#26041;向。然后,信号处理模块706能够重建使用者的3D图像。在本发明的另一实施例中,惯性测量单元的倾斜和/或方向的测量可帮助移动装置检测观看方向的改变。因为移动装置可能会离开检测角或检测范围,所以惯性测量单元(惯?#28304;?#24863;器708)和手势处理器将警示使用者保持手势在像素阵列1042的检测角或检测范围。
另外,3D图像感测装置100、400、500、600、700并不受限于仅判断使用者的手势,亦即3D图像感测装置100、400、500、600、700也可辨识使用者的?#31181;浮?#25163;背或眼珠,或执行物件辨识。
请参照图1、图2、图4和图9,图9是本发明的另一实施例说明一种3D图像感测的方法的流程图,其中图9的方法是利用图1的3D图像感测装置100说明,详细步骤如下:
步骤800:开始;
步骤802:感测模块104根据一K倍闪烁噪声的?#24503;?#25110;一预定?#24503;剩?#39537;动光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;一闪烁光;
步骤804:感测模块104对闪烁光取样以产生一取样结果SR,其中取样结果SR包含光源102开启时的多个第一图像与光源102关闭时的多个第 二图像;
步骤806:模拟数字转换器10442根据取样结果SR,产生一数?#20013;?#21495;DS;
步骤808:离散傅立叶转换器10444根据数?#20013;?#21495;DS,产生对应取样结果SR的频谱SP;
步骤810:闪烁噪声鉴别器1062根据频谱SP,决定对应于2倍交流电?#24503;?#30340;闪烁噪声;
步骤812:闪烁噪声鉴别器1062根据对应于2倍交流电?#24503;?#30340;闪烁噪声,产生对应于K倍闪烁噪声的?#24503;?#30340;一控制信号CS;
步骤814:?#24503;?#20135;生器1064直接输出预定?#24503;剩?#25110;根据控制信号CS,产生K倍闪烁噪声的?#24503;蔄F至感测模块104;
步骤816:信号处理模块106根据多个第一图像与该多个第二图像,产生一深度信息。
在步骤802中,感测模块104中的光源驱动器1046是用以根据K倍闪烁噪声的?#24503;?#25110;预定?#24503;剩?#20135;生方波以开启或关闭光源102,其中光源驱动器1046所产生的方波具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;省?#21478;外,光源102是一红外线光源或一红外线激光光源(例如一红外线发光二极管或一红外线激光二极管),且是用以产生具有K倍闪烁噪声的?#24503;?例如100Hz或120Hz)或预定?#24503;?#30340;闪烁光,其中像素阵列1042在光源102开启时的曝光时间等于像素阵列1042在光源102关闭时的曝光时间,且K为一正实数(例如K为N或,其中N为一大于1的正整数)。在步骤804中,当光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,感测模块104的像素阵列1042是用以取样光源102所产生的闪烁光以产生取样结果SR,其中光源102和像素阵列1042可同?#25509;?#27599;一画面的起点。在步骤806中,当像素阵列1042产生取样结果SR后,控制单元1044内的模拟数字转换器10442根据像素阵列1042所产生的取样结果SR,产生数?#20013;?#21495;DS,以及在步骤808中,控制单元1044内的离散傅立叶转换器10444根据模拟数字转换器10442所产生的数?#20013;?#21495;DS,产生对应像素阵列1042所产生的取样结果SR的频谱SP,其中频谱SP是对应于取样结果SR内光源102关闭时的多个第二图像。
在步骤810和步骤812中,信号处理模块106内的闪烁噪声鉴别器1062是用以根据频谱SP,决定对应于2倍交流电?#24503;?#30340;闪烁噪声,以及用以根据 对应于2倍交流电?#24503;?#30340;闪烁噪声,产生对应于K倍闪烁噪声的?#24503;?#30340;控制信号CS。在步骤814中,信号处理模块106内的?#24503;?#20135;生器1064根据控制信号CS,产生K倍闪烁噪声的?#24503;蔄F至感测模块104内的光源驱动器1046,其中?#24503;?#20135;生器1064所产生的K倍闪烁噪声的?#24503;?#26159;在一预定?#24503;史?#22260;内。另外,当?#24503;?#20135;生器1064所产生的K倍闪烁噪声的?#24503;?#22312;预定?#24503;史?#22260;外时,?#24503;?#20135;生器1064直接输出预定?#24503;?#33267;光源驱动器1046。
在步骤816中,如图1所示,因为像素阵列1042所产生的取样结果SR包含光源102开启时的多个第一图像与光源102关闭时的多个第二图像,所以信号处理模块106可根据光源102开启时的多个第一图像与光源102关闭时的多个第二图像,产生深度信息。亦即信号处理模块106利用多个第一图像的每一第一图像减去多个第二图像的一相对应的第二图像,产生深度信息。
另外,如图4所示,当光源102产生具有K倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光时,信号处理模块106可利用像素阵列1042所产生的多个第一图像的每一第一图像减去多个第二图像的一相对应的第二图像,产生深度信息。然后,信号处理模块106可再从深度信息中,判断使用者的手势。
综上所述,相较于现有技术,因为本发明所提供的3D图像感测装置整合感测模块与信号处理模块至同一集成电路,所以本发明具有较低的成本与较有效率。另外,因为光源可产生具有整数倍闪烁噪声的?#24503;?#25110;预定?#24503;?#30340;闪烁光,所以本发明?#19978;?#38500;背景光的噪声,导致本发明的深度感测与手势辨识的能力可被提高。
以上所述仅为本发明的优选实施例,凡依本发明权利要求书所做的均等变化与修饰,皆应属本发明的涵盖范围。

关于本文
本文标题:3D图像感测装置与3D图像感测的方法.pdf
链接地址:http://www.pqiex.tw/p-6115711.html
关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

[email protected] 2017-2018 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备17046363号-1 
 


收起
展开
平码五不中公式规律 3d组三全包赚钱吗 足彩比分投注技巧 1969期七星彩规律图 酷发巴巴苹果 湖南快乐十分彩票控 捕鱼器价格100一150元 bablbook真能赚钱 极速快乐十分官网 北京快乐8实时开奖结果 七星彩历史开奖号码