CN1289086A - 交互显示系统 - Google Patents

交互显示系统 Download PDF

Info

Publication number
CN1289086A
CN1289086A CN00128801A CN00128801A CN1289086A CN 1289086 A CN1289086 A CN 1289086A CN 00128801 A CN00128801 A CN 00128801A CN 00128801 A CN00128801 A CN 00128801A CN 1289086 A CN1289086 A CN 1289086A
Authority
CN
China
Prior art keywords
image
control system
display
space pattern
laser spots
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN00128801A
Other languages
English (en)
Other versions
CN1143205C (zh
Inventor
林尚宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN1289086A publication Critical patent/CN1289086A/zh
Application granted granted Critical
Publication of CN1143205C publication Critical patent/CN1143205C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition

Abstract

一种交互显示控制系统,采用显示计算机、计算机控制的图像投影仪、激光指示器、以及投影屏幕,包括数字摄像机以及控制模块。该显示计算机产生投射到投影屏幕上作为显示图像的电子图像。在操作过程中,讲解员利用激光指示器来把预定的手势空间图案画在显示图像上。数字摄像机获得这些显示图像,在控制模块中的处理部分从这些图像分析和识别手势空间图案。所识别的手势空间图案被与一组预定图案相比较,以找出匹配,并且选择相关的显示命令。该显示命令可以在控制模块中执行或者被发送到显示计算机,通过例如前进到下一幅图像、加亮文字段落、或者放大图像这样的某种动作来改变显示图像。

Description

交互显示系统
本发明涉及一种采用显示计算机、计算机控制的图像投影仪以及投影屏幕的显示系统,特别涉及一种交互显示系统,其中控制是通过把激光指示器的光束按照预定的空间图案移过投影屏幕而实现的。
图表、文字以及各种图案通常在会议和教室中通过把这些图像光学投影到投影屏幕或墙壁上而显示给观众。LCD(液晶显示)投影仪通常被用作为图像源,其中图表、文字和图像是由显示计算机用电产生的,例如个人计算机(PC)或者膝上式计算机,它们一般执行例如MicrosoftPowerPoint这样的显示产生软件。在这种显示系统中,PC提供视频输出,例如标准VGA、超级VGA或者XGA。这些LCD/PC投影显示系统变得比传统的高架式投影仪和幻灯片更加普遍。
操作员无论是站在讲台上或者在观众面前走动,当他使用常规的LCD/PC投影显示系统时,他不能对被显示在投影屏幕上的图像进行直接控制。而常规系统需要操作员回到显示计算机,或者需要坐在计算机旁的辅助人员,以便于对显示进行控制。在显示计算机处,讲解员或辅助人员通过键盘输入或者通过“鼠标命令”利用在计算机监视屏幕的适当区域上的光标来控制显示的图像。操作员走到显示计算机处或者与辅助人员交流的动作与显示的自然进度和流程相偏离。可以认为操作员与听众的关系越密切,则他更加能够交互的控制显示或者改变出现在投影屏幕上的图像,而不用重复地使他的注意力从屏幕转向辅助人员或者移动到显示计算机处。
例如,利用公开于美国专利第5,782,548号中授于Miyashita的控制系统,操作员使用遥控设备来把控制信号无线发送到投影仪感应器。该系统需要操作员在希望改变屏幕上的显示图像时从他的听众和投影屏幕返回,并且通过遥控设备把他注意力转向投影仪。另外,尽管操作员通过遥控设备获得一些灵活性,但是由于他必需停留在投影仪感应器的范围内,因此该灵活性是受到限制的。
本领域内已知采用激光指示器把激光点投射到显示图像的区域。这种系统一般需要多个步骤或运作来对显示执行控制,并且这限制了显示的自然进度和流程。举例来说,授于Nguyen等人的美国专利第5,682,181公开了一种系统,其中操作员在能够选择例如画图模式、向上翻页等等特定功能之前调用下拉菜单。授于Marshall等人的美国专利第5,502,459号公开了一种实现鼠标双击的方法,其中用户必需首先激活,然后释放,然后再激活,然后再次释放激光指示器,并且保持投射的激光点在显示图像的矩形区域中。另一种系统需要与常规LCD/PC投影显示系统使用的附加部件。例如,美国专利第5,504,501通过激光指示器提供遥控,但是需要滤光器来使激光点与周围的显示图像相分离。
现在技术没有提供这样一种交互显示系统,其中操作员能够例如通过提供鼠标命令来控制显示,并且保持与听众的高度交互作用。因此本发明的一个目的是提供一种显示系统,它克服常规显示系统的缺陷。
本发明的另一个目的是提供这样一种系统,其中通过激光指示器的简单挥动就可以执行鼠标命令和其它显示功能,例如进行到下一幅图像、下划线、放大、或者强调显示。当阅读下文的具体描述时,本发明的其它目的将部分地变得更加清楚。
本发明提供一种交互显示控制系统,其中讲解员通过由激光指示器发射的激光点把预定的空间图案投射到投影屏幕上而控制显示。预定空间图案被控制系统所获得并且理解,随后把显示命令发送给投影仪。在显示过程中,显示计算机在其本地显示器上产生一个对应于该显示的位图。该位图然后被发送到LCD投影仪,并且该位图随后投射到屏幕上。显示是通过监控投射到屏幕的激光点而控制的。激光点控制是通过控制系统而实现的。该控制系统包括获取激光点的连续图像的数字摄像机,以及包括分析显示图像上激光点的位置的处理部分的控制模块。当处理部分把连续激光点的位置与预定的空间图案相匹配时,发出相应的显示命令。该显示命令可以发送到显示计算机,计算机通过一个动作做出响应,例如进行到下一幅电子图像,或者该显示命令可以执行在控制模块中的功能,例如强调显示文本或者显示图像上一部分的放大。
下面参照附图描述本发明,其中:
图1为一种交互显示系统的第一实施例的示意图,该系统包括计算机控制的图像投影仪、投影屏幕、激光指示器、以及根据本发明的控制系统;
图2为常规显示系统的平面视图,其中示出当听众观看投影屏幕上的显示图像时,操作员主要与显示计算机相互作用;
图3为示出图1的交互显示系统的平面视图,其中讲解员主要与听众交互作用,并且显示图像显示在投影屏幕上;
图4为图1的系统的投影屏幕上的显示图像的示意图,图中示出在显示图像中由激光指示器所产生的激光点;
图5示出如何确定图4的激光点的位置座标;
图6为本发明中用于描述激光点在图4的显示图像上的运动的弗里曼链码规则的示意图;
图7为由讲解员投射到投影屏幕上预定空间图案的图形表示,激光点的运动由一系列弗里曼链码来描述并且被识别为一个右手箭头;以及
图8为根据本发明的交互显示系统的第二实施例的示意图。
图1示出一种交互显示系统10的第一实施例,根据本发明其中包括显示计算机21,计算机控制的图像的投影仪23、投影屏幕12、激光指示器11、以及显示控制系统30。图像投影仪23一般包括光源25和置于光源25和投影屏幕12之间的图像屏面27。显示控制系统30包括数字摄像机31或者类似的成像设备以及控制模块33。在显示系统10的操作过程中,显示计算机21从驻留在显示计算机21中的显示产生软件所运行的显示中产生初始电子图像22a。显示程序包括一组用于在显示过程中投射的电子图像22a、22b、…、22k。初始电子图像22a被显示计算机21最好作为位图图像发送到控制模块33,用于随后发送到图像屏面27作为投影图像29。投影图像29随后投射到投影屏幕12作为相应的初始显示图像13。
讲解员37通过利用激光指示器11把激光束15投射到显示图像13上作为激光点16,从而交互地控制显示系统10。激光指示器11最好是能够发射波长在630和670nm之间的连续和脉冲辐射光束的市场上可购得的设备。讲解员37把激光点16在投影屏幕12上移动,以画出预定的手势空间图案,从而对显示系统10提供控制。随后由控制模块33识别该手势空间图案然后选择相应的预定的显示命令,该手势空间图案可以包括水平下划线、箭头、圈住图像部分的方框、或者一些其它预定的几何图形。该显示命令可以执行控制模块33中的功能,或者可以发送到显示计算机21,如下文中更加具体的描述。例如,在一种操作模式中,显示计算机21接收显示命令并且调用随后的幻灯片22b,用于通过控制模块33发送到图案投影仪23。
可以参照图2和3描述本发明系统所具有的优点。在常规显示中,如图2中所示,操作员17主要与显示计算机21或者坐在显示计算机21处的辅助人员进行交互作用,以控制投影屏幕12上的显示,如实线箭头41所示。因此,操作员17与屏幕12上的显示的交互作用有限,如虚线箭头46所示。在观看显示时,听众19的成员把他们的注意力主要放在显示上,如实线箭头43所示,并且对操作员17的注意程度较低,如虚线箭头45所示。与之相比,利用在此所公开的交互显示系统10,讲解员37与显示计算机21或者与显示控制系统30需要少量或者不需要交互作用,因此能够与听众19进行交互作用,如实线箭头41所示,并且通过激光指示器11与投影屏幕12上的显示进行交互作用,如实线箭头48所示。
在图1中的显示控制系统30的操作过程中,数字摄像机31指向投影屏幕12,以便于连续地采集当前出现的显示图像13,最好以大约每秒10帧的采样率进行采集。控制模块33接收这些采集的图像作为相应连续的所获取图像63a、63b、…、63n。本领域内的专业技术人员可以看出,所获得图像63a、63b、…、63n基本上是相同的,而显示图像13保留在投影屏幕12上,只是激光点16的位置在相继的所获得图像之间具有变换。激光点16的相继位置被分离、保留在存储器34中并且被分析以识别讲解员37投射到投影屏幕12上的手势空间图案。
控制模块33包括检测在相继的所获得图像63a、63b…、63n中的激光点16的处理部分35。由于激光点16包括具有比构成显示图像13的任何像素更大的亮度的像素,因此处理部分35可以通过检测具有超过预定阈值的亮度的像素而定位激光点16,其中该阈值大于显示图像中出现的最大亮度级。处理部分35分析显示图像13查找这种亮像素的连续集合,其中该集合具有大于激光点16大小的高度或宽度。最好,激光点16的检测首先在低分辨率模式中执行(例如,其中所获得图像63a、63b、…、63n被看作为80×60像素的图像),以便于在显示图像13中查找激光点16的大约位置。例如,图4示出激光点16位于构成显示图像13的流程图中的投影屏幕12。当激光点16的大约位置被确定时,显示图像13被以160×120像素的更高分辨率进行分析,如图5中所示,并且激光点16的位置被相应更精确地确定,在此位于位置坐标(128,114)。
在图1中,处理部分35对于检测到激光点16的每个所获得图像63a、63b、…、63n,把连续位置坐标分配给激光点16的位置。连续的位置坐标被获得或存储在存储器30中,并且分析所出现的空间图案。控制模块33还包括一个参考部分36,其中存储一组预定的手势空间图案以及一组预先分配的显示命令,每个显示命令分配给(或对应于)一个预先确定的手势空间图案。当空间图案被识别时,处理部分35把所识别的空间图案与这组预定手势空间图案相比较。如果发现匹配,则处理部分35检测到分配给匹配的预定手势空间图案的显示命令,并且执行所选择的显示命令。
当发送到显示计算机21时,所选择显示命令通过输入端口65接收。在一个优选实施例中,输入端口65包括串行口,显示命令通过串行或USB电缆39发送。本领域内的专业人员可以看出,处理部分35可以如图中所示驻留在控制模块33中,或者还可以驻留在数字摄像机31或者显示计算机21中,可以作为计算机可读指令从存储介质67中取出,或者可以分布在数字摄像机31、控制模块33和显示计算机21中。
当激光点16在每个所获得图像63a、63b、…、63n中检测时,处理部分35把位置坐标(例如,xi,yi)分配给激光点16运动的相继位置,以确定激光点16是否运动,并且如果运动的话,确定该运动是否是随机或者与多个预定图形或图案中的一个相关。运动和方向可以通过分析偏移矢量 r i → ( ( x i + 1 - x i ) , ( y i + 1 - y i ) ) 的相应序列而确定。最好,在本领域内称为弗里曼链码的空间图案识别工具被用于确定激光点16的运动,并且检测箭头、方框或者其它几何图形的形成。弗里曼链码把一个数字分配给激光点16的平移矢量,也就是说,分配给一个描述从一幅所获得图像63i到下一幅所获得图像63i+1的运动的矢量。如图6中所示,由处于
Figure 0012880100121
的方向矢量71所表示的垂直运动被分配一个“代码1”,而由处于 的方向矢量73所表示的第三象限的对角运动被分配给一个“代码6”,如此等等。处理部分35通过分析弗里曼链码的结果序列,区分激光点16的随机运动与讲解员37所作出的特意的手势。
举例来说,图7示出如何用弗里曼链码来描述一个所获得的手势空间图案。控制模块33在5个初始连续图像中捕获到激光点16的位置坐标,其中在四个连续图像对中的激光点运动被由方向矢量75a、75b、75c和75d所表示的一系列四个“代码4”所描述。在5个后续图像(即,所获得图像63f至63j,未示出)中激光点16的运动由方向矢量77a、77b、77c、77d、77e分别表示的一系列5个“代码6”所描述。
处理部分35把跟随有一系列5个连续“代码6”的4个连续“代码4”的所捕获手势空间序列与从参考部分36提供给处理部分35的预定手势空间图案项目相比较,该参考部分可以是随机存取存储器、固件或者查找表。匹配表明所捕获手势构成一个右手箭头51。对于构成不同弗里曼链码的随机序列的所捕获手势空间图案,处理部分35将判断出现随机激光运动,并且不发出显示命令。
显示系统10可以用于“鼠标模式”中,以投射一系列Power Point幻灯片作为显示图像13。举例来说,如果讲解员37画出的手势空间图案构成右手箭头51,则显示摄像机可以通过调用在该显示幻灯片系列中的下一幅发送到图像投影仪23来作出响应。也就是说,“进行到下一幅幻灯片”的命令将对应于或者分配给右手箭头51。按照相同的方式,如果手势空间图案构成左手箭头,则以前的图片将回放并且提供为投影图像29。另外,通过预先确定的显示命令,箭头指示器可以被分配为改变声音的音量,或者改变显示的其它幻灯片特征。
讲解员37还可以把激光点16定位在显示图像13的特定区域,例如在一个图标或者在一个菜单项上。处理部分35把这种情况理解为选择该图标或者菜单下,等同于第一鼠标单击。在该选择动作之后,通过在预定的时间间隔(最好为三秒)脉冲发射激光指示器11而实现第二鼠标单击,而激光点16保留在该图标或菜单项上。另外,把激光点16定位在显示图像13的边界处产生下拉菜单,用于随后的选择和动作。在所选择区域上激光点16的后继单个脉冲随后被处理部分35理解为第二鼠标单击。
按照这种方法,基本上可以从演示室中的任何位置把激光束15投射到显示图像13上,用于控制显示,例如打开新文件、剪切或粘贴。因此,激光指示器11以鼠标、键盘或者其它用于通过直接输入到显示计算机21来控制投影图像29的外围设备相同的方式来用于显示控制器30。该控制方法在讲解员37需要在讲话和到处走动的同时访问和浏览互联网的演示中特别有用。
另外,当激光指示器11被脉冲发送以产生三个连续鼠标单击时,“画图模式”可以被激活。在画图模式中,激光点16可以用于在显示图像13上画直线或曲线。为了退出画图模式,激光指示器11被脉冲发射产生四个鼠标单击。通过画图曲线,可以在演示过程中执行其它功能。在一个优选实施例中,例如,当讲解员37在显示图像13的文字或图像部分画出水平线时,处理部分35通过把初始电子图像22a与一个叠层组合产生随后的电子图像24,其中该叠层提供对应于由激光点16所发出的水平线的强调显示或下划线。
所得的电子图像24然后发送到投影仪23,作为具有用下划线或者高亮强调显示的相应文字部分或图像部分的显示图像13而投射。另外,当讲解员31画出圈住一部分显示图像13的矩形时,初始幻灯片22在相应部分被放大,并且作为结果电子图像24发送,从而实现放大操作。
在另一个实施例中,如图8中所示,图像投影仪23直接连接到显示计算机21。当控制系统30仅仅把鼠标命令提供给显示计算机21时,可以使用这种结果。该操作类似于上述的实施例,把激光点16投射到显示图像13上以提供控制。数字摄像机31采集显示图像13,并且所获得图像63a,63b,…,63n被控制模块33中的处理部分35所分析。当发现所识别手势空间图案与来自参考部分36的预定手势空间图案相匹配时,把相应的鼠标命令通过串行电脑39发送到显示计算机21。如在以前的实施例中一样,处理部分35的指令和参考部分36的数据可以从存储介质67中取出。
在显示系统10的操作之前,控制系统30可以利用处理部分35来校正,以把显示图像13的像素和位置坐标与构成位于显示计算机21中的初始电子图像22a的相应元素和坐标相关联。例如,这可以通过如下步骤实现:ⅰ)在投影图像29中产生嵌入的预定图案(未示出);ⅱ)通过电子摄像机(electronic camera)31获得包括嵌入图案的显示图像13;ⅲ)检测预定图案并且确定在由电子摄像机31所获得的图案中的相关位置坐标;以及ⅳ)分析图案坐标,以把显示图案13的座标与初始电子图像22a的坐标数学相关。这种校正处理在共同受让的共同未决专利申请“用于校正计算机产生的投影图案的方法和设备”(1999年3月31日申请,序号为09/283,093)中有描述,该专利全文在此包含以供参考。
处理部分35还用于检测在显示区域中由电子摄像机31所感测的环境光亮度,以便于提供对于显示图像13的亮量和对比度的最佳设置。显示图像13的颜色平衡是通过图像投影仪23把标准颜色校正表(未示出)投射到投影屏幕12上并且比较由电子摄像机31所获得的投影颜色的数值而进行优化,图表颜色具有已知数值。从比较结果中,处理部分35确定要做出的颜色校正,并且相应调整显示图像13。
尽管本发明已参照特定实施例进行描述,但是应当知道本发明不限于在此所公开和/或图中所示的特定结构和方法,而且还包括在本明范围内的任何改变或等价变换。

Claims (41)

1.一种显示控制系统,其适用于控制包括用于产生初始和连续电子图像的显示计算机的投影显示设备、计算机控制的图像投影仪、投影屏幕、以及以脉冲和连续辐射模式工作的激光指示器,该投影仪应用于接收投影到投影屏幕上作为初始显示图像的投影仪,以及该激光指示器当由主持人用于把激光点发射到投影屏幕上并且把空间图案投影在初始显示图像上时提供控制,所述控制系统包括:
指向初始显示图像并且产生一系列所获得的图像的电子摄像机,每个所述获得的图像包括图像单元;以及
相应所述获得的图像的控制模块,所述控制模块包括:
用于把激光点定位在所述获得的图像上的装置;
用于把位置坐标分配给每个所述定位激光点的装置,以便于产生对应于在初始显示图像中的激光点的顺序位置的的一系列位置坐标(xi,yi);
用于分析所述位置坐标序列的装置,以便于捕获由所述位置坐标序列所形成的手势空间图案;
用于选择显示命令的装置,所述选择的显示命令与所述匹配的预定手势空间图案相关联;以及
用于响应所述选择的显示命令产生后续电子图案的装置,所述后续电子图案发送到图像投影仪,用于作为后续显示图像投射到投影屏幕上。
2.根据权利要求1所述的控制系统,其特征在于,所述用于定位激光点的装置包括:用于识别亮像素的装置,所述亮像素包括具有超过预定阈值的亮度的所获得像素。
3.根据权利要求2所述的控制系统,其特征在于,所述用于定位激光点的装置还包括:用于识别所述亮像素的集合的装置,所述集合包括具有超过预定值的线性尺度的相邻像素集。
4.根据权利要求1所述的控制系统,其特征在于,所述用于分配位置坐标的装置包括:用于以降低的分辨率模式分析所获得图像的装置。
5.根据权利要求1所述的控制系统,其特征在于,所述用于分析位置坐标的装置包括:用于推导一系列偏移矢量 r i → ( ( x i + 1 - x i ) , ( y i + 1 - y i ) ) 的装置,每个所述偏移矢量对应于在所述相继位置坐标中的差值。
6.根据权利要求5所述的控制系统,其特征在于,所述用于分析位置坐标的装置包括:用于通过弗里曼链码的序列描述所述偏移矢量的序列的装置。
7.根据权利要求1所述的控制系统,其特征在于,还包括用于检测激光点脉冲的装置,所述激光点脉冲是通过使激光指示器在预定时间间隔内工作在脉冲模式而产生的。
8.根据权利要求7所述的控制系统,其特征在于,所述预定时间间隔约为3秒。
9.根据权利要求7所述的控制系统,其特征在于,当由用于分析位置坐标的装置在初始显示图像的预定范围中检测到基本上静止的激光点时,所述显示命令包括第一鼠标单击,所述第一鼠标单击被发送到显示计算机。
10.根据权利要求9所述的控制系统,其特征在于,所述预定区域包括一个图标。
11.根据权利要求9所述的控制系统,其特征在于,所述第一鼠标单击在所述后续的显示图像中提供一个下拉菜单。
12.根据权利要求9所述的控制系统,其特征在于,当检测到所述激光点脉冲时,所述显示命令还包括第二鼠标单击,所述第二鼠标单击被发送到显示计算机。
13.根据权利要求12所述的控制系统,其特征在于,所述第二鼠标单击在所述后续显示图像中激活初始显示图像的所述预定区域的选择。
14.根据权利要求7所述的控制系统,其特征在于,所述选择的显示命令包括:与三个所述激光点脉冲相关的重叠命令,所述重叠命令产生后续电子图像,构成重叠在初始电子图像上的重叠图像。
15.根据权利要求14所述的控制系统,其特征在于,所述重叠图像包括对应于激光点在初始显示图像上平移运动的一条或多条曲线。
16.根据权利要求14所述的控制系统,其特征在于,所述重叠图像包括高亮显示区域,所述高亮显示区域对应于激光点在初始显示图像上的平移运动。
17.根据权利要求15所述的控制系统,其特征在于,当所述一条或多条曲线确定初始显示图像的围绕部分时,所述选择的显示命令包括放大命令,所述放大命令产生后续电子图像包括初始电子图像的放大部分,所述放大部分对应于初始显示图像的所述围绕部分。
18.根据权利要求1所述的控制系统,其特征在于,所述用于产生后续电子图像的装置包括:用于把鼠标命令发送到显示计算机的装置,所述后续电子图像被显示计算机发送到图像投影仪。
19.根据权利要求18所述的控制系统,其特征在于,当所述匹配的预定手势空间图案包括一个右手箭头时,所述鼠标命令包括前进到下一幅电子图像的命令。
20.根据权利要求1所述的控制系统,其特征在于,还包括用于存储所述位置坐标的存储装置。
21.根据权利要求20所述的控制系统,其特征在于,所述存储装置包括用于存储所述显示命令和所述预先确立的图像的参考部分。
22.一种显示控制系统,其适用于控制包括用于产生初始和连续电子图像的显示计算机的投影显示设备、计算机控制的图像投影仪、投影屏幕、以及以脉冲和连续辐射模式工作的激光指示器,该投影仪应用于接收投影到投影屏幕上作为初始显示图像的投影仪,以及该激光指示器当由主持人用于把激光点发射到投影屏幕上并且把空间图案投影在初始显示图像上时提供控制,所述控制系统包括:
指向初始显示图像并且产生一系列所获得的图像的电子摄像机,每个所述获得的图像包括图像单元;以及
相应所述获得的图像的控制模块,所述控制模块包括:
包括一组预定手势空间图案和一组显示命令的存储部分,每个所述的显示命令对应于一个所述预定手势空间图案;
用于把该激光束定位在所述获得的图像中的定位电路;
响应激光点在所述获得图像中的定位的图像处理电路,所述图像处理电路用于把位置坐标分配给每个所述定位的激光点,用于产生对应于在初始显示图像中的激光点的顺序位置的的一系列位置坐标(xi,yi),以及用于分析所述位置坐标序列,以便于捕获由所述位置坐标序列所形成的手势空间图案;
响应所述捕获的手势空间图案的命令电路,用于把所述捕获的手势空间图案与一个所述预定的手势空间图案相匹配,用于选择与所述匹配的预定手势空间图案相对应的一个所述显示命令;以及用于响应所述选择的显示命令产生鼠标命令;
所述鼠标命令发送到显示计算机,使得后续的显示图像投射到投影屏幕上。
23.根据权利要求22所述的控制系统,其特征在于,所述定位电路包括:用于识别亮像素的装置,所述亮像素包括具有超过预定阈值的亮度的所获得像素。
24.根据权利要求23所述的控制系统,其特征在于,所述定位电路还包括:用于识别所述亮像素的集合的装置,所述集合包括具有超过预定值的线性尺度的相邻像素集。
25.根据权利要求23所述的控制系统,其特征在于,所述图像处理电路包括:用于推导一系列偏移矢量 r i → ( ( x i + 1 - x i ) , ( y i + 1 - y i ) ) 的计算电路,每个所述偏移矢量对应于在所述相继位置坐标中的差值。
26.根据权利要求25所述的控制系统,其特征在于,所述计算电路还包括:用于把偏移矢量的所述序列转换为弗里曼链码的序列的转换电路。
27.一种计算机可读介质,包括指示计算机作为控制系统的指令:
接收图像的邻接样本,每个所述图像包括多个像素;
检测在每个所述图像系列中的亮像素的连续集合;
把连续位置坐标(xi,yi)分配给连续的所述检测的亮像素;
分析所述位置坐标的系列,以便于识别手势空间图案;以及
根据所述手势空间图案的识别产生显示命令。
28.根据权利要求27所述的存储介质,其特征在于,所述分析系列位置坐标的操作包括:推导一系列偏移矢量 r i → ( ( x i + 1 - x i ) , ( y i + 1 - y i ) ) 的操作,每个所述偏移矢量对应于在所述相继位置坐标中的差值。
29.根据权利要求28所述的控制系统,其特征在于,所述推导偏移矢量的序列的操作包括:通过弗里曼链码的序列描述所述偏移矢量的序列的操作。
30.根据权利要求27所述的存储介质,其特征在于,所述显示命令包括鼠标命令。
31.一种用于控制显示装置的方法,该显示装置包括把显示图像序列投射到投影屏幕上的计算机控制图像投影仪,控制是通过讲解员利用激光指示器把激光点投射到投影屏幕上而实现的,激光点按照预定的手势空间图案在显示图像上移动,所述的方法包括如下步骤:
把一系列位置坐标分配给每个所获得图像中的激光点的位置;
分析所述系列位置坐标,以识别由该激光点所产生的手势空间图案;以及
根据所述手势空间图案的识别产生显示命令。
32.根据权利要求31所述的方法,其特征在于,还包括把所述识别的手势空间图案与预定手势空间图案相匹配的步骤。
33.根据权利要求31所述的方法,其特征在于,所述分析所述位置坐标的步骤包括检测亮的所获得像素的步骤,每个所述亮的所获得像素具有超过预定阈值的亮度。
34.根据权利要求33所述的方法,其特征在于,还包括把亮的所获得像素的集合识别为激光点的步骤,所述集合包括具有超过预定阈值的线性尺度的连续所获得像素的集合。
35.根据权利要求33所述的方法,其特征在于,还包括检测基本上固定的激光点的步骤。
36.根据权利要求33所述的方法,其特征在于,还包括响应所述基本固定的激光点的检测选择原始幻灯片的一部分的步骤。
37.根据权利要求35所述的方法,其特征在于,还包括检测脉冲激光点的步骤。
38.根据权利要求37所述的方法,其特征在于,还包括响应所述脉冲激光点的检测在所述后续显示图像中绘制曲线的步骤,所述绘制曲线对应于所述激光点的运动。
39.根据权利要求38所述的方法,其特征在于,还包括加亮所述后续显示图像的一部分的步骤,所述加亮部分对应于所述绘制的曲线。
40.根据权利要求31所述的方法,其特征在于,所述分析步骤包括通过弗里曼链码描述所述识别的手势空间图案的步骤。
41.根据权利要求40所述的方法,其特征在于,所述产生步骤包括当所述识别的手势空间图案包括箭头形状时产生系列显示图像的步骤。
CNB001288016A 1999-09-21 2000-09-21 交互显示系统 Expired - Fee Related CN1143205C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/399,933 US6346933B1 (en) 1999-09-21 1999-09-21 Interactive display presentation system
US09/399933 1999-09-21

Publications (2)

Publication Number Publication Date
CN1289086A true CN1289086A (zh) 2001-03-28
CN1143205C CN1143205C (zh) 2004-03-24

Family

ID=23581532

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB001288016A Expired - Fee Related CN1143205C (zh) 1999-09-21 2000-09-21 交互显示系统

Country Status (7)

Country Link
US (1) US6346933B1 (zh)
EP (1) EP1087327B1 (zh)
JP (1) JP3909554B2 (zh)
KR (1) KR100456999B1 (zh)
CN (1) CN1143205C (zh)
DE (1) DE60028894T2 (zh)
HK (1) HK1035790A1 (zh)

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004006221A1 (fr) * 2002-07-05 2004-01-15 Lixin Ran Pointeur laser a panneau tactile, et recepteur radio
CN100382606C (zh) * 2002-08-30 2008-04-16 卡西欧计算机株式会社 指示位置探测器件与指示位置探测方法
CN101189570B (zh) * 2005-06-03 2010-06-16 株式会社理光 图像显示设备
CN101943947A (zh) * 2010-09-27 2011-01-12 鸿富锦精密工业(深圳)有限公司 交互显示系统
CN102150116A (zh) * 2008-04-09 2011-08-10 惠普开发有限公司 远程控制指示
CN102156859A (zh) * 2011-04-21 2011-08-17 刘津甦 手部姿态与空间位置的感知方法
CN102169367A (zh) * 2010-02-24 2011-08-31 英特尔公司 交互式投影显示
CN102262733A (zh) * 2010-05-28 2011-11-30 株式会社理光 激光点检测方法及装置
CN102361495A (zh) * 2011-10-21 2012-02-22 青岛海信信芯科技有限公司 投影控制方法及投影设备
CN102402368A (zh) * 2010-09-10 2012-04-04 联想(北京)有限公司 一种显示控制方法及显示控制装置
CN102419658A (zh) * 2010-09-27 2012-04-18 南京芒冠光电科技股份有限公司 一种交互式投影机系统
CN102455575A (zh) * 2010-10-28 2012-05-16 精工爱普生株式会社 投影型显示装置及其控制方法
CN101842810B (zh) * 2007-10-30 2012-09-26 惠普开发有限公司 具有协作姿态检测的交互式显示系统
CN102724464A (zh) * 2012-05-23 2012-10-10 海信集团有限公司 投影显示装置、投影显示系统及投影显示控制方法
CN102741885A (zh) * 2009-10-23 2012-10-17 微软公司 装饰显示环境
CN102760011A (zh) * 2011-04-28 2012-10-31 东友科技股份有限公司 互动投影系统及投影系统的互动方法
CN102792245A (zh) * 2010-03-16 2012-11-21 英特飞斯公司 交互式显示系统
CN102902457A (zh) * 2011-07-28 2013-01-30 纬创资通股份有限公司 具有屏幕显示菜单功能的显示装置
CN102955601A (zh) * 2011-08-25 2013-03-06 丽智科技股份有限公司 触控面板的3d感测方法及系统
CN103049233A (zh) * 2011-10-13 2013-04-17 精工爱普生株式会社 显示装置、显示装置的控制方法以及程序
US8508474B2 (en) 2007-08-10 2013-08-13 Mitsubishi Electric Corporation Position detecting device
CN103365413A (zh) * 2012-03-22 2013-10-23 株式会社理光 信息处理设备、信息处理方法及投影系统
CN103492966A (zh) * 2011-04-19 2014-01-01 Abb研究有限公司 用于控制工业系统的方法和系统
CN103543820A (zh) * 2012-07-09 2014-01-29 宏碁股份有限公司 无线互动式投影方法以及系统
CN103946668A (zh) * 2012-08-30 2014-07-23 松下电器产业株式会社 指示棒检测装置以及指示棒检测方法
CN104166509A (zh) * 2013-05-20 2014-11-26 华为技术有限公司 一种非接触式屏幕交互方法及系统
CN101661329B (zh) * 2009-09-22 2015-06-03 北京中星微电子有限公司 智能终端的操作控制方法及装置
CN102968178B (zh) * 2012-11-07 2015-08-26 电子科技大学 一种基于手势的ppt控制系统
CN105138131A (zh) * 2015-09-01 2015-12-09 冯仕昌 一种通用的手势命令发射和操作装置及方法
CN101479693B (zh) * 2006-04-20 2015-12-09 惠普开发有限公司 用于将数字设备与交互式显示面进行对接的方法和系统
CN101952818B (zh) * 2007-09-14 2016-05-25 智慧投资控股81有限责任公司 基于姿态的用户交互的处理
CN107239248A (zh) * 2017-06-05 2017-10-10 京东方科技集团股份有限公司 显示装置和方法
CN104217415B (zh) * 2013-05-30 2018-03-09 台达电子工业股份有限公司 互动式投影系统及互动式影像检测方法
CN110084029A (zh) * 2012-06-25 2019-08-02 英特尔公司 经由验证图像机制来验证系统的用户
CN111757074A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种影像共享标注系统
US10831278B2 (en) 2008-03-07 2020-11-10 Facebook, Inc. Display with built in 3D sensing capability and gesture control of tv

Families Citing this family (169)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US7966078B2 (en) 1999-02-01 2011-06-21 Steven Hoffberg Network media appliance system and method
US6927756B1 (en) * 1999-11-05 2005-08-09 Cypress Semiconductor Corp. Apparatus and method for controlling an electronic presentation
US6597410B1 (en) * 1999-11-10 2003-07-22 International Business Machines Corporation System for the automatic adaptation of projector images and a method for the implementation thereof
US6618076B1 (en) * 1999-12-23 2003-09-09 Justsystem Corporation Method and apparatus for calibrating projector-camera system
JP3842515B2 (ja) 2000-03-24 2006-11-08 セイコーエプソン株式会社 多重解像度画像解析による指示位置検出
JP4018326B2 (ja) * 2000-08-07 2007-12-05 キヤノン株式会社 座標入力装置及びその制御方法、コンピュータ可読メモリ
JP3497805B2 (ja) * 2000-08-29 2004-02-16 オリンパス株式会社 画像投影表示装置
TR200002943A2 (tr) * 2000-10-10 2002-05-21 Ahmet Eni̇s Çeti̇n Video sinyalinden karakter tanımaya dayalı veri giriş cihazı
US20020080999A1 (en) * 2000-11-03 2002-06-27 Ali Bani-Hashemi System and method for highlighting a scene under vision guidance
US6704000B2 (en) * 2000-11-15 2004-03-09 Blue Iris Technologies Method for remote computer operation via a wireless optical device
US6731330B2 (en) * 2001-01-30 2004-05-04 Hewlett-Packard Development Company, L.P. Method for robust determination of visible points of a controllable display within a camera view
GB2374663A (en) * 2001-04-18 2002-10-23 Nokia Corp Presentation of images
US6729731B2 (en) * 2001-06-11 2004-05-04 Info Valley Corporation Untethered laser pointer for use with computer display
US7830362B2 (en) * 2001-07-05 2010-11-09 Michael Cain Finley Laser and digital camera computer pointer device system
JP2003108305A (ja) * 2001-09-28 2003-04-11 Fuji Photo Optical Co Ltd プレゼンテーションシステム
US7113169B2 (en) * 2002-03-18 2006-09-26 The United States Of America As Represented By The Secretary Of The Air Force Apparatus and method for a multiple-user interface to interactive information displays
US7176881B2 (en) * 2002-05-08 2007-02-13 Fujinon Corporation Presentation system, material presenting device, and photographing device for presentation
US20040001082A1 (en) * 2002-06-26 2004-01-01 Amir Said System and method of interaction with a computer controlled image display system using a projected light source
US20040135974A1 (en) * 2002-10-18 2004-07-15 Favalora Gregg E. System and architecture for displaying three dimensional data
US6802611B2 (en) * 2002-10-22 2004-10-12 International Business Machines Corporation System and method for presenting, capturing, and modifying images on a presentation board
US6979087B2 (en) * 2002-10-31 2005-12-27 Hewlett-Packard Development Company, L.P. Display system with interpretable pattern detection
EP2093650B1 (en) * 2002-11-20 2013-05-15 Koninklijke Philips Electronics N.V. User interface system based on pointing device
US20040095312A1 (en) * 2002-11-20 2004-05-20 Sean Chen Infrared remote-control laser pointer
US6840627B2 (en) * 2003-01-21 2005-01-11 Hewlett-Packard Development Company, L.P. Interactive display device
EP1443777A1 (de) * 2003-01-28 2004-08-04 Gretag-Macbeth AG Profilierungsvorrichtung, damit ausgestatteter elektronischer Projektor und Verfahren zur Profilierung einer elektronischen Anzeigevorrichtung
US20060176274A1 (en) * 2003-02-25 2006-08-10 Chiu-Hao Cheng Photographic type pointer positioning device
WO2004079558A1 (ja) * 2003-03-03 2004-09-16 Matsushita Electric Industrial Co., Ltd. プロジェクタシステム
JP2004265329A (ja) * 2003-03-04 2004-09-24 Toshiba Corp 情報処理装置およびプログラム
US20040196400A1 (en) * 2003-04-07 2004-10-07 Stavely Donald J. Digital camera user interface using hand gestures
US7193608B2 (en) * 2003-05-27 2007-03-20 York University Collaborative pointing devices
JP4175234B2 (ja) * 2003-10-07 2008-11-05 セイコーエプソン株式会社 表示制御装置、携帯型情報端末及び表示制御方法
TWI226784B (en) * 2003-10-20 2005-01-11 Ind Tech Res Inst Multi-trails spot click-event detection method
US7221374B2 (en) * 2003-10-21 2007-05-22 Hewlett-Packard Development Company, L.P. Adjustment of color in displayed images based on identification of ambient light sources
US7420540B2 (en) * 2003-12-01 2008-09-02 Olbrich Craig A Determining positioning and/or relative movement of graphical-user interface element based on display images
US7221407B2 (en) * 2004-01-06 2007-05-22 Sharp Laboratories Of America, Inc. Television having a java engine and a removable device port
US7746357B2 (en) * 2004-01-06 2010-06-29 Sharp Laboratories Of America, Inc. Dual-plane graphics
US8442331B2 (en) 2004-02-15 2013-05-14 Google Inc. Capturing text from rendered documents using supplemental information
US7707039B2 (en) * 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
US20050174337A1 (en) * 2004-02-11 2005-08-11 Nielsen Paul S. Electronic handheld drawing and gaming system using television monitor
US20060053097A1 (en) * 2004-04-01 2006-03-09 King Martin T Searching and accessing documents on private networks for use with captures from rendered documents
US10635723B2 (en) 2004-02-15 2020-04-28 Google Llc Search engines and systems with handheld document data capture devices
US7812860B2 (en) * 2004-04-01 2010-10-12 Exbiblio B.V. Handheld device for capturing text from both a document printed on paper and a document displayed on a dynamic display device
US20060041605A1 (en) * 2004-04-01 2006-02-23 King Martin T Determining actions involving captured information and electronic content associated with rendered documents
US20060041484A1 (en) * 2004-04-01 2006-02-23 King Martin T Methods and systems for initiating application processes by data capture from rendered documents
US20060122983A1 (en) * 2004-12-03 2006-06-08 King Martin T Locating electronic instances of documents based on rendered instances, document fragment digest generation, and digest based document fragment determination
US9008447B2 (en) 2004-04-01 2015-04-14 Google Inc. Method and system for character recognition
US9143638B2 (en) 2004-04-01 2015-09-22 Google Inc. Data capture from rendered documents using handheld device
US7894670B2 (en) 2004-04-01 2011-02-22 Exbiblio B.V. Triggering actions in response to optically or acoustically capturing keywords from a rendered document
WO2008028674A2 (en) 2006-09-08 2008-03-13 Exbiblio B.V. Optical scanners, such as hand-held optical scanners
US8146156B2 (en) 2004-04-01 2012-03-27 Google Inc. Archive of text captures from rendered documents
US20080313172A1 (en) * 2004-12-03 2008-12-18 King Martin T Determining actions involving captured information and electronic content associated with rendered documents
US20060081714A1 (en) 2004-08-23 2006-04-20 King Martin T Portable scanning device
US20060098900A1 (en) * 2004-09-27 2006-05-11 King Martin T Secure data gathering from rendered documents
US8081849B2 (en) * 2004-12-03 2011-12-20 Google Inc. Portable scanning and memory device
US7990556B2 (en) 2004-12-03 2011-08-02 Google Inc. Association of a portable scanner with input/output and storage devices
US9116890B2 (en) 2004-04-01 2015-08-25 Google Inc. Triggering actions in response to optically or acoustically capturing keywords from a rendered document
US20050239037A1 (en) * 2004-04-06 2005-10-27 Surapong Lertsithichai Convertible podium system
US8713418B2 (en) * 2004-04-12 2014-04-29 Google Inc. Adding value to a rendered document
US8620083B2 (en) 2004-12-03 2013-12-31 Google Inc. Method and system for character recognition
US8489624B2 (en) * 2004-05-17 2013-07-16 Google, Inc. Processing techniques for text capture from a rendered document
US8874504B2 (en) 2004-12-03 2014-10-28 Google Inc. Processing techniques for visual capture data from a rendered document
JP2005311598A (ja) * 2004-04-20 2005-11-04 Elmo Co Ltd 資料提示装置
US7707399B2 (en) * 2004-04-23 2010-04-27 Intel Corporation Adjusting depiction of user interface based upon state
JP2005318177A (ja) * 2004-04-28 2005-11-10 Elmo Co Ltd 資料提示装置
US7683881B2 (en) * 2004-05-24 2010-03-23 Keytec, Inc. Visual input pointing device for interactive display system
WO2005119356A2 (en) 2004-05-28 2005-12-15 Erik Jan Banning Interactive direct-pointing system and calibration method
US8346620B2 (en) 2004-07-19 2013-01-01 Google Inc. Automatic modification of web pages
US9268411B2 (en) * 2004-08-12 2016-02-23 Koninklijke Philips N.V Method and system for controlling a display
US8330714B2 (en) 2004-10-05 2012-12-11 Nikon Corporation Electronic device
US8117544B2 (en) * 2004-10-26 2012-02-14 Fuji Xerox Co., Ltd. System and method for detecting user actions in a video stream
US7657117B2 (en) * 2004-12-20 2010-02-02 Palo Alto Research Center Incorporated Method and apparatus for calibrating a camera-based whiteboard scanner
EP1681619A1 (en) * 2005-01-18 2006-07-19 Topseed Technology Corp. System for real-time identifying and recording laser manuscript
US20060228018A1 (en) * 2005-04-12 2006-10-12 Gil Abramovich Reconfigurable machine vision system
US7548230B2 (en) * 2005-05-27 2009-06-16 Sony Computer Entertainment Inc. Remote input device
US8427426B2 (en) * 2005-05-27 2013-04-23 Sony Computer Entertainment Inc. Remote input device
JP4626416B2 (ja) * 2005-06-20 2011-02-09 セイコーエプソン株式会社 プロジェクタ
US9285897B2 (en) 2005-07-13 2016-03-15 Ultimate Pointer, L.L.C. Easily deployable interactive direct-pointing system and calibration method therefor
WO2007020549A2 (en) * 2005-08-12 2007-02-22 Koninklijke Philips Electronics N.V. Method of calibrating a control system for controlling a device
CN100462937C (zh) * 2005-10-09 2009-02-18 深圳市巨龙科教高技术股份有限公司 计算机投影辅助定位方法及使用该方法的交互演示系统
KR100740660B1 (ko) * 2005-11-16 2007-07-19 한양대학교 산학협력단 레이저 포인터를 갖는 이동통신 단말기와 그를 이용한프리젠테이션 제공 시스템
KR100800998B1 (ko) 2005-12-24 2008-02-11 삼성전자주식회사 홈 네트워크 기기 제어 장치 및 방법
US7996776B2 (en) * 2006-02-27 2011-08-09 Microsoft Corporation Shared telepointer
JP2008009572A (ja) * 2006-06-27 2008-01-17 Fuji Xerox Co Ltd ドキュメント処理システム、ドキュメント処理方法及びプログラム
CN101529978B (zh) * 2006-10-12 2014-06-04 皇家飞利浦电子股份有限公司 用于光控制的系统和方法
US8035630B2 (en) 2006-10-13 2011-10-11 Seiko Epson Corporation USB image transmission system and device
US8356254B2 (en) * 2006-10-25 2013-01-15 International Business Machines Corporation System and method for interacting with a display
US8089455B1 (en) 2006-11-28 2012-01-03 Wieder James W Remote control with a single control button
KR100820573B1 (ko) * 2006-12-18 2008-04-07 옥은호 카메라를 이용하여 레이저 포인팅된 이미지와 컴퓨터이미지를 비교하여 위치와 깜박임을 인식하는 컴퓨터입력장치
US8451215B2 (en) * 2007-01-12 2013-05-28 Capsom Co., Ltd. Display control device, program for implementing the display control device, and recording medium containing the program
US9418538B2 (en) * 2007-08-14 2016-08-16 Jeffrey D. Antos Self-contained, pocket-sized presentation apparatus
US20090058805A1 (en) * 2007-08-25 2009-03-05 Regina Eunice Groves Presentation system and method for making a presentation
JP4829855B2 (ja) * 2007-09-04 2011-12-07 キヤノン株式会社 画像投影装置及びその制御方法
US8638363B2 (en) 2009-02-18 2014-01-28 Google Inc. Automatically capturing information, such as capturing information using a document-aware device
US7874681B2 (en) * 2007-10-05 2011-01-25 Huebner Kenneth J Interactive projector system and method
JP5446085B2 (ja) * 2007-11-05 2014-03-19 カシオ計算機株式会社 投影装置、投影方法及びプログラム
US20090132926A1 (en) * 2007-11-21 2009-05-21 Samsung Electronics Co., Ltd. Interactive presentation system and authorization method for voice command controlling interactive presentation process
AT506618B1 (de) * 2008-01-25 2013-02-15 Stumpfl Reinhold Interaktive multimedia-präsentationsvorrichtung
US8055003B2 (en) 2008-04-01 2011-11-08 Apple Inc. Acoustic systems for electronic devices
US9082117B2 (en) * 2008-05-17 2015-07-14 David H. Chin Gesture based authentication for wireless payment by a mobile electronic device
WO2009150786A1 (ja) * 2008-06-09 2009-12-17 株式会社村田製作所 弾性表面波装置及びその製造方法
US20090309834A1 (en) * 2008-06-16 2009-12-17 Upmc Laser Pointer Mouse
JP5317630B2 (ja) * 2008-11-07 2013-10-16 キヤノン株式会社 画像配信装置、方法及びプログラム
US8887052B1 (en) 2009-01-09 2014-11-11 Google Inc. Presentation remote control
US20100218100A1 (en) * 2009-02-25 2010-08-26 HNTB Holdings, Ltd. Presentation system
US8447066B2 (en) 2009-03-12 2013-05-21 Google Inc. Performing actions based on capturing information from rendered documents, such as documents under copyright
WO2010105246A2 (en) 2009-03-12 2010-09-16 Exbiblio B.V. Accessing resources based on capturing information from a rendered document
JP4766135B2 (ja) * 2009-03-17 2011-09-07 コニカミノルタビジネステクノロジーズ株式会社 情報提供装置、情報提供方法および情報提供プログラム
ITRM20090153A1 (it) * 2009-04-01 2010-10-02 Stark Srl Modulo integrato di proiettore interattivo
WO2010120304A2 (en) * 2009-04-16 2010-10-21 Hewlett-Packard Development Company, L.P. Communicating visual representations in virtual collaboration systems
JP2010278509A (ja) * 2009-05-26 2010-12-09 Elmo Co Ltd 資料提示装置
US8054290B2 (en) * 2009-05-27 2011-11-08 Microsoft Corporation Image contrast enhancement in depth sensor
US20100318916A1 (en) * 2009-06-11 2010-12-16 David Wilkins System and method for generating multimedia presentations
US8538367B2 (en) * 2009-06-29 2013-09-17 Qualcomm Incorporated Buffer circuit with integrated loss canceling
JP2011053468A (ja) * 2009-09-02 2011-03-17 Sony Corp 映像/文字同時表示装置及び頭部装着型ディスプレイ
EP2477096A1 (en) * 2009-09-09 2012-07-18 Sharp Kabushiki Kaisha Gesture determination device and method of same
KR20110028927A (ko) 2009-09-14 2011-03-22 삼성전자주식회사 영상처리장치 및 영상처리장치의 제어 방법
US20110119638A1 (en) * 2009-11-17 2011-05-19 Babak Forutanpour User interface methods and systems for providing gesturing on projected images
US9081799B2 (en) 2009-12-04 2015-07-14 Google Inc. Using gestalt information to identify locations in printed information
US9323784B2 (en) 2009-12-09 2016-04-26 Google Inc. Image search using text-based elements within the contents of images
US9244533B2 (en) * 2009-12-17 2016-01-26 Microsoft Technology Licensing, Llc Camera navigation for presentations
US9373265B2 (en) * 2009-12-31 2016-06-21 Richard M. Jeffrey Conditioning apparatus and related method
JP5560721B2 (ja) * 2010-01-12 2014-07-30 セイコーエプソン株式会社 画像処理装置、画像表示システム、及び画像処理方法
JP5693022B2 (ja) * 2010-03-04 2015-04-01 キヤノン株式会社 表示制御装置および表示制御システム、並びにそれらの制御方法、プログラム、記憶媒体
US20110230238A1 (en) * 2010-03-17 2011-09-22 Sony Ericsson Mobile Communications Ab Pointer device to navigate a projected user interface
US8434873B2 (en) * 2010-03-31 2013-05-07 Hong Kong Applied Science and Technology Research Institute Company Limited Interactive projection device
DE102010013719A1 (de) 2010-03-31 2011-10-06 Mikko Mannila Präsentationssystem
KR20110121125A (ko) * 2010-04-30 2011-11-07 삼성전자주식회사 인터랙티브 디스플레이 장치 및 이의 동작 방법
JP5685837B2 (ja) * 2010-06-15 2015-03-18 ソニー株式会社 ジェスチャ認識装置、ジェスチャ認識方法およびプログラム
WO2012108552A1 (en) * 2011-02-08 2012-08-16 Lg Electronics Inc. Display device and control method thereof
US9179182B2 (en) 2011-04-12 2015-11-03 Kenneth J. Huebner Interactive multi-display control systems
JP5482740B2 (ja) * 2011-07-11 2014-05-07 コニカミノルタ株式会社 プレゼンテーションシステム、プレゼンテーション装置およびプログラム
JP5790229B2 (ja) * 2011-07-19 2015-10-07 株式会社リコー 情報処理装置および情報処理方法
JP2013037420A (ja) * 2011-08-04 2013-02-21 Dainippon Printing Co Ltd コンテンツ表示システム、コンテンツ表示制御方法、コンテンツ表示制御装置、プログラム
KR101255977B1 (ko) 2011-08-18 2013-04-23 연세대학교 산학협력단 제스처 기반 건설현장 협업 시스템
US8866828B2 (en) * 2011-11-01 2014-10-21 Apple Inc. Enabling display commands from an electronic device to an integrated display on a computer system
US10691219B2 (en) 2012-01-17 2020-06-23 Ultrahaptics IP Two Limited Systems and methods for machine control
US8693731B2 (en) 2012-01-17 2014-04-08 Leap Motion, Inc. Enhanced contrast for object detection and characterization by optical imaging
US9679215B2 (en) 2012-01-17 2017-06-13 Leap Motion, Inc. Systems and methods for machine control
US11493998B2 (en) 2012-01-17 2022-11-08 Ultrahaptics IP Two Limited Systems and methods for machine control
US8638989B2 (en) 2012-01-17 2014-01-28 Leap Motion, Inc. Systems and methods for capturing motion in three-dimensional space
US9501152B2 (en) 2013-01-15 2016-11-22 Leap Motion, Inc. Free-space user interface and control using virtual constructs
DE102012210065A1 (de) 2012-06-14 2013-12-19 Robert Bosch Gmbh Vorrichtung und Verfahren zum Identifizieren eines Laserzeigers
CN102779014B (zh) * 2012-07-17 2017-02-15 海信集团有限公司 交互式投影系统以及投影仪调整控制方法
JP2014021933A (ja) * 2012-07-23 2014-02-03 Ricoh Co Ltd 投影装置、投影方法
TWI537775B (zh) * 2012-07-26 2016-06-11 群邁通訊股份有限公司 滑鼠圖示控制方法及系統
KR20140024769A (ko) * 2012-08-21 2014-03-03 삼성전자주식회사 지시 포인터를 이용한 프로젝터의 이벤트 처리를 위한 방법 및 그 전자 장치
JP6255810B2 (ja) * 2013-09-06 2018-01-10 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
US9733713B2 (en) * 2012-12-26 2017-08-15 Futurewei Technologies, Inc. Laser beam based gesture control interface for mobile devices
US9459697B2 (en) 2013-01-15 2016-10-04 Leap Motion, Inc. Dynamic, free-space user interactions for machine control
US9702977B2 (en) 2013-03-15 2017-07-11 Leap Motion, Inc. Determining positional information of an object in space
US9916009B2 (en) 2013-04-26 2018-03-13 Leap Motion, Inc. Non-tactile interface systems and methods
TW201445433A (zh) * 2013-05-30 2014-12-01 Univ Nat Taiwan Normal 互動式顯示系統
DE102013211904A1 (de) * 2013-06-24 2014-12-24 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bestimmen von Gesten im Strahlbereich eines Projektors
CN105308549B (zh) 2013-06-26 2018-08-21 索尼公司 信息处理装置、控制方法、程序和存储介质
US9762868B2 (en) 2013-06-28 2017-09-12 Thomson Licensing Highlighting an object displayed by a pico projector
US10281987B1 (en) 2013-08-09 2019-05-07 Leap Motion, Inc. Systems and methods of free-space gestural interaction
US10846942B1 (en) 2013-08-29 2020-11-24 Ultrahaptics IP Two Limited Predictive information for free space gesture control and communication
US9632572B2 (en) 2013-10-03 2017-04-25 Leap Motion, Inc. Enhanced field of view to augment three-dimensional (3D) sensory space for free-space gesture interpretation
US9996638B1 (en) 2013-10-31 2018-06-12 Leap Motion, Inc. Predictive information for free space gesture control and communication
TWI506483B (zh) 2013-12-13 2015-11-01 Ind Tech Res Inst 可調適色彩萃取之互動式書寫裝置及其操作方法
JP2014134803A (ja) * 2014-02-05 2014-07-24 Seiko Epson Corp プロジェクター
JP2016038889A (ja) 2014-08-08 2016-03-22 リープ モーション, インコーポレーテッドLeap Motion, Inc. モーション感知を伴う拡張現実
WO2016119840A1 (en) 2015-01-28 2016-08-04 Brainlab Ag Light point identification method
CN105573563B (zh) * 2016-01-29 2020-11-13 南京投知科技有限公司 移动终端和在移动终端上实现触控操作的方法
KR101911676B1 (ko) * 2016-12-23 2018-10-26 (주)넥스젠 지시체의 움직임을 고려한 프리젠테이션 영상 처리장치 및 방법
AT520234B1 (de) * 2017-07-27 2019-05-15 Ulrich Emanuel Andel Mag Vorrichtung zur interaktiven Präsentation von visuellen Inhalten
US11368212B2 (en) * 2018-09-14 2022-06-21 Arizona Board Of Regents On Behalf Of The University Of Arizona Laser beam for external position control and traffic management of on-orbit satellites
CN112822468B (zh) * 2020-12-31 2023-02-17 成都极米科技股份有限公司 一种投影控制方法、装置、投影设备及激光控制器

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4280135A (en) 1979-06-01 1981-07-21 Schlossberg Howard R Remote pointing system
US5502459A (en) 1989-11-07 1996-03-26 Proxima Corporation Optical auxiliary input arrangement and method of using same
US5489923A (en) 1989-11-07 1996-02-06 Proxima Corporation Method and apparatus for calibrating an optical computer input system
US5594468A (en) 1989-11-07 1997-01-14 Proxima Corporation Optical system auxiliary input calibration arrangement and method of using same
US5181015A (en) 1989-11-07 1993-01-19 Proxima Corporation Method and apparatus for calibrating an optical computer input system
US5504501A (en) 1989-11-07 1996-04-02 Proxima Corporation Optical input arrangement and method of using same
JP2622620B2 (ja) 1989-11-07 1997-06-18 プロクシマ コーポレイション コンピュータにより発生されたデイスプレイ可視像を変更するためのコンピュータ入力システム
US5235363A (en) 1991-05-10 1993-08-10 Nview Corporation Method and apparatus for interacting with a computer generated projected image
US5982352A (en) * 1992-09-18 1999-11-09 Pryor; Timothy R. Method for providing human input to a computer
US5434595A (en) 1993-05-24 1995-07-18 Hughes Aircraft Company System and method for automatically correcting x-y image distortion in a display
US5682181A (en) 1994-04-29 1997-10-28 Proxima Corporation Method and display control system for accentuating
US5712658A (en) 1993-12-28 1998-01-27 Hitachi, Ltd. Information presentation apparatus and information display apparatus
US5661667A (en) 1994-03-14 1997-08-26 Virtek Vision Corp. 3D imaging using a laser projector
KR0142783B1 (ko) 1994-03-19 1998-07-15 구자홍 프로젝터의 경사면 투사시 화상보정장치 및 방법
DE69532662T2 (de) * 1994-06-09 2005-02-10 Corporation For National Research Initiatives Hinweisvorrichtungsschittstelle
US5528263A (en) 1994-06-15 1996-06-18 Daniel M. Platzker Interactive projected video image display system
JPH0876082A (ja) * 1994-06-28 1996-03-22 Sharp Corp 投影表示装置
US5796386A (en) 1995-01-23 1998-08-18 International Business Machines Corporation Precise calibration procedure for sensor-based view point control system
JPH08334832A (ja) * 1995-04-07 1996-12-17 Seiko Epson Corp 映像投射システム及びその位置マーク表示制御方法
US5663795A (en) 1995-09-07 1997-09-02 Virtek Vision Corp. Method of calibrating laser positions relative to workpieces
GB9608770D0 (en) * 1996-04-27 1996-07-03 Philips Electronics Nv Projection display system
US5859623A (en) * 1996-05-14 1999-01-12 Proxima Corporation Intelligent display system presentation projection arrangement and method of using same
US5803570A (en) 1996-12-10 1998-09-08 Raytheon Company Calibration system and method for display optical systems
US5914783A (en) * 1997-03-24 1999-06-22 Mistubishi Electric Information Technology Center America, Inc. Method and apparatus for detecting the location of a light source
US6050690A (en) * 1998-01-08 2000-04-18 Siemens Information And Communication Networks, Inc. Apparatus and method for focusing a projected image
DE19880483C1 (de) * 1998-10-21 2000-03-30 Vlg Virtual Laser Systems Gmbh Eingabevorrichtung für einen Computer
KR100325805B1 (ko) * 1998-12-29 2002-06-28 윤종용 디스플레이시스템
US6292171B1 (en) * 1999-03-31 2001-09-18 Seiko Epson Corporation Method and apparatus for calibrating a computer-generated projected image

Cited By (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004006221A1 (fr) * 2002-07-05 2004-01-15 Lixin Ran Pointeur laser a panneau tactile, et recepteur radio
CN100382606C (zh) * 2002-08-30 2008-04-16 卡西欧计算机株式会社 指示位置探测器件与指示位置探测方法
CN101189570B (zh) * 2005-06-03 2010-06-16 株式会社理光 图像显示设备
CN101479693B (zh) * 2006-04-20 2015-12-09 惠普开发有限公司 用于将数字设备与交互式显示面进行对接的方法和系统
US8508474B2 (en) 2007-08-10 2013-08-13 Mitsubishi Electric Corporation Position detecting device
CN103365491A (zh) * 2007-08-10 2013-10-23 三菱电机株式会社 位置检测装置
US10564731B2 (en) 2007-09-14 2020-02-18 Facebook, Inc. Processing of gesture-based user interactions using volumetric zones
US9811166B2 (en) 2007-09-14 2017-11-07 Intellectual Ventures Holding 81 Llc Processing of gesture-based user interactions using volumetric zones
US10990189B2 (en) 2007-09-14 2021-04-27 Facebook, Inc. Processing of gesture-based user interaction using volumetric zones
CN101952818B (zh) * 2007-09-14 2016-05-25 智慧投资控股81有限责任公司 基于姿态的用户交互的处理
CN101842810B (zh) * 2007-10-30 2012-09-26 惠普开发有限公司 具有协作姿态检测的交互式显示系统
US10831278B2 (en) 2008-03-07 2020-11-10 Facebook, Inc. Display with built in 3D sensing capability and gesture control of tv
CN102150116B (zh) * 2008-04-09 2014-03-12 惠普开发有限公司 远程控制指示器、远程控制指示方法及设备
CN102150116A (zh) * 2008-04-09 2011-08-10 惠普开发有限公司 远程控制指示
CN101661329B (zh) * 2009-09-22 2015-06-03 北京中星微电子有限公司 智能终端的操作控制方法及装置
CN102741885B (zh) * 2009-10-23 2015-12-16 微软技术许可有限责任公司 装饰显示环境
CN102741885A (zh) * 2009-10-23 2012-10-17 微软公司 装饰显示环境
CN102169367A (zh) * 2010-02-24 2011-08-31 英特尔公司 交互式投影显示
CN102169367B (zh) * 2010-02-24 2014-02-12 英特尔公司 交互式投影显示
CN102792245A (zh) * 2010-03-16 2012-11-21 英特飞斯公司 交互式显示系统
CN102262733B (zh) * 2010-05-28 2014-03-19 株式会社理光 激光点检测方法及装置
CN102262733A (zh) * 2010-05-28 2011-11-30 株式会社理光 激光点检测方法及装置
CN102402368A (zh) * 2010-09-10 2012-04-04 联想(北京)有限公司 一种显示控制方法及显示控制装置
CN102402368B (zh) * 2010-09-10 2017-05-24 联想(北京)有限公司 一种显示控制方法及显示控制装置
CN102419658A (zh) * 2010-09-27 2012-04-18 南京芒冠光电科技股份有限公司 一种交互式投影机系统
CN101943947A (zh) * 2010-09-27 2011-01-12 鸿富锦精密工业(深圳)有限公司 交互显示系统
CN102455575A (zh) * 2010-10-28 2012-05-16 精工爱普生株式会社 投影型显示装置及其控制方法
US9494846B2 (en) 2010-10-28 2016-11-15 Seiko Epson Corporation Projection display device for setting a projection range based on a location specified by an electronic pen and method of controlling the same
US8794768B2 (en) 2010-10-28 2014-08-05 Seiko Epson Corporation Projection display device and method of controlling the same
CN104062829A (zh) * 2010-10-28 2014-09-24 精工爱普生株式会社 投影型显示装置及其控制方法
CN102455575B (zh) * 2010-10-28 2015-06-10 精工爱普生株式会社 投影型显示装置及其控制方法
CN103492966B (zh) * 2011-04-19 2016-08-17 Abb研究有限公司 用于控制工业系统的方法和系统
CN103492966A (zh) * 2011-04-19 2014-01-01 Abb研究有限公司 用于控制工业系统的方法和系统
CN102156859B (zh) * 2011-04-21 2012-10-03 刘津甦 手部姿态与空间位置的感知方法
CN102156859A (zh) * 2011-04-21 2011-08-17 刘津甦 手部姿态与空间位置的感知方法
CN102760011B (zh) * 2011-04-28 2016-06-29 东友科技股份有限公司 互动投影系统及投影系统的互动方法
CN102760011A (zh) * 2011-04-28 2012-10-31 东友科技股份有限公司 互动投影系统及投影系统的互动方法
CN102902457A (zh) * 2011-07-28 2013-01-30 纬创资通股份有限公司 具有屏幕显示菜单功能的显示装置
CN102955601B (zh) * 2011-08-25 2015-09-16 丽智科技股份有限公司 触控面板的3d感测方法及系统
CN102955601A (zh) * 2011-08-25 2013-03-06 丽智科技股份有限公司 触控面板的3d感测方法及系统
CN103049233B (zh) * 2011-10-13 2016-07-27 精工爱普生株式会社 显示装置以及显示装置的控制方法
CN103049233A (zh) * 2011-10-13 2013-04-17 精工爱普生株式会社 显示装置、显示装置的控制方法以及程序
CN102361495A (zh) * 2011-10-21 2012-02-22 青岛海信信芯科技有限公司 投影控制方法及投影设备
CN102361495B (zh) * 2011-10-21 2014-06-18 青岛海信信芯科技有限公司 投影控制方法及投影设备
US9176601B2 (en) 2012-03-22 2015-11-03 Ricoh Company, Limited Information processing device, computer-readable storage medium, and projecting system
CN103365413A (zh) * 2012-03-22 2013-10-23 株式会社理光 信息处理设备、信息处理方法及投影系统
CN102724464B (zh) * 2012-05-23 2014-12-17 海信集团有限公司 投影显示装置、投影显示系统及投影显示控制方法
CN102724464A (zh) * 2012-05-23 2012-10-10 海信集团有限公司 投影显示装置、投影显示系统及投影显示控制方法
CN110084029A (zh) * 2012-06-25 2019-08-02 英特尔公司 经由验证图像机制来验证系统的用户
CN103543820A (zh) * 2012-07-09 2014-01-29 宏碁股份有限公司 无线互动式投影方法以及系统
CN103543820B (zh) * 2012-07-09 2017-04-12 宏碁股份有限公司 无线互动式投影方法以及系统
CN103946668A (zh) * 2012-08-30 2014-07-23 松下电器产业株式会社 指示棒检测装置以及指示棒检测方法
CN103946668B (zh) * 2012-08-30 2017-12-05 松下电器(美国)知识产权公司 指示棒检测装置以及指示棒检测方法
CN102968178B (zh) * 2012-11-07 2015-08-26 电子科技大学 一种基于手势的ppt控制系统
CN104166509B (zh) * 2013-05-20 2017-08-25 华为技术有限公司 一种非接触式屏幕交互方法及系统
CN104166509A (zh) * 2013-05-20 2014-11-26 华为技术有限公司 一种非接触式屏幕交互方法及系统
CN104217415B (zh) * 2013-05-30 2018-03-09 台达电子工业股份有限公司 互动式投影系统及互动式影像检测方法
CN105138131A (zh) * 2015-09-01 2015-12-09 冯仕昌 一种通用的手势命令发射和操作装置及方法
CN107239248A (zh) * 2017-06-05 2017-10-10 京东方科技集团股份有限公司 显示装置和方法
CN107239248B (zh) * 2017-06-05 2020-06-19 京东方科技集团股份有限公司 显示装置和方法
US11295700B2 (en) 2017-06-05 2022-04-05 Boe Technology Group Co., Ltd. Display apparatus, display method, image processing device and computer program product for image processing
CN111757074A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种影像共享标注系统

Also Published As

Publication number Publication date
KR20010050407A (ko) 2001-06-15
JP2001125738A (ja) 2001-05-11
US6346933B1 (en) 2002-02-12
DE60028894D1 (de) 2006-08-03
DE60028894T2 (de) 2006-11-09
HK1035790A1 (en) 2001-12-07
CN1143205C (zh) 2004-03-24
EP1087327A3 (en) 2002-01-23
EP1087327A2 (en) 2001-03-28
JP3909554B2 (ja) 2007-04-25
KR100456999B1 (ko) 2004-11-10
EP1087327B1 (en) 2006-06-21

Similar Documents

Publication Publication Date Title
CN1143205C (zh) 交互显示系统
KR100464465B1 (ko) 투사디스플레이시스템
US6275214B1 (en) Computer presentation system and method with optical tracking of wireless pointer
CN103092432B (zh) 人机交互操作指令的触发控制方法和系统及激光发射装置
US6840627B2 (en) Interactive display device
KR20010020668A (ko) 컴퓨터-생성 투사 영상의 캘리브레이션을 위한 방법 및 장치
US20060007134A1 (en) Pointing input system and method using one or more array sensors
US5463729A (en) Image generation device
JPH05224636A (ja) コンピュータ出力投影画像と相互作用する方法および装置
US20020136455A1 (en) System and method for robust foreground and background image data separation for location of objects in front of a controllable display within a camera view
JP2006189712A (ja) 情報提示装置、情報提示方法及びプログラム
CN102194136A (zh) 信息识别系统及其控制方法
EP1356423A2 (en) System and method for extracting a point of interest of an object in front of a computer controllable display captured by an imaging device
GB2315944A (en) Improvements relating to surveillance apparatus
Laberge et al. An auto-calibrated laser-pointing interface for large screen displays
KR20070120922A (ko) 레이저 포인터의 궤적을 카메라로 영상 처리하여디스플레이 화면을 제어하는 새로운 명령 처리 방식에 대한방법
CN102999233B (zh) 基于图像传感器的电子白板的干扰点自动屏蔽方法及装置
JP2981408B2 (ja) カメラ画像内の目的とする被写体の高速導入制御方法および装置
Jedrysik et al. The Interactive DataWall
JP3411994B2 (ja) 遠隔指示入力システム
JPH0214387A (ja) 複数ピーク点検出方式
CN117325160A (zh) 机械臂校准方法及其装置、电子设备、存储介质
Jedrysik et al. Advanced interactive displays for deployable command and control centers
JPS6057405A (ja) グラフイツク画面を用いたブロックサーチ装置
JPH06266983A (ja) プラント監視用マンマシン装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1035790

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040324

Termination date: 20180921