CN103576853A - 用于提供内容的方法和显示装置 - Google Patents

用于提供内容的方法和显示装置 Download PDF

Info

Publication number
CN103576853A
CN103576853A CN201310298001.4A CN201310298001A CN103576853A CN 103576853 A CN103576853 A CN 103576853A CN 201310298001 A CN201310298001 A CN 201310298001A CN 103576853 A CN103576853 A CN 103576853A
Authority
CN
China
Prior art keywords
content
attentively
preference
user
watching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310298001.4A
Other languages
English (en)
Inventor
李埈硕
李尚远
赵诚九
俞庆和
郑镇溶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103576853A publication Critical patent/CN103576853A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Abstract

提供了用于提供内容的方法和显示装置。用于提供内容的方法包括:显示内容UI,在该内容UI中包括多个内容;检测在该内容UI中用户注视的区域;通过测量用户的脑电波,确定对于在用户注视的区域中呈现的注视内容的偏好度;以及基于确定的偏好度提供内容UI。能够向用户提供根据用户偏好度更直观且更方便地配置的用户UI。

Description

用于提供内容的方法和显示装置
优先权
本申请要求于2012年7月18日向韩国特许厅提交的第10-2012-0078309号韩国专利申请的优先权,其公开内容通过引用全部结合于此。
技术领域
本发明构思涉及用于提供内容的方法和显示装置。更具体地,本公开涉及能够使用用户的脑电波确定用户对于内容的偏好度并提供内容UI的方法和显示装置。
背景技术
近来,随着互联网的不断发展、文化产业的发展以及教育水平的提高,内容量迅速增加,并且已经提出了各种用于提供内容的方法。具体来说,随着数字时代的来临,除了通过诸如致密盘(CD)、书籍和报纸的有形存储介质的内容传输方法之外,通过互联网的无形内容传输方法已经得到普及。
随着内容量的增加,对用户来说搜索优选内容(preferential content)逐渐变得困难。相关技术中的显示设备提供内容UI而不管用户的优选内容。此外,即使在用户能够直接设置用户优选内容的情况下,用户也必须使用诸如鼠标或键盘的、使用起来不方便的输入设备逐个地设置用户优选内容。
近来,为了确定人类判断和感觉,积极进行了涉及人脑电波的研究。具体来说,脑电波除了反映用户眼睛周围肌肉的运动之外,脑电波还反映用户的判断和感觉。通过对脑电波进行这种测量、执行关于测量的脑电波的数据形成、然后再一次测量人类脑电波,能够通过测量的脑电波识别人类的判断或感觉。近来,正在积极进行使用脑电波来确定对用户感觉的判断的研究。
相应地,为了更方便、更直观地提供用户的优选内容,存在对于通过检测用户的脑电波来确定并提供用户优选内容的需要。
发明内容
提出本发明构思以解决至少上述问题和/或缺点,并提供至少下述优点。因此,本发明构思的方面提供了用于提供内容的方法和显示装置,所述方法和显示装置能够通过测量用户的脑电波来确定对于用户注视的内容的偏好度,并基于通过脑电波确定的偏好度来提供内容,从而更直观、更方便地提供用户偏好的内容。
根据本发明构思的一方面,一种显示装置的用于提供内容的方法包括:显示内容UI,在该内容UI中包括多个内容;检测内容UI中用户注视的区域;通过测量用户的脑电波,确定对于用户注视的区域中呈现的注视内容的偏好度;以及基于确定的偏好度提供内容UI。
所述提供步骤可以响应于对于注视内容的偏好度等于或高于预定值,提供与注视内容类似的内容作为推荐内容。
所述提供步骤可以响应于对于注视内容的偏好度等于或高于预定值,增加注视内容和与注视内容类似的内容中的至少一个的大小,并显示该内容。
根据本发明构思的一方面的用于提供内容的方法还可以包括:确定对于内容UI中的多个区域的偏好度,其中,所述提供步骤可以响应于对于注视内容的偏好度等于或高于预定值,在内容UI中具有高偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
所述提供步骤可以响应于对于注视内容的偏好度低于预定值,在内容UI中具有低偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
所述提供步骤可以响应于对于注视内容的偏好度低于预定值,删除注视内容和与注视内容类似的内容中的至少一个,或者减小注视内容和与注视内容类似的内容中的至少一个的大小,并显示所述内容。
所述检测步骤可以通过跟踪用户的脸部方向和瞳孔运动中的至少一个,来检测用户注视的区域。
如果显示装置是3D(三维)显示装置,则可以使用脑电波测量器来测量用户的脑电波,该脑电波测量器附着到与3D显示装置互锁(interlock)的3D眼镜上。
根据本发明构思的另一个方面,一种显示装置包括:显示器,其显示其中包括多个内容的内容UI;注视区域检测器,其检测内容UI中用户注视的区域;脑电波测量器,其测量用户的脑电波;以及控制器,其使用由脑电波测量器测量的用户的脑电波,确定对于用户注视的区域中呈现的注视内容的偏好度,并基于确定的偏好度控制显示器提供内容UI。
所述控制器可以响应于对于注视内容的偏好度等于或高于预定值,提供与注视内容类似的内容作为推荐内容。
所述控制器可以响应于对于注视内容的偏好度等于或高于预定值,增加注视内容和与注视内容类似的内容中的至少一个的大小,并可以显示该内容。
所述控制器可以确定对于内容UI中的多个区域的偏好度,并且可以响应于对于注视内容的偏好度等于或高于预定值,控制显示器在内容UI中具有高偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
所述控制器可以响应于对于注视内容的偏好度低于预定值,控制显示器在内容UI中具有低偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
控制器可以响应于对于注视内容的偏好度低于预定值,控制显示器删除注视内容和与注视内容类似的内容中的至少一个,或者减小注视内容和与注视内容类似的内容中的至少一个的大小,并且显示所述内容。
所述注视区域检测器可以通过跟踪用户的脸部方向和瞳孔运动中的至少一个,来检测用户注视的区域。
如果显示装置是3D显示装置,则脑电波测量器可以附着到与3D显示装置互锁的3D眼镜上。
附图说明
从下面结合附图的详细说明,本发明构思的上述和其他方面、特征和优点将更加明显,附图中:
图1是示意地图示根据本发明构思的示例性实施例的显示装置的配置的框图;
图2是图示根据本发明构思的另一示例性实施例的显示装置的详细配置的框图;
图3是图示根据本发明构思的示例性实施例的脑电波检测器的配置的框图;
图4到图8是图示根据本发明构思的不同示例性实施例的基于用户偏好度配置内容UI的示图;
图9是图示根据本公开的示例性实施例的用于提供内容的方法的流程图;以及
图10A到图10C是图示根据本发明构思的示例性实施例的用于确定用户注视的显示装置的方法的示图。
具体实施方式
下文中,参考附图详细描述本发明构思的示例性实施例。
图1是示意地图示根据本发明构思的示例性实施例的显示装置100的配置的框图。如图1中所示,显示装置100包括注视区域检测器110、脑电波测量器120、显示器130以及控制器140。根据本发明构思的示例性实施例的显示装置100可以用智能TV实现。然而,这仅仅是示例性的,并且显示装置100可以用各种设备实现,如台式PC、平板PC、智能电话,等等。
注视区域检测器110检测在显示器130中用户注视的区域。此时,注视区域检测器110可以通过跟踪用户的脸部方向或者通过跟踪用户眼球的运动来检测用户注视的区域。
脑电波测量器120使用多个脑电波感测电极测量用户的脑电波。此时,由于脑电波测量器120需要与用户的脸部接触来测量用户的脑电波,因此可以将脑电波测量器120实现为与显示装置100分离。具体来说,适应于显示装置100是3D显示装置,脑电波测量器120可以附着到与3D显示装置互锁的3D眼镜上。
显示器130显示包括多个内容的内容UI。内容UI可以是包括多个图标的内容列表,所述多个图标对应于多个内容,但是内容UI不局限于此。
此外,显示器130可以在控制器140的控制下,根据用户偏好度配置内容UI。
控制器140使用由脑电波测量器120测量的用户的脑电波,确定对于用户注视的区域中呈现的注视内容的偏好度。然后,控制器140基于确定的偏好度控制显示器130提供内容UI。
具体来说,响应于对于注视内容的偏好度等于或高于预定值,控制器140可以推荐与注视内容类似的内容。此时,与注视内容类似的内容可以是标题、类型、主演、导演以及摄制公司中的至少一个与注视内容一致的内容。
此外,响应于对于注视内容的偏好度等于或高于预定值,控制器140可以控制显示器140增加注视内容以及与注视内容类似的内容的大小并显示注视内容以及与注视内容类似的内容。
然而,响应于对于注视内容的偏好度低于预定值,控制器140可以控制显示器130删除注视内容,或者减小注视内容的大小并显示与注视内容类似的内容。
此外,控制器140可以确定对于内容UI中的多个区域的偏好度。响应于对于注视内容的偏好度等于或高于预定值,控制器140可以控制显示器130在内容UI中具有高偏好度的区域内显示注视内容和类似的内容。
然而,响应于对于注视内容的偏好度低于预定值,控制器142可以控制显示器130在内容UI中具有低偏好度的区域中显示注视内容和类似的内容。
如上所述,通过测量用户的脑电波来检测用户注视的内容的用户偏好度,并根据用户偏好度提供内容UI,由此,能够向用户提供根据用户偏好度更直观、更方便地配置的内容UI。
下文中,将参照图2到图8更详细地描述显示装置。图2是图示根据本发明构思的另一示例性实施例的显示装置200的详细配置的框图。如图2中所示,显示装置200包括注视区域检测器210、脑电波测量器220、存储器230、显示器240、通信器250、用户输入器260和控制器270。
注视区域检测器210检测在显示屏幕中用户注视的区域。具体来说,注视区域检测器210可以通过跟踪用户眼球的运动来检测用户注视的区域。
具体来说,注视区域检测器210通过人脸建模技术,从拍摄器(未示出)拍摄的用户图像中识别眼球图像。此时,人脸建模技术对应于处理由拍摄器获取的人脸图像并将人脸图像转换成数字信息以供传输的分析过程,并且可以使用主动形状建模(Active Shape Modeling,ASM)技术和主动外观建模(Active Appearance Modeling,AAM)技术之一作为人脸建模技术。这里,ASM技术是这样一种模型:其通过首先检测人脸区域中眼睛的位置、然后根据类属模型使用其他区域的形状信息确定其他区域(例如,鼻子、嘴、眉毛等等)的位置,来检测人脸区域的特征点。AAM技术是一种检测特征点的模型,其除了考虑形状信息之外,通过进一步考虑纹理信息来高效地解释人脸特征。
注视区域检测器210可以使用识别出的眼球图像确定眼球的运动。此外,注视区域检测器210能够通过使用眼球的运动检测用户注视的方向、将检测的用户注视的方向与预存储的显示屏幕的坐标信息相互进行比较,来确定用户注视的区域。
例如,如图10A中所示,响应于基于预存储的用户的虹膜1010和瞳孔1020的图像信息确定拍摄的用户的瞳孔1020位于中心,注视区域检测器210可以确定用户注视显示屏幕的中心(0,0)。此外,如图10B中所示,如果确定用户的瞳孔1020从中心移动到左侧,则注视区域检测器210可以根据用户的瞳孔1020的移动距离计算显示屏幕的坐标点(a,b),并且可以确定用户正在注视具有计算的坐标点的点。此外,如图10C中所示,响应于确定用户的瞳孔1020从中心移动到了右上方,注视区域检测器210可以根据用户的瞳孔1020的运动计算显示屏幕的坐标点(c,d),并且可以确定用户正在注视具有计算的坐标点的点。
然而,如上所述的用于确定用户注视的区域的方法仅仅是示例性的,可以使用其他方法来确定用户注视的区域。例如,注视区域检测器210可以通过跟踪用户脸部的方向来确定用户注视的区域。
脑电波测量器220通过多个脑电波感测电极测量用户的脑电波。具体来说,由于脑电波测量器120需要附着到用户的头部来测量用户的脑电波,因此脑电波测量器可以被实现为与显示装置100分离。
将参考图3详细描述脑电波测量器220。如图3中所示,脑电波测量器220包括脑电波感测电极221、滤波器222、放大器223、A/D(模数)转换器224和发送器225。脑电波感测电极221被安排在脑电波检测器220的外部以感测用户的脑电波。具体来说,适应于脑电波检测器220被包括在3D眼镜中,脑电波感测电极221被安排在3D眼镜的眼镜腿或前额接触部分上,以便感测用户的脑电波。此时,取决于脑电波的频率,脑电波感测电极221包括检测8到13赫兹范围内的脑电波的阿尔法(α)电极、检测13到30赫兹范围内的脑电波的贝塔(β)电极、检测30到50赫兹范围内的脑电波的伽马(γ)电极、检测0到4赫兹范围内的脑电波的德耳塔(Δ)电极、以及检测4到8赫兹范围内的脑电波的太塔(θ)电极中的至少一个。
滤波器222对脑电波感测电极221感测的脑电波进行滤波并将经滤波的脑电波输出到放大器223。此时,滤波器222可以被实现为低通滤波器(LPF),但是不局限于此。放大器223放大经滤波器222滤波的脑电波并将其输出到A/D转换器224。A/D转换器224将放大后的脑电波信息从模拟信号转换成数字信号。发送器225将被转换成数字信号的脑电波发送到显示装置200的主体。此时,发送器225可以使用
Figure BDA00003515800500071
模块或IR(红外线)模块来实现,但不局限于此。
存储器230存储各种数据和用于驱动显示装置200的程序。具体来说,存储器230存储映射到用户偏好度上的、直方图或矩阵形式的脑电波信息。例如,存储器230可以存储映射到“高偏好度”上的第一脑电波信息、映射到“中等偏好度”上的第二脑电波信息、以及映射到“低偏好度”上的第三脑电波信息。然而,如上所述的三级偏好度仅仅是示例性的,并且除了三个偏好度等级之外,还可以存储映射到脑电波信息上的多个偏好度等级。
显示器240在控制器270的控制下显示图像数据。具体来说,显示器240可以显示其中包括多个内容的内容UI。此时,内容UI可以是包括与多个内容相对应的图标的内容列表,但是不局限于此。此外,多个内容可以包括电影内容、广播内容、音乐内容、照片内容、广告内容等等,但是不局限于此。
显示器240可以在控制器270的控制下根据用户偏好度配置内容UI。稍后将参照图4到图8详细描述。
通信器250与外部设备或服务器通信;并且可以从外部设备或服务器接收内容信息。
另一方面,通信器可以用无线通信模块来实现,该无线通信模块连接到外部网络以根据诸如
Figure BDA00003515800500072
的无线通信协议执行通信。此外,无线通信模块还可以包括移动通信模块,该移动通信模块连接到移动通信网络以根据诸如
Figure BDA00003515800500074
(第三代)、
Figure BDA00003515800500075
(第三代合作伙伴计划)和
Figure BDA00003515800500076
(长期演进)的各种移动通信标准执行通信。
用户输入器260接收用于控制显示装置200的用户命令。此时,用户输入器260可以用各种输入设备,如遥控器、鼠标、键盘和触摸屏来实现。
控制器270根据通过用户输入器260输入的用户命令控制显示装置200的总体操作。具体来说,控制器270使用由脑电波测量器220测量的用户的脑电波,确定对于在用户注视的区域中呈现的注视内容的偏好度。此外,控制器270基于确定的偏好度控制显示器240提供内容UI。
具体来说,控制器270控制显示器240显示内容UI(用户界面),在该内容UI中包括通过通信器250从外部发送的多个内容。例如,如图4中所示,控制器270可以控制显示器240显示其中包括第一内容410到第六内容460的内容UI400。
控制器270通过注视区域检测器210确定用户注视的内容。具体来说,控制器270可以通过注视区域检测器210获取用户注视的区域的坐标信息,并且可以使用用户注视的区域的坐标信息确定在当前显示的内容UI中用户注视的注视内容。
此外,响应于从脑电波测量器220发送用户脑电波信息,控制器270基于从脑电波测量器220发送的用户脑电波信息确定对注视内容的偏好度。具体来说,响应于从脑电波测量器220发送用户脑电波信息,控制器270处理直方图或矩阵的形式的脑电波信息。然后,控制器270搜索在存储器230中预存储的脑电波信息,以确定是否存在与经处理的用户脑电波信息一致的脑电波信息。如果作为搜索结果找到与经处理的用户脑电波信息一致的预存储的脑电波信息,则控制器270使用与跟用户脑电波信息一致的预存储脑电波信息匹配的用户偏好度来确定对用户注视的内容的偏好度。对于经处理的用户脑电波信息和预存储的脑电波信息相互一致的情况,其不仅包括当前接收的脑电波信息与预存储的脑电波信息完全相互一致的情况,还包括当前接收的脑电波信息与预存储的脑电波信息存在预定误差范围内的误差的情况。
尽管如上所述可以使用与多个等级的用户偏好度匹配的所存储的用户脑电波信息来确定对注视内容的偏好度,但这仅仅是示例性的,并且也可以根据其他方法使用用户的脑电波来确定对注视内容的偏好度。例如,响应于从脑电波信息当中检测到大部分的指定频率的脑电波,控制器270可以根据脑电波的指定频率来确定对注视内容的用户偏好度。
此外,用户对注视内容的偏好度不仅可以通过使用预存储的用户的脑电波信息来确定,而且可以通过获得用户的脑电波信息来确定。例如,在检测到指定频率的脑电波之后观看指定内容达长时间段的情况下,除了预存储的频率之外,控制器270可以存储与高偏好度匹配的该指定频率的新检测的脑电波信息。因此,响应于在用户注视特定内容达某一时间段时检测到指定频率的脑电波,控制器270可以确定对于该特定内容的用户偏好度为高。
响应于偏好度被确定,控制器270可以在存储器230中存储注视内容和偏好度,并且可以根据偏好度提供内容UI。
具体来说,响应于对注视内容的偏好度等于或高于预定值,控制器270可以推荐与注视内容类似的内容。例如,响应于对于注视内容是“内容1”410并且对“内容1”的偏好度为“高偏好度”的确定,如图5中所示,控制器270可以将代表与注视内容类似的内容的“内容7”570、“内容8”580和“内容9”590作为推荐内容,提供到内容UI中的预定区域。
此时,与注视内容类似的内容可以是标题、类型、主演、导演以及摄制公司中的至少一个与注视内容一致的内容。
此外,响应于对注视内容的偏好度等于或高于预定值,控制器270可以增加注视内容以及与注视内容类似的内容的大小,并且可以显示该内容。例如,响应于对于注视内容是“内容1”410并且对“内容1”的偏好度为“高偏好度”的确定,如图6中所示,控制器270可以增加为注视内容的“内容1”610的大小并显示“内容1”610。另一方面,尽管图6示出仅仅注视内容以增加的大小显示,但这仅仅是示例性的,与注视内容类似的内容也可以以增加的大小来显示。
此外,控制器270可以确定对于内容UI中的多个区域的偏好度。具体来说,响应于用户注视内容UI中的多个区域,控制器270可以通过测量用户的脑电波来测量对于多个区域当中的区域的用户偏好度。例如,控制器270可以将内容UI分成六个区域(左上区域、上中区域、右上区域、左下区域、下中区域、和右下区域),并且通过检查对于每个区域的偏好度,可以确定具有最高用户偏好度的区域,并可以确定具有最低用户偏好度的区域。
此外,响应于对注视内容的偏好度等于或高于预定值,控制器270可以在内容UI中具有高偏好度的区域内,显示注视内容和与注视内容类似的内容中的至少一个。例如,响应于对于用户偏好区域是“右上”区域、注视内容是“内容1”410、并且对“内容1”的偏好度为“高偏好度”的确定,如图7中所示,控制器270可以控制显示器240在内容UI700的右上区域中显示为注视内容的“内容1”710。
此外,响应于对注视内容的偏好度低于预定值,控制器270可以在内容UI中具有低偏好度的区域内,显示注视内容和与注视内容类似的内容中的至少一个。例如,响应于对于用户偏好区域是“左下”区域、注视内容是“内容2”420、并且对“内容2”的偏好度为“低偏好度”的确定,控制器270可以控制显示器240在内容UI的右下区域中显示作为注视内容的“内容2”。
此外,响应于对注视内容的偏好度低于预定值,控制器270可以删除注视内容和与注视内容类似的内容中的至少一个,或者减小注视内容和与注视内容类似的内容中的至少一个的大小,并且可以显示注视内容。例如,响应于对于注视内容是“内容2”420并且对“内容2”的偏好度是“低偏好度”的确定,如图8中所示,控制器270可以在内容UI800的下部区域中减小为注视内容的“内容2”820以及为与“内容2”820类似的内容的“内容8”880的大小,并且可以显示所述内容。然而,尽管如图8中所示减小了具有低于预定值的偏好度的内容的大小,但这仅仅是示例性的。在本发明构思的技术特征中,可以包括删除具有低于预定值的偏好度的内容的实施例。
在上述示例性实施例中,控制器270在确定对注视内容的偏好度之后马上重新配置内容UI。然而,这仅仅是示例性的,并且也可以在确定对注视内容的偏好度之后,映射并存储注视内容和对注视内容的偏好度,并且当在稍后的时间产生新的内容UI时,可以通过反映对注视内容的偏好度来生成该内容UI。
如上所述,通过测量用户的脑电波来确定用户偏好度,并且提供反映用户偏好度的内容UI,由此能够向用户提供根据用户偏好度更直观、更方便地配置的内容UI。
下文中,将参照图9描述显示装置100的提供内容的方法。
显示装置100显示其中包括多个内容的内容UI(S910)。该内容UI可以是内容列表,该内容列表包括与多个内容相对应的图标。多个内容可以包括电影内容、广播内容、音乐内容和广告内容中的至少一个。
然后,显示装置100检测用户注视的区域(S920)。具体来说,显示装置100可以拍摄用户的脸部,然后通过跟踪用户眼球的运动来检测用户注视的区域。显示装置100使用脑电波测量器120测量关于用户注视的区域的用户脑电波(S930)。此时,适应于显示装置100是3D显示装置,脑电波测量器120可以附着到与3D显示装置互锁的3D眼镜上。
此外,显示装置100确定对于在用户注视的区域中呈现的注视内容的偏好度(S940)。具体来说,显示装置100可以通过分析所测量的用户的脑电波来确定对用户注视的注视内容的偏好度。此时,显示装置可以确定被配置为处于多个等级的对注视内容的偏好度。
然后,显示装置100基于对注视内容的偏好度提供内容UI(S950)。具体来说,响应于对于注视内容的偏好度等于或高于预定值,显示装置100可以推荐与注视内容类似的内容。此时,与注视内容类似的内容可以是标题、类型、主演、导演以及摄制公司中的至少一个与注视内容一致的内容。此外,响应于对于注视内容的偏好度等于或高于预定值,显示装置100可以增加注视内容以及与注视内容类似的内容的大小,并且可以显示注视内容。然而,响应于对于注视内容的偏好度低于预定值,显示装置100可以删除注视内容以及与注视内容类似的内容,或者减小注视内容以及与注视内容类似的内容的大小,并且可以显示该内容。
此外,显示装置100可以确定对于内容UI中的多个区域的偏好度,并且可以根据对注视内容的偏好度显示所述多个区域之一的注视内容。具体来说,响应于对于注视内容的偏好度等于或高于预定值,显示装置100可以在内容UI中具有高偏好度的区域内,显示注视内容和与注视内容类似的内容。然而,响应于对于注视内容的偏好度低于预定值,显示装置100可以在内容UI中具有低偏好度的区域内,显示注视内容和与注视内容类似的内容。
如上所述,通过测量用户的脑电波来检测对用户注视的内容的用户偏好度,并且根据用户偏好度来提供内容UI,由此能够更直观、更方面地向用户提供根据用户偏好度配置的内容UI。
可以在非瞬时计算机可读介质中存储程序代码,该程序代码用于执行根据如上所述的各种实施例的用于提供内容的方法。所述非瞬时计算机可读介质是指不是像寄存器、高速缓存和存储器那样在短时间内存储数据、而是半永久地存储数据的设备可读介质。具体来说,上述的各种的应用或程序可以在非瞬时计算机可读介质中提供和存储,所述非瞬时计算机可读介质诸如CD、DVD、硬盘、蓝光盘
Figure BDA00003515800500111
、USB、存储卡和ROM。
尽管已经参照本公开的特定示例性实施例示出和描述了本公开,但本领域技术人员将会理解,可以对本公开进行形式和细节上的各种改变而不会脱离如所附权利要求所定义的本公开的精神和范围。

Claims (15)

1.一种显示装置的用于提供内容的方法,包括:
显示内容用户界面,在该内容用户界面中包括多个内容;
检测在该内容用户界面中用户注视的区域;
通过测量用户的脑电波确定对于在用户注视的区域中呈现的注视内容的偏好度;以及
基于确定的偏好度提供内容用户界面。
2.如权利要求1所述的用于提供内容的方法,其中,如果对于注视内容的偏好度等于或高于预定值,则提供步骤提供与注视内容类似的内容作为推荐内容。
3.如权利要求1所述的用于提供内容的方法,其中,如果对于注视内容的偏好度等于或高于预定值,则提供步骤增加注视内容和与注视内容类似的内容中的至少一个的大小并显示注视内容和与注视内容类似的内容中的至少一个。
4.如权利要求1所述的用于提供内容的方法,还包括确定对于内容用户界面中的多个区域的偏好度,
其中,如果对于注视内容的偏好度等于或高于预定值,则提供步骤在内容用户界面中具有高偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
5.如权利要求4所述的用于提供内容的方法,其中,如果对于注视内容的偏好度低于预定值,则提供步骤在内容用户界面中具有低偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
6.如权利要求1所述的用于提供内容的方法,其中,如果对于注视内容的偏好度低于预定值,则提供步骤删除注视内容和与注视内容类似的内容中的至少一个,或者减小注视内容和与注视内容类似的内容中的至少一个的大小,并显示注视内容和与注视内容类似的内容中的至少一个。
7.如权利要求1所述的用于提供内容的方法,其中,检测步骤通过跟踪用户的脸部方向和瞳孔运动中的至少一个,来检测用户注视的区域。
8.如权利要求1所述的用于提供内容的方法,其中,如果显示装置是三维显示装置,则使用脑电波测量器来测量用户的脑电波,该脑电波测量器附着在与三维显示装置互锁的三维眼镜上。
9.一种显示装置,包括:
显示器,其显示内容用户界面,在该内容用户界面中包括多个内容;
注视区域检测器,其检测在该内容用户界面中用户注视的区域;
脑电波测量器,其测量用户的脑电波;以及
控制器,其使用由脑电波测量器测量的用户的脑电波确定对于在用户注视的区域中呈现的注视内容的偏好度,并基于确定的偏好度控制显示器提供内容用户界面。
10.如权利要求9所述的显示装置,其中,如果对于注视内容的偏好度等于或高于预定值,则控制器提供与注视内容类似的内容作为推荐内容。
11.如权利要求9所述的显示装置,其中,如果对于注视内容的偏好度等于或高于预定值,则控制器增加注视内容和与注视内容类似的内容中的至少一个的大小,并显示注视内容和与注视内容类似的内容中的至少一个。
12.如权利要求9所述的显示装置,其中,控制器确定对于内容用户界面中的多个区域的偏好度,并且,如果对于注视内容的偏好度等于或高于预定值,则控制显示器在内容用户界面中具有高偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
13.如权利要求12所述的显示装置,其中,如果对于注视内容的偏好度低于预定值,则控制器控制显示器在内容用户界面中具有低偏好度的区域中显示注视内容和与注视内容类似的内容中的至少一个。
14.如权利要求9所述的显示装置,其中,如果对于注视内容的偏好度低于预定值,则控制器控制显示器删除注视内容和与注视内容类似的内容中的至少一个,或者减小注视内容和与注视内容类似的内容中的至少一个的大小,并显示注视内容和与注视内容类似的内容中的至少一个。
15.如权利要求9所述的显示装置,其中,注视区域检测器通过跟踪用户的脸部方向和瞳孔运动中的至少一个,来检测用户注视的区域。
CN201310298001.4A 2012-07-18 2013-07-16 用于提供内容的方法和显示装置 Pending CN103576853A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0078309 2012-07-18
KR1020120078309A KR20140011204A (ko) 2012-07-18 2012-07-18 컨텐츠 제공 방법 및 이를 적용한 디스플레이 장치

Publications (1)

Publication Number Publication Date
CN103576853A true CN103576853A (zh) 2014-02-12

Family

ID=48782872

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310298001.4A Pending CN103576853A (zh) 2012-07-18 2013-07-16 用于提供内容的方法和显示装置

Country Status (5)

Country Link
US (1) US9535499B2 (zh)
EP (1) EP2687946A1 (zh)
JP (1) JP2014021986A (zh)
KR (1) KR20140011204A (zh)
CN (1) CN103576853A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107210830A (zh) * 2015-02-05 2017-09-26 华为技术有限公司 一种基于生物特征的对象呈现、推荐方法和装置
CN107273489A (zh) * 2017-06-14 2017-10-20 掌阅科技股份有限公司 内容推送方法、电子设备及计算机存储介质
CN108700931A (zh) * 2015-12-17 2018-10-23 Looxid实验室公司 眼睛-大脑接口(ebi)系统及其控制方法

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101987727B1 (ko) * 2013-10-17 2019-06-11 디아이씨 가부시끼가이샤 중합성 액정 조성물의 제조 방법
US20150113454A1 (en) * 2013-10-21 2015-04-23 Motorola Mobility Llc Delivery of Contextual Data to a Computing Device Using Eye Tracking Technology
US9769564B2 (en) 2015-02-11 2017-09-19 Google Inc. Methods, systems, and media for ambient background noise modification based on mood and/or behavior information
US11392580B2 (en) 2015-02-11 2022-07-19 Google Llc Methods, systems, and media for recommending computerized services based on an animate object in the user's environment
US11048855B2 (en) 2015-02-11 2021-06-29 Google Llc Methods, systems, and media for modifying the presentation of contextually relevant documents in browser windows of a browsing application
US10284537B2 (en) 2015-02-11 2019-05-07 Google Llc Methods, systems, and media for presenting information related to an event based on metadata
KR101648017B1 (ko) 2015-03-23 2016-08-12 현대자동차주식회사 디스플레이 장치, 차량 및 디스플레이 방법
US20170322679A1 (en) * 2016-05-09 2017-11-09 John C. Gordon Modifying a User Interface Based Upon a User's Brain Activity and Gaze
EP3316117A1 (en) * 2016-10-31 2018-05-02 Nokia Technologies OY Controlling content displayed in a display
US11006834B2 (en) 2016-11-08 2021-05-18 Sony Corporation Information processing device and information processing method
WO2018164960A1 (en) * 2017-03-07 2018-09-13 Cornell University Sensory evoked response based attention evaluation systems and methods
US10091554B1 (en) * 2017-12-06 2018-10-02 Echostar Technologies L.L.C. Apparatus, systems and methods for generating an emotional-based content recommendation list
JP6911809B2 (ja) 2018-05-09 2021-07-28 日本電信電話株式会社 推定方法、推定プログラム及び推定装置
CN110769341B (zh) * 2018-07-27 2021-06-29 深圳博科智能科技有限公司 一种智能耳机的控制方法及智能耳机
KR102168968B1 (ko) * 2019-01-28 2020-10-22 주식회사 룩시드랩스 생체 데이터를 이용한 하이라이트 영상 생성 방법 및 그 장치
US11904866B2 (en) * 2019-07-31 2024-02-20 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for brain-machine interfaces and EEG-based driver identification
KR102320917B1 (ko) * 2020-03-09 2021-11-05 주식회사 컴플렉시온 사용자의 성향 및 몰입정도에 기반한 콘텐츠 추천 방법 및 제공장치
US11899839B1 (en) * 2022-03-01 2024-02-13 Hrl Laboratories, Llc System for multimodal machine-aided comprehension analysis and assistance

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5740812A (en) * 1996-01-25 1998-04-21 Mindwaves, Ltd. Apparatus for and method of providing brainwave biofeedback
US20090112849A1 (en) * 2007-10-24 2009-04-30 Searete Llc Selecting a second content based on a user's reaction to a first content of at least two instances of displayed content
US20100191727A1 (en) * 2009-01-26 2010-07-29 Microsoft Corporation Dynamic feature presentation based on vision detection
US20110254865A1 (en) * 2010-04-16 2011-10-20 Yee Jadine N Apparatus and methods for dynamically correlating virtual keyboard dimensions to user finger size
CN102289285A (zh) * 2011-08-16 2011-12-21 海尔集团公司 一种基于意识实现对电子设备控制的方法
CN102361590A (zh) * 2009-10-15 2012-02-22 松下电器产业株式会社 驾驶注意量判别装置、方法以及计算机程序

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004156922A (ja) * 2002-11-01 2004-06-03 Mitsubishi Electric Corp ナビゲーション装置
EP2325722A1 (en) * 2003-03-21 2011-05-25 Queen's University At Kingston Method and apparatus for communication between humans and devices
JP2006196995A (ja) * 2005-01-11 2006-07-27 Matsushita Electric Ind Co Ltd 3次元めがね視聴検知
US20060252978A1 (en) * 2005-05-09 2006-11-09 Vesely Michael A Biofeedback eyewear system
JP4609244B2 (ja) 2005-08-30 2011-01-12 ソニー株式会社 コンテンツ再生装置及びコンテンツ再生方法
JP2007156877A (ja) 2005-12-06 2007-06-21 Fuji Xerox Co Ltd 多層ワーク支援装置、多層ワーク支援装置の表示方法及びプログラム
CA2663078A1 (en) * 2006-09-07 2008-03-13 The Procter & Gamble Company Methods for measuring emotive response and selection preference
US9582805B2 (en) 2007-10-24 2017-02-28 Invention Science Fund I, Llc Returning a personalized advertisement
CN101681201B (zh) * 2008-01-25 2012-10-17 松下电器产业株式会社 脑波接口系统、脑波接口装置、方法
US20110214082A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5740812A (en) * 1996-01-25 1998-04-21 Mindwaves, Ltd. Apparatus for and method of providing brainwave biofeedback
US20090112849A1 (en) * 2007-10-24 2009-04-30 Searete Llc Selecting a second content based on a user's reaction to a first content of at least two instances of displayed content
US20100191727A1 (en) * 2009-01-26 2010-07-29 Microsoft Corporation Dynamic feature presentation based on vision detection
CN102361590A (zh) * 2009-10-15 2012-02-22 松下电器产业株式会社 驾驶注意量判别装置、方法以及计算机程序
US20110254865A1 (en) * 2010-04-16 2011-10-20 Yee Jadine N Apparatus and methods for dynamically correlating virtual keyboard dimensions to user finger size
CN102289285A (zh) * 2011-08-16 2011-12-21 海尔集团公司 一种基于意识实现对电子设备控制的方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107210830A (zh) * 2015-02-05 2017-09-26 华为技术有限公司 一种基于生物特征的对象呈现、推荐方法和装置
US11270368B2 (en) 2015-02-05 2022-03-08 Huawei Technologies Co., Ltd. Method and apparatus for presenting object based on biometric feature
CN108700931A (zh) * 2015-12-17 2018-10-23 Looxid实验室公司 眼睛-大脑接口(ebi)系统及其控制方法
CN107273489A (zh) * 2017-06-14 2017-10-20 掌阅科技股份有限公司 内容推送方法、电子设备及计算机存储介质
CN107273489B (zh) * 2017-06-14 2019-08-30 掌阅科技股份有限公司 内容推送方法、电子设备及计算机存储介质

Also Published As

Publication number Publication date
US20140022157A1 (en) 2014-01-23
JP2014021986A (ja) 2014-02-03
KR20140011204A (ko) 2014-01-28
US9535499B2 (en) 2017-01-03
EP2687946A1 (en) 2014-01-22

Similar Documents

Publication Publication Date Title
CN103576853A (zh) 用于提供内容的方法和显示装置
US9996155B2 (en) Manipulation of virtual object in augmented reality via thought
US9996983B2 (en) Manipulation of virtual object in augmented reality via intent
US10366778B2 (en) Method and device for processing content based on bio-signals
EP2929424B1 (en) Multi-touch interactions on eyewear
KR101433546B1 (ko) 디스플레이 콘텐츠를 조절하는 방법 및 시스템
KR102320815B1 (ko) 전자 장치 및 그 제어 방법
CN109564472A (zh) 沉浸式环境中的交互方法的选取
US9087056B2 (en) System and method for providing augmented content
EP3646776A1 (en) Skin checking device, product information determination method, device and system
US20160374616A1 (en) Electrode contact quality
KR20190066428A (ko) 기계학습에 기반한 가상 현실 콘텐츠의 사이버 멀미도 예측 모델 생성 및 정량화 조절 장치 및 방법
CN114556270A (zh) 放大用户界面的眼睛注视控制
CN108304076B (zh) 电子装置、视频播放应用的管理方法及相关产品
JP2022094784A (ja) コンテンツ提案装置、感情測定端末、コンテンツ提案システム、及びプログラム
KR102073222B1 (ko) 사용자 단말 및 이의 햅틱 서비스 제공 방법
CN117043709A (zh) 用于生产力的扩展现实

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140212

WD01 Invention patent application deemed withdrawn after publication