CN101753776B - 图像处理设备和图像显示方法 - Google Patents

Abstract

一种图像处理设备包括：显示装置；存储单元，被配置为存储具有与搜索关键对应的信息的多个图像数据；搜索关键指定单元，被配置为指定用于图像搜索的搜索关键；搜索单元，被配置为从存储单元中搜索并提取具有与搜索关键指定单元指定的搜索关键有关的信息的图像数据，以及显示控制单元，被配置为控制与搜索单元提取出的图像数据对应的图像来显示在显示装置的显示屏幕上的、与关于搜索关键的关联程度对应的位置上。

Description

图像处理设备和图像显示方法

技术领域

本发明涉及包括能够显示各种图像的、具有相对大显示屏幕的显示装置的设备(如数码相机)、以及其设备使用的方法和程序。 

背景技术

将拍摄图像作为数字数据记录在记录介质中的数码相机已经普遍使用。近些年来，在数码相机所使用的内置闪存或可拆卸存储器的尺寸缩小方面已经有了很大的进步，并且存储器的容量已经变得很大，因此可以在这样的存储器中存储大量图像数据。 

并且，利用数码相机，逐年来已经增大了可以在其中存储的拍摄图像的数量，并且在内置闪存或可拆卸存储器中频繁地存储数量太大以致于不能在用户的头脑中管理的图像数据。 

因此，已经开发了这样的数码相机，其中用户向图像数据添加关键字，由此可以使用该关键字(keyword)执行搜索。例如，已经向通过拍摄图像而获得的图像数据添加了各种类型的信息，如已经拍摄图像的地点、在图像中所拍摄的人的姓名等。 

并且，在使用添加到图像数据的关键字从多个图像数据中搜索期望图像的图像数据的情况下，用户设置(指定)搜索关键(search key)(搜索条件)来执行搜索处理。例如，通过从预先呈现的搜索关键等中选择合适的搜索关键，或者从用户接受文本数据的输入，并且将其设置为搜索关键来设置搜索关键。接下来，使用如此设置的搜索关键来执行搜索处理，由此可以缩小具有该搜索关键的图像数据的范围。因此，向图像数据添加关键字，由此使得能够使用其关键字来搜索图像数据，并且可以灵活地执行图像数据的搜索。 

并且，关于使用关键字的图像搜索，已经进行了各种改进，并且例如，日本待审查专利申请公开No.2005-354134和日本待审查专利申请公开No.2008-165424公开了以可靠方式的期望图像的快速搜索。 

发明内容

顺便提及，在检测具有与搜索关键(搜索条件)匹配的信息的图像数据的情况下，以列表格式显示搜索结果，因此在许多情况下可以适当地识别其结果。然而，在将搜索范围扩展到与搜索关键(搜索条件)有关的图像数据的情况下，仅通过以平铺形式排列并显示其结果，关于搜索结果难以在视觉上快速地识别出与搜索条件的关联程度。 

已经发现期望提供图像搜索的结果以便还识别与搜索关键(搜索条件)的关系。 

根据本发明的实施例，一种图像处理设备包括：显示装置；存储单元，被配置为存储具有与搜索关键对应的信息的多个图像数据；搜索关键指定单元，被配置为指定用于图像搜索的搜索关键；搜索单元，被配置为从存储单元中搜索并提取具有与搜索关键指定单元指定的搜索关键有关的信息的图像数据，以及显示控制单元，被配置为控制与搜索单元提取出的图像数据对应的图像，以显示在显示装置的显示屏幕上的、与关于搜索关键的关联程度对应的位置上。 

根据以上配置，经由搜索关键指定单元指定用于图像搜索的搜索关键。由搜索单元从用于存储多个图像数据的存储单元中搜索并提取具有与该指定的搜索关键有关的信息的图像数据。 

接下来，由显示控制单元在显示装置的显示屏幕上显示与搜索并提取出的图像数据对应的图像。在这种情况下，由显示控制单元将作为搜索结果获得的图像数据所对应的图像显示在与关于搜索关键的关联程度对应的显示屏幕上的位置上。 

因此，可以向用户提供图像搜索的结果，以便还识别与搜索关键(搜索条件)的关系。 

根据以上配置，可以向用户提供图像搜索的结果，以便还识别与搜索关键(搜索条件)的关系。 

附图说明

图1是描述已经应用了本发明的设备、方法和程序的实施例的成像设备的配置示例的框图； 

图2是描述在成像设备的记录介质中记录的图像文件的布局示例的图； 

图3是描述在成像设备的记录介质中形成的图像文件夹的布局示例的图； 

图4是描述预先在成像设备的记录介质、EEPROM等中形成的搜索关键候选信息表的图； 

图5A和图5B是描述用于从搜索关键候选信息表中登记的搜索关键候选信息中选择用于图像搜索的搜索关键的处理的图； 

图6A和图6B是描述用于从搜索关键候选信息表中登记的搜索关键候选信息中选择用于图像搜索的搜索关键的处理的图； 

图7A和图7B是描述用于从搜索关键候选信息表中登记的搜索关键候选信息中选择用于图像搜索的搜索关键的处理的图； 

图8是描述搜索关键关联程度字典的配置示例的图； 

图9是描述图像分析信息的、能够变为用于图像搜索的搜索关键的信息的图； 

图10是描述在从选择了一个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(1)的图； 

图11是描述将要在成像设备中执行的图像搜索时的处理的流程图； 

图12是从图11继续的流程图； 

图13是描述在从选择了一个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(2)的图； 

图14是描述在根据使用图13描述的显示模式(2)显示图像搜索的结果的情况下的处理的流程图； 

图15是描述从选择了两个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(3)的图； 

图16是描述用于确定缩略图图像的显示区域的显示位置确定表(1)的图； 

图17是描述从选择了两个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(4)的图； 

图18是描述用于确定缩略图图像的显示区域的显示位置确定表(2)的图； 

图19是描述从选择了两个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(5)的图； 

图20是描述根据使用图19描述的显示模式(5)显示图像搜索的结果的情况下的处理的流程图； 

图21是描述从选择了两个搜索关键(字符信息)的状态中执行图像搜索的情况下的搜索结果的显示模式(6)的图； 

图22是描述根据使用图21描述的显示模式(6)显示图像搜索的结果的情况下的处理的流程图； 

图23是描述使用图像作为搜索关键执行图像搜索的情况的图； 

图24是描述用于确定搜索结果的操作的图； 

图25A到图25C是描述根据由用户倾斜的成像设备的倾斜来改变将要在文件夹中存储的图像搜索结果的范围的情况的图；以及 

图26是描述根据由用户倾斜的成像设备的倾斜来改变将要在文件夹中存储的图像搜索结果的范围的情况(已经使用图25A到图25C进行了描述)下的处理的流程图。 

具体实施方式

在下文中将参照附图描述设备、方法和程序的实施例。 

成像设备的配置示例 

图1是描述已经应用了本发明的设备、方法和程序的实施例的成像设备100的配置示例的框图。成像设备100切换拍摄模式，由此可以拍摄静止图像和运动图像二者，并且将其记录在记录介质中。然而，对于以下所述的实施例，为了简化说明，作为示例，将在成像设备100使用主要用以拍摄或播放静止图像的功能(作为数字静止照相机)的情况下描述成像设备100的配置和操作。 

如图1所示，成像设备100包括透镜单元101、成像装置102、预处理单元103、图像处理单元104、显示处理单元105、显示单元106、触摸板107、压缩处理单元109、解压缩处理单元110和显示图像形成单元111。 

并且，成像设备100包括控制单元120、操作单元131、外部接口(在下文中，简称为外部接口)132、输入/输出端子133、写/读单元134和记录介质135。并且，成像设备100包括机上部分触摸板136、运动传感器137、GPS接收单元138、GPS接收天线139和时钟电路140。 

对于根据本实施例的成像设备100，显示单元106由所谓的薄显示装置 (例如，LCD(液晶显示器)、有机EL面板(有机电致发光面板)等)构成。虽然要在后面描述，将触摸板107附着于显示单元106的显示屏幕的整个表面，以便形成操作表面。 

触摸板107从用户(操作者)接受关于操作表面的指定操作(接触操作)，检测在触摸板107的操作表面上的指定位置(触摸位置)，并向控制单元120通知指示其指定位置的坐标数据。 

如后所述，控制单元120控制成像设备100的每一个单元，并且还识别关于显示单元106的显示屏幕执行哪种显示。基于来自触摸板107的、指示操作表面上的指定位置的坐标数据，控制单元120可以接受来自用户的指定操作(输入操作)，并在显示单元106的显示屏幕上显示与其指定位置对应的信息。 

例如，我们说，用户将手指或触针等与触摸板107的操作表面的一个位置接触。在这种情况下，如果已经在与其接触位置对应(匹配)的显示屏幕上的显示位置上显示数字，则控制单元120可以确定用户已经选择并输入了所显示的数字。 

因此，对于成像设备100，显示单元106和触摸板107构成了用作输入设备的触摸屏幕108。注意，例如，以压敏型或静电型来实现触摸板107。 

并且，触摸板107可以检测被安排来关于操作表面上的多个部分同时执行输出指示每一个接触位置的坐标数据的每一个操作。并且，触摸板107还可以检测被安排来关于操作表面重复执行输出指示每一个接触位置的坐标数据的每一个指定操作。 

进一步，在由用户使手指或触针接触时，触摸板107还可以在预定定时处连续地检测接触位置，以输出指示接触位置的坐标数据。 

因此，触摸板107可以接受来自用户的各种指定操作(操作输入)(如，所谓的点击(tapping)操作、双击操作、拖曳操作、轻弹操作(flicking operation)、挤压操作(pinch operation)等)以便对此检测。 

这里，点击操作是通过用户的手指或触针在操作表面上仅指定一次的动作(操作)，如“tap”。双击操作是在操作表面上连续地指定两次的动作，如“tap、tap”。 

并且，拖曳操作是在接触操作表面的同时，移动用户的手指或触针的动作。轻弹操作是以用户的手指或触针在操作表面上指定一个点，然后进行操 作以便快速地在任意方向上轻弹该点。 

挤压操作是使用户的两个手指同时与操作表面接触以打开或闭合两个手指等。在这种情况下，将打开接触的两个手指等的操作称为向外挤压(pinchout)操作，而将闭合两个手指等的操作称为向内挤压操作。 

尽管拖曳操作与轻弹操作在操作速度上不同，但拖曳操作和轻弹操作是使用户的手指等与操作表面接触然后将其在操作表面上移动(操作表面上的跟踪操作)的操作，并且是能够通过移动距离和移动方向的两种信息来进行识别的操作。 

因此，对于本说明书，在执行拖曳操作和轻弹操作中之一，由此可以执行相同处理的情况下，将术语“跟踪操作”用作拖曳操作和轻弹操作的通用术语。 

接下来，控制单元120连接到构成成像设备100的每一个单元，并控制如上所述的成像设备100的每一个单元，并具有所谓的微计算机的配置。 

配置控制单元120，以便经由CPU总线125连接到CPU(中央处理单元)121、ROM(只读存储器)122、RAM(随机存取存储器)123和EEPROM(电可擦除可编程ROM)124。 

CPU 121读出随后描述的ROM 122中存储的程序以执行该程序，形成要提供到每一个单元的控制信号以将其提供到每一个单元，并接受从每一个单元提供的数据等以对其进行处理。 

如上所述，ROM 122预先存储并保存要由CPU 121执行的各种程序、用于处理的各种类型的数据等。RAM 123主要用作工作区，如临时地存储各种类型的处理的中间结果。 

EEPROM 124是所谓的非易失性存储器，并存储和保持即使在关闭成像设备100的电源时也要保持的信息。例如，在EEPROM 124中保存由用户设置的各种参数、各种类型的处理的最终结果、用于添加功能等而新提供的处理程序或数据等。 

如图1所示，这样配置的控制单元120连接到操作单元131、外部接口132、写/读单元134、机上部分触摸板136、运动传感器137、GPS接收单元138和时钟电路140。 

操作单元131包括操作按键(如，各种类型的调整按键、功能按键、快门按键等)，并接受来自用户的操作输入以便将其向控制单元120进行通知。 因此，控制单元120根据经由操作单元131接受的、来自用户的操作输入，控制每一个单元，由此可以执行根据操作输入的处理。 

外部接口132是遵循预定标准(例如，USB(通用串行总线)、IEEE(电气和电子工程师协会)1394等)的数字接口。 

也就是说，外部接口132通过将来自与输入/输出端子133连接的外部设备的数据转换为能够在成像设备100处理的格式的数据来接受所述数据，或者通过将从成像设备100输出的数据转换为预定格式的数据来将其输出。 

写/读单元134根据控制单元120的控制，将数据写入成像设备100的记录介质135，或者读出记录介质135中记录的数据。 

配置记录介质135以便与成像设备100可分离，并且是所谓的存储卡型可拆卸存储器，其被配置为具有几千兆字节或更多，并且例如使用半导体存储器。 

注意，例如，可以进行这样的安排，其中除了存储卡型可拆卸存储器之外，还可以使用诸如内置闪存或小型硬盘之类的内置型记录介质作为记录介质135。 

并且，可以进行这样的安排，其中可以使用诸如光盘(如小型DVD(数字多功能盘)或CD(致密盘))之类的另一种可拆卸类型的记录介质作为记录介质135。 

机上部分触摸板136用于在预定情况下接受来自用户的指定输入。也将该触摸板136实现为压敏面板或静电面板。注意，机上部分触摸板136不需要由触摸板配置而成，并且甚至可以实现为所谓的硬件按键。 

运动传感器137用于检测成像设备100的运动，并且具体地，由双轴或三轴加速传感器等配置。在成像设备100被倾斜的情况下，运动传感器137可以检测在哪个方向中倾斜了多少，并将其通知给控制单元120。 

并且，运动传感器137可以清楚地检测成像设备水平地抖动的情况以及成像设备100垂直地抖动的情况，以将其通知给控制单元120。并且，例如，甚至在通过点击等将振动施加到成像设备100的情况下，运动传感器137也可以对其检测以将其通知给控制单元120。 

GPS接收单元138经由GPS接收天线139接收来自多个卫星的预定信号，并且对此进行分析，由此可以检测成像设备100的当前位置，并且可以将其通知给控制单元120。 

根据GPS接收单元138的功能，成像设备100在拍摄图像的时候获取当前位置信息，由此可以将指示拍摄图像位置的位置信息(GPS信息)作为元数据添加到图像数据。 

注意，配置GPS接收单元138，以便根据经由操作单元131接受的、来自用户的指令而操作或停止操作。 

时钟电路140具有日历功能，由此可以提供当前日期、星期的当前日以及当前时间，并且还可以适当地实现用于测量预定时间间隔的定时器功能。 

根据该时钟电路140的功能，可以将与拍摄日期(如拍摄日期和时间、拍摄的星期的星期几等)有关的信息添加到拍摄图像数据。并且，使用时钟电路140的功能，由此也可以实现自定时拍摄功能，所述功能在从预定操作起经过了某一时间段之后自动地按下快门以使得能够拍摄图像。 

对于图1中所示的成像设备100，透镜单元101包括(尽管未在图中示出)成像透镜(物镜)、曝光调整机构、对焦调整机构、快门机构等，并且是用以拍摄被摄体的图像并在后一级的成像装置的传感器表面上形成图像的部分。 

成像装置102由成像传感器(成像装置)(如，CCD(电荷耦合器件)或CMOS(互补金属氧化物半导体)图像传感器等)配置而成。成像装置102获得要经由透镜单元101在其自身的传感器表面上形成的图像作为电信号(图像信号)。 

对于根据本实施例的成像设备100，成像装置102包括用于对于每一个像素预先确定来形成R(红)、G(绿)和B(蓝)信号中的任意一个的色彩样式的单片滤色镜(single-plate color filter)。 

接下来，将经由成像装置102获得的图像信号提供到后一级的预处理单元103。预处理单元103包括CDS(相关双采样)电路、AGC(自动增益控制)电路、A/D(模拟/数字)转换器等，并且是用以获得来自成像装置102的图像信号作为数字数据的部分。 

将经由预处理单元103获得的图像信号(图像数据)提供到图像处理单元104。图像处理单元104包括检测器电路、白平衡电路、去马赛克电路(demosaic circuit)、分辨率转换电路、另一个图像校正电路等。 

首先，利用图像处理单元104，基于来自预处理电路103的图像数据形成用于各种类型的调整处理的参数(如，用于曝光调整的参数、用于对焦(焦 点)调整的参数、用于白平衡调整的参数等)。 

在图像处理单元104处形成的参数中，将用于曝光调整的参数以及用于对焦调整的参数提供到控制单元120。控制单元120基于来自图像处理单元104的参数控制透镜单元101的曝光调整机构和对焦调整机构，由此可以适当地执行用于曝光或对焦的调整。 

接下来，利用图像处理单元104，关于来自预处理单元103的图像数据，执行基于如上所述形成的用于白平衡调整的参数的黑电平匹配处理或白平衡调整处理。根据这样的调整处理，调整来自预处理单元103的图像数据，以便获得具有适当的色调的图像。 

接下来，利用图像处理单元104，关于被调整的图像数据执行用于产生RGB数据(三原色数据)的去马赛克处理(同时处理)、光圈校正处理、伽玛(γ)校正处理等，以便具有适当的色调。 

进一步，利用图像处理单元104，执行用于从所形成的RGB数据中形成亮度信号(Y)和色彩信号(Cb、Cr)的Y/C转换处理、色差校正处理、分辨率转换处理等，以形成亮度信号Y和色彩信号Cb和Cr。 

将在图像处理单元104形成的图像数据(亮度信号Y、色彩信号Cb、Cr)提供到显示处理单元105，并将其转换为要提供到显示单元106的格式的图像信号，并将其提供到显示单元106。 

因此，在显示单元106的显示屏幕上显示经由透镜单元101拍摄的被摄体的图像，由此用户在确认显示单元106的显示屏幕上显示的被摄体的图像的同时可以拍摄目标被摄体的图像。 

同时，还将在图像处理单元104形成的亮度信号Y以及色彩信号Cb和Cr提供到压缩处理单元109。接下来，在当按下操作单元131的快门按键时的定时上，压缩处理单元109在那时将安排来在显示单元106的显示屏幕上显示的图像的图像数据经历数据压缩，并将其提供到控制单元120。 

注意，利用压缩处理单元109，根据预定的数据压缩方法执行数据压缩处理。作为数据压缩方法，在静止图像的情况下，使用JPEG(联合图像专家组)方法，而在运动图像的情况下，使用MPEG(运动图像专家组)方法等。不必说，数据压缩方法不限于这些方法，而是可以使用各种类型的方法。 

控制单元120控制写/读单元134以将来自压缩处理单元109的、经历了数据压缩的图像数据记录在记录介质135中。因此，利用成像设备100，可 以拍摄被摄体的图像，并且可以将形成被摄体的图像的图像数据记录在记录介质135中。 

利用成像设备100，针对要由用户形成的每一个文件夹(尽管细节将在下文中描述)，可以将这样拍摄并获得的图像数据存储在记录介质135中，并且可以被管理。可以根据目的(object)(如对于每一个被摄体或对于每一个事件等)形成文件夹。利用根据本实施例的成像设备100，针对已经执行了图像的拍摄的每一个事件形成文件夹，例如，开学第一天、运动会、生日派对等。不必说，之后也可以将拍摄的图像数据移动到目标文件夹。 

接下来，将记录介质135中记录的图像数据安排为能够通过由控制单元120控制的写/读单元134读出。将从记录介质135读出的图像数据经由控制单元120提供到解压缩处理单元110。 

根据在数据压缩时使用的数据压缩方法，解压缩处理单元110使提供到它的图像数据经历解压缩处理，以恢复数据压缩之前的图像数据，并将其提供到显示图像形成单元111。 

显示图像形成单元111使用来自解压缩处理单元110的图像数据，还适当地使用从控制单元120提供的各种类型的显示数据以形成要在显示单元106的显示屏幕上显示的图像的图像数据，并将其提供到显示处理单元105。 

以与处理来自图像处理单元104的图像数据时相同的方式，显示处理单元105将来自显示图像形成单元111的图像数据转换为要提供到显示单元106的格式的图像信号，并将其提供到显示单元106。 

因此，可以在显示单元106的显示屏幕上显示与记录介质135中记录的图像数据对应的图像。也就是说，可以播放记录介质135中记录的目标图像的图像数据。

因此，根据本实施例的成像设备100可以拍摄被摄体的图像，并将其记录在记录介质135中。并且，成像设备100读出记录介质135中记录的图像数据以使其经历回放处理，由此可以在显示单元106的显示屏幕上显示与其图像数据对应的图像。 

利用具有以上配置的成像设备100，如下所述，将用作搜索关键(搜索条件)候选的信息(如关键字等)添加到通过拍摄而记录在记录介质135中的图像文件上，并且可以相应地搜索图像数据。 

接下来，成像设备100不简单地提取具有与搜索关键匹配的信息的图像 数据。搜索并提取具有与搜索关键有关的信息的图像数据，由此可以根据关于搜索关键的关联程度，将其结果显示在显示单元106的显示屏幕上。 

并且，成像设备100可以确定具有用户期望的范围的图像搜索的结果，而不执行用以存储这些的复杂操作。 

图像文件和图像文件夹的配置示例 

图2是描述要在成像设备100的记录介质135中记录的图像文件的布局示例的图。如图2所示，图像文件具有作为标识每一个图像文件的标识信息的文件名。在拍摄图像的时候由控制单元120自动地提供该文件名。 

并且，安排元数据(如，关键字、GPS信息、图像分析信息、相机信息、拍摄日期和时间等)以添加到每一个图像文件。这样的元数据可以用作与图像数据的搜索关键对应的信息。 

这里，关键字主要是要由用户输入的文本数据。具体地，关于关键字，可以将多个信息登记为关键字，其指示已经拍摄图像的地点的地点名、已经拍摄到图像中的人的姓名、已经在已经拍摄图像的地点处举行的事件的名称、其图像的内容等。 

注意，在显示单元106的显示屏幕上显示与图像文件(将要向其添加关键字)的图像数据对应的图像的情况下，经由操作单元131和触摸屏幕108输入关键字，由此可以将关键字添加到该图像文件。 

并且，例如，可以进行这样的安排：其中，在个人计算机上，将各种类型的元数据(如关键字等)添加到图像数据，其经由输入/输出端子133和外部接口132进入成像设备100，并被记录在记录介质135中。也就是说，已经在外部设备处添加了元数据(如关键字等)的图像数据进入成像设备100，由此可以对其进行使用。 

GPS信息是经由以上GPS接收单元138获得的、指示拍摄图像时的位置的位置信息(经度和纬度的信息)，可以经由控制单元120将其添加到图像文件中。 

安排图像分析信息，以便通过预定方法使该图像文件的图像数据经历图像分析，由此获得图像分析结果，并将这些存储在每一个图像文件中。在拍摄图像之后的适当定时处主要利用控制单元120的功能来执行该图像分析，并且将其添加到图像文件。 

对于图像分析信息，例如，使用各种技术(如，边缘检测、色彩分析等)， 由此通过数字化可以指示根据每一个图像数据的图像的特征，并且可以在各图像之间比较画面构成和被摄体的相似性。 

由于该原因，根据该图像分析信息，基于该图像分析的结果，可以搜索已经拍摄了相似的人(脸)的图像，可以搜索已经拍摄了类似的地点的图像，或者可以搜索诸如色调和复杂度之类的特征类似的图像。 

并且，尽管在下文中描述，但该图像分析信息是作为图像分析的结果而获得的信息，并且包括各种类型的分析信息，如图像内人脸的区域、已经拍摄到图像中的人的数量、已经拍摄到图像中的人的笑脸的程度以及指示整个图像的特征的信息。 

相机信息是指示在拍摄图像时的光圈、快门速度等的信息。该相机信息是在控制单元120中管理的信息，并且在已经执行了图像的拍摄的情况下由控制单元120将该相机信息添加到图像文件。根据该相机信息，可以识别出已经在何种相机条件下拍摄了图像数据。 

拍摄日期和时间是经由时钟电路140、在拍摄图像时由控制单元120已经获得的日期和时间信息，并且已经将其添加到图像文件，并且由时间和日期组成。因此，可以精确地识别出在何时拍摄了每一个图像文件的图像数据。 

将通过拍摄图像而获得的、形成被摄体的图像的图像数据存储在图像文件中作为主要数据。在成像设备100的记录介质135中记录如此形成的图像文件。接下来，如以下所述，将图像文件存储在根据用户的指令将要在记录介质135中创建的图像文件夹中。 

注意，利用根据本实施例的成像设备100，例如，在用户未形成图像文件夹的情况下，自动地形成与拍摄日期对应的文件夹，由此可以将通过拍摄图像而获得的图像数据记录在此。 

如上所述，针对已经执行了图像的拍摄的每一个事件(例如，开学第一天、运动会、生日派对等)或者针对每一个拍摄年和月或者针对每一个拍摄年、月、日等形成存储图像文件的图像文件夹。 

除此之外，例如，在针对每一个被摄体形成图像文件夹并使用的情况下，或者在由家庭等共用成像设备100的情况下，针对每一个拍摄者形成图像文件夹，并且可以相应地使用该文件夹。 

图3是描述成像设备100的记录介质135中形成的图像文件夹的布局示例的图。如图3所示，图像文件夹具有作为用于标识每一个文件夹的标识信 息的文件夹名。例如，该文件夹名是与已经执行了图像的拍摄的事件(如开学第一天、运动会、生日派对等)对应的信息、与拍摄日(如，拍摄年和月、拍摄年、月和日等)有关的信息。并且，每一个图像文件夹具有该图像文件夹的事件标题、创建的日期和时间、其他各种类型的元数据。 

在已经与事件对应地创建了图像文件夹的情况下，事件标题可以存储指示事件的更详细内容的信息，例如，诸如“Alex的开学第一天2008.4.10”之类的详细内容。 

创建的日期和时间是指示当创建该图像文件时的日期和时间的信息，并且是在创建图像文件夹时由控制单元120从时钟电路140获取的信息。 

除此之外，可以在成像设备100自动添加的信息(如，在该图像文件夹中存储的图像文件的数量)、或者要由用户输入的评论信息(字符信息)等可以作为元数据添加。 

图像文件夹存储属于其文件夹的每一个图像文件的文件名、记录介质上的地址、拍摄日期和时间。根据该图像文件夹的信息，可以识别出何时拍摄图像、在该文件夹中存储了哪些图像文件以及在记录介质上的什么地方存储了其图像文件。 

接下来，对于图像文件，根据拍摄日期和时间以时间序列的次序管理通过拍摄图像而获得的图像数据的图像文件。因此，基于图像文件夹的信息，可以以时间经过的方向读出图3中所示的图像文件的图像数据以顺序地对其进行显示，或者可以以时间的后退方向顺序地读出以对其进行显示。 

搜索关键候选信息表 

利用根据本实施例的成像设备100，为了使得使用搜索关键的图像数据搜索处理易于执行，预先登记用作搜索关键的候选的信息(搜索关键候选信息)。在该搜索关键候选信息表中登记的搜索关键候选信息可以用作搜索关键，而无需在搜索的时候进行登记，这同样将在下文中描述。 

图4是描述要在成像设备100的记录介质135或EEPROM 124等中预先创建的搜索关键候选信息表的图。利用根据本实施例的成像设备100，搜索关键候选信息表通过将搜索关键候选信息分类为“人”、“地点”、“色彩”、“季节”、“被摄体”、“相机信息”和“其他”七个类别来管理搜索关键候选信息。 

如图4所示，与人有关的搜索关键候选信息属于类别“人”，并且预先登记诸如“家庭、爸爸、妈妈、哥哥、姐姐、弟弟、妹妹、……”之类的信息。 并且，可以由用户他/她自己登记将作为(已经是)被摄体的用户他/她自己的姓名、朋友的姓名或熟人，如“Alex(他自己/她自己)”、“A先生”、“B先生”、“C先生”等。 

如图4所示，与地点有关的搜索关键候选信息属于类别“地点”，并且预先登记诸如州、城市、乡村、镇、其他地点名称、车站名、各种地标名称等。注意，用户他自己/她自己可以登记新的地名、新近创建的地标(摩天大楼或商业设施等)、还未登记的地名等。 

如图4所示，色彩名(如红色、白色、黑色、蓝色等)属于类别“色彩”，预先登记已经频繁地普遍使用的多种色彩名。注意，用户他自己/她自己也可以登记还未预先登记的色彩名。 

如图4所示，与季节有关的搜索关键候选信息属于类别“季节”，并且除了“春、夏、秋、冬”之外，还预先登记诸如新春、早春、早夏、早秋、早冬等。注意，用户他自己/她自己也可以登记与还未预先登记的季节有关的词语。 

如图4所示，在类别“被摄体”中登记与什么可以用作被摄体有关的搜索关键候选信息，并且预先登记那些可以普遍地频繁地用作被摄体的名称，如动物、花、树、山、海等。注意，用户他自己/她自己还可以登记未预先登记的、与什么可以用作被摄体有关的词语。 

预先在类别“相机信息”中登记搜索关键候选信息(如，在拍摄图像时的相机设置条件(如光圈、快门速度等))。例如，这用在搜索使用特殊设置条件而拍摄的图像的情况等。注意，用户他自己/她自己也可以登记未预先登记的相机信息。 

在类别“其他”中登记不属于以上六种类别的任意一种的搜索关键候选信息。例如，登记诸如图像分析、GPS信息之类的项目名，并且选择这些，由此可以使用特定图像的图像分析信息作为搜索关键，并且可以使用特定图像的GPS信息作为搜索关键。利用根据本实施例的成像设备100，如上所述，用户可以将各种关键字添加到通过拍摄图像而在记录介质135中记录的图像文件中。 

如上所述，用户播放根据通过拍摄图像而在记录介质135中记录的图像文件中存储的图像数据的图像，并且在执行用于添加关键字的预定操作时，可以经由操作单元131输入关键字。 

在这种情况下，显示图4所示的搜索关键候选信息表的搜索关键候选信息列表，由此可以从显示的候选中选择并添加目标关键字。并且，在搜索关键候选信息列表中不存在目标关键字的情况下，例如，经由利用触摸屏8实现的输入按键来输入诸如词语之类的文本数据，由此可以将其作为关键字添加。 

如上所述，不必说，可以进行这样的安排：其中在个人计算机上，将诸如关键字之类的各种类型的元数据添加到图像数据，其经由输入/输出端子133和外部接口132进入成像设备100，并将其记录在记录介质135中。也就是说，在外部设备处添加了诸如关键字之类的元数据的图像数据进入成像设备100，由此可以对其进行使用。 

并且，通过经由输入/输出端子133和外部接口132连接的外部设备(如，个人计算机)，还可以将搜索关键候选添加到成像设备100的搜索关键候选表中。 

不必说，经由输入/输出端子133和外部接口132使得在外部设备(如，个人计算机等)中形成的搜索关键候选表进入成像设备100，并且将其存储在预定存储器(如EEPROM 124等)中，由此可以对其进行使用。 

在这种情况下，如果在搜索关键候选信息表中不存在作为关键字的信息输入，则控制单元120请求关于是否在搜索关键候选信息表中额外地登记了该关键字词语的确认。 

接下来，在已经指示了额外登记的情况下，例如，控制单元120可以在由用户经由操作单元131等指示的类别中登记该关键字。

因此，利用根据本实施例的成像设备100，将关键字之一添加到记录介质135中存储的图像文件，并且安排在搜索关键候选信息表中登记的搜索关键候选信息之一以进行匹配。 

用于图像搜索的搜索关键的选择处理 

接着，将进行关于利用根据本实施例的成像设备100，从图4所示的搜索关键候选信息表中登记的搜索关键候选信息中选择用于图像搜索的搜索关键的处理的描述。图5A到图7B是描述在搜索关键候选信息表中登记的搜索关键候选信息中选择用于图像搜索的搜索关键的处理的图。 

例如，利用成像设备100，执行预定操作，例如，操作单元131提供的菜单按键的按下操作等，由此控制单元120形成具有能够在成像设备100处 执行的处理的菜单作为选项，并将其显示在显示单元106上。 

也就是说，控制单元120使用在ROM 122中存储的用于显示的信息，以形成用于菜单显示(菜单屏幕)的图像数据。接下来，控制单元120经由解压缩处理单元110、显示图像形成单元111和显示处理单元105处理用于菜单显示的、所形成的图像数据，以形成用于菜单显示的单个图像，并将其提供到显示单元106。 

因此，在显示单元106的显示屏幕6G上显示具有在成像设备100处可执行的处理的菜单屏幕作为选项。注意，关于用于菜单显示的图像数据，不一定执行解压缩处理，并且相应地，用于菜单显示的图像数据不经历解压缩处理单元110处的特殊处理。 

利用成像设备100，如参照图1所述，触摸屏幕108由显示单元106和触摸板107构成，经由该触摸屏幕108接受来自用户的指令输入。 

用户执行操作以关于成像设备100从显示单元106的显示屏幕6G上显示的菜单中选择菜单项“图像搜索”。具体地，用户使手指等关于与菜单项“图像搜索”的显示位置对应的触摸板107的操作表面上的一个位置接触。 

因此，将指示用户在操作表面上的接触位置的坐标数据从触摸板107提供到控制单元120。控制单元120基于该坐标数据确定已经由用户选择了哪一项，并在与由该坐标数据指示的操作表面上的位置对应的显示屏幕上的位置上对显示信息进行显示。 

在这种情况下，控制单元120识别出在与用户接触的操作表面上的位置对应的显示屏幕6G的位置上显示菜单项“图像搜索”。相应地，控制单元120可以确定已经由用户选择了菜单项“图像搜索”。 

接下来，以与显示以上菜单的情况相同的方式，控制单元120在显示单元106的显示屏幕6G上显示图5A所示的搜索范围设置屏幕。如图5A所示，搜索范围设置屏幕具有称为“*图像搜索*”的标题(屏幕标题)，并且还具有用于指定搜索范围的全部图标(whole icon)6X、文件夹图标6Y和日期图标6Z。并且，如图5A所示，搜索范围设置屏幕在右上边缘位置上具有结束图标6a、确定图标6b。 

在图5A中，全部图标6X用于指定记录介质135中记录的全部图像文件作为搜索目标。相应地，在已经选择了全部图标6X的情况下，在图像搜索的时候，控制单元120将记录介质中记录的全部图像文件设置为搜索目标。 

文件夹图标6Y用于在记录介质135中记录的图像文件中，仅指定由用户选择的图像文件夹中存储的图像文件作为搜索目标。在已经选择了文件夹图标6Y的情况下，控制单元120形成记录介质135中形成的图像文件夹的列表，并将其显示在显示单元106的显示屏幕上，由此用户可以选择目标图像文件夹。 

在已经由用户选择了图像文件夹的情况下，在图5A中，如显示6Y1所示，控制单元120在显示单元106的显示屏幕6G上显示所选图像文件夹的文件夹名。 

接下来，控制单元120仅将所选图像文件夹中存储的图像文件设置为搜索目标。注意，可以选择的图像文件夹不限于一个，而是也可以设置多个图像文件夹作为搜索目标。 

日期图标6Z用于在记录介质135中记录的图像文件中，仅指定其中所附的拍摄年、月和日属于用户指定的日期范围的图像文件作为搜索目标。在已经选择了日期图标6Z的情况下，控制单元120在显示单元106的显示屏幕上显示日期范围设置屏幕，由此用户可以输入目标日期范围。 

在已经输入了日期范围的情况下，在图5A中，如显示6Z1所示，控制单元120在显示单元106的显示屏幕6G上显示输入日期范围。接下来，控制单元120仅将拍摄年、月和日属于输入日期范围的图像文件设置为搜索目标。 

注意，日期范围可以是一天(如，2008年10月1日到2008年10月1日)，并且可以执行范围的输入(设置)(如几天、几星期增量、几个月、或几年)。 

接下来，利用图5A所示的搜索范围设置屏幕，在已经选择了结束图标6a的情况下，控制单元120结束图像搜索处理，并且例如，返回到显示菜单屏幕的状态。 

并且，利用图5A所示的搜索范围设置屏幕，在已经选择了确定图标6b的情况下，控制单元120以所选的范围执行图像搜索。在这种情况下，控制单元120形成如图5B所示的具有类别列表显示611的搜索关键选择屏幕(1)，并将其显示在显示单元106的显示屏幕6G上。 

注意，在已经选择了确定图标6b(尽管未选择搜索范围)的情况下，控制单元120发送警告声音，或者显示警告消息，由此提示用户选择搜索范围。 

如图5B所示，搜索关键选择屏幕(1)具有结束图标6a和BK图标6c，并且还具有在显示屏幕6G的下边缘部分的类别列表显示611。 

基于参照图4所述的搜索关键候选表的类别信息来形成类别列表显示611，并且如图5B所示，具有人、地点、色彩、季节、被摄体、相机信息、其他七种类别。 

用户从显示的类别列表显示611中，选择用作搜索关键的搜索关键候选信息被假定所属的类别名。具体地，用户通过使手指等接触与目标类别名的显示位置对应的触摸板107的操作表面上的位置来选择类别名。 

控制单元120基于来自触摸板107的坐标数据，识别出已经由用户执行了哪种指令输入，并显示在以该坐标数据指示的、与触摸板107的操作表面上的位置对应的显示屏幕6G上的位置上显示的信息。 

现在，如图5B所示，让我们说，通过用户使手指等接触与类别“人”的显示位置对应的触摸板107的操作表面上的位置。在这种情况下，控制单元120确定已经选择了类别“人”，并且形成具有属于类别“人”的搜索关键候选信息的列表显示(搜索关键候选显示)621的搜索关键选择屏幕(2)，并且将其显示在显示单元106的显示屏幕6G上。 

注意，在图5B中，在已经选择了结束图标6a的情况下，控制单元120结束图像搜索处理，并且例如，返回到显示菜单屏幕的状态。并且，在图5B中，在已经选择了BK图标6c的情况下，控制单元120返回到参照图5A所述的搜索范围设置屏幕，由此可以再次执行搜索范围的设置。 

如图6A所示，搜索关键选择屏幕(2)具有结束图标6a、确定图标6b和BK图标6c，并且还具有在显示屏幕6G的下边缘部分上的搜索关键候选显示621。 

搜索关键候选显示621是属于在前一级的搜索关键选择屏幕(1)处选择的类别“人”的搜索关键候选信息的列表。并且，如图6A所示，在搜索关键选择屏幕(2)的情况下，提供用于滚动搜索关键候选显示的左箭头图标622和右箭头图标623。 

在这种情况下，在关于左箭头图标622执行点击操作时，控制单元120将搜索关键候选显示621从右侧向左侧滚动一个搜索关键候选值。关于左箭头图标622重复点击操作，由此可以依次将搜索关键候选显示621从右侧向左侧滚动一个搜索关键候选值。 

类似地，在关于右箭头图标623执行点击操作时，控制单元120将搜索关键候选显示621从左侧向右侧滚动一个搜索关键候选值。关于右箭头图标623重复点击操作，由此可以依次将搜索关键候选显示621从左侧向右侧滚动一个搜索关键候选值。 

操作这些左箭头图标622和右箭头图标623，滚动搜索关键候选显示，并且在显示目标搜索关键候选信息的情况下，执行用于选择其搜索关键候选信息的操作。 

注意，在不使用左和右箭头图标622和623的情况下，例如，利用触摸板107的操作表面，执行在左方向中的跟踪操作和在右方向中的跟踪操作，由此也可以滚动搜索关键候选显示。 

例如，让我们说，在图6A中，搜索关键候选显示的“A先生”项是用户想要设置为搜索关键的搜索关键候选信息。在这种情况下，用户使手指等接触与“A先生”项的显示位置对应的触摸板107的操作表面上的位置，并且执行跟踪操作(拖曳操作或轻弹操作)。 

如上所述，控制单元120基于来自触摸板107的坐标数据，识别出已经从“A先生”项的显示位置以及每一个显示信息片段的显示屏幕6G上的显示位置执行了跟踪操作。

在这种情况下，控制单元120识别出已经选择了“A先生”项作为搜索关键，并将选择为候选关键的“A先生”的显示624显示在显示屏幕6G上的搜索关键候选显示621的显示之外。因此，用户可以识别出在成像设备100已经能够选择“A先生”项作为搜索关键。 

类似地，也可以选择属于类别“人”的其它项作为搜索关键。也就是说，在同一类别内也可以选择多个项(搜索关键候选信息)作为搜索关键。 

接下来，在已经选择“A先生”项作为搜索关键之后，在想要结束图像搜索本身的情况下，用户选择结束图标6a。因此，控制单元120结束图像搜索处理，并且例如返回到显示菜单的状态。在这种情况下，所选的搜索关键被确定为还未被选择。 

并且，在已经选择“A先生”项作为搜索关键之后，在想要再次执行类别选择的情况下，用户选择BK图标6c。因此，控制单元120允许用户返回到参照图5B所述的搜索关键选择屏幕(1)，并再次执行类别的选择。在这种情况下，确定还未选择“A先生”项作为搜索关键。 

并且，在已经选择“A先生”项作为搜索关键之后，在选择确定图标6b的情况下，控制单元120确定在图6A中选择的“A先生”项作为搜索关键。 

接下来，如图6B所示，控制单元120形成具有被确定为搜索关键的“A先生”项的显示631且具有再次显示的类别列表显示611的搜索关键选择屏幕(3)，并将其显示在显示单元106的显示屏幕6G上。因此，可以允许新近地选择搜索关键候选信息表的类别。 

在图6B的状态下，在想要结束图像搜索本身的情况下，用户选择结束图标6a。因此，控制单元120结束图像搜索处理，并且例如返回到显示菜单的状态。 

并且，在想要在类别“人”处再次执行搜索关键的选择的情况下，用户选择BK图标6c。因此，控制单元120返回到参照图6A所述的搜索关键选择图像(2)，并允许用户在类别“人”处再次执行搜索关键的选择。 

在这种情况下，根据控制单元120的控制，可以取消已经选择的搜索关键，可以取消已经选择的搜索关键以选择新的搜索关键，或者除了已经选择的搜索关键之外，可以进一步选择搜索关键。 

并且，在图6B的状态中，在已经完成搜索关键的选择并且通过使用所选的搜索关键已经执行了图像搜索的情况下，用户选择确定图标6b。因此，控制单元120消除图6B中的类别列表显示611，并允许用户执行图像搜索处理。 

在这种情况下，控制单元120读出在图5A中设置的范围中的图像(在搜索范围中的图像)数据，控制解压缩处理单元110、显示图像形成单元111和显示处理单元105来随机地在显示屏幕6G的整个屏幕上显示搜索范围内的图像的缩略图图像。接下来，控制单元120等待关于所选的搜索关键显示(在图6B的情况下显示631)的指令操作，这是用于指示开始图像搜索的操作。 

并且，在图6B的状态中，在进一步执行搜索关键的选择的情况下，以与参照图5B所述的情况相同的方式，用户选择要用作搜索关键的搜索关键候选信息被假设所属的类别名。也就是说，用户将手指等接触与目标类别名的显示位置对应的触摸板107的操作表面上的位置，由此选择类别名。 

现在，如图6B所示，让我们说，用户使手指等接触与类别“地点”的显示位置对应的触摸板107的操作表面上的位置。在这种情况下，控制单元 120确定已经选择了类别“地点”，并形成具有属于图7A所示的类别“地点”的搜索关键候选信息的列表显示(搜索关键候选显示)641的搜索关键选择屏幕(4)，并将其显示在显示单元106的显示屏幕6G上。 

如图7A所示，搜索关键选择屏幕(4)具有结束图标6a、确定图标6b和BK图标6c，并且还具有在显示屏幕6G的下边缘部分上的搜索关键候选显示641。 

搜索关键候选显示641是属于在前一级的搜索关键选择屏幕(3)处选择的类别“地点”的搜索关键候选信息的列表。并且，如图7A所示，在搜索关键选择屏幕(4)的情况下，提供用于滚动搜索关键候选信息显示的左箭头图标642和右箭头图标643。 

在这种情况下，在关于左箭头图标642执行点击操作时，控制单元120将搜索关键候选显示641从右侧向左侧滚动一个搜索关键候选值(worth)。关于左箭头图标642重复点击操作，由此可以依次将搜索关键候选显示641从右侧向左侧滚动一个搜索关键候选值。 

类似地，在关于右箭头图标643执行点击操作时，控制单元120将搜索关键候选显示641从左侧向右侧滚动一个搜索关键候选值。关于右箭头图标643重复点击操作，由此可以依次将搜索关键候选显示641从左侧向右侧滚动一个搜索关键候选值。 

操作这些左箭头图标642和右箭头图标643，滚动搜索关键候选显示，并且在显示目标搜索关键候选信息的情况下，执行用于选择其搜索关键候选信息的操作。 

例如，让我们说，在图7A中，搜索关键候选显示的“洛杉矶”项是用户想要设置为搜索关键的搜索关键候选信息。在这种情况下，用户使手指等接触与“洛杉矶”项的显示位置对应的触摸板107的操作表面上的位置，并执行跟踪操作(拖曳操作或轻弹操作)。 

控制单元120基于来自触摸板107的坐标数据，识别出已经从“洛杉矶”项的显示位置以及每一个显示信息片段的显示屏幕6G上的显示位置执行了跟踪操作。 

在这种情况下，控制单元120识别出已经选择了“洛杉矶”项作为搜索关键，并将选择为搜索关键的“洛杉矶”的显示644显示在显示屏幕6G上搜索关键候选显示641的显示之外。因此，用户可以识别出在成像设备100 已经能够选择“洛杉矶”项作为搜索关键。 

类似地，也可以选择属于类别“地点”的其它项作为搜索关键。也就是说，在同一类别内也可以选择多个项(搜索关键候选信息)作为搜索关键。 

接下来，在已经选择“洛杉矶”项作为搜索关键之后，在想要结束图像搜索本身的情况下，用户选择结束图标6a。因此，控制单元120结束图像搜索处理，并且例如返回到显示菜单的状态。在这种情况下，所选的搜索关键被确定为还未被选择。 

并且，在已经选择“A先生”项和“洛杉矶”项作为搜索关键之后，在想要再次执行类别选择的情况下，用户选择BK图标6c。因此，控制单元120允许用户返回到参照图6B所述的搜索关键选择屏幕(3)，并再次执行类别的选择。在这种情况下，确定还未选择“洛杉矶”项作为搜索关键。 

此外，在已经选择“A先生”项和“洛杉矶”项作为搜索关键之后，在选择了确定图标6b的情况下，控制单元120确定在图7A中选择的“洛杉矶”项作为搜索关键。 

接下来，如图7B所示，控制单元120形成具有被确定为搜索关键的“A先生”项的显示631和“洛杉矶”项的显示651且具有再次显示的类别列表显示611的搜索关键选择屏幕(5)，并将图7B中所示的该搜索关键选择屏幕(5)显示在显示单元106的显示屏幕6G上。 

因此，关于搜索关键候选信息表的七种类别的相关类别，可以允许用户选择并确定搜索关键候选信息的一个或多个片段作为搜索关键。 

相应地，可以允许用户从同一类别中选择多个搜索关键候选信息作为搜索关键，或者从多个类别中的每一个中选择搜索关键候选信息的一个或多个片段作为搜索关键。 

接下来，在图7B的状态中，在想要结束图像搜索本身的情况下，用户选择结束图标6a。因此，控制单元120结束图像搜索处理，并且例如，返回到显示菜单的状态。在这种情况下，确定搜索关键的选择还未执行。 

并且，在想要在类别“地点”处再次执行搜索关键的选择的情况下，用户选择BK图标6c。因此，控制单元120返回到参照图7A所述的搜索关键选择图像(4)，并允许用户在类别“地点”处再次执行搜索关键的选择。 

在这种情况下，根据控制单元120的控制，可以取消已经选择的搜索关键，可以取消已经选择的搜索关键以选择新的搜索关键，或者除了已经选择 的搜索关键之外，可以进一步选择搜索关键。 

并且，在图7B的状态中，在已经完成搜索关键的选择并且通过使用所选的搜索关键已经执行了图像搜索的情况下，用户选择确定图标6b。因此，控制单元120消除图7B中的类别列表显示611，并允许用户执行图像搜索处理。 

在这种情况下，控制单元120读出在图5A中设置的范围中的图像(在搜索范围中的图像)数据，控制解压缩处理单元110、显示图像形成单元111和显示处理单元105以随机地在显示屏幕6G的整个屏幕上显示搜索范围内的图像的缩略图图像。接下来，控制单元120等待关于所选的搜索关键显示(在图7B的情况下显示631和显示651)的指令操作(接触操作)，这是用于指示开始图像搜索的操作。 

因此，由用户选择搜索关键，并且在成像设备100中确定所选的搜索关键，由此允许用户执行图像搜索。利用根据本实施例的成像设备100，如图6B和图7B所示，用户使手指等关于被确定为搜索关键的搜索关键项的显示进行接触，由此开始图像搜索。 

具体地，搜索关键项的显示是“A先生”项的显示631或“洛杉矶”项的显示651，并且在用户使手指等关于所确定的搜索关键项的显示进行接触，并且控制单元120检测到此的情况下，控制单元120开始图像搜索。 

注意，参照图5A到图7B所述的搜索关键选择处理是示例，并且对于与此不同的模式，也可以从搜索关键候选信息中选择目标搜索关键。 

用于搜索具有与搜索关键有关的信息的图像数据的配置 

同样，如上所述，根据本实施例的成像设备100搜索并提取具有与搜索关键有关的信息的图像数据，由此可以根据关于搜索关键的关联程度将其结果显示在显示单元106的显示屏幕上。 

为了对此进行实现，成像设备100具有用于搜索具有与搜索关键有关的信息的图像数据的配置。将该配置大体分类为两种。一种用在搜索关键是字符信息的情况下，而另一种用在搜索关键是图像分析信息的情况下。将在下文中对其中的每一种进行描述。 

搜索关键关联程度字典的配置示例 

将在搜索关键是字符信息的情况下，关于用于搜索具有与搜索关键有关的信息的图像数据的配置进行描述。在这种情况下，根据本实施例的成像设 备100使用搜索关键关联程度字典。 

图8是描述搜索关键关联程度字典的配置示例的图。关于具有用作搜索关键的可能性的字符信息，搜索关键关联程度字典根据关于该字符信息的关联程度，总结与该字符信息有关的字符信息(关键字)。 

对于图8中所示的示例，通过关于搜索关键将相关的关键字分类为关联程度“高”、“中”和“低”三个阶段而将其进行登记。这里，关于搜索关键的关联程度“高”的字符信息(关键字)是具有相同字符信息、用作同义词的字符信息和关于该搜索关键的相同字符且指示大致相同意思和内容的字符信息。 

并且，关于搜索关键的关联程度“中”的字符信息(关键字)是直接链接到该搜索关键作为一般图像的字符信息。并且，关于搜索关键的关联程度“低”的字符信息(关键字)是几乎不直接链接到该搜索关键但可以通过介入二者之间的某一关键字链接到该搜索关键的作为公共比喻(imagery)的字符信息。 

对于图8所示的示例，至于关联程度“高”的关键字，关于搜索关键“夏天”登记“夏天、夏季、早夏、夏天假期、……”等。关键字“夏天”是搜索关键本身，关键字“夏季”是搜索关键“夏天”的同义词，关键字“早夏、夏天假期”具有与搜索关键“夏天”相同的字符，并且具有大体上相同的意思内容，并且相应地，将这些设置成关联程度“高”。 

并且，作为关于搜索关键“夏天”的关联程度“中”的关键字，登记“向日葵、西瓜、焰火晚会、大海、……”。主要在“夏天”看到关键字“向日葵、西瓜”，并且直接链接到搜索关键“夏天”，并且相应地，将其设置成关联程度“中”。 

并且，关键字“焰火晚会”主要是“夏天”的季节性传统，由于在美国通常在7月4日举行焰火晚会，并且相应地直接链接到搜索关键“夏天”，并且将其设置成关联程度“中”。并且，关键字“大海”频繁地使人们想到“夏天”，并且相应地将其设置成关联程度“中”。 

并且，作为关于搜索关键“夏天”的关联程度“低”的关键字，登记“春雨、家庭作业、学校、旅行、……”。关键字“春雨”是紧接在夏天之前的天气状态，不直接提醒人们搜索关键“夏天”，但是如果“春雨”结束，则“夏天”将来临，并且相应地，将关键字“春雨”设置到关于搜索关键“夏天” 的关联程度“低”。 

并且，关键字“家庭作业、学校、旅行”例如通过术语“夏天假期”可以与搜索关键“夏天”相关，并且相应地，将其设置成关联程度“低”。 

因此，配置搜索关键关联程度字典，其中通过将具有用作搜索关键可能性的每一个术语分类为关联程度“高”、“中”和“低”的三个阶段而关于这些术语预先登记相关的关键字。 

注意，具有用作搜索关键可能性的字符信息至少是在参照图4所述的搜索关键候选信息表的类别“人”、“地点”、“色彩”、“季节”和“被摄体”中登记的字符信息。 

相应地，针对具有用作搜索关键可能性的字符信息的每一个片段形成搜索关键关联程度字典(例如，如图8所示)，并且将其存储和保存在例如成像设备100的EEPROM 124等中。 

并且，提供已经创建的搜索关键关联程度字典，但将其配置为针对单独使用而由用户进行修改。 

接下来，在根据如图8中所示的搜索关键关联程度字典的配置示例，使用术语“夏天”作为关键字的情况下，可以搜索并提取具有图8所示的关联程度“高”、“中”和“低”的关键字的图像文件(图像数据)。 

接下来，根据其关联程度将提取出的图像文件分类，由此可以针对关联程度“高”、“中”和“低”中的每一个关联程度处理这些图像文件。 

基于图像分析信息的图像关联程度区分标准的示例 

接下来，将在搜索关键是图像分析信息的情况下，关于用于搜索具有与搜索关键有关的信息的图像数据的配置进行描述。在这种情况下，根据本实施例的成像设备100基于图像分析信息执行图像搜索。 

在这种情况下，基于图像分析信息的哪一信息执行图像搜索是非常重要的。图9是描述图像分析信息的、能够变为用于图像搜索的搜索关键的信息的图。 

如参照图2所述的那样，将通过分析每一个图像文件的图像数据而获得的图像分析信息添加到每一个图像文件作为元数据。如上所述并且如图9中所示，图像内的人脸的区域、在图像中拍摄的人数、图像中拍摄的人的笑脸的程度以及指示整个图像的特征的信息等包含在该图像分析信息中。 

一旦从图5B等中所示的类别列表显示611中选择了类别“其他”，显示 图9中所示的信息的每一个片段作为组成图像分析信息的信息，从其中选择目标信息。因此可以根据所选的图像分析信息执行图像搜索。 

例如，让我们说，已经选择了“图像内人脸的区域”作为图像分析信息，并且已经指定了用作搜索关键的图像。在这种情况下，控制单元120基于被指定为搜索关键的图像的图像分析信息“图像内人脸的区域”，从记录介质135中搜索并提取相关的图像。 

具体地，对于“图像内人脸的区域”，控制单元120从记录介质135中搜索并提取第一预定范围的图像作为关联程度“高”的图像、第二预定范围的图像作为关联程度“中”的图像、以及第三预定范围的图像作为关联程度“低”的图像。 

在这种情况下，第一预定范围是最接近用作搜索关键的图像内人脸的区域的范围，并且第二和第三预定范围是逐渐从用作搜索关键的图像内人脸的区域分离的范围。 

因此，在使用图像分析信息“图像内人脸的区域”的情况下，对于用作搜索关键的图像，利用该图像内人脸的区域作为参考，可以搜索并提取与用作搜索关键的图像有关的图像。 

并且，让我们说，已经选择了“图像内的人数”作为图像分析信息，并且已经指定了用作搜索关键的图像。在这种情况下，控制单元120基于被指定为搜索关键的图像的图像分析信息“图像内的人数”，从记录介质135搜索并提取相关的图像数据。 

具体地，对于“图像内的人数”，控制单元120从记录介质135搜索并提取第一预定范围的图像作为关联程度“高”的图像、第二预定范围的图像作为关联程度“中”的图像以及第三预定范围的图像作为关联程度“低”的图像。 

在这种情况下，第一预定范围是最接近用作搜索关键的图像内的人数的范围，并且第二和第三预定范围是逐渐从用作搜索关键的图像内的人数分离的范围。 

因此，在使用图像分析信息“图像内的人数”的情况下，对于用作搜索关键的图像，利用该图像内的人数作为参考，可以搜索并提取与用作搜索关键的图像有关的图像。 

并且，甚至在使用作为图像分析信息的“图像内人的笑脸的程度”的情 况下，对于指定为关键字的图像，控制单元120可以基于“图像内人的笑脸的程度”从记录介质135搜索相关的图像。 

并且，甚至在使用作为图像分析信息的“整个图像的特征”的情况下，对于指定为关键字的图像，控制单元120可以基于“整个图像的特征”从记录介质135搜索相关的图像。 

在这种情况下，进行这样的安排，其中从图像的色调和复杂度获得相似性，根据该相似性提取相关的图像，并将其分类为关联程度“高”、“中”和“低”。 

因此，利用根据本实施例的成像设备100，使用搜索关键关联程度字典和图像分析信息，由此可以搜索并提取与指定的搜索关键相关的图像。接下来，配置成像设备100，以便根据关于搜索关键的关联程度显示所搜索并提取的图像。 

图像搜索结果的显示模式(1) 

接着，将在如上所述已经由用户选择了搜索关键之后且通过使用其选择的搜索关键已经执行了图像搜索的情况下，关于搜索结果的显示模式进行描述。这里，将已经选择了用作字符信息的搜索关键的情况作为示例描述。 

图10是描述在从选择单个搜索关键(字符信息)的状态(如参照图5A到图6B所述)中执行图像搜索的情况下的搜索结果的显示模式(1)的图。 

在图10中，(A)是图解在根据所选的搜索关键已经执行了图像搜索的情况下的搜索结果的显示模式的图，而(B)是描述在(A)中的搜索结果显示区域Ar的细节的图。 

如参照图5A到图6B所述的那样，一旦用户设置图像的搜索范围并且选择单个目标搜索关键，控制单元120就将与搜索范围的图像数据对应的图像(缩略图图像)以分散的方式显示在显示单元106的显示屏幕6G上。并且，控制单元120将与所选的搜索关键对应的搜索关键显示(搜索关键图标)K1显示在显示单元106的显示屏幕6G上。 

接下来，如图10中的(A)所示，一旦用户使手指等接触与显示屏幕6G上显示的搜索关键显示K1的显示位置对应的触摸板107的操作表面上的位置，就将指示其接触位置的坐标数据从触摸板107提供到控制单元120。 

如上所述，控制单元120管理已经在显示屏幕6G的何处显示哪种信息。接下来，控制单元120可以基于来自触摸板107的、指示操作表面上的指定 位置的坐标数据以及与其指定位置对应的显示单元106的显示屏幕6G的显示信息，检测出已经指定了搜索关键显示K1。 

控制单元120识别出搜索关键显示的指定是用于指定以使用搜索关键(与其搜索关键显示对应)开始图像搜索，并使用所选的搜索关键执行图像搜索。在这种情况下，控制单元120参考如参照图8所述而配置的搜索关键关联程度字典，并搜索和提取具有与搜索关键有关的关键字的图像文件。 

接下来，控制单元120在根据关于搜索关键的关联程度的位置上显示与提取出的图像文件的图像数据对应的缩略图图像。在该示例的情况下，控制单元120在以显示屏幕6G上的搜索结果显示区域Ar指示的区域内，在与关于搜索关键的关键字的关联程度对应的位置上显示获得的图像数据(作为搜索结果)。 

也就是说，在图10中的(B)中示出了单独的搜索结果显示区域Ar，在从其中心向外的方向中，搜索结果显示区域Ar的内部由关联程度“高”的显示区域、关联程度“中”的显示区域和关联程度“低”的显示区域组成。 

相应地，在该示例的情况下，控制单元120在显示区域Ar的中心部分ArH上显示具有关于搜索关键的关联程度为“高”的关键字的图像文件的缩略图图像。

接下来，对于显示区域Ar，控制单元120在关联程度为“高”的显示区域外部的区域ArM上显示具有关于搜索关键的关联程度为“中”的关键字的图像文件的缩略图图像。

进一步，对于显示区域Ar，控制单元120在关联程度为“中”的显示区域外部的区域ArL上显示具有关于搜索关键的关联程度为“低”的关键字的图像文件的缩略图图像。

因此，可以在与搜索关键的关联程度对应的位置上显示具有关于搜索关键的关联程度为“高”、“中”或“低”的关键字的图像文件的缩略图图像。 

注意，在该示例的情况下，利用图像搜索，控制单元120基于搜索关键和搜索关键关联程度字典，从记录介质135中存储的图像文件中搜索并提取具有与搜索关键有关的关键字的图像文件。 

将提取出的图像文件临时地存储在例如RAM 123中，并且由控制单元120根据其关联程度读出其图像数据，并将其提供到解压缩处理单元110(其中图像数据经历解压缩处理)，并恢复数据压缩之前的图像数据。 

接下来，将在解压缩处理单元110经历了解压缩处理的图像数据提供到显示图像形成单元111(其中图像数据经历稀疏处理(thinning processing)等以形成缩略图数据)，并将其放置在与关于搜索关键、由其自身拥有的关键字的关联程度对应的位置上。 

因此，利用显示图像形成单元111，形成组成等于图像的一个屏幕的图像数据，将其转换为具有要提供到显示处理单元105的格式的图像信号，并且将其提供到显示处理单元105。 

一旦接收到来自显示图像形成单元111的图像信号的供应，显示处理单元105就从该图像信号形成要提供到显示单元106的图像信号，并将其提供到显示单元106。因此，如图10中的(A)所示，在显示单元106的显示屏幕上的与所选的搜索关键的关联程度对应的位置上显示具有与所选的搜索关键有关的关键字的图像。 

注意，当关联程度降低时，关于减少(narrowed down)的图像的透明度增大，或者其发光度降低，由此可以显示具有不同关联程度的缩略图图像以进行区分。 

因此，在与搜索关键的关联程度对应的位置上显示具有关于搜索关键关联程度不同的关键字的图像，由此用户可以确认图像搜索的结果，同时具有其不同的感觉。 

并且，代替以传统方式仅搜索具有与搜索关键匹配的关键字的图像，也可以搜索具有与搜索关键有关的关键字的图像，并且可以显示搜索结果，同时考虑关联程度之间的差别。相应地，可以有效地执行图像搜索，并且可以适当地使用其结果。 

注意，已经描述了假设利用显示图像形成单元111，通过使图像数据经历稀疏处理等形成用于显示缩略图图像的缩略图数据的情况。然而，本发明不限于此。 

负荷被施加到用于从图像数据形成缩略图数据的处理。因此，可以进行这样的安排，其中对于每一个图像文件，预先从图像数据形成缩略图图像，并且将其保存在每一个图像文件中。 

因此，形成缩略图数据，并将其预先添加到每一个图像文件，由此可以省略在解压缩处理单元110处的图像数据的压缩处理以及在显示图像形成单元111处的缩略图数据的形成处理。 

也就是说，在每一个图像文件包括缩略图数据的情况下，提取与搜索关键对应的图像文件，并且从其图像文件读出缩略图数据，以将其提供到显示图像形成单元111。 

因此，利用图10中所示的模式，搜索结果(即，具有与搜索关键有关的关键字的图像文件的缩略图图像)可以显示在与搜索关键的关联程度对应的位置上。 

在图像搜索期间的处理的细节 

接下来，将关于在根据本实施例的成像设备100执行的图像搜索时的处理进行描述。图11和图12是描述在成像设备100执行的图像搜索时的处理的流程图。 

在已经从所显示的菜单中选择菜单项“图像搜索”的情况下，如上所述，图11和图12中所示的流程图的处理是主要由控制单元120执行的处理。 

一旦执行图11和图12中所示的处理，则如参照图5A到图7B所述的那样，控制单元120执行图像搜索范围的设置以及搜索关键的选择处理(步骤S101)。 

接下来，在步骤S101的处理中，控制单元120确定是否已经执行了结束操作(步骤S102)。当在步骤S102的确定处理中做出已经执行了结束操作的确定时，控制单元120执行用于结束图像搜索处理的处理(步骤S103)以结束图11和图12中所示的处理，并且例如返回到菜单显示。 

并且，当在步骤S102的确定处理中做出还未执行结束操作的确定时，控制单元120确定已经适当地执行了搜索关键的选择，并且显示用于图像搜索的初始屏幕(步骤S104)。 

具体地，在步骤S104，控制单元120以分散的方式在显示屏幕6G上显示由步骤S101的处理设置的搜索范围中的图像文件的缩略图图像，并且还显示与所选的搜索关键对应的搜索关键显示。 

接下来，控制单元120接受经由触摸屏108等、来自用户的操作输入(步骤S105)，并确定是否已经接受了操作输入(步骤S106)。 

当在步骤S106的确定处理中做出还未接受来自用户的操作输入的确定时，控制单元120重复自步骤S105起的处理以等待来自用户的操作输入。 

当在步骤S106的确定处理中做出已经接受了来自用户的操作输入的确定时，控制单元120确定是否已经由用户指定了关于所选的搜索关键的搜索 关键显示(步骤S107)。 

当在步骤S107的确定处理中做出还未由用户指定关于所选的搜索关键的搜索关键显示的确定时，控制单元120执行与在步骤S105接受的操作输入对应的处理(步骤S108)。 

在步骤S108，控制单元120允许用户根据用户的操作输入来执行各种类型的处理。例如，允许用户执行搜索关键的改变、添加处理等。 

接下来，当在步骤S107的确定处理中做出已经由用户指定了搜索关键显示的确定时，控制单元120使用与所指定的搜索关键显示对应的搜索关键来执行图像搜索，以显示搜索结果(步骤S109)。 

在步骤S109，如参照图10中的(A)和(B)所述的那样，控制单元120在显示屏幕6G上与搜索关键的关联程度对应的位置上显示具有与搜索关键有关的关键字的图像文件的缩略图图像，并前进到图12中的处理。 

接下来，控制单元120确定用户的手指等关于搜索关键显示的接触是否已经完成(步骤S110)。当在步骤S110的确定处理中做出接触已经继续的确定时，控制单元120重复自步骤S110起的处理以进入等待状态直到接触结束。 

当在步骤S110的确定处理中做出用户的手指等关于搜索关键显示的接触已经完成的确定时，控制单元120使用时钟电路140的功能以开始从用户的手指关于搜索关键显示的接触结束起的时间Ts的测量(步骤S111)。 

接下来，控制单元120确定在步骤S111已经开始测量的时间Ts是否等于或大于预定时间段T(步骤S112)。当在步骤S112的确定处理中做出测量时间Ts小于预定时间段T的确定时，控制单元120接受来自用户的操作输入(步骤S113)。 

接下来，控制单元120确定是否已经接受了来自用户的操作输入(步骤S114)。当在步骤S114的确定处理中做出还未接受操作输入的确定时，控制单元120重复自步骤S112起的处理。 

当在步骤S114的确定处理中做出已经接受了操作输入的确定时，控制单元120确定所接受的操作输入是否为搜索结果确定操作(步骤S115)。 

当在步骤S115的确定处理中做出所接受的操作输入是搜索结果确定操作的确定时，控制单元120将指定的图像组确定为一组，并且以分散的方式显示其他图像(步骤S116)。 

在步骤S116的处理之后，控制单元120执行关于所确定的组的图像的处 理，如将所确定的组的图像存储在预定图像文件夹中、将所确定的组的图像设置为回放目标等(步骤S117)。接下来，例如，控制单元120重复自图11中的步骤S101起的处理。 

并且，当在步骤S115的确定处理中做出所接受的操作输入不是搜索结果确定操作的确定时，控制单元120确定所接受的操作输入是否为搜索结果取消操作(步骤S118)。 

当在步骤S118的确定处理中做出所接受的操作输入不是搜索结果取消操作的确定时，控制单元120执行与所接受的操作输入对应的处理(步骤S119)。 

并且，当在步骤S118的确定处理中做出所接受的操作输入是搜索结果取消操作的确定时，例如，控制单元120取消图像搜索结果的显示，并返回到图像搜索的初始状态(步骤S120)。 

如上所述，图像搜索的初始状态是这样的状态：其中，以分散的方式在显示屏幕6G上显示搜索范围中的图像文件的缩略图图像，并且还显示与所选的搜索关键对应的搜索关键显示，并且允许用户执行图像搜索。 

在步骤S120的处理之后，控制单元120重复自图11中的步骤S105起的处理，并且允许用户执行与所显示的搜索关键显示对应的图像搜索，或者通过添加新的搜索关键来执行图像搜索。 

并且，当在步骤S112的确定处理中做出测量时间Ts等于或大于预定时间段T的确定时，控制单元120取消图像搜索结果的显示，并返回到图像搜索的初始状态(步骤S120)。接下来，如上所述，控制单元120重复自图11中的步骤S105起的处理。 

因此，利用根据本实施例的成像设备100，用户简单地从可用的搜索关键候选信息中选择搜索关键以指定其搜索关键，由此用户可以搜索具有与搜索关键有关的关键字的图像。 

接下来，如参照图10所述的那样，可以根据关于搜索关键的关键字的关联程度来显示图像搜索的结果，由此用户可以以确定的方式，识别出哪一个图像具有关于搜索关键的高关联程度。 

图像搜索结果的显示模式(2) 

接着，将在已经由用户选择了搜索关键之后，并且已经使用其所选的搜索关键执行了图像搜索的情况下(如上所述)，关于搜索结果的另一种显示模 式进行描述。这里，以与参照图10所述的情况相同的方式，将已经选择了用作字符信息的搜索关键的情况作为示例描述。 

图13是描述在从选择单个搜索关键(字符信息)的状态(如参照图5A到图6B所述)中执行图像搜索的情况下的搜索结果的显示模式(2)的图。 

在图13中，(A)是图示在根据所选的搜索关键已经执行了图像搜索的情况下的搜索结果的显示模式的图，而(B)是描述在(A)中搜索结果显示区域Ar的细节的图。 

在参照图10的上述搜索结果的显示模式(1)的情况下，已经一次性显示了全部的图像搜索结果。另一方面，在图13中所示的搜索结果的显示模式(2)的情况下，根据手指等关于搜索关键显示的接触持续时间(指定持续时间)来控制搜索结果的显示范围。 

以与参照图10所述的情况相同的方式执行搜索关键的选择和使用该搜索关键的图像搜索处理的执行。具体地，如图13中的(A)所示，在用户使手指等接触与所显示的搜索关键显示K1的显示位置对应的触摸板107的操作表面上的位置的情况下，控制单元120识别出该操作是用于与搜索关键对应的图像搜索处理的开始指令。 

接下来，如上所述，触摸板107可以在用户正在使手指等与接触位置接触的同时，以预定的定时连续地检测接触位置，以输出指示接触位置的坐标数据。 

相应地，在预定定时从触摸板107提供相同的坐标数据的情况下，控制单元120可以检测出手指等仍然在触摸板107的操作表面的相同位置接触。 

因此，控制单元120经由时钟电路140测量自从手指等与搜索关键显示的显示位置所对应的触摸板107的操作表面上的位置接触起直到释放该接触为止的接触持续时间Tx。 

控制单元120在搜索结果显示区域Ar上仅显示具有关于搜索关键的关联程度为“高”的关键字的图像文件的缩略图图像，直到该接触测量时间Tx超过预定阈值t1为止。 

在这种情况下，控制单元120在搜索结果显示区域Ar(将其分割为三个显示区域，例如，如图13中的(B)所示)的中心部分ArH上显示具有关于搜索关键的关联程度为“高”的关键字的图像文件的缩略图图像。

接下来，在该接触持续时间Tx超过预定阈值t1的情况下，控制单元120 在搜索结果显示区域Ar上额外地显示具有关于搜索关键的关联程度为“中”的关键字的图像的缩略图图像。 

在这种情况下，控制单元120在作为搜索结果显示区域Ar(将其分割为三个显示区域，例如，如图13中的(B)所示)的中心部分ArH外部的区域的区域ArM上显示具有关于搜索关键的关联程度为“中”的关键字的图像文件的缩略图图像。

并且，在这种情况下，除了已经在中心部分ArH上显示的关联程度为“高”的缩略图图像之外，控制单元120还在中心部分ArH外部的区域ArM上显示关联程度为“中”的缩略图图像。 

接下来，在该接触持续时间Tx超过预定阈值t2的情况下，控制单元120在搜索结果显示区域Ar上额外地显示具有关于搜索关键的关联程度为“低”的关键字的图像文件的缩略图图像。 

在这种情况下，控制单元120在作为搜索结果显示区域Ar(将其分割为三个显示区域，例如，如图13中的(B)所示)的外部的区域的区域ArL上显示具有关于搜索关键的关联程度为“低”的关键字的图像文件的缩略图图像。

也就是说，除了已经在中心部分ArH上显示的关联程度为“高”的缩略图图像的显示以及已经在区域ArM上显示的关联程度为“中”的缩略图图像的显示之外，控制单元120还在其外部的区域ArL上显示关联程度为“低”的缩略图图像。 

因此，根据用户的手指等关于搜索关键显示K1的接触持续时间Tx逐渐地加宽搜索结果的显示范围，由此可以向用户分阶段地(in stages)提供图像搜索的结果。 

相应地，与一次性显示图像搜索的结果的情况相比，可以根据关于搜索关键的关联程度分阶段地指示图像搜索的结果，由此用户可以相对容易地识别出搜索结果的内容。 

注意，以上阈值t1和t2满足关系t1＜t2，并且例如确定为t1是两秒，而t2是四秒。 

并且，同样在参照图13中的(A)和(B)描述的图像搜索结果的显示模式(2)的情况下，根据由控制单元120控制的解压缩处理单元110、显示图像形成单元111和显示处理单元105的功能，可以以图13中所示的模式显 示搜索结果。 

注意，图13中的(B)描述了在接触持续时间Tx等于或小于阈值t1的情况下，在区域ArH上显示关于搜索关键的关联程度为“高”的图像文件的缩略图图像。 

并且，图13中的(B)描述了在接触持续时间Tx大于阈值t1且还等于或小于阈值t2的情况下，在区域ArM上显示关于搜索关键的关联程度为“中”的图像文件的缩略图图像。 

并且，图13中的(B)描述了在接触持续时间Tx大于阈值t2的情况下，在区域ArL上显示关于搜索关键的关联程度为“低”的图像文件的缩略图图像。 

然而，连续地测量接触持续时间Tx，并且相应地，如上所述，检测到三种情况，即：接触持续时间Tx等于或小于阈值t1的情况、接触持续时间Tx大于阈值t1的情况和接触持续时间Tx大于阈值t2的情况。 

因此，在与图13中的(B)所示的条件表达式相同的条件下，可以根据关于搜索关键的关联程度显示图像搜索的结果。 

搜索结果的显示处理的细节 

接下来，将关于在利用参照图13所述的显示模式(2)显示图像搜索的结果的情况下的处理进行描述。图14是描述在利用参照图13所述的显示模式(2)显示图像搜索的结果的情况下的处理的流程图。 

在参照图11和图12所述的图像搜索时的处理的步骤S109中执行在该图14中所示的处理。具体地，一旦用户使手指等接触到搜索关键显示，并且指示执行图像搜索，控制单元120就在图11中所示的步骤S109执行图14中所示的搜索结果显示处理。 

首先，控制单元120经由成像设备100的时钟电路140开始用户的手指等关于搜索关键显示的显示位置所对应的触摸板107的操作表面上的位置的接触持续时间Tx的测量(步骤S1091)。 

控制单元120连续地执行该接触持续时间Tx的测量，同时连续地从触摸板107提供与搜索关键显示的显示位置对应的触摸板107的操作表面上的位置的坐标数据。 

接下来，基于指定的搜索关键的内容以及与该搜索关键对应的搜索关键关联程度字典，控制单元120执行图像搜索，并提取具有与所指定的搜索关 键有关的关键字的图像文件(步骤S1092)。 

接着，控制单元120在搜索结果显示区域Ar的中心部分ArH上显示与具有关于搜索关键的关联程度为“高”的关键字的图像文件的图像数据对应的缩略图图像，如图13所示(步骤S1093)。 

也就是说，利用步骤S1093的该处理，对于在步骤S1092搜索并提取的图像文件，仅将具有关于搜索关键的关联程度为“高”的关键字的图像文件设置为处理目标。 

接下来，在步骤S1093，如上所述，控制单元120主要控制解压缩处理单元110、显示图像形成单元111和显示处理单元105以执行关于区域ArH的缩略图图像的一系列显示处理。 

具体地，在步骤S1093，由解压缩处理单元110执行待显示的图像数据的解压缩处理。并且，由显示图像形成处理单元111执行用于从解压缩的图像数据形成缩略图数据的处理以及用于形成将根据缩略图数据的缩略图图像放置在中心部分ArH上的图像信号的处理。由显示处理单元105执行用于将根据该图像信号的图像显示在显示单元106的显示屏幕上的处理。 

在步骤S1093的处理之后，控制单元120基于来自触摸板107的坐标数据，确定在与搜索关键显示的显示部分对应的触摸板107的操作表面上的位置上的接触是否已经结束(S1094)。 

当在步骤S1094的确定处理中做出接触已经结束的确定时，控制单元120离开图14中所示的处理，以便不执行下面的显示处理(关联程度“中”和关联程度“低”的搜索结果的显示处理)。 

并且，当在步骤S1094的确定处理中做出接触还未结束的确定时，控制单元120确定接触持续时间Tx是否超过预定第一阈值t1(步骤S1095)。 

当在步骤S1095的确定处理中做出接触持续时间Tx未超过阈值t1的确定时，控制单元120重复自步骤S1094起的处理。 

当在步骤S1095的确定处理中做出接触持续时间Tx超过阈值t1的确定时，控制单元120显示与具有关于搜索关键的关联程度为“中”的关键字的图像文件的图像数据对应的缩略图图像(步骤S1096)。 

在步骤S1096的该处理是用于基于图像搜索的结果，在搜索结果显示区域Ar的区域ArM上(如图13所示)显示与具有关于搜索关键的关联程度为“中”的关键字的图像文件的图像数据对应的缩略图图像的处理。 

也就是说，利用步骤S1096的该处理，对于在步骤S1092搜索并提取的图像文件，仅将具有关于搜索关键的关联程度为“中”的关键字的图像文件设置为处理目标。 

接下来，在步骤S1096，以与上述步骤S1093的处理相同的方式，控制单元120主要控制解压缩处理单元110、显示图像形成单元111和显示处理单元105以执行关于区域ArM的缩略图图像的一系列显示处理。 

具体地，在步骤S1096，由解压缩处理单元110执行待显示的图像数据的解压缩处理。并且，由显示图像形成处理单元111执行用于从解压缩的图像数据形成缩略图数据的处理以及用于形成将根据缩略图数据的缩略图图像放置在中心部分ArM上的图像信号的处理。由显示处理单元105执行用于在显示单元106的显示屏幕上显示根据该图像信号的图像的处理。 

在步骤S1096的处理之后，控制单元120基于从触摸板107提供的坐标数据，确定在与搜索关键显示的显示位置对应的触摸板107的操作表面上的位置上的接触是否已经结束(步骤S1097)。 

当在步骤S1097的确定处理中做出接触已经结束的确定时，控制单元120离开图14中所示的处理，以便不执行下面的显示处理(关联程度“低”的搜索结果的显示处理)。 

并且，当在步骤S1097的确定处理中做出接触还未结束的确定时，控制单元120确定接触持续时间Tx是否超过预定第二阈值t2(步骤S1098)。 

当在步骤S1098的确定处理中做出接触持续时间Tx未超过阈值t2的确定时，控制单元120重复自步骤S1097起的处理。 

当在步骤S1098的确定处理中做出接触持续时间Tx超过阈值t2的确定时，控制单元120显示与具有关于搜索关键的关联程度为“低”的关键字的图像文件的图像数据对应的缩略图图像(步骤S1099)。 

在步骤S1099的该处理是用于基于图像搜索的结果，在搜索结果显示区域Ar的区域ArL上(如图13所示)显示与具有关于搜索关键的关联程度为“低”的关键字的图像文件的图像数据对应的缩略图图像的处理。 

也就是说，利用步骤S1099的该处理，对于在步骤S1092搜索并提取的图像文件，仅将具有关于搜索关键的关联程度为“低”的关键字的图像文件设置为处理目标。 

接下来，在步骤S1099，控制单元120主要控制解压缩处理单元110、显 示图像形成单元111和显示处理单元105，以执行关于区域ArL的缩略图图像的一系列显示处理。 

具体地，在步骤S1099，由解压缩处理单元110执行待显示的图像数据的解压缩处理。并且，由显示图像形成处理单元111执行用于从解压缩的图像数据形成缩略图信号的处理以及用于形成将根据缩略图数据的缩略图图像放置在中心部分ArL上的图像信号的处理。由显示处理单元105执行用于在显示单元106的显示屏幕上显示根据该图像信号的图像的处理。 

在步骤S1099的处理之后，控制单元120结束图14中所示的处理，返回到图11中所示的步骤S109的处理，并执行自图12中所示的步骤S110起的处理。 

因此，在参照图13和图14描述的搜索结果的显示模式(2)的情况下，根据用户的手指等关于搜索关键显示K1的接触持续时间Tx，逐渐地加宽搜索结果的显示范围，由此可以分阶段地向用户提供图像搜索的结果。 

也就是说，在关于搜索关键显示的接触持续时间短的情况下，仅显示关于搜索关键的关联程度为“高”的图像，而每当接触持续时间超过阈值时可以分阶段地显示关于搜索关键的关联程度更低的图像。 

图像搜索结果的显示模式(3) 

接下来，将在已经由用户选择了搜索关键之后，并且已经通过使用所选的搜索关键执行了图像搜索的情况下(如上所述)，关于搜索结果的另一种显示模式进行描述。这里，将已经选择了用作字符信息的两个搜索关键的情况作为示例描述，如参照图5A到图7B所述。 

图15是描述在从选择了两个搜索关键(字符信息)的状态(如参照图5A到图7B所述)中执行图像搜索的情况下的搜索结果的显示模式(3)的图。 

在图15中，(A)是图解在根据所选的搜索关键已经执行了图像搜索的情况下搜索结果的显示模式的图，而(B)是描述在(A)中的搜索结果显示区域Ar的细节的图。 

如图15中的(A)所示，在该示例的情况下，已经选择了两个搜索关键，并且在显示单元106的显示屏幕6G上显示与这些搜索关键对应的搜索关键显示(搜索关键图标)K1和K2。接下来，如图15中的(A)所示，让我们说，用户已经指定了搜索关键显示K1和搜索关键显示K2中的每一个。 

具体地，让我们说，用户已经使手指等分别接触与搜索关键显示K1和 搜索关键显示K2的显示位置对应的触摸板107的操作表面上的位置。 

同样如上所述，触摸板107可以检测到被安排来在操作表面上的多个地点同时执行的每一个操作，以输出指示其每一个接触位置的坐标数据。 

相应地，如图15中的(A)所示，在已经指定了搜索关键显示K1和搜索关键显示K2二者的情况下，控制单元120可以基于来自触摸板107的坐标数据检测到已经指定了操作表面上的两个地点。 

同样在该示例的情况下，控制单元120可以基于来自触摸板107的坐标数据确定已经由用户选择了搜索关键显示K1和K2，并且在与利用该坐标数据指示的操作表面上的位置对应的显示屏幕上的位置上对显示信息进行显示。 

在这种情况下，控制单元120使用与指定的搜索关键显示K1和K2对应的两个搜索关键二者执行图像搜索。现在，让我们说，与搜索关键显示K1对应的搜索关键是搜索关键k1，而与搜索关键显示K2对应的搜索关键是搜索关键k2。 

接下来，控制单元120搜索并提取具有与搜索关键k1有关的关键字以及与搜索关键k2有关的关键字二者的图像文件，并在显示屏幕6G上显示与提取出的图像文件的图像数据对应的缩略图图像。 

在这种情况下，如图15中的(A)所示，控制单元120根据关于搜索关键k1和k2的关联程度在搜索结果显示区域Ar内显示缩略图图像。基本上，以与图10和图13中图示的情况相同的方式，控制单元120从搜索结果显示区域Ar的中心部分朝外，以关联程度“高”→关联程度“中”→关联程度“低”的顺序显示缩略图图像。 

然而，在存在待使用的两个搜索关键的情况下，存在具有关于搜索关键之一的关联程度为高的关键字且具有关于另一搜索关键的关联程度为低的关键字的图像文件。 

在这种情况下，控制单元120显示缩略图图像，以便用户可以理解缩略图图像与哪个搜索关键具有高关联程度。例如，控制单元120在靠近搜索关键显示K1的位置上显示具有关于搜索关键k1的关联程度为“高”的关键字且具有关于搜索关键k2的关联程度为“中”或“低”的关键字的图像文件的缩略图图像。 

相反地，控制单元120在靠近搜索关键显示K2的位置上显示具有关于 搜索关键k2的关联程度为“高”的关键字且具有关于搜索关键k1的关联程度为“中”或“低”的关键字的图像文件的缩略图图像。 

因此，进行这样的安排：其中，在已经执行了使用两个搜索关键的图像搜索的情况下，可以利用显示精确地向用户通知关于作为搜索结果的缩略图图像的每一个图像关于哪一个搜索关键是否具有强关联程度。 

更具体地，在该示例的情况下，例如，如图15中的(B)所示，将显示区域分配给显示搜索结果的搜索结果区域Ar(如图15中的(A)所示)。 

例如，如图15中的(B)所示，该情况与参照图10和图13所述的情况的相似之处在于：对于搜索结果显示区域Ar，将其中心部分设置为具有“高”关联程度的图像的显示区域，将其外部设置为具有“中”关联程度的显示区域，并且将其进一步的外部设置为“低”关联程度的显示。 

进一步，在该示例的情况下，将区域ArL提供给搜索关键显示K1侧，以作为与搜索关键k1相关联的图像的显示区域。并且，将区域ArR提供给搜索关键显示K2侧，以作为与搜索关键k2相关联的图像的显示区域。进一步，将区域ArC提供在区域ArL与区域ArR之间，以作为与搜索关键k1和搜索关键k2二者等效相关的图像的显示区域。 

接下来，在已经使用两个搜索关键k1和k2执行了图像搜索的情况下，控制单元120基于与搜索关键k1对应的关键字的关联程度以及与搜索关键k2对应的关键字的关联程度将其搜索结果确定为的缩略图图像的显示区域。 

图16是描述根据关于与两个搜索关键k1和k2对应的每一个关键字的搜索关键的关联程度，确定缩略图图像的显示区域的显示位置确定表(1)的图。 

同样如上所述，控制单元120搜索并提取具有与搜索关键k1相关的关键字以及与搜索关键k2相关的关键字二者的图像文件，并在显示屏幕6G上显示与提取出的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120基于图16中所示的显示位置确定表(1)，确定与搜索并提取出的图像文件的图像数据对应的缩略图图像的显示区域。 

具体地，如图16所示，控制单元120在图15中的(B)所示的区域ArC的字符“高”指示的部分上显示具有关于搜索关键k1具有“高”关联程度的关键字和关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArC的字符“中”指 示的部分上显示具有关于搜索关键k1具有“中”关联程度的关键字和关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArC的字符“低”指示的部分上显示具有关于搜索关键k1具有“低”关联程度的关键字和关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArL的字符“中”指示的部分上显示具有关于搜索关键k1具有“高”关联程度的关键字和关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArL的字符“中”指示的部分上显示具有关于搜索关键k1具有“高”关联程度的关键字和关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArR的字符“中”指示的部分上显示具有关于搜索关键k1具有“中”关联程度的关键字和关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArL的字符“低”指示的部分上显示具有关于搜索关键k1具有“中”关联程度的关键字和关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArR的字符“中”指示的部分上显示具有关于搜索关键k1具有“低”关联程度的关键字和关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图15中的(B)所示的区域ArR的字符“低”指示的部分上显示具有关于搜索关键k1具有“低”关联程度的关键字和关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

因此，如以上参照图15所述，在已经使用两个搜索关键执行了图像搜索的情况下，可以向用户通知在显示屏幕6G上显示的缩略图图像关于哪一个搜索关键是否具有更强的关联程度。 

注意，在参照图11和图12描述的处理的步骤S109中执行图像搜索结果的这种显示处理。同样在该示例的情况下，控制单元120控制解压缩处理单元110、显示图像形成单元111和显示处理单元105来根据图15中所示的显示模式(3)显示与作为图像搜索的结果而提取出的图像文件的图像数据对应的缩略图。 

并且，这里已经关于使用两个搜索关键的情况进行了描述，但是本发明不限于此。可以使用三个或更多搜索关键。因此，甚至在使用三个或更多搜索关键的情况下，也应该提供与每一个搜索关键对应的显示区域。 

接下来，例如，如参照图16所述的那样，应该确定显示缩略图图像的显示部分(显示区域)。 

并且，这里对假设提取具有与搜索关键k1有关的关键字以及与搜索关键k2有关的关键字的图像文件的情况进行了描述。然而，本发明不限于此。 

例如，存在这样的情况：其中，一个关键字与搜索关键k1和搜索关键k2二者有关。甚至在这样的情况下，与不同关键字的情况类似，应该根据关于搜索关键k1的关联程度和关于搜索关键k2的关联程度来确定缩略图图像的显示位置(显示区域)。 

注意，图16中所示的显示位置确定表(1)是示例，并且相应地，不必说，可以依照另一个表，根据关于单个搜索关键的关联程度来显示图像搜索的结果。 

图像搜索结果的显示模式(4) 

接下来，将在已经由用户选择了搜索关键之后，并且已经使用所选的搜索关键执行了图像搜索的情况下(如上所述)，关于搜索结果的另一种显示模式进行描述。这里，将已经选择了用作字符信息的两个搜索关键的情况(如参照图5A到图7B所述的那样)作为示例描述。 

图17是描述在从选择了两个搜索关键(字符信息)(如参照图5A到图7B所述)的状态中执行图像搜索的情况下的搜索结果的显示模式(4)的图。 

在图17中，(A)是图解在根据所选的搜索关键已经执行了图像搜索的情况下的搜索结果的显示模式的图，而(B)是描述在(A)中的搜索结果显示区域Ar的细节的图。 

同样在图17中图示的显示模式(4)的情况下，同时指定两个搜索关键显示K1和K2，并且以与参照图15所述的情况相同的方式执行根据与两个搜索关键对应的这些搜索关键显示的图像搜索。同样在该示例的情况下，让我们说与搜索关键显示K1对应的搜索关键是搜索关键k1，而与搜索关键显示K2对应的搜索关键是搜索关键k2。 

控制单元120搜索并提取具有与搜索关键k1有关的关键字和与搜索关键k2有关的关键字二者的图像文件，并且在显示屏幕6G上显示与提取出的图 像文件的图像数据对应的缩略图图像。 

然而，缩略图图像的显示模式与参照图15所述的显示模式(3)有很大不同。在该示例的显示模式(4)的情况下，提供与搜索关键k1和k2对应的坐标轴，并且分别在以这些坐标轴确定的位置上显示缩略图图像。更具体地，在该示例的情况下，例如，如图17中的(B)所示，将显示区域分配给显示搜索结果的搜索结果区域Ar(例如，如图17中的(A)所示)。 

例如，如图17中的(B)所示，让我们说横轴是关于搜索关键k1的坐标轴，而纵轴是关于搜索关键k2的坐标轴。接下来，让我们说将显示区域Ar提供到以这些纵轴和横轴包围的区域。 

接下来，让我们说，横轴与纵轴之间的交点是关联程度“0”，并且关于横轴，当靠近右侧时关联程度增大，而关于纵轴，当靠近上侧时关联程度增大。 

接下来，如图17中的(B)所示，将以横轴和纵轴包围的区域中形成的搜索结果显示区域Ar分割为9个小区域Ar1到Ar9。 

接下来，在已经使用两个搜索关键k1和k2执行了图像搜索的情况下，控制单元120基于与搜索关键k1对应的关键字的关联程度以及与搜索关键k2对应的关联程度将图像搜索的搜索结果确定为缩略图图像的显示区域。也就是说，对于小区域Ar1到Ar9，控制单元120确定在哪里进行显示。 

图18是描述根据关于与两个搜索关键k1和k2对应的每一个关键字的搜索关键的关联程度，确定缩略图图像的显示区域的显示位置确定表(2)的图。 

同样如上所述，控制单元120搜索并提取具有与搜索关键k1有关的关键字和与搜索关键k2有关的关键字二者的图像文件，并在显示屏幕6G上显示与提取出的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120基于图18中所示的显示位置确定表(2)，确定与搜索并提取出的图像文件的图像数据对应的缩略图图像的显示区域。 

具体地，如图18所示，控制单元120在图17中的(B)所示的区域Ar3上显示具有关于搜索关键k1具有“高”关联程度的关键字以及关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar6上显示具有关于搜索关键k1具有“高”关联程度的关键字以及关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar9上显示具有关于搜索关键k1具有“高”关联程度的关键字以及关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar2上显示具有关于搜索关键k1具有“中”关联程度的关键字以及关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar5上显示具有关于搜索关键k1具有“中”关联程度的关键字以及关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar8上显示具有关于搜索关键k1具有“中”关联程度的关键字以及关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar1上显示具有关于搜索关键k1具有“低”关联程度的关键字以及关于搜索关键k2具有“高”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar4上显示具有关于搜索关键k1具有“低”关联程度的关键字以及关于搜索关键k2具有“中”关联程度的关键字的图像文件的缩略图图像。 

并且，控制单元120在图17中的(B)所示的区域Ar7上显示具有关于搜索关键k1具有“低”关联程度的关键字以及关于搜索关键k2具有“低”关联程度的关键字的图像文件的缩略图图像。 

因此，如以上参照图17所述的那样，在已经执行了使用两个搜索关键的图像搜索的情况下，可以向用户通知关于在显示屏幕6G上显示的缩略图图像关于两个搜索关键中的每一个具有如何的关联程度。 

注意，在参照图11和图12所述的处理的步骤S109中执行图像搜索的结果的这种显示处理。同样在该示例的情况下，控制单元120控制解压缩处理单元110、显示图像形成单元111和显示处理单元105以根据图17中所示的显示模式(4)显示与作为图像搜索的结果而提取出的图像文件的图像数据对应的缩略图。 

并且，这里已经关于使用两个搜索关键的情况进行了描述，但本发明不限于此。可以使用三个或更多搜索关键。因此，甚至在使用三个或更多搜索 关键的情况下，也应该提供与每一个搜索关键对应的坐标轴。 

接下来，应该在利用该多个坐标轴形成的空间内提供缩略图图像的显示区域。接下来，如参照图18所述的那样，应该根据关于每一个搜索关键的关联程度来确定显示缩略图图像的显示位置(显示区域)。 

并且，这里已经描述了假设提取具有与搜索关键k1有关的关键字以及与搜索关键k2有关的关键字的图像文件的情况。然而，本发明不限于此。 

例如，存在这样的情况：其中，一个关键字与搜索关键k1和搜索关键k2二者有关。甚至在这样的情况下，与不同关键字的情况类似，应该根据关于搜索关键k1的关联程度和关于搜索关键k2的关联程度来确定缩略图图像的显示位置(显示区域)。 

图像搜索结果的显示模式(5) 

接下来，将在已经由用户选择了搜索关键之后，并且已经使用所选的搜索关键执行了图像搜索的情况下(如上所述)，关于搜索结果的另一种显示模式进行描述。这里，将已经选择了用作字符信息的两个搜索关键的情况(如参照图5A到图7B所述的那样)作为示例描述。 

在该显示模式(5)的情况下，根据分别与所选的两个搜索关键对应的搜索关键显示之间的距离(显示屏幕上的距离)来改变搜索结果的显示范围。 

图19是描述在从选择了两个搜索关键(字符信息)(如参照图5A到图7B所述)的状态中执行图像搜索的情况下的搜索结果的显示模式(5)的图。 

图19中的(A)图解在根据所选的搜索关键已经执行了图像搜索的情况下的搜索结果的显示模式。并且，图19中的(B)是描述在显示屏幕6G上显示的两个搜索关键显示的显示屏幕6G上的位置关系的图。并且，图19中的(C)是描述图19中的(A)中的搜索结果显示区域Ar的细节的图。 

同样在图19中图示的显示模式(5)的情况下，同时指定两个搜索关键显示K1和K2，并且以与参照图15所述的情况相同的方式执行根据与两个搜索关键对应的这些搜索关键显示的图像搜索。同样在该示例的情况下，让我们说与搜索关键显示K1对应的搜索关键是搜索关键k1，并且与搜索关键显示K2对应的搜索关键是搜索关键k2。 

控制单元120搜索并提取具有与搜索关键k1有关的关键字和与搜索关键k2有关的关键字二者的图像文件，并且在显示屏幕6G上显示与提取出的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120不简单地在显示屏幕6G上显示作为搜索结果的缩略图图像。控制单元120根据关于触摸板107的操作表面的用户的操作，改变搜索结果的显示范围。 

具体地，如图19中的(A)所示，用户执行拖曳操作，其用于在关于操作表面进行接触的同时，移动与触摸板107的操作表面上的位置(对应于搜索关键显示K1和K2的显示位置)接触的手指等。 

响应于该拖曳操作，控制单元120可以通过控制显示信息形成单元111和显示处理单元105，改变搜索关键显示K1和K2的显示位置。接下来，控制单元120可以识别出已经在显示屏幕6G的什么地方显示了哪种信息。 

相应地，如图19中的(B)所示，控制单元120可以恒定地适当地识别显示位置被改变的搜索关键显示K1与搜索关键显示K2之间的距离d。因此，控制单元120根据搜索关键显示K1和搜索关键显示K2(其显示位置可以根据用户的拖曳操作而改变)以及显示屏幕6G上的距离d，控制图像搜索的结果的显示范围。 

在该示例的情况下，在图像搜索的初始状态中，将搜索关键显示K1和搜索关键显示K2的显示屏幕6G上的显示位置确定为其之间的距离d小于阈值d1的位置。 

同样如上所述，在用户使手指等接触与搜索关键k1和搜索关键k2的显示位置对应的触摸板107的操作表面上的位置的情况下，控制单元120检测到该接触以执行使用对应的搜索关键k1和k2的图像搜索。 

接下来，在搜索关键k1和搜索关键k2之间的距离d小于阈值d1的情况下，控制单元120在区域ArH上仅显示与具有关于搜索关键关联程度为“高”的关键字的图像文件的图像数据对应的缩略图图像。 

在这种情况下，在搜索结果显示区域Ar的中心部分ArH上仅显示与具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“高”的关键字的图像文件的图像数据对应的缩略图图像。 

接下来，让我们说，已经执行了用于移动在与搜索关键显示K1和K2的显示位置对应的触摸板107的操作表面上的位置处接触的手指等的拖曳操作，并且已经移动了搜索关键显示K1和K2的显示位置。 

此时，在搜索关键显示K1和关键字显示K2之间的距离d大于阈值d1并且还等于或小于阈值d2的情况下，控制单元120在区域ArM上显示与具 有关于搜索关键关联程度为“中”的关键字的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120不仅在区域ArH上执行关联程度“高”的缩略图图像的显示，而且还在区域ArM上执行关联程度“中”的缩略图图像的显示。 

并且，关于搜索关键的关联程度“中”的图像文件是如下两种组合。一种是将具有关于搜索关键k1和k2之一关联程度为“高”的关键字以及关于另一个搜索关键关联程度为“中”或“低”的关键字的图像文件确定为关联程度“中”。另一种是将具有关于搜索关键k1关联程度为“中”的关键字以及关于搜索关键k2关联程度为“中”的关键字的图像文件确定为关联程度“中”。 

接下来，让我们说，已经进一步执行了用于移动在与搜索关键显示K1和K2的显示位置对应的触摸板107的操作表面上的位置处接触的手指等的拖曳操作，并且已经移动了搜索关键显示K1和K2的显示位置。 

此时，在搜索关键显示K1和关键字显示K2之间的距离d大于阈值d2的情况下，控制单元120在区域ArL上显示与具有关于搜索关键关联程度为“低”的关键字的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120不仅在区域ArH上执行关联程度“高”的缩略图图像的显示并在区域ArM上执行关联程度“中”的缩略图图像的显示，而且还在区域ArL上执行关联程度“低”的缩略图图像的显示。 

并且，关于搜索关键的关联程度“低”的图像文件是如下两种组合。一种是将具有关于搜索关键k1和k2之一关联程度为“中”的关键字以及关于另一个搜索关键关联程度为“低”的关键字的图像文件确定为关联程度“低”。另一种是将具有关于搜索关键k1关联程度为“低”的关键字以及关于搜索关键k2关联程度为“低”的关键字的图像文件确定为关联程度“低”。 

搜索结果显示处理的细节 

接下来，将关于在以参照图19所述的显示模式(5)显示图像搜索的结果的情况下的处理进行描述。图20是描述在以参照图19所述的显示模式(5)显示图像搜索的结果的情况下的处理的流程图。 

在参照图11和图12所述的图像搜索时的处理的步骤S109中执行图20所示的处理。具体地，一旦用户使手指等关于搜索关键显示K1和K2进行接 触并且指示执行图像搜索时，控制单元120就在图11中所示的步骤S109中执行图20中所示的搜索结果显示处理。 

首先，控制单元120基于指定的搜索关键k1和k2以及与这些搜索关键对应的搜索关键关联程度字典的内容执行图像搜索，并且提取具有与指定的搜索关键k1和k2有关的关键字的图像文件(步骤S109A)。 

接下来，控制单元120基于从触摸板107提供的坐标数据，确定在与搜索关键显示K1和K2的显示位置对应的触摸板107的操作表面上的位置上的接触是否已经结束(步骤S109B)。 

当在步骤S109B的确定处理中做出接触已经结束的确定时，控制单元120结束图20中所示的处理，返回到图11中所示的步骤S109，并执行自图12中的步骤S110起的处理。 

当在步骤S109B的确定处理中做出接触还未结束的确定时，控制单元120确定搜索关键显示K1与搜索关键显示K2之间的距离d是否等于或小于阈值d1(步骤S109C)。 

当在步骤S109C的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d等于或小于阈值d1的确定时，控制单元120执行步骤S109D的显示处理。 

具体地，控制单元120在显示区域Ar的中心部分ArH上显示具有关于搜索关键k1和k2关联程度为“高”的关键字的图像文件的图像数据的缩略图图像(步骤S109D)。接下来，控制单元120重复自步骤S109B起的处理。 

当在步骤S109C的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d既不等于也不小于阈值d1的确定时，控制单元120执行步骤S109E中的确定处理。 

具体地，控制单元120确定搜索关键显示K1与搜索关键显示K2之间的距离d是否大于阈值d1并且还等于或小于阈值d2(步骤S109E)。 

当在步骤S109E的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d大于阈值d1并且还等于或小于阈值d2的确定时，控制单元120执行步骤S109F中的显示处理。 

在这种情况下，控制单元120在搜索结果显示区域Ar的中心部分ArH及其外部的区域ArM上显示缩略图图像(步骤S109F)。 

具体地，在步骤S109F，控制单元120在中心部分ArH上显示具有关于 搜索关键k1和k2关联程度为“高”的关键字的图像文件的图像数据的缩略图图像。 

进一步，在步骤S109F，控制单元120在区域ArM上显示具有关于搜索关键k1和k2关联程度为“中”的关键字的图像文件的图像数据的缩略图图像。在步骤S109F的处理之后，控制单元120重复自步骤S109B起的处理。 

并且，当在步骤S109E的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d大于阈值d1并且既不等于也不小于阈值d2的确定时，控制单元120执行步骤S109G的确定处理。 

也就是说，控制单元120确定搜索关键显示K1与搜索关键显示K2之间的距离d是否大于阈值d2(步骤S109G)。 

当在步骤S109G的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d大于阈值d2的确定时，控制单元120执行步骤S109H中的显示处理。 

在这种情况下，控制单元120在搜索结果显示区域Ar的中心部分ArH及其外部的区域ArM以及其进一步外部的区域ArL上显示缩略图图像(步骤S109H)。 

具体地，在步骤S109H，控制单元120在中心部分ArH上显示具有关于搜索关键k1和k2关联程度为“高”的关键字的图像文件的图像数据的缩略图图像。进一步，在步骤S109H，控制单元120在区域ArM上显示具有关于搜索关键k1和k2关联程度为“中”的关键字的图像文件的图像数据的缩略图图像。进一步，在步骤S109H，控制单元120在区域ArL上显示具有关于搜索关键k1和k2关联程度为“低”的关键字的图像文件的图像数据的缩略图图像。 

在步骤S109H的处理之后，当在步骤S109G的确定处理中做出搜索关键显示K1与搜索关键显示K2之间的距离d不大于阈值d2的确定时，控制单元120重复自步骤S109B起的处理。 

注意，在该示例的情况下，对于步骤S109D、步骤S109F和步骤S109H中的处理，在执行搜索结果显示区域Ar的显示清除处理之后，首先执行缩略图图像的显示处理。 

因此，甚至在显示关联程度“高”、“中”和“低”的全部缩略图图像之后，在搜索关键显示K1与搜索关键显示K2之间的距离d变窄的情况下，例 如，可以仅显示具有关联程度“高”的缩略图图像。 

在该示例的情况下，不一定执行针对搜索关键显示的长按操作，并且可以根据用户的意图立即在用户想要的范围中显示图像搜索的结果。 

图像搜索结果的显示模式(6) 

接着，将在已经由用户选择了搜索关键之后，并且已经使用所选的搜索关键执行了图像搜索的情况下，关于搜索结果的另一种显示模式进行描述。同样在这里，以与参照图19和图20所述的显示模式(5)的情况相同的方式，将已经选择了用作字符信息的两个搜索关键的情况(如参照图5A到图7B所述)作为示例描述。 

同样在该显示模式(6)的情况下，以与上面的显示模式(5)的情况相同的方式，根据在分别与所选的两个搜索关键对应的搜索关键显示之间的距离(显示屏幕上的距离)来改变搜索结果的显示范围。 

然而，在下述的显示模式(6)的情况下，在不仅考虑搜索关键显示之间的距离d而且还关于已经移动了两个搜索关键显示中的哪一个搜索关键显示的同时，改变待显示的图像搜索结果。 

图21是描述在从选择了两个搜索关键(字符信息)的状态(如参照图5A到图7B所述)中执行图像搜索的情况下的搜索结果的显示模式的图。 

图21中的(A)图解在根据所选的搜索关键已经执行了图像搜索的情况下的搜索结果的显示模式。并且，图21中的(B)是描述在图21中的(A)中的搜索结果显示区域Ar上显示搜索结果的图。 

同样在图21中图示的显示模式(6)的情况下，同时指定两个搜索关键显示K1和K2，并且以与参照图15所述的情况相同的方式，根据与两个搜索关键对应的这些搜索关键显示执行图像搜索。同样在该示例的情况下，让我们说与搜索关键显示K1对应的搜索关键是搜索关键k1，并且与搜索关键显示K2对应的搜索关键是搜索关键k2。 

控制单元120搜索并提取具有与搜索关键k1有关的关键字和与搜索关键k2有关的关键字二者的图像文件，并且在显示屏幕6G上显示与提取出的图像文件的图像数据对应的缩略图图像。 

在这种情况下，控制单元120不简单地在显示屏幕6G上显示作为搜索结果的缩略图图像。同样在该显示模式(6)的情况下，控制单元120根据关于触摸板107的操作表面的用户的操作来改变搜索结果的显示范围。 

具体地，如图21中的(A)所示，用户执行拖曳操作，其用于移动与触摸板107的操作表面上的位置(对应于搜索关键显示K1和K2的显示位置)接触的手指等，所述手指等之一仍然与该操作表面接触。 

响应于该拖曳操作，控制单元120可以通过控制显示信息形成单元111和显示处理单元105，改变搜索关键显示的显示位置。接下来，如上所述，控制单元120识别出已经在显示屏幕6G的什么地方显示了哪种信息。 

相应地，控制单元120可以识别出搜索关键显示K1和K2的哪一个搜索关键显示已经在其显示位置上发生了改变。并且，以与上面的显示模式(5)的情况相同的方式，控制单元120可以恒定地适当地识别搜索关键显示K1与搜索关键显示K2之间的距离d。 

因此，控制单元120显示这样的图像文件的缩略图图像，所述图像文件具有关于与搜索关键显示(还未改变显示位置)对应的搜索关键关联程度为“高”的关键字以及关于与搜索关键显示(已经改变了显示位置)对应的搜索关键关联程度为“中”或“低”的关键字。 

图21中的(A)图示了这样的情况：其中，用户执行与搜索关键显示K2接触的手指等的拖曳操作，而不改变搜索关键显示K1的显示位置，以移动搜索关键显示K2的显示位置。 

在这种情况下，控制单元120显示这样的图像文件的缩略图图像，所述图像文件具有关于与搜索关键显示K1对应的搜索关键k1关联程度为“高”的关键字以及关于与搜索关键显示K2对应的搜索关键k2关联程度为“中”或“低”的关键字。 

接下来，如图21中的(A)和(B)所示，在显示屏幕内的搜索结果显示区域Ar内显示搜索结果的显示。 

例如，在还未移动搜索关键显示K1和K2二者的显示位置的情况下，控制单元120显示这样的图像文件的缩略图图像，所述图像文件具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“高”的关键字。 

在用户已经移动了搜索关键显示K2预定量或更多的情况下，除了已经显示的图像之外，控制单元120还显示具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“中”的关键字的图像文件的缩略图图像。 

在用户已经进一步移动了搜索关键显示K2预定量或更多的情况下，除了已经显示的图像之外，控制单元120还显示具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“低”的关键字的图像文件的缩略图图像。 

同样在该情况下，控制单元120应该从搜索结果显示区域Ar的中心以向外的方向，根据关于搜索关键的关联程度逐渐地显示缩略图图像。 

注意，作为示例，已经关于移动搜索关键显示K2的显示位置而不改变搜索关键显示K1的显示位置的情况进行了描述。相反，不必说，移动搜索关键显示K1的显示位置而不改变搜索关键显示K2的显示位置，由此也可以通过改变关于搜索关键k1的关联程度而不改变关于搜索关键k2的关联程度来显示图像搜索的结果。 

并且，应该根据搜索关键显示K1与K2之间的距离d，来改变是将直到关于与搜索关键显示(已经移动了显示位置)对应的搜索关键的关联程度“中”设置为目标，还是将直到关联程度“低”设置为目标。 

因此，关于用于图像搜索的两个搜索关键，固定关于搜索关键之一的关联程度，而改变关于另一个搜索关键的关联程度，由此可以显示图像搜索的结果。 

搜索结果显示处理的细节 

接下来，将关于在以参照图21所述的显示模式(6)显示图像搜索的结果的情况下的处理进行描述。图22是描述在以参照图21所述的显示模式(6)显示图像搜索的结果的情况下的处理的流程图。 

在参照图11和图12所述的图像搜索时的处理的步骤S109中执行图22中所示的处理。具体地，在用户使手指等关于搜索关键显示K1和K2接触并且指示执行图像搜索时，控制单元120在图11中所示的步骤S109执行图22中所示的搜索结果显示处理。 

首先，控制单元120基于指定的搜索关键k1和k2以及与这些搜索关键对应的搜索关键关联程度字典的内容执行图像搜索，并且提取具有与指定的搜索关键k1和k2有关的关键字的图像文件(步骤S109a)。 

接下来，控制单元120在显示区域Ar的中心部分上显示具有关于搜索关键k1和k2关联程度为“高”的关键字的图像文件的图像数据的缩略图图像(步骤S109b)。 

接下来，控制单元120基于从触摸板107提供的坐标数据，确定在与搜索关键显示K1和K2的显示位置对应的触摸板107的操作表面上的位置上的接触是否已经结束(步骤S109c)。 

当在步骤S109c的确定处理中做出接触已经结束的确定时，控制单元120结束图22中所示的处理，返回到图11中所示的步骤S109，并执行自图12中的步骤S110起的处理。 

当在步骤S109c的确定处理中做出接触还未结束的确定时，控制单元120基于来自触摸板107的坐标数据确定是否已经改变了搜索关键显示K1的显示位置(步骤S109d)。 

当在步骤S109d的确定处理中做出已经改变了搜索关键显示K1的显示位置的确定时，控制单元120执行用于根据用户的指令，通过调整关于搜索关键k1的关联程度来显示图像搜索结果的处理(步骤S109e)。 

具体地，在步骤S109e，控制单元120保持关于搜索关键k2的关联程度，降低关于搜索关键k1的关联程度，从图像搜索的结果中提取具有对应的关联程度的缩略图图像，并额外地对其进行显示。接下来，控制单元120重复从步骤S109c的处理。 

并且，当在步骤S109d的确定处理中做出还未改变搜索关键显示K1的显示位置的确定时，控制单元120确定是否已经改变了搜索关键显示K2的显示位置(步骤S109f)。 

当在步骤S109f的确定处理中做出已经改变了搜索关键显示K2的显示位置的确定时，控制单元120执行用于根据用户的指令，通过调整关于搜索关键k2的关联程度来显示图像搜索结果的处理(步骤S109g)。 

具体地，在步骤S109g，控制单元120保持关于搜索关键k1的关联程度，降低关于搜索关键k2的关联程度，从图像搜索的结果中提取具有对应的关联程度的缩略图图像，并额外地对其进行显示。接下来，控制单元120重复自步骤S109c起的处理。 

并且，当在步骤S109f的确定处理中做出还未改变搜索关键显示K2的显示位置的确定时，还未执行调整搜索结果的处理，并且相应地，控制单元120重复自步骤S109c起的处理。 

因此，同样如上所述，对于两个搜索关键，可以显示图像搜索的结果，同时关于搜索关键之一调整关联程度。 

注意，在参照图21和图22所述的示例的情况下，以将已经调整了关联程度的缩略图图像添加到已经显示的缩略图图像的方式来对其进行显示。然而，本发明不限于此。 

例如，在还未移动搜索关键显示K1和K2二者的显示位置的情况下，控制单元120仅显示具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“高”的关键字的图像文件的缩略图图像。 

在用户已经移动了搜索关键显示K2预定量或更多，同时保持搜索关键显示K1的显示位置的情况下，首先，控制单元120消除已经显示的图像。接下来，控制单元120仅显示具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“中”的关键字的图像文件的缩略图图像。 

在用户进一步移动了搜索关键显示K2预定量或更多，同时保持搜索关键显示K1的显示位置的情况下，首先控制单元120消除已经显示的图像。接下来，控制单元120仅显示具有关于搜索关键k1关联程度为“高”的关键字以及关于搜索关键k2关联程度为“低”的关键字的图像文件的缩略图图像。 

因此，在用户已经移动了搜索关键显示的显示位置的情况下，清除在之前的显示，由此可以仅显示具有由用户指定的关联程度的图像文件的缩略图图像。 

接下来，用户顺序地移动搜索关键显示K1和搜索关键显示K2中的每一个的显示位置。在这样的情况下，可以仅显示具有关于搜索关键k1关联程度为“中”的关键字以及关于搜索关键k2关联程度为“中”的关键字的图像文件的缩略图图像。 

类似地，可以仅显示具有关于搜索关键k1关联程度为“中”的关键字以及关于搜索关键k2关联程度为“低”的关键字的图像文件的缩略图图像。 

第一修改 

通过根据以上实施例的成像设备100，已经搜索了具有与搜索关键匹配的关键字的图像文件。也就是说，以上实施例是搜索关键是关键字信息的情况。 

然而，搜索关键不限于关键字信息。通过图像本身(具体地，作为搜索关键的图像分析的信息)可以检测类似的图像。通过根据第一修改的成像设备100，使用图像本身作为搜索关键，并且执行图像搜索。 

图23是描述使用图像作为搜索关键以执行图像搜索的情况的图。如图 23中的(a)所示，以可区别的模式(例如，高亮显示等)显示能够用作搜索关键的图像。 

如参照图2所述的那样，对于每一个图像文件，将通过将图像文件的图像数据经历图像分析而获得的图像分析信息添加到图像数据作为元数据。利用该图像分析信息，如上所述，使用诸如边缘检测、色彩分析之类的各种技术，由此通过数字化可以示出根据图像数据的每一个片段的图像的特征，可以在各图像之间比较画面组成和被摄体的类似性。 

因此，作为图像分析的结果，将已经确定为具有清楚特征的图像(例如，主要拍摄了人脸的图像、具有清楚轮廓的建筑物或风景的图像)安排为能够用作搜索关键。 

具体地，通过开启可用作搜索关键的图像的图像文件的标志等，可以将用作搜索关键的图像的图像文件安排为可区别的。因此，如图23中的(a)所示，利用高亮显示等，能够变为搜索关键的图像的缩略图图像可以是可区别的。 

接下来，如图23中的(b)所示，用户使手指等与目标图像的缩略图图像的显示位置上的触摸板107的操作表面接触。 

在这种情况下，控制单元120可以基于来自触摸板107的坐标数据，识别已经指定了哪一个缩略图图像作为搜索关键，并且在与以该坐标数据指示的操作表面上的位置对应的显示屏幕上的位置上显示缩略图图像。 

控制单元120从与指定的缩略图图像对应的图像文件中读出图像分析信息，并且利用该图像分析信息作为搜索关键字，提取与该搜索关键类似的图像分析信息。接下来，如图23中的(b)所示，控制单元120通过将提取出的图像文件的缩略图图像集合在显示屏幕上的预定位置而对其进行显示。 

在图23中所示的示例的情况下，图示了已经指定了两个缩略图图像以便成为搜索关键的情况。接下来，在该示例的情况下，提取与所指定的两个图像图像分析结果二者类似的图像。注意，可以根据用户的指令来提取与所指定的两个图像的图像分析结果之一类似的图像。 

因此，将一个图像指定为搜索关键，由此利用在该图像中拍摄的人或建筑物等作为搜索条件可以减少图像。也就是说，可以提取与指定为搜索关键的图像类似的图像。 

注意，已经对假设作为图像分析的结果，预先确定具有清楚特征的图像 来作为可以指定为搜索关键的图像的情况进行了描述。然而，本发明不限于此。不必说，所有图像都能够指定为搜索关键。在该情况下，缩略图图像不需要以高亮方式显示。并且，用户他自己可以预先设置要作为搜索关键使用的图像。 

具体地说，如参照图9所述的那样，用户选择“图像内的人脸区域”作为图像分析信息，并且如参照图23所述的那样，指定要作为搜索关键的图像。 

在这种情况下，控制单元120基于被指定为搜索关键的图像的图像分析信息“图像内的人脸区域”，从记录介质135中搜索并提取相关的图像，由此可以根据关联程度显示其结果。 

并且，用户选择“图像内的人数”作为图像分析信息，并且如参照图23所述的那样，指定要作为搜索关键使用的图像。在这种情况下，控制单元120基于被指定为搜索关键的图像的图像分析信息“图像内的人数”，从记录介质135中搜索并提取相关的图像，由此可以根据关联程度显示其结果。 

并且，在用户使用同样作为图像分析信息的“图像内人的笑脸程度”的情况下，控制单元120可以基于被指定为搜索关键的图像的“图像内人的笑脸程度”，从记录介质135中搜索相关的图像。 

并且，在用户使用同样作为图像分析信息的“整个图像的特征”的情况下，控制单元120可以基于被指定为搜索关键的图像的“整个图像的特征”，从记录介质135中搜索相关的图像。 

在这种情况下，根据图像的色调和复杂度来获得相似性，根据该相似性提取相关的图像，由此可以将相关图像分类为三个关联程度“高”、“中”和“低”。 

因此，利用根据本实施例的成像设备100，使用图像分析信息，并使用图像本身作为搜索关键，由此可以搜索并提取与该搜索关键有关的图像。 

如上所述，甚至在使用图像作为搜索关键的情况下，也可以以图10、13、15、17、19和20中所示的显示模式来显示搜索结果。 

第二修改 

并且，可以使用每一个图像文件中包括的GPS信息(位置信息)作为搜索关键。在该情况下，将位置信息设置为要用作搜索关键，在显示屏幕6G上显示与该位置信息对应的搜索关键显示。并且，用户通过输入用作搜索关键的实际位置信息(经度、纬度)，或者从多个预先准备的位置信息中选择位 置信息等来设置位置信息。 

接下来，用户使手指等接触与位置信息对应的搜索关键显示，由此控制单元120使用位置信息来执行图像搜索。在这种情况下，控制单元120搜索具有属于预定辐射区域(以用作搜索关键的位置信息(经度、纬度)作为中心)的GPS信息的图像文件。 

具体地说，例如，控制单元120搜索并提取具有属于半径低于10km的区域(以用作搜索关键的位置信息(经度、纬度)作为中心)的GPS信息的图像文件作为具有“高”关联程度的图像文件。 

并且，例如，控制单元120搜索并提取具有属于半径等于或大于10km且小于20km的区域(以用作搜索关键的位置信息(经度、纬度)作为中心)的GPS信息的图像文件作为具有“中”关联程度的图像文件。 

并且，控制单元120搜索并提取具有属于半径等于或大于20km且小于30km的区域(以用作搜索关键的位置信息(经度、纬度)作为中心)的GPS信息的图像文件作为具有“低”关联程度的图像文件。 

因此，可以使用位置信息作为搜索关键，并且可以根据利用被确定为搜索关键的位置信息作为参考而确定的关联程度来执行图像文件的搜索。 

因此，利用根据本实施例的成像设备100，使用位置信息(GPS信息)作为搜索关键，由此可以搜索并提取与该搜索关键有关的图像。 

如上所述，甚至在使用位置信息作为搜索关键的情况下，也可以以图10、13、15、17、19、20中所示的显示模式来显示搜索结果。 

图像搜索结果的确定 

利用根据本实施例的成像设备100，如上所述，在执行图像搜索并且在显示单元106的显示屏幕6G上显示其结果的情况下，用户执行预定操作，由此可以确定搜索结果并将其存储在文件夹中。 

图24是描述确定搜索结果的操作的图。如参照图1所述的那样，根据本实施例的成像设备100包括运动传感器137。根据运动传感器137的功能，同样如上所述，可以检测成像设备100倾斜的情况、成像设备100抖动的情况以及成像设备100被轻拍的情况中的每一个，并将其通知给控制单元120。 

因此，如图24所示，在已经执行了图像搜索并且在显示屏幕6G上显示搜索结果的情况下，在成像设备100倾斜的情况下，在成像设备100抖动的情况下，或者在成像设备被轻拍的情况下，将这些识别为搜索结果的确定操 作。 

具体地说，如图24中的(a)所示，在显示屏幕6G上显示搜索结果的情况下，一旦运动传感器137检测到成像设备100倾斜，控制单元120就将该倾斜操作识别为搜索结果的确定操作。 

接下来，例如，如图24中的(d)所示，控制单元120处理与当前在显示屏幕6G上显示的缩略图图像对应的图像文件，以便将这些图像文件存储在由用户选择的图像文件夹中。 

在这种情况下，例如，如图24中的(d)所示，显示图像文件夹的影像，并且显示逐渐地将作为图像搜索的结果而获得的图像文件存储在图像文件夹中的影像图像，由此可以清楚地向用户通知将搜索结果存储在文件夹中。 

并且，如图24中的(b)所示，在显示屏幕6G上显示搜索结果的情况下，例如，在运动传感器137检测到成像设备100左右抖动时，控制单元120将该抖动操作识别为搜索结果的确定操作。 

接下来，例如，如图24中的(d)所示，控制单元120处理与当前在显示屏幕6G上显示的缩略图图像对应的图像文件，以便将这些图像文件存储在由用户选择的图像文件夹中。 

同样在这种情况下，如图24中的(d)所示，显示图像文件夹的影像，并且显示逐渐地将作为图像搜索的结果而获得的图像文件存储在图像文件夹中的影像图像，由此可以清楚地向用户通知将搜索结果存储在文件夹中。 

并且，如图24中的(c)所示，在显示屏幕6G上显示搜索结果的情况下，例如，在运动传感器137检测到成像设备100被轻拍时，控制单元120将该抖动操作识别为搜索结果的确定操作。 

接下来，例如，如图24中的(d)所示，控制单元120处理与当前在显示屏幕6G上显示的缩略图图像对应的图像文件，以便将这些图像文件存储在由用户选择的图像文件夹中。 

同样在这种情况下，如图24中的(d)所示，显示图像文件夹的影像，并且显示逐渐地将作为图像搜索的结果而获得的图像文件存储在图像文件夹中的影像图像，由此可以清楚地向用户通知将搜索结果存储在文件夹中。 

注意，这里已经进行了描述，其中运动传感器137检测到成像设备100已经被轻拍，但本发明不限于此。如参照图1所述的那样，根据本实施例的成像设备100包括机上部分(set upper portion)触摸板136。因此，可以进行 这样的安排：其中，在经由机上部分触摸板136检测到成像设备100已经由用户轻拍的情况下，控制单元120执行用于在文件夹中存储搜索结果的处理。 

并且，同样如上所述，根据本实施例的成像设备100可以根据关于搜索关键的关联程度来搜索图像以显示其结果。因此，可以根据确定搜索结果的操作的频率来调整在文件夹中存储的搜索结果的范围。 

图25A到图25C是描述根据由用户倾斜成像设备100的倾角，改变要在文件夹中存储的图像搜索的结果的范围的情况的图。 

同样如上所述，在根据本实施例的成像设备100中实现的运动传感器137可以检测成像设备100在哪一个方向中倾斜了多少。 

因此，如图25A所示，在运动传感器137检测到成像设备100已经倾斜了预定角度X1或更多的情况下，控制单元120在图像文件夹中存储被确定为关于搜索关键的关联程度为“高”的图像文件。 

接下来，如图25B所示，在运动传感器137检测到成像设备100已经倾斜了预定角度X2或更多的情况下，控制单元120在图像文件夹中存储被确定为关于搜索关键的关联程度为“中”的图像文件。 

接下来，如图25C所示，在运动传感器137检测到成像设备100已经倾斜了预定角度X3或更多的情况下，控制单元120在图像文件夹中存储被确定为关于搜索关键的关联程度为“低”的图像文件。 

接下来，在成像设备100从图25A所示的状态返回到成像设备水平的状态的情况下，可以防止在文件夹中存储关于搜索关键具有“中”关联程度或关于搜索关键具有“低”关联程度的图像文件。 

类似地，在成像设备100从图25B所示的状态返回到成像设备水平的状态的情况下，可以防止在文件夹中存储关于搜索关键具有“低”关联程度的图像文件。 

并且，在图25A到图25C所示的示例的情况下，角度X1、X2和X3满足关系X1＜X2＜X3，并且例如将其设置为X1＝15度，X2＝30度，以及X3＝45度。不必说，这些为示例，并且相应地，可以设置各种值。 

因此，根据本实施例的成像设备100的用户可以通过简单的操作在目标图像文件夹中存储想要范围的搜索结果。 

图像搜索结果确定处理 

图26是描述根据由用户倾斜的成像设备100的倾角来改变要存储在文件 夹中的图像搜索的结果的范围的情况(参照图25A到图25C所述)下的处理的流程图。 

例如，主要由控制单元120在参照图11和图12所述的图像搜索处理的步骤S117中执行图26中所示的处理。 

首先，控制单元120监控来自运动传感器137的检测输出，以确定是否已经执行了用于倾斜成像设备100(主要单元)的操作(步骤S1170)。当在步骤S1170的确定处理中做出还未倾斜成像设备的确定时，控制单元120重复步骤S1170的处理以变为等待状态，直到倾斜成像设备为止。 

当在步骤S1170的确定处理中做出已经倾斜了成像设备的确定时，控制单元120确定成像设备100的倾角X是否等于或大于预定第一倾角X1(步骤S1171)。 

当在步骤S1171的确定处理中做出成像设备100的倾角X并非大于等于预定第一倾角X1的确定时，控制单元120确定成像设备100是否已经返回到水平(步骤S1172)。 

当在步骤S1172的确定处理中做出成像设备100还未返回到水平的确定时，控制单元120重复自步骤S1171起的处理。并且，当在步骤S1172的确定处理中做出成像设备100已经返回到水平的确定时，控制单元120结束图26中的该处理。 

并且，当在步骤S1171的确定处理中做出成像设备100的倾角X等于或大于预定第一倾角X1的确定时，控制单元120在预定文件夹中存储被确定为关于搜索关键关联程度为“高”的图像组(步骤S1173)。 

接下来，控制单元120确定成像设备100的倾角X是否等于或大于预定第二倾角X2(步骤S1174)。 

当在步骤S1174的确定处理中做出成像设备100的倾角X并非大于等于预定第二倾角X2的确定时，控制单元120确定成像设备100是否已经返回到水平(步骤S1175)。 

当在步骤S1175的确定处理中做出成像设备100还未返回到水平的确定时，控制单元120重复自步骤S1174起的处理。并且，当在步骤S1175的确定处理中做出成像设备100已经返回到水平的确定时，控制单元120结束图26中的该处理。 

当在步骤S1174的确定处理中做出成像设备100的倾角X等于或大于预 定第二倾角X2的确定时，控制单元120额外地在该文件夹中存储被确定为关于搜索关键关联程度为“中”的图像组(步骤S1176)。 

接下来，控制单元120确定成像设备100的倾角X是否等于或大于预定第三倾角X3(步骤S1177)。 

当在步骤S1177的确定处理中做出成像设备100的倾角X并非大于等于预定第三倾角X3的确定时，控制单元120确定成像设备100是否已经返回到水平(步骤S1178)。 

当在步骤S1178的确定处理中做出成像设备100还未返回到水平的确定时，控制单元120重复自步骤S1177起的处理。并且，当在步骤S1178的确定处理中做出成像设备100已经返回到水平的确定时，控制单元120结束图26中的该处理。 

当在步骤S1177的确定处理中做出成像设备100的倾角X等于或大于预定第三倾角X3的确定时，控制单元120额外地在该文件夹中存储被确定为关于搜索关键关联程度为“低”的图像组(步骤S1179)。接下来，控制单元120结束图26中的处理。 

因此，根据本实施例的成像设备100的用户在执行图像搜索之后，执行用于倾斜成像设备100的操作，由此可以在预定文件夹中存储图像搜索的结果。 

并且，用户可以通过调整成像设备100的倾角来在目标图像文件夹中存储想要范围的搜索结果。 

注意，作为示例，图25和图26已经描述了采用倾斜成像设备100的操作作为用于开始存储图像搜索结果的处理的操作的情况。然而，除此之外，也可以采用抖动成像设备100的操作、或轻拍成像设备100的操作作为用于开始存储图像搜索结果的处理的操作。 

在这种情况下，可以根据用于抖动成像设备100的操作的次数，或者用于轻拍成像设备100的操作的次数，控制要在文件夹中存储的图像搜索结果的范围。并且，在可检测抖动成像设备100的操作的强度或者轻拍成像设备100的操作的强度的情况下，可以根据该强度来控制要在文件夹中存储的图像搜索的范围。 

优点 

根据以上实施例的成像设备100可以执行与用户指定的搜索关键有关的 图像搜索。接下来，可以提供图像搜索的结果，以便允许用户可视地识别出关于搜索关键(搜索条件)的关联程度。 

并且，上面的成像设备100可以利用简单操作在文件夹中存储图像搜索的结果。此外，根据用户的操作的水平可以控制图像搜索的结果的范围。 

并且，开始图像搜索的操作是使手指等关于搜索关键显示接触的操作，并且在文件夹中存储图像搜索结果的操作是对成像设备100进行倾斜、抖动、轻拍等的操作。因此，可以通过直观的操作容易地执行图像搜索以及搜索结果存储处理。 

本发明的方法和程序 

注意，如从以上实施例中显而易见的那样，主要将本发明的方法和程序实现为参照图11和图12所示的流程图所述的方法和程序。也就是说，参照图11和图12所述的方法是根据本发明的方法的实施例。 

用于执行参照图11和图12所述的处理的程序是本发明的程序的实施例。相应地，实现根据本发明的程序，并且实施为数码相机或各种类型的图像处理设备，由此可以实现根据本发明的图像处理设备。 

进一步，也可以实现参照图14、20、22和26所示的流程图所述的方法和程序。并且，在图11中的步骤S109中，也可以实现用于执行参照图15和图16所述的显示处理的方法和程序。类似地，在图11中的步骤S109中，也可以实现用于执行参照图17和图18所述的显示处理的方法和程序。 

其他实施例和修改 

注意，对于以上实施例，显示单元106实现显示装置，记录介质135实现存储单元，而显示单元106与触摸板107合作以实现搜索关键指定单元。并且，控制单元120主要实现搜索单元和显示控制单元。 

并且，触摸板107实现指定位置检测单元，而控制单元120实现搜索关键显示控制单元。并且，运动传感器137和机上部分触摸板136实现运动检测单元。 

并且，对于以上实施例，显示单元106与触摸板107合作以实现搜索关键指定单元，但本发明不限于此。例如，也可以利用向操作单元131提供的硬件按键来实现搜索关键指定单元。 

具体地说，在指定要用于图像搜索的搜索关键之后，在按下并操作用于使用该搜索关键执行图像搜索的预定硬件按键的情况下，可以执行使用该搜 索关键的图像搜索。 

在这种情况下，如果使用两个或更多搜索关键，则提供与其对应的、用于执行图像搜索的多个预定硬件按键，由此可以以与使用触摸板的情况相同的方式执行图像搜索。并且，例如，将这些硬件按键提供为两个可滑动的硬件按键，由此如通过以上实施例描述的那样，可以执行使用两个搜索关键的图像搜索。 

并且，对于以上实施例，已经搜索了关于搜索关键具有高关联程度、中关联程度和低关联程度三个阶段的关联程度的图像文件，但本发明不限于此。不必说，可以更加精细地划分关联程度。 

并且，对于以上实施例，已经描述了已经将本发明应用于成像设备的情况作为示例，但本发明不限于此。例如，本发明可以应用于蜂窝电话终端、能够进行图像数据处理的、被称为PDA(个人数字助理)的便携式信息终端等以及能够进行其他图像数据处理的各种图像处理设备。 

并且，待显示的图像数据不限于静止图像的图像数据。例如，本发明可以应用于一种图像处理设备，其中采用记录介质中存储的多个运动画面内容的代表性图像或缩略图图像作为显示对象。 

并且，对于以上实施例，已经将成像设备100中包括的触摸板107描述为能够检测用户的手指等的面板，但本发明不限于此。例如，在用户使手指等靠近操作表面到某一程度而不接触操作表面的情况下，只要使得靠近的位置可检测，这就可以用于实现本发明。 

也就是说，触摸板107不限于接触型。例如，可以使用非接触型触摸板，其中在使手指等靠近到某一程度的情况下，检测操作表面上的电位改变或者被接近的位置处的亮度变化，并且可以将操作表面上的这种已经改变的位置确定为指定的位置。 

并且，对于以上实施例，如图10等中所示，已经以分散的方式(随机)显示了待显示的缩略图图像的显示位置和显示方向等，但本发明不限于此。 

可以固定显示方向。也就是说，在已经执行了图像搜索的情况下，存在特征在于，显示与搜索关键匹配的图像的缩略图图像，以便将其集合在显示屏幕上的预定位置，并且可以以各种模式显示其他部分。 

并且，同样如上所述，根据预先的图像数据形成缩略图数据，将其添加到每一个图像文件，并且相应地，在缩略图图像显示的时候，不一定提供缩 略图数据，并且相应地，可以降低设备的负荷。 

本申请包含与于2008年12月4日在日本专利局提交的日本优先权专利申请JP 2008-309248中公开的主题有关的主题，将其全部内容通过引用的方式合并在此。 

本领域的技术人员应该理解，根据设计要求和其他因素，可能出现各种修改、组合、子组合和变更，它们在所附权利要求或者其等价物的范围内。 

Claims (9)

1.一种图像处理设备，包括：

显示装置；

存储部件，被配置为存储具有与搜索关键对应的信息的多个图像数据；

搜索关键指定部件，被配置为指定用于图像搜索的搜索关键；

搜索部件，被配置为从所述存储部件中搜索并提取具有与由所述搜索关键指定部件指定的搜索关键有关的信息的图像数据；以及

显示控制部件，被配置为控制与所述搜索部件提取出的图像数据对应的图像，以显示在所述显示装置的显示屏幕上、与关于所述搜索关键的关联程度对应的位置上，

其中所述显示控制部件对于根据关联程度的每一个确定，根据用于经由所述搜索关键指定部件指定搜索关键的接触持续时间，在所述显示装置的显示屏幕上显示与由所述搜索部件提取出的图像数据对应的图像。

2.根据权利要求1所述的图像处理设备，其中所述搜索关键指定部件能够指定多个搜索关键的使用；

并且其中所述显示控制部件执行控制，以便根据关于所述多个搜索关键的关联程度，在所述显示装置的显示屏幕上，在与所述多个搜索关键的关联程度中的每一个对应的位置上显示与由所述搜索部件提取出的图像数据对应的图像。

3.根据权利要求1所述的图像处理设备，其中所述搜索关键指定部件能够指定多个搜索关键的使用；

并且其中所述显示控制部件执行控制，以便在所述显示装置的显示屏幕上形成的坐标系上，在与所述多个搜索关键的关联程度对应的位置上显示与由所述搜索部件提取出的图像数据对应的图像，在该坐标系中，每一个坐标轴对应于所述多个搜索关键之一，坐标原点对应于所述多个搜索关键的关联程度中的每一个的最低值点，而坐标轴的正向对应于相应搜索关键的关联程度增大的方向。

4.根据权利要求1所述的图像处理设备，所述搜索关键指定部件包括：

指定位置检测部件，被配置为：经由提供到所述显示装置的显示屏幕的操作表面接受来自用户的指定操作，检测所述指定操作关于所述操作表面的指定位置，并将其输出；以及

搜索关键显示控制部件，被配置为执行控制，以便在所述显示装置的显示屏幕上显示一个或多个搜索关键，以便进行选择。

5.根据权利要求4所述的图像处理设备，其中所述搜索关键指定部件能够指定多个搜索关键的使用；

并且其中所述搜索关键显示控制部件根据经由所述指定位置检测部件执行的、关于显示的所述搜索关键移动显示位置的操作，能够改变显示的所述搜索关键的显示位置；

并且其中所述显示控制部件执行控制，以便对于与由所述搜索部件提取出的图像数据对应的图像，在所述显示装置的显示屏幕上，根据所述多个搜索关键之间的距离，显示与具有所述关联程度的图像数据对应的图像。

6.根据权利要求1所述的图像处理设备，进一步包括：

搜索确定部件，被配置为在所述显示控制部件的控制之下，在所述显示屏幕上显示与由所述搜索部件提取出的图像数据对应的图像之后，接受用以确定搜索结果的指定操作的情况下，确定当前显示的搜索结果。

7.根据权利要求6所述的图像处理设备，进一步包括：

运动检测部件，被配置为检测所述图像处理设备的运动；

其中用于确定所述搜索结果的指定操作是如下操作中之一：经由所述运动检测部件检测到的用于斜向地倾斜所述图像处理设备的操作、抖动所述图像处理设备的操作以及轻拍所述图像处理设备的操作。

8.根据权利要求7所述的图像处理设备，其中所述搜索确定部件依照由所述运动检测部件检测到的所述图像处理设备的运动程度，控制根据关于搜索关键的关联程度而确定的范围。

9.一种图像显示方法，包括如下步骤：

经由搜索关键指定部件指定用于图像搜索的搜索关键；

在所述指定中指定了搜索关键的情况下，从用于存储具有与搜索关键对应的信息的多个图像数据的存储部件中搜索并提取具有与指定的搜索关键有关的信息的图像数据，以及

执行控制，以便显示控制部件对于根据关联程度的每一个确定，根据用于经由所述搜索关键指定部件指定搜索关键的接触持续时间，在显示装置的显示屏幕上、与关于所述搜索关键的关联程度对应的位置上显示与在所述搜索中提取出的图像数据对应的图像。

Images