CN1719864A - 图像处理系统及图像处理方法 - Google Patents

Abstract

本发明提供图像处理系统及图像处理方法。可提供一种通过对代表性的对象将全部数据矢量化，对与其同一或类似的对象参照矢量化的代表性的对象及利用其差分数据，可以在促进利用存储器的效率的同时，通过对代表对象进行编辑，可以将与其同一或类似的对象汇总进行变换的图像处理系统及图像处理方法。首先，将输入的图像信息矢量化，存储代表对象的矢量数据。于是，对于成为对象的对象(object)判定与代表对象的同一性，在存在同一性的场合，代替对象对象(对象object)的矢量数据，存储包含有关对代表对象的矢量数据的参照目标的信息的属性信息。

Description

图像处理系统及图像处理方法

技术领域

本发明涉及利用通用的文档生成应用软件等将输入的图像信息变换为可以再利用的矢量数据的图像处理系统及图像处理方法。

背景技术

近年来，对环境问题的关心正在日益高涨，办公室等之中的无纸化正在急速进展。与此同时，公知的有将以往来的以活页夹等形式累积的纸文档利用扫描仪读出变换为可移植文档格式(以下称其为“PDF”)，在图像存储装置中作为数据库累积的文档管理系统。

此外，已经开发出可以利用扫描仪读出纸文档，通过实施OCR(光学字符识别)技术及边缘提取等图像处理来提取在原稿中记载的文字、表、插图等对象，生成矢量数据，对其进行再利用的图像处理系统(比如，参照日本专利特开平5-342408号公报)。

然而，在生成上述矢量数据的现有的图像处理系统中，未对多个图像汇总进行处理的场合进行研讨。比如，在读出在各纸页上粘贴有公司徽标的原稿的场合，在多个图像中多次出现同样的对象。在将这种图像作为矢量数据存储之际，将多次出现的徽标这样的对象分别个别地矢量化并全部存储于存储器这一点，从有限的硬件资源存储器的利用上的观点来看，不能说是有效率。另外，在对存储于存储器的这些数据进行再利用之际，即使是相似的对象，也要对其个别地进行编辑，不仅存在操作麻烦，而且会由于变换错误重构成为不同的对象的问题。

发明内容

本发明系为了解决这些通常问题而完成的，其目的在于提供一种对于代表性的对象将全部数据组化，对于与其相同或类似的对象，通过参照矢量化的代表性的对象并利用该差分数据，在促进有效利用存储器的同时，通过对代表对象进行编辑，可以将与其相同或类似的对象进行一揽子变换的图像处理系统及图像处理方法。

为解决上述课题，本发明的图像处理系统的特征在于包括：

输入图像信息的输入装置；

将上述图像信息进行矢量化的矢量化装置；

将包含于上述图像信息中的第1对象的矢量数据进行存储的第1存储装置；

判定包含于上述图像信息中的第2对象和上述第1对象的同一性的判定装置；以及

在上述第1及第2对象中存在同一性时，代替该第2对象的矢量数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息进行存储的第2存储装置。

另外，上述图像处理系统的特征在于其中上述第2存储装置还将上述第1及第2对象的差分信息与上述属性信息相关联地进行存储。

此外，为解决上述课题，本发明的图像处理系统的特征在于包括：

对于存在具有同一性的多个对象的图像信息，存储成为代表的第1对象的矢量数据的第1存储装置；

作为在和上述第1对象之间具有同一性的第2对象的数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息和与上述第1对象的差分信息进行存储的第2存储装置；

在重构上述图像信息之际，从存储于上述第1存储装置中的上述矢量数据重构上述第1对象的第1重构装置；以及

在重构上述图像信息之际，从存储于上述第2存储装置中所存储的上述属性信息参照第1对象，利用关于该第1对象的矢量数据和上述差分信息，重构上述第2对象的第2重构装置。

此外还有，上述图像处理系统的特征在于其中上述第2重构装置，在不能从作为参照目标的上述第1对象的矢量数据重构上述第2对象时，使用代替对象的矢量数据重构该第2对象。

此外还有，本发明的图像处理方法的特征在于包括：

输入图像信息的输入工序；

将上述图像信息进行矢量化的矢量化工序；

将包含于上述图像信息中的第1对象的矢量数据存储于存储装置的第1存储工序；

判定包含于上述图像信息中的第2对象和上述第1对象的同一性的判定工序；以及

在上述第1及第2对象中存在同一性时，代替该第2对象的矢量数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息进行存储的第2存储工序。

此外还有，本发明是其构成包括：

对于存在具有同一性的多个对象的图像信息，存储成为代表的第1对象的矢量数据的第1存储装置；

作为在和上述第1对象之间具有同一性的第2对象的数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息和与上述第1对象的差分信息进行存储的第2存储装置的图像处理系统的图像处理方法；

其特征在于：

在重构上述图像信息之际，从存储于上述第1存储装置中的上述矢量数据重构上述第1对象的第1重构工序；

在重构上述图像信息之际，从存储于上述第2存储装置中所存储的上述属性信息参照第1对象，利用关于该第1对象的矢量数据和上述差分信息，重构上述第2对象的第2重构工序。

本发明的其他特点和优点可从参考下面的附图的描述而了解，附图各图中同样或类似的部件赋予同样的标号。

附图说明

包含在本说明书中并构成其一部分的附图示出本发明的具体实施方式，并且与本说明书中一起用来对本发明的原理予以说明。

图1为示出本发明的一个实施方式的图像处理系统的构成的框图。

图2为示出本发明的一个实施方式的MFP100的构成的框图。

图3为用来说明本发明的一个实施方式的图像处理系统的图像处理步骤的流程图。

图4为示出对利用块选处理读出的一张图像数据进行属性判定并分割为多个块的情况的图。

图5为示出对利用步骤S1201的块选处理所得到的各块的块信息的一个例子的图。

图6为用来说明对附加在原稿图像中的二维条码(QR码符号)进行译码而输出数据文字串的步骤的流程图。

图7为示出附加有二维条码的原稿310的一个例子的图。

图8为用来说明从检出的指针信息检索电子文件的处理步骤的流程图。

图9为用来说明从包含文件访问权的指针信息检索存储电子文件的服务器的处理步骤的流程图。

图10A、B为用来说明从数据库中进行与输入图像文件类似的电子文件的布局检索的步骤的流程图。

图11为用来说明曲率成为极大的点的示图。

图12为用来对外轮廓与内轮廓或别的外轮廓接近时表现为具有粗度的线的示例进行说明的图。

图13为用来说明将矢量数据对每个图形对象一直到组化为止的处理步骤的流程图。

图14为用来说明检测图形要素的处理步骤的流程图。

图15为示出DOAF的数据结构的图。

图16为用来说明变换处理为应用数据的整体的概略步骤的流程图。

图17为用来说明文档结构树生成处理(步骤S802)的详细处理步骤的流程图。

图18为用来说明文档结构树的概要图。

图19为用来说明利用二维条码(QR码符号：JIS X0510)311对作为指针信息的数据文字串进行编码并附加到图像中的步骤的流程图。

图20为示出矢量化的代表对象的属性信息的一个例图。

图21为示出作为参照代表对象的对象的列表的文字信息链接表的一个例图。

图22为示出用来进行复制操作的基本画面的图。

图23为示出列举显示在应用模式中包含的功能的应用模式显示画面的示图。

图24为示出用来执行矢量化处理功能的矢量化处理画面的图。

图25为示出读出原稿生成的XML基准的SVG文件的一个例子的图。

图26为用于应用显示读出文件的本发明的特征画面。

图27为示出要从代表对象改变为原始对象之际显示的画面的一个例图。

图28为示出在利用与图26相同的作业读入原稿的图像之中显示5/9页的部分的例图。

图29为示出显示从图28的画面之中改变代表对象的方向和大小时的状态的画面的图。

图30为示出代表对象选择键及对象关联键的全部键为非选择状态的画面的图。

图31为示出解除与代表对象的关联而与其他代表对象进行关联的场合的画面的一个例图。

图32为示出用来在图31示出的画面显示中进一步改变大小的画面的一个例图。

图33为从图31的画面显示中操作员拖放箭头图标后的状态的画面显示的图。

图34为利用箭头图标的拖放按照定出的矩形的大小代表对象被确定的图像显示的图。

图35为用来说明由矢量数据重构对象的场合的处理的流程图。

图36为示出用来进行发送/传真的基本画面的图。

图37为示出用来进行发送/传真的详细操作的画面的图。

图38为示出读入设定详细画面的一个例图。

图39为示出箱框的基本画面的示图。

图40为示出用来显示存储于特定的用户箱框中的文档的画面的图。

图41为示出选择了图40的行402时的画面的图。

图42为示出用来进行印刷设定的画面的图。

图43为示出利用其他对象进行参照的代表对象要解除代表对象时显示的警告的画面的图。

具体实施方式

下面参照附图对本发明的优选实施方式的图像处理系统的构成及使用此系统的各种图像处理的内容进行说明。

[图像处理系统的构成]

图1为示出本发明的一实施方式的图像处理系统的构成的框图。图1示出的图像处理系统，作为一个示例，是在通过因特网等网络104将办公室10和办公室20连接的环境中实现的。

在办公室10内构建的LAN107与数字一体机(MFP)100、控制MFP100的管理PC101、客户PC102、文档管理服务器106a、其数据库105a及代理服务器103a相连接。另外，MFP100，比如，可以由具有一体机功能的复印机及传真机装置等实现。另外，在办公室20内构建的LAN108与文档管理服务器106b、其数据库105b及代理服务器103b相连接。另外，客户PC102具有外部存储单元、检索图像输入单元及检索结果输出单元。另外，LAN107及办公室20内的LAN108，经代理服务器103a、103b与因特网等网络104相连接。

MFP100，在本实施方式中担负以光学方式读出纸文档并变换为图像信号的图像读出处理和针对读出的图像信号的图像处理的一部分，图像信号利用LAN109输入到管理PC101。另外，管理PC101，也可以使用通常的PC来实现，其内部设置有图像存储单元、图像处理单元、显示单元及输入单元。另外，管理PC101也可以是其一部分或全部与MFP100一体化的结构。

图2为示出本发明的一个实施方式的MFP100的构成的框图。在图2中，包含自动文档送进器(以下称其为“ADF”)的图像读出单元110，以内部设置的光源对册状(束状)或一张原稿图像进行照射，利用透镜使原稿反射像在固体摄像元件上成像，从固体摄像元件得到光栅形状的图像读出信号，比如，作为600dpi的密度的图像信息。于是，在使用通常的复印功能的场合，由数据处理单元115对此图像信号进行图像处理使其成为记录信号，在每次多张复印的场合，在存储装置111上临时保持1页大小的记录数据之后，顺序输出到印刷装置112而在纸上形成图像。

另一方面，从客户PC102输出的印刷数据，从LAN107输入到MFP100，经网络IF114由数据处理装置115变换为可以记录的光栅数据之后，输出到印刷装置112在纸上形成记录图像。

对MFP100的操作员的指示可利用MFP100上装备的按键等输入装置113或管理PC101的键盘及鼠标等构成的输入装置进行，这一系列的动作，由数据处理装置115内的控制单元进行控制。

另一方面，操作输入的状态显示及处理中的图像数据的显示，由MFP100的显示装置116或管理PC101、客户PC102的监视器等进行。另外，存储装置111，也可由管理PC101进行控制，MFP100和管理PC101的数据交换及控制，利用网络IF117及直接连接的LAN109进行。

[读出处理的概要]

下面对本发明的一个实施方式的图像处理系统进行的图像处理整体的概要予以说明。图3为用来说明本发明的一个实施方式的图像处理系统的图像处理步骤的流程图。下面，对利用图3的流程图读出纸原稿而取得图像信息的处理予以说明。

首先，使MFP100的图像读出单元110动作对一张原稿进行光栅扫描，比如，得到600dpi、8位的图像信号(图像信息输入处理：步骤S1200)。另外，该图像信号，由数据处理装置115实施前处理并作为一页大小的图像数据保存到存储装置111。

之后，利用管理PC101的CPU，从存储于存储装置111的图像信号中，首先将区域分离为文字/线条画部分和中间色调的图像部分。然后，再将文字部分以段落汇集成块的每个块或分离为由线构成的表、图形而分别进行分段化。另一方面，为使对象化单位可以被了解将中间色调表现的图像部分分离为矩形的每个块的图像部分、背景部分等的所谓的块分割为独立的对象(BS处理：步骤S1201)。

此时，通过检出作为原稿图像附加信息所记录的二维条码或与URL相当的对象，URL在OCR处理(光学方式文字识别处理)中进行文字识别，解读二维条码或对象(步骤S1202)。于是，从解读的结果，检出原稿的矢量化控制信息(步骤S1203)。另外，作为附加指针信息的装置，另外也可以使用在文字和文字的间隔处嵌入信息的方法、在中间色调的图像中嵌入的方法等非直接可视化的电子水印的方法。在以这种方式嵌入附加信息作为电子水印的场合，可以在步骤S1202中检出水印信息进行解读。

之后，在步骤S1203中判定是否检出指针信息(步骤S1204)。其结果，在检出指针信息的场合(Yes)，就转入分支步骤S1205，从由检出的指针信息表示的地址检索是否存储有原来的电子文件(即代表性对象的矢量数据)。

在本实施方式中，电子文件，存储于图1所示的客户PC102中的硬盘内，或与办公室10、20的各个LAN107、108相连接的数据库105a、105b内，或MFP100本身具有的存储装置111等之中，按照在步骤S1203中检出的地址在这些存储装置内进行检索。

其结果，在步骤S1205中未发现电子文件的场合(No)，或虽然被发现但是是以PDF及tiff为代表的所谓的图像文件时，或在步骤S1204中指针信息本身不存在的场合(No)，就转入分支步骤S1206。

步骤S1206是文档文件检索处理例程。就是说，根据在上述步骤S1202中对各文字块进行的OCR处理的结果提取单词进行全文检索或根据各对象的排列和各对象的属性进行布局检索(步骤S1206)。于是，在根据检索结果发现类似度高的电子文件时，在将其作为候选进行缩略显示等的同时，在需要操作员从多个之中进行选择时就再由操作员通过输入操作进行文件确定(步骤S1207)。另外，在通过步骤S1206的检索处理只检索出一个文件作为候选的场合，自动地从步骤S1208转入分支步骤S1213并通知其存储地址。

于是，在步骤S1206中的检索处理中未发现电子文件的场合(No)或者发现但是是以PDF及tiff为代表的所谓的图像文件时，就转入分支步骤S1209。

步骤S1209的处理是从图像信息到矢量数据的变换处理，是变换为接近原始电子文件的电子文件的处理。

比如，对经过步骤S1202中的OCR处理的文字块，再进行文字大小、字形、字体等的识别，将对原稿扫描所得到的文字变换为可视性的忠实的字体数据。另外，对于由线构成的表及图像块，将其形状轮廓化。此外，对图像块，如是图像数据，就作为个别的JPEG处理。另外，这些矢量化处理，在针对各对象分别进行的同时，还保存各对象的版面信息，比如，变换为rtf文件等的应用数据(步骤S1210)。于是，将变换后的应用数据作为电子文件存储于存储装置111(步骤S1211)。

在步骤S1211中存储的电子文件，在进行以下的同样的处理之际，为了可以直接作为电子文件进行检索，生成检索用的索引信息，添加到检索用索引文件(步骤S1212)。于是，将该电子文件的存储地址通知操作员(步骤S1213)。另外，在步骤S1208及步骤S1205的文件检索处理中电子文件已经确定的场合(Yes)也同样下面就直接转向用于确定电子文件的分支步骤S1213，将存储地址通知操作员。

之后，操作员判断现在要进行的处理是否是记录(印刷)处理(步骤S1214)。其结果，在判断为是记录处理的场合(Yes)，就转向分支步骤S1215，将表示存储地址的指针信息作为图像数据附加到该文件。

另外，在步骤S1215中附加指针信息之后，以及在步骤S1214中操作员判断现在要进行的处理不是记录处理的场合(No)，就可以使用由上述处理得到的电子文件本身，比如，进行文档的记录、编辑、传送、累积(步骤S1216)。这些处理，与使用图像数据的场合比较信息量可以削减，可以提高向存储器等的累积效率，缩短传送时间，并且在进行记录(印刷)和显示之际，作为高品质的数据是非常优异的。

下面对各处理块进行详细说明。

[块选处理]

首先，对在步骤S1201中示出的块选(BS)处理进行说明。

图4为示出对利用块选处理读出的一张图像数据进行属性判定而分割为多个块的情况的图。就是说，所谓的块选处理，是将在标号41所示的在步骤S1200中读出的一页的图像数据作为标号42所示的每个对象块进行识别，将各个块判断为具有文字(TEXT)、照片(PHOTO)、线(LINE)、表(TABLE)等属性并分割为具有不同属性的区域(块)的处理。

下面对块选处理的一个实施方式进行说明。

首先，将输入图像进行黑白二值化，进行轮廓线跟踪提取以黑像素轮廓包围的像素块。于是，针对面积大的黑像素块，对位于内部的白像素同样进行轮廓线跟踪提取白像素块。此外，从大于等于一定面积的白像素的块的内部重复提取黑像素的块。另外，上述处理，是在以白地黑字等记载的原稿的场合的处理，在这以外的情况下，通过使与背景相当的色为“白”，与对象相当的色为“黑”，可以进行同样的处理。

将这样得到的黑像素的块按照大小及形状等进行分类，分类为具有不同属性的区域。比如，将纵横比接近1、大小在一定范围的块作为与文字相当的像素块，并且将接近的文字排列整齐的可以组化的部分作为文字区域。另外，将扁平的像素块作为线区域，将大于等于一定大小的并且内包排列整齐的四角形的白像素块的黑像素块所占据的范围作为表区域，将形状不定的像素块散在的区域作为照片区域，将这些以外的任意形状的像素块作为图片区域。结果，就可以对读出一张原稿而生成的电子数据的再利用设置更高度的限制。

图5为示出对利用块选处理所得到的各块的块信息的一个例子的图。图5所示的每个块的信息，可以用作后述的矢量化或检索的信息。

[指针信息的检出]

下面对用来从图像信息中提取在步骤S1202中示出的文件的存储位置的OCR/CMR处理予以说明。

图6为用来说明对附加到原稿图像中的二维条码(QR码符号)进行译码而输出数据文字串的步骤的流程图。图7为示出附加有二维条码的原稿310的一个例图。

首先，利用内部的CPU对读出存储于数据处理装置115内的原稿310所得到的图像数据进行扫描，从上述块选处理的结果检出规定的二维条码符号311的位置。QR码的位置检出图形，由配置在符号的四角内的三角上的同一的位置检出要素图形311a～311c构成(步骤S300)。

之后，将与位置检出图形相邻的形式信息复原，得到可应用于符号的纠错级别及掩码图形(步骤S301)。此外，在决定符号的型号之后(步骤S302)，使用由形式信息得到的掩码图形通过对编码区域位图形进行XOR运算解除掩码处理(步骤S303)。

于是，按照与模型对应的配置规则，读出符号字符，将消息的数据及纠错码字复原(步骤S304)。之后，对在复原的代码上有无错误进行检出(步骤S305)。其结果，在检出错误的场合(Yes)，就对该错误进行纠正(步骤S306)。于是，根据经过纠错的数据，基于模式指示符及文字数指示符，将数据码字分割为分段(步骤S307)。最后，基于规范模式对数据文字进行译码，并将结果输出(步骤S308)。另外，在步骤S305中未检出错误时(No)，就进入到上述步骤S307。

另外，插入到二维条码中的数据，表示矢量化控制信息。

在本实施方式中，如上所述，是利用二维条码赋予了矢量化控制信息的原稿310为例进行说明的，但在直接以文字串记录矢量化控制信息的场合，在上述的块选处理检出按照规定的规则的文字串的块，可以直接得到矢量化控制信息。

另外，对于图7的文档(原稿)310的文字块312及文字块313的文字串，也可以在相邻的文字和文字的间隔等施加达到难以辨别程度的调制，通过嵌入利用了该文字间隔的水印信息也可以赋予矢量化控制信息。这种水印信息，通过在进行后述的文字识别处理之际检出各文字的间隔，可以得到矢量化控制信息。另外，也可以在自然图片块314中附加矢量化控制信息作为电子水印。

[利用指针信息的电子文件检索处理]

下面对利用图3说明的在步骤S1205、S1208的处理中所进行的根据指针信息的电子文件检索处理予以详细说明。图8为用来说明从检出的指针信息检索电子文件的处理步骤的流程图。

首先，基于包含于指针信息中的服务器地址，确定存储该电子文件的文件服务器(步骤S400)。此处所谓的文件服务器，指的是客户PC102及内置数据库105a、b的文档管理服务器106a、b及内置存储装置111的MFP100本身。另外，所谓的地址是由URL及服务器名构成的路径信息。

于是，在确定文件服务器之后，将地址传送给在利用图3说明的步骤S1203中检出的指针信息示出的服务器(文件服务器)(步骤S401)。文件服务器，按照步骤S1206的文件检索处理，检索相当的电子文件(步骤S402)。接着，判定电子文件是否存在(步骤S403)。

此结果，在电子文件不存在的场合(No)，将这一点通知MFP100而结束。另一方面，在电子文件存在的场合(Yes)，利用图3，如前所述，为进行差分处理而进行候选显示，之后，在通知相当的电子文件的地址的同时，将相当的电子文件向用户(即MFP100)传送(步骤S408)。

[利用包含访问权的指针信息的服务器检索处理]

下面对考虑到文件访问权的实施方式予以说明。在通常处理的文档文件中，存在希望限制第三者再利用的文件。在利用上述图8的检索处理中，是以累积于文件服务器中的电子文件全部都是可以自由访问，文件整体或其一部分的对象全部是可以再利用为前提进行说明的。下面在从指针信息检索电子文件之际，对从检索结果存在确定的电子文件中具有访问权的限制的情况予以说明。

图9为用来说明从包含文件访问权的指针信息检索存储电子文件的服务器的处理步骤的流程图。在图9中，步骤S400～403的处理，因为与图8的处理步骤一样，其说明省略。于是，在步骤S403中，在确定了电子文件的场合(Yes)，文件服务器检查该文件的访问权信息(步骤S404)。其结果，在存在访问限制的情况下(Yes)，就要求MFP100发送口令(步骤S405)。

于是，MFP100，促使操作员输入口令等鉴别信息，并将输入的口令等发送到文件服务器(步骤S406)。文件服务器对所发送的口令等进行比对(步骤S407)，在一致时(Yes)，如利用图3所说明的，在通知电子文件的地址的同时，如果用户希望处理的是取得图像数据，则向MFP100传送电子文件(步骤S408)。

另外，用来进行访问权的控制的鉴别的方法并不限定于步骤S405、S406所示的利用口令的方法，比如，可以使用指纹鉴别等一般广泛使用的生体鉴别、持卡鉴别等所有鉴别手段。

另一方面，当在步骤S403中不能从文件服务器内确定文件的情况下，对于图3的步骤S1209中说明的矢量化处理也可以施加限制。就是说，在检出对纸文档扫描所得到的图像数据中的原始电子文件存在访问权限制的场合，通过只在能够取得鉴别确认的场合进行矢量化处理，可以对机密性高的文档的使用施加限制。

[文件检索处理]

下面利用图5及图10A、B对在图3的步骤S1206中示出的文件检索处理的详细情况进行说明。步骤S1206的处理，如前所述，是当在步骤S1204中输入原稿(输入文件)中不存在的指针信息的场合，或存在指针信息但找不到电子文件，或电子文件是图像文件的场合进行的。此处，在步骤S1202的OCR/OMR处理的结果、所提取的各块及输入文件具有图5所示的信息(块信息、输入文件信息)。在本实施方式中，作为信息内容，如图5所示，使用属性、坐标位置、宽度及高度的大小、OCR信息的有无。

属性还可分类为文字、线、照片、绘图、表等。另外，在图5中为了使说明简单起见，块是按照坐标X从小到大的顺序(比如，X1＜X2＜X3＜X4＜X5＜X6)列出块1、块2、块3、块4、块5、块6。另外，块的总数，是输入文件中的全部块数，在图5所示的示例中块的总数是6。以下，对使用这些信息从数据库内进行与输入图像文件类似的电子文件的布局检索的步骤进行说明。图10A、B为用来说明从数据库中进行与输入图像文件类似的电子文件的布局检索的步骤的流程图。另外，数据库文件也以具有和图5所示的信息同样的信息为前提。图1OA、B的流程图的流程是将从输入的原稿读出的电子文件和数据库中的电子文件顺序地进行比较的流程图。

首先，进行下述的类似率等的初始化来设定初始值(步骤S510)。之后，进行块总数的比较(步骤S511)，在为真的场合(Yes)，再顺序比较文件内的块的信息(步骤S512)。就是说，检查数据库的文件的块数n是否在输入文件数N的误差ΔN的范围内，并且如果在误差范围内时则为真(Yes)，如果在范围外时则为伪(NO)。另外，在步骤S512中，对输入文件和数据库文件的块属性进行比较，如果一致时，就进入到步骤S513以下的比较处理，如果在不一致时，则进入到步骤S521。

在块的信息比较中，在步骤S513、S515、S518中，分别计算出各个属性类似率、大小类似率、OCR类似率，在步骤S522中基于这些计算出综合类似率。关于各类似率的算出方法，因为可以使用公知的技术，其说明省略。

在步骤S523中，判定综合类似率是否高于预先设定的阈值Th，在高的场合(Yes)，可以推举出该电子文件作为类似候选保存(步骤S524)。另外，图中的N、W、H是输入文件的块总数、各块宽度、各块高度，ΔN、ΔW、ΔH是以输入文件的块信息作为基准考虑误差的量。另外，n、w、h是数据库文件的块总数、各块宽度、各块高度。另外，在步骤S514的大小比较时，也可以进行位置信息(X、Y)的比较等。

以上，因为检索的结果、综合类似率比阈值Th高，所以可将作为候选保存的数据库文件以缩略图像显示(步骤S1207)。结果，在需要操作员从多个之中进行选择时就由操作员通过输入操作进行文件确定。

[矢量化处理]

下面对在图3的步骤S1209中所示的矢量化处理予以说明。如前所述，在步骤S1208中判断不存在电子文件时，对输入的图像信息逐块地进行矢量化。

《文字识别》

对于文字块，对于各文字进行文字识别处理。为进行文字识别处理，在本实施方式中，对于以文字单位切出的图像，采用模式匹配的一种方法进行识别而得到对应的文字代码。这一识别处理，是在将从文字图像得到的特征变换为数十维的数值串的观测特征矢量和预先对每一字种求得的辞典特征矢量相比较，以距离最近的字种作为识别结果的处理。另外，在特征矢量的提取中有各种公知的方法，比如，可以采用将文字分割为筛网状，将各筛网内的文字线作为按方向区分的线素进行计数的筛网数的维数矢量为特征的方法。

在对块选处理(步骤S1201)中提取的文字区域进行文字识别的场合，首先对该区域进行横写、竖写的判定，在各个对应方向上切出行，其后切出文字而得到文字图像。横写、竖写的判定，可以在该区域内取相对像素值的水平/垂直的射影进行，在水平射影的分散大的场合判断为横写区域，在垂直射影大的场合判断为竖写的区域。

另外，分解为文字串及文字，在横写的场合是利用水平方向的射影将行切出，并且从相对切出的行的垂直方向的射影切出文字。另一方面，对于竖写的文字区域，将水平和垂直逆转即可。另外，文字的大小可以基于切出的大小检测。

《字体识别》

在文字识别之际所使用的字种数种类的辞典特征矢量针对文字形状种类，即字体种类准备多种，通过在匹配之际与文字编码一起输出字体种类，可以识别文字的字体。

《文字的矢量化》

利用上述文字识别及字体识别所得到的文字编码及字体信息，利用各个预先准备的轮廓数据，将文字部分的信息变换为矢量数据。另外，在输入的原稿图像是彩色的场合，从彩色图像提取各文字的颜色与矢量数据一起记录。

通过以上的处理，可以将属于文字块的图像信息变换为形状、大小、颜色都大致忠实的矢量数据。

《文字以外的部分的矢量化》

在步骤S1201的块选处理中，以作为图片或线、表区域的区域作为对象，将分别提取的像素块的轮廓变换为矢量数据。具体言之，将构成轮廓的像素的点串以看作是角的点进行分切，将各区间以部分的直线或曲线近似。此处，所谓的“角”是曲率极大的点。

图11为用来说明曲率成为极大的点的图。如图11所示，在对于任意点Pi左右的k个分离的点Pi-k～Pi+k之间画出一根弦时，求出此弦和Pi的距离成为最大的点。此外，以Pi-k～Pi+k之间的弦的长度/弧的长度作为R，可以将R的值小于等于阈值的点看作是角。由角所分割后的各区间，直线可利用针对点串的最小二乘法，曲线可利用3次样条函数等进行矢量化。

另外，在对象具有内轮廓的场合，利用通过块选处理提取的白像素轮廓的点串，同样以部分的直线或曲线近似。

如上所述，通过使用轮廓的区分线近似，可以将任意形状的图形的轮廓矢量化。另外，在输入的原稿是彩色的场合，彩色图像提取图形的颜色与矢量数据一起记录。

图12为用来对外轮廓与内轮廓或别的外轮廓接近时表现为具有粗度的线的例子进行说明的示图。如图12所示，在某一区间中，在外轮廓与内轮廓或别的外轮廓接近时，可以将两个轮廓线合二为一表现为具有粗度的线。具体言之，从某一轮廓的各点Pi到另一轮廓上的成为最短距离的点Qi引一根线，在各距离PQi平均小于等于一定长时，注目区间以PQi中点作为点串以直线或曲线近似，其粗度为PQi的平均值。作为线和线的集合体的表格线，可以作为具有上述粗度的线的集合，高效率地以矢量表现。

另外，对于利用对于文字块的文字识别处理的矢量化，如前所述，该文字识别处理的结果，是将与辞典距离最近的文字作为识别结果。此处，在这一距离大于等于规定值时，并不一定限定于与本来的文字一致，误识别形状类似的文字的时候很多。所以，在本实施方式中，对于这种文字，如上所述，与一般的线条画同样对待将该文字轮廓化。就是说，过去在文字识别处理中，即使引起误识别那样的文字，对于错误的文字也可以不进行矢量化，而是对以可视方式进行的忠实于图像数据的轮廓化进行矢量化。另外，对于判定为是照片的块，在本发明中不进行矢量化，而是保留图像数据原样不变。

[图形识别]

下面，在对上述任意形状的图形的轮廓进行矢量化之后，对每个图形对象，对这些矢量化的区分线进行组化的处理予以说明。

图13为用来说明将矢量数据对每个图形对象一直到组化为止的处理步骤的流程图。首先，计算出各矢量数据的始点、终点(步骤S700)。之后，利用各矢量的始点、终点信息检测测图形要素(步骤S701)。此处所谓的图形要素的检测，是检测区分线构成的封闭图形。在检测时，应用构成封闭形状的各矢量的两端分别具有连接的矢量这一原理进行检测。

其次，对在图形要素内存在的其他图形要素或区分线进行组化，构成一个图形对象(步骤S702)。另外，在图形要素内不存在其他图形要素或区分线的场合，以图形要素作为图形对象。

图14为用来说明检测图形要素的处理步骤的流程图。首先，从矢量数据中去掉两端未连接的不需要的矢量，提取封闭图形构成矢量(步骤S710)。之后，从封闭图形构成矢量之中将矢量的始点作为开始点，按照顺时钟方向追踪矢量。于是，追踪一直进行到返回开始点，将通过的矢量全部作为构成一个图形要素的封闭图形进行组化(步骤S711)。另外，此时，将处于封闭图形内部的封闭图形构成矢量也全部组化。此外，将尚未组化的矢量的始点作为开始点，重复同样的处理。最后，在步骤S710中去掉的不需要的矢量之中，检出与在步骤S711中作为封闭图形组化的矢量接合的矢量并作为一个图形要素组化(步骤S712)。

通过以上的处理，就可以将图形块作为可个别再利用的个别的图形对象进行处理。

[变换到应用数据的变换处理]

图15为示出作为将一页大小的图像数据通过块选处理(步骤S1201)及矢量化处理(步骤S1209)变换的结果所得到的中间数据形式的文件的数据结构的图。如图15所示的数据形式，称为文档分析输出格式(DAOF)。就是说，图15是示出DAOF的数据结构的图。

在图15中，791是Header(首部)，保持有关处理对象的文档图像数据的信息。792是布局记述数据部，保持对文档图像数据中的TEXT(文字)、TITLE(标题)、CAPTION(图注)、LINEART(线条画)、PICTURE(自然图片)、FRAME(框)、TABLE(表)等的每个属性所识别的各块的属性信息和其矩形地址信息。

793是文字识别记述数据部，保持对TEXT、TITLE、CAPTION等TEXT块进行文字识别而得到的文字识别结果。794是表记述数据部，存储TABLE块的结构的详细情况。795是图像记述数据部，将PICTURE及LINEART等的块的图像数据从文档图像数据切出进行保持。

这种DAOF，不但保存中间数据，而且也有其本身进行文件化后被保存的情况，在这种文件的状态中，不能利用一般的文档生成应用程序对各个对象进行再利用。因此，下面从DAOF对变换为应用数据的变换处理(步骤S1210)进行详细说明。

图16为用来说明变换处理为应用数据的整体的概略步骤的流程图。首先，输入DAOF数据(步骤S800)。之后，进行成为应用数据的基础的文档结构树生成(步骤S802)。于是，基于生成的文档结构树，灌注DAOF的实数据，生成实际的应用数据(步骤S804)。

图17为用来说明文档结构树生成处理(步骤S802)的详细处理步骤的流程图。另外，图18为用来说明文档结构树的概要的示图。此外，作为整体控制的基本规则，处理的流程可以从微块(单一块)向宏块(块的聚合体)转移。另外，在以后的说明中，所谓的块，指的是微块及宏块全部。

首先，利用块单位以纵向的关联性为基础进行再组化(步骤S802a)。另外，紧接着起始后成为微块单位中的判定。此处，所谓的关联性，可以以定义为距离近、块宽度(在横向的场合为高度)大致相同。另外，距离、宽度、高度等的信息参照DAOF提取。

在图18中，18A表示实际的页结构，18B表示该文档结构树。步骤S802a的组化的结果，T3、T4、T5作为一个组V1，T6、T7作为一个组V2分别作为同一阶层的组生成。

之后检查有无纵向的隔离器生成(步骤S802b)。隔离器，比如，是在物理上在DOAF中保持行属性的对象。另外，作为理论上的意义，是在应用中以明示方式对块进行分割的要素。此处，在检出隔离器的场合，在同一阶层进行再分割。

之后，利用组长度判定在此之上分割是否不能存在(步骤S802c)。比如，判定纵向的分组长度是否是页高度。其结果，在纵向的组长度成为页高度的场合(Yes)，文档结构树生成结束。比如，在如图13所示的结构的场合，因为没有隔离器，组高度不是页高度，判定为No，就进入到步骤S802d。

在步骤S802d中，利用块单位以横向的关联性为基础进行再组化。但是，在这一再组化中紧接着起始后的第1个是以微块单位进行判定。并且，关联性及其判定信息的定义，与纵向的场合相同。比如，在图18的结构的场合，由T1和T2生成H1，由V1和V2生成H2，H1是作为在T1、T2的一个之上，H2是作为在V1、V2的一个之上的同一阶层的组生成。

之后检查有无横向的隔离器生成(步骤S802e)。在图18中，因为有S1，将其在树上登录，生成称为H1、S1、H2的阶层。于是，利用组长度判定在此之上分割是否不能存在(步骤S802f)。比如，判定横向的分组长度是否是页宽度。其结果，在横向的组长度成为页宽度的场合(Yes)，文档结构树生成结束。另一方面，在不是页宽度的场合(No)，就返回到步骤S802b，再次在上一阶层上，从纵向的关联性检查起重复进行。比如，在图18的结构中，因为分割宽度为页宽度，就在此结束，最后，将表示整个页的最上位阶层的V0附加到文档结构树。

在文档结构树完成之后，基于该信息，在步骤S804中，进行应用数据的生成。在图18的结构的场合，具体如下。

就是说，因为H1是在横向上有两个块T1、T2，是为两列，在输出T1的内部信息(参照DOAF的文字识别结果的文章及图像等)之后，改变列，输出T2的内部信息，之后输出S1。另外，因为H2是在横向上有两个块V1、V2，作为两列输出，V1按照T3、T4、T5的顺序输出其内部信息，之后改变列，输出V2的T6、T7的内部信息。利用以上的处理，就可以进行变换到应用数据的变换处理。

[指针信息的附加]

下面对在步骤S1215中示出的指针信息附加处理予以说明。在应该处理的文档是由检索处理确定的场合，或在利用矢量化原来的文件进行了再生的情况下，在将该文档进行记录处理的场合，通过在向纸张进行记录之际赋予指针信息，可以利用此文档在再次进行各种处理的场合简单地取得原来的文件数据。

图19为用来说明利用二维条码(QR码符号：JIS X0510)311对作为指针信息的数据文字串进行编码并附加到图像中的步骤的流程图。

插入到二维条码内的数据，表示存储对应文件的服务器地址信息，比如，由文件服务器名组成的路径信息构成，或者由对应服务器的URL及用来管理存储对应的文件的数据库105a、b内或MFP100本身具有的存储装置111的用户ID等构成。

首先，为了识别编码的各种不同的文字，对输入的数据串进行分析。另外，选择检错及纠错级别，选择可以收容输入数据的最小型号(步骤S900)。之后，将输入数据串变换为规定的位串，根据需要附加表示数据的模式(数字、英数字、8位字节、汉字等)的指示符及终端模式。此外，通过变换为规定的位码字进行数据的编码(步骤S901)。

此时，为进行纠错，将码字串根据型号及纠错级别分割为规定的块数，对每块分别生成纠错码字，附加于数据码字串之后(步骤S902)。此外，将在步骤S902中得到的各块的数据码字进行连接，将各块的纠错码字，并且根据需要，连接剩余码字来构筑消息(步骤S903)。

之后，在矩阵上与位置检出图形、分离图形、定时图形以及位置重合图形等一起配置码字模块(步骤S904)。此外，选择针对符号的编码区域为最优的掩码图形，针对步骤S904中得到的模块通过XOR运算进行掩码处理图形的变换(步骤S905)。最后，在步骤S905所得到的模块中生成形式信息及型号信息而使二维编码符号完成(步骤S906)。

上述插入服务器地址信息的二维条码，比如，在从客户PC102将电子文件作为印刷数据利用印刷装置112在纸张上形成记录图像时，在数据处理装置115内变换为可以记录的光栅数据之后，附加在光栅数据上的规定地点而形成图像。此处，分发形成图像的纸张的用户，通过由图像读出单元110读出，可以在上述步骤S1206中从指针信息适当检出存储原始电子文件的服务器的地点。

另外，以同样的目的赋予附加信息的方法，除了在本实施方式中说明的二维条码之外，比如，也可以应用将指针信息直接以文字串方式附加到文档的方法、对文档内的文字串，特别是文字和文字的间隔进行调制嵌入信息的方法、在文档中的中间色调图像中嵌入的方法等一般称为电子水印的方法。

<有关文件确定的另一实施例>

在上述实施例中，作为从扫描原稿得到的图像信息确定原来文件数据的方法，如利用图3的流程图所说明的，可以利用按文档中的指针信息的方法或按照文档中记载的各对象信息进行检索的方法中的任何一个，但为了更正确地确定原来的文件，可以同时使用两种方法。

就是说，从原稿中得到的指针信息检出原来文件的存在的情况下，还可以利用该文档中的原始信息对文件进行收缩检索。比如，在对于检出的文件进行按照布局信息的布局检索及经过文字识别的关键词的全文检索得到很高一致度的情况下，可以将检出的文件正式确定为原来的文件。因此，比如，对于指针信息的下位的部分含糊不清或即使是纠错也不能纠正的场合，由于可以通过收缩检索范围确定文件，就可以更高速地确定准确度更高的文件。

[矢量化的另一实施方式]

在上述实施方式中，在通过检索处理不能确定原来的文件的场合，对整个图像进行矢量化处理。然而，在一般文档的场合，文档中的对象，不仅有全新生成的场合，也有一部分对象从其他文件挪用而生成的场合。比如，一般是背景对象(壁纸)由文档生成软件预先准备几个图形，使用者从其中选择某一个使用。所以，这种对象，在文档文件数据库中的其他文档文件中存在的可能性很高，并且作为可以再利用的矢量数据存在的可能性很高。

所以，根据这种背景，作为图3的流程图的矢量化处理(步骤S1209)的另外的实施方式，对利用块选处理(步骤S1201)分割为个别的对象的各对象，以对象单位从数据库中检索部分地包含一致的对象的文件，从对于一致的对象检索的文件个别地以对象单位取得矢量数据。结果，不需要对整个文档矢量化，可以更高速地矢量化的同时，防止由于矢量化引起的画质劣化。

另一方面，在图3的流程图的检索处理(步骤S1206～S1208)中原来的文件作为PDF确定后，有时该PDF具有对该文档的文字对象将已经进行了文字识别的文字编码作为附加文件。在将这种PDF文件进行矢量化之际，通过使用文字编码，可以将步骤S1209以下的矢量化处理之中的文字识别处理省略。就是说，可以使矢量化处理更高速地执行。

[同一对象比较判断]

这一处理，每当对每页生成对象时，应该对与以前生成的对象的同一性进行比较。另外，在进行该比较处理之际，也可以是将由以前生成的(即矢量数据化的)对象(object)再现的对象(object)和对象的对象(object)进行比较的方法或将矢量数据化的对象(object)和对象的对象(object)矢量数据化的结果进行比较的方法中的某一个。

其结果，在判断为同一的场合，在属性信息中存储判断为同一的对象的ID。比如，在对象为PDL等的图像数据的场合，为使相同对象成为完全相同的数据，可以很简单地判定两者是否为同一。然而，通过对原稿进行扫描而得到的图像数据，即在接受的操作是接受外部的噪声及环境的变动的操作的图像数据的场合，即使是按照原样对两者进行比较的场合，也不一定将同一对象确实识别为同一对象。所以，在对各对象进行比较之际，要对颜色及大小等差分分量是否在某一程度的容许范围内等的同一性设定规定的范围。因此，对于成为比较对象的两个数据，比如，在进行过滤之后，将两者进行比较。

[文字信息重构处理]

图20为示出矢量化的代表对象的属性信息的一个例图。在图20中，由编号1及编号2表示的对象是矢量化的代表对象。图21为示出作为参照代表对象的对象的列表的文字信息链接表的一个例图。就是说，在图21中，示出对象21a～21c的对象参照以图20的编号1表示的代表对象。就是说，在文字信息重构处理中，在全部图像数据进行矢量化的时刻，图20所示的属性信息，链接文字信息的内容，生成图21所示的文字信息链接表。

[重构信息生成处理]

在寻求某一页的重构的场合，在图20所示的属性信息中提取所要求的页编号的列表。于是，对于属性信息是图像信息的数据的情况下，没有参照时从存储位置读出数据显示在从媒体读出的位置信息上，参照时从参照目标的对象ID的存储地址读出数据显示在从媒体读出的位置信息上。之后，读出具有文字信息的属性信息的对象，在从媒体读出的位置信息中显示进行重构。

[图像的变形]

比如，设想输入的原稿是公司内文档这样的一系列的文档，在各页上有公司的徽标的场合。于是，为了使这一文档为公司外的确定人员阅览，下面对在公司的徽标的后部添加“机密(CONFIDENTIAL)”这样的文字的处理的场合予以说明。

此处，成为对象的公司的徽标，通过上述的“同一对象比较判断”的处理，将一个代表对象矢量化，登录该数据使其在各页中反复参照。

因而，进行改变处理的操作员，只要将该存储地址中的徽标的代表对象改变为在该徽标的后部添加“机密(CONFIDENTIAL)”这样的文字的对象进行如上述[重构信息生成处理]中说明的重构就可以。

另外，在改变代表对象本身的场合，由于使原来的数据受损，只要新生成在代表对象徽标的后部添加“机密(CONFIDENTIAL)”这样的文字的对象，复制图20所示的属性信息改变参照目标就可以。这样，根据本发明，可以非常简单地进行上述的作业。

以下，以利用W3C劝告的XML基准的SVG为例，对利用上述的图像处理系统的具体的实施例予以说明，但本发明的应用并不特别限定于这一格式。

<实施例1>

最初的示例，是一个在对经过由输入的一张原稿或多张原稿组成的图像信息中所包含的同一对象或属性(变倍、颜色、取向、位置等等)变换而可以看作是同一的对象进行矢量数据化的过程中进行逐次检索，在操作画面上显示与代表对象的关联的示例。于是，在对每个对象指定代表对象的同时，对于与代表对象无关联的对象将该对象作为新的代表对象进行登录。

另外，此时，在需要进行属性变换时就进行指定。另外，对已经与代表对象建立关联的对象的关联进行改变。于是，将上述结果进行存储，将存储的结果进行印刷，在万一不能从参照的代表矢量化数据重构对象的场合，可将代表对象变倍使用。

[操作规范的详细内容]

《操作画面规范》

操作画面由显示装置和可以指定画面内的位置的输入装置构成，在以下所述的示例中，是由LCD及触摸屏构成的，但此外也可以由CRT和鼠标指针构成的装置构成。

《复制操作规范》

图22为示出用来进行复制操作的基本画面的图。另外，因为在本发明中实现的功能，通常多是设定在一层里面的操作，在本实施方式的操作画面的示例中，是汇总成为“应用模式”的一个操作。于是，在操作员按下在图22的所示的基本画面上显示的“应用模式”键221时，就显示图23所示的画面。

图23为示出列举显示在应用模式中包含的功能的应用模式显示画面的图。在示于图23的应用模式显示画面中，在操作员按下矢量化(Vectorize)键231时，就显示图24所示的画面。图24为示出用来执行矢量化处理功能的矢量化处理画面的示图。

于是，操作员通过按下在图24中所示的矢量化处理画面上显示的“读入开始”键241，使MFP100读出设置于图像读出单元110上的原稿。另外，在读出原稿后，生成XML基准的SVG文件，并将该文件存储于未图示的存储器区域。此处，图25为示出读出原稿生成的XML基准的SVG文件的一个例图。另外，与上述处理同时，根据操作单元的分辨率，读出这一文件，显示图26所示的画面。

图26为用于应用显示读出文件的本发明的特征画面，下面对该画面予以详细说明。

在图26中，作为读出的图像及其矢量化的结果，构成画面的要素(以后称其为“对象”)及其位置以矩形261表示。图像显示单元是压板图像。另外，使用扩大键262可以将显示图像扩大，在这种情况下，超过显示区域的部分的滚动可以通过点击滚动键263等使图像在上下方向上或左右方向上移动。

此外，通过操作页选择键264可以选择页，在选择了某一页时，显示该页的图像及矢量化结果。比如，在图26的例子中，显示使用ADF读入的9页原稿内的第1页。另外，作为显示的对象只是以矩形261显示的“Grap！”这一个徽标，剩余的部分作为背景显示。另外，关于背景，因为是提取构成图像的对象之后的剩余图像，不特别以矩形显示。

此处，对象的选择可以通过直接触摸矩形261内的对象等方式进行指定来选择。于是，比如，也可以改变将所选择的对象的矩形261以实线表示，非选择的对象以虚线表示等显示方法。由此，操作员对于对象是否被选择可以一目了然。此外，不仅以实线表示所选择的对象的矩形，而且对代表对象分配特定的颜色(比如，红色)。

另一方面，265是代表对象选择键，在矩形261内指定的对象与一些代表对象相关联时，表示与该对象的关联。具体言之，该代表对象选择键265在成为选择的选择状态的同时，该键内的中心的矩形显示也成为分配给代表对象的颜色(比如，红色)。此外，在对象关联键260之中，对所与选择的对象相关联的键(比如，“New Original”键266)进行选择显示。

下面对所选择的对象已经是代表对象的场合予以说明。在图26中，由于利用矩形261选择的“Grap！”这一徽标已经成为代表对象，只有“New Original”键266变成选择状态。

下面对所选择的对象还未成为与代表对象相关联的场合予以说明。就是说，在利用矩形261选择的“Grap！”这一徽标还未成为代表对象的场合，对于代表对象选择键265，在中心的矩形显示成为非选择状态的同时，矩形显示本身也成为通常的颜色(比如，黑色)。另外，与此同时，表示代表对象的矩形261也成为同色(比如黑色)。另外，对象关联键260也全部成为非选择显示。

下面对用来使不是代表对象的对象成为代表对象的操作进行说明。在图26显示的画面状态中，在操作员按下“New Original”键266时，就将现在选择的对象作为代表对象登录。由此，对登录的代表对象分配与各个代表对象相对应的颜色(比如，红色)，代表对象选择键265变成选择状态，该键内的矩形显示部分也变成与表示登录的代表对象的矩形261同色(比如，红色)。

下面，对于作为代表对象登录的对象，改变为不是代表对象的对象的处理予以说明。在图26所示的画面显示状态中，当再次按下“NewOriginal”键266时，“New Original”键266就变成非选择状态。由此，在对象关联键260全部变成非选择显示时，与代表对象的关联解除，代表对象选择键265的矩形显示变成非选择状态，将表示对象的矩形261作为原始对象对待，显示表示原始对象的通常的颜色(比如，黑色)的矩形。

另外，在要从代表对象改变为原始对象之际存在与该代表对象相关联的其他对象的场合，就显示图27所示的警告消息271，询问操作员是否继续操作。就是说，图27为示出在要从代表对象改变为原始对象之际显示的画面的一个例图。其中，在操作员按下“Cancel”键272时，就返回到图26所示的原来的画面状态。另一方面，在操作员按下“OK”键273时，就将该代表对象从代表对象列表中删除。

下面对在图26所示的状态的画面中可执行的其他处理予以说明。在图26所示的状态的画面中，当操作员按下“预览确认”键267时，就可以在预览区域中反映出包含与代表对象的关联，通过此前进行的操作图像成为了什么状态。另外，在预览显示中，选择显示“预览确认”键267。于是，操作员通过再次按下该键就可以返回到原来的对象显示，而“预览确认”键267变成为非选择状态。

下面对编辑结果的保存和取消予以说明。在图26所示的状态的画面显示中，当操作员按下“OK”键268时，该状态的结果作为文档保存。另一方面，当操作员按下“设定取消”键269时，就将该设定废弃而返回到图22所示的复制基本画面。

下面对与代表对象的关联显示予以说明。图28为示出在利用与图26相同的作业读入原稿的图像之中显示5/9页的部分的例图。在图26所示出的画面上显示的页中，包含四个对象的矩形281～284和一个背景。其中，对象的矩形281与图26所示的代表对象的矩形261相关联。于是，反映这一点，使代表对象选择键265的中心的矩形和矩形281的矩形，以分配给代表对象261的颜色(比如，红色)进行显示。另外，在对象关联键260中，“Change Size”、“Change Location”、“Change Direction”变成选择状态。

下面对在图28的画面中对改变与代表对象的关联的场合予以说明。首先，因为从图28所示的画面的状态，当操作员按下成为选择状态的“Change Location”键285改变为非选择状态，在按下“预览确认”键286时，虽然方向和尺寸改变，但位置还是代表对象的原状态，转移到图29所示的画面显示。就是说，图29是显示从图28的画面改变了代表对象的方向和尺寸时的状态的画面的图。

另外，当操作员同样按下成为选择状态的“Change Color”键287时，则可以显示未图示的彩色表，指定颜色。另外，在改变颜色的场合，“Change Color”键变成选择状态。

下面，对在图28的画面中，改变代表对象的场合予以说明。在图28所示的画面状态中，操作员，即使是利用代表对象选择键265改变关联代表对象，与由矩形261表示的与代表对象关联不改变，如图30所示，代表对象选择键301、对象关联键302的全部的键变成非选择状态。另外，代表对象选择键301的中心的矩形，变成分配给所选择的代表对象的颜色。就是说，图30为示出代表对象选择键及对象关联键的全部键为非选择状态的画面的图。

下面，在图30中，对解除与代表对象的关联并与其他代表对象建立关联的场合予以说明。在图30所示的画面的状态中，在已经于其中分配其他代表对象的场合，“New Original”键305成为不可选择的状态。在此状态下，在操作员按下对象选择键301的中心的矩形时，就解除与以图26的矩形261示出的代表对象的关联而建立与该代表对象的关联，并且代表对象的矩形303变更为分配给该代表对象的颜色，即对象选择键301的中心的颜色。与此同时，作为初始值“Just Same”键304成为选择状态。于是，在操作员在此状态下按下“预览确认”键时，就转移到图31所示的画面显示。就是说，图31为示出解除与代表对象的关联而与其他代表对象进行关联的场合的画面的一个例图。

下面对指定与新的代表对象的关联的场合予以说明。在图31所示的画面显示中，还想要改变大小时，操作员可按下“Change Size”键311。结果，转移到图32所示的画面。就是说，图32为示出用来在图31示出的画面显示中进一步改变大小的画面的一个例图。于是，在操作员利用与鼠标等连动的箭头图标321将矩形322拖放成为所要求的大小后，矩形322在实时状态下改变为图33所示的画面的矩形332，并且通过操作员在箭头图标331的位置停止拖放，如图34示出的画面的矩形341所示，可确定与矩形341的大小相应的大小的代表对象。就是说，图33为从图31的画面显示中操作员拖放箭头图标的状态的画面显示的图。另外，图34为利用箭头图标的拖放按照定出的矩形的大小代表对象被确定的图像显示的图。

下面对解除与代表对象的关联而产生新代表对象的场合予以说明。在图30所示的画面的状态下，在代表对象不能登录到该区域的场合，“NeW Original”键305为可按下状态。在该状态下，在操作员选择(按下)“New Original”键302时，登录新的代表对象，表示该代表对象的矩形303改变为对象选择键301的中心的颜色。

下面对解除与代表对象的关联的场合予以说明。在图28所示的画面的状态下，在按下处于对象选择键265的中心的选择状态的代表对象键时，此键变成非选择状态。由此，以矩形281表示的对象，解除与代表对象的关联，可以作为原始的对象对待。在此场合，包围该对象的矩形281改变为表示原始对象的颜色。

下面对由矢量数据重构对象的处理予以说明。图35为用来说明由矢量数据重构对象的场合的处理的流程图。

首先，从以描述语言描述的图像数据，读入有关对象的数据(步骤S3501)。于是，在该对象是原始对象的场合，由该矢量数据重构对象。就是说，判断该对象是否是原始对象(步骤S3502)，并且在不是原始对象，而是参照某个其他代表对象的场合(No)，就读入参照目标的矢量数据(步骤S3503)。

于是，通过读入参照目标的矢量数据判断是否存在参照目标的矢量数据(步骤S3504)，并且在存在的场合(Yes)，按照其属性描述，由该矢量数据重构对象(步骤S3505)。另一方面，在步骤S3505中判断为不能读入参照目标的矢量数据的场合(No)，准备代替对象的矢量数据(步骤S3507)。

在对在步骤S3505中读出的矢量数据进行重构之后，判断可否由参照目标的矢量数据重构对象(步骤S3506)。其结果为可以由代表矢量数据按照属性描述重构的场合(Yes)，就从该矢量数据重构对象(步骤S3508)。另一方面，在不能由参照目标的矢量数据按照属性描述重构的场合(No)，就准备代替对象的矢量数据(步骤S3507)，从该矢量数据重构对象(步骤S3508)。

<发送/传真操作规范>

图36为示出用来进行发送/传真的基本画面的示图。为利用本发明的功能，需要进行读入设定，可利用读入设定下拉工具进行设定。在操作员在图36所示的画面上按下读入设定下拉工具361时，如图37所示的画面，显示下拉工具371。就是说，图37为示出用来进行发送/传真的详细操作的画面的图。通过按下其中的详细设定键372，显示图38所示的输入设定详细画面。就是说，图38为示出读入设定详细画面的一个例图。于是，在操作员再在图38的画面上按下应用模式键381时，就显示图26所示的画面，以下可以进行与复制的操作规范同样的处理。

<箱框操作规范>

图39为示出箱框的基本画面的示图。在操作员在图39示出的画面中按下表示箱框00的键371后，显示图40所示画面。就是说，图40为示出用来显示存储于特定的用户箱框中的文档的画面的示图。当操作员按下图40示出的画面的原稿读入键401时，就显示原稿读入设定画面。另外，原稿读入设定画面，显示与发送/传真的操作规范同样的图38所示的画面。

在本实施例中，如图40所示，已经存储一个文档，当按下此文档的行402时，可以选择该文档。图41为示出选择图40的行402的场合的画面的示图。在图41中，行411示出选择图40的行402反转的情况。于是，在操作员选择行411的文档时，可以确认文档。另外，在操作员按下图像显示键412时，显示图26所示的画面，以下可以进行与复制的操作规范同样的处理。

同样地，在图41所示的状态中，在操作员按下印刷键413后，就显示图42所示的画面，可以进行印刷设定。就是说，图42为示出用来进行印刷设定的画面的示图。于是，在操作员于此处按下应用模式键421时，显示图26，以下可以进行与复制的操作规范同样的处理。

<实施例2>

下面对第2个实施例予以说明。另外，下面只对与上述实施例1的不同之处予以说明。另外，在本实施例中，根据从其他取得参照的代表对象不能不是代表对象的这一条件，对进行停止代表对象的这一操作的场合予以说明。

在图26示出的画面的状态中，在操作员按下“New Original”键266后，“New Original”键266就变成非选择状态。这样，在对象关联键260全部变成非选择显示后，与代表对象的关联解除，代表对象选择键265中心的矩形显示变成非选择状态。由此，在矩形261中表示的对象作为原始对象处理，该矩形261显示表示原始对象的黑色。另外，与此同时表示原始选择键266的中心选择的对象的矩形也变成同色(黑色)。

但是，在与该代表对象相关联的对象存在的场合，显示如图43所示的消息。就是说，图43为示出利用其他对象进行参照的代表对象要解除代表对象时显示的警告的画面的图。此处，在操作员按下“OK”键431时，在返回到图26的画面的状态的同时，不从代表对象列表中删除。

<其他实施方式>

以上对实施方式进行了详细描述，本发明，比如，可以是采用由系统、装置、方法、程序或存储媒体等构成的实施方式，具体言之，既可以适用于由多个机器构成的系统，并且也可以适用于由一个机器构成的装置。

另外，本发明也包含将实现上述实施方式功能的软件的程序(在实施方式中与图示的流程图相对应的程序)直接或远距供给系统或装置，并由该系统或装置的计算机将该供给的程序代码读出执行而达成的场合。

所以，由于本发明的功能处理利用计算机来实现，所以安装于该计算机中的程序代码本身也是实现本发明的工具。就是说，本发明，也包含用于实现本发明的功能处理的计算机程序本身。

在此场合，只要具有程序的功能，即使是目标代码、利用解释程序执行的程序、供给OS的脚本数据等形式也可以。

作为用来供给程序的记录媒体，比如，有软盘(注册商标)、硬盘、光盘、磁光盘、MO、CD-ROM、CD-R、CD-RW、磁带、非易失性存储卡、ROM、DVD(DVD-ROM、DVD-R)等等。

此外，作为程序供给方法，也可以利用客户计算机的浏览器连接到因特网的主页，从该主页将本发明的计算机程序本身或包含压缩的自动安装功能的文件下载到硬盘等记录媒体上而供给。另外，将构成本发明的程序的程序代码分割为多个文件，通过从不同的主页下载各个程序也可以实现。就是说，使用于利用计算机实现本发明的功能处理的程序文件对多个用户下载的WWW服务器也包含于本发明之中。

另外，将本发明的程序加密存储于CD-ROM等存储媒体中分送给用户，对于通过规定的条件的用户，也可以经因特网从主页下载解密的密钥信息，使用该密钥信息执行经过加密的程序而安装于计算机中。

另外，计算机，通过执行读出的程序，除了实现上述实施方式的功能之外，还可以根据该程序的指示，使在计算机系统上运行的OS等进行实际处理的一部分或全部，利用该处理也可以实现上述实施方式的功能。

此外，从记录媒体读出的程序，在写入到插入到计算机中的功能扩展板及与计算机相连接的功能扩展单元中设置的存储器之后，根据该程序的指示，由设置于该功能扩展板及功能扩展单元中的CPU等进行实际的处理的一部分或全部，藉助该处理也可实现上述的实施方式的功能。

根据本发明，通过对代表性的对象将全部数据矢量化，对与其同一或类似的对象参照矢量化的代表性的对象及利用其差分数据，可以在促进利用存储器的效率的同时，通过对代表对象进行编辑，可以将与其同一或类似的对象进行一揽子变换。

就是说，在将原稿作为图像信息保持之际，通过对图像内的全部对象以一定的基准进行比对而判定是否是同一，对可能判定为同一的对象只存储代表性的对象的矢量数据，对其他对象示出对该对象的参照，在存在与代表性的对象的差别的场合，以描述语言表现该差分。由此，在改善存储器效率的同时，也可以通过在编辑之际本质上同一的对象对代表性的对象进行编辑将全部对象进行一揽子变换。

Claims (24)

1.一种图像处理系统，其特征在于包括：

输入图像信息的输入装置；

将上述图像信息进行矢量化的矢量化装置；

将包含于上述图像信息中的第1对象的矢量数据进行存储的第1存储装置；

判定包含于上述图像信息中的第2对象和上述第1对象的同一性的判定装置；以及

在上述第1及第2对象中存在同一性时，代替该第2对象的矢量数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息进行存储的第2存储装置。

2.如权利要求1所述的图像处理系统，其特征在于：

上述第2存储装置还将上述第1及第2对象的差分信息与上述属性信息相关联地进行存储。

3.如权利要求1所述的图像处理系统，其特征在于：

上述判定装置基于由存储于上述第1存储装置中的上述第1对象的矢量数据再现的对象和上述第2对象的比较结果判定上述第1及第2对象的同一性。

4.如权利要求3所述的图像处理系统，其特征在于：

上述判定装置基于上述再现的对象和上述第2对象的比较结果判定两者的差分分量是否在规定的范围内。

5.如权利要求1所述的图像处理系统，其特征在于：

上述判定装置基于存储于上述第1存储装置中的上述第1对象的矢量数据和上述第2对象的矢量数据的比较结果判定上述第1及第2对象的同一性。

6.如权利要求5所述的图像处理系统，其特征在于：

上述判定装置基于上述第1对象的矢量数据和上述第2对象的矢量数据的比较结果判定两者的差分分量是否在规定的范围内。

7.如权利要求4所述的图像处理系统，其特征在于还包括：

将上述第2对象在画面上显示的显示装置；

从上述画面上接受操作员的指示的接受装置，其中

上述判定装置基于由上述接受装置所接受的上述操作员的指示，判定上述第2对象和上述再现的对象的同一性。

8.如权利要求7所述的图像处理系统，其特征在于：

上述显示装置，将作为一对象化单位的上述第2对象用矩形图形包围并显示于上述画面上。

9.如权利要求7所述的图像处理系统，其特征在于：

上述显示装置可以将上述第2对象和上述再现的对象进行置换显示于上述画面上。

10.如权利要求8所述的图像处理系统，其特征在于还包括：

将利用上述显示装置在上述画面上以矩形进行显示的上述第2对象作为新对象进行登录的登录装置。

11.如权利要求4所述的图像处理系统，其特征在于：

上述判定装置在上述再现的对象和上述第2对象进行比较之际将两数据进行过滤之后进行比较。

12.如权利要求2所述的图像处理系统，其特征在于：

上述差分信息是涉及为了成为与上述第1对象同一的上述第2对象的变倍率、颜色种类、取向或位置中的至少任意一个属性的信息。

13.如权利要求1所述的图像处理系统，其特征在于：

上述判定装置在由上述矢量化装置对上述图像信息进行矢量数据化的过程中，判定上述第2对象与上述第1对象是否同一对象。

14.如权利要求1所述的图像处理系统，其特征在于还包括：

为了使对象化单位得以了解将矢量数据化的图像信息进行画面显示的显示装置；以及

指定利用上述显示装置进行画面显示的对象而判断为同一对象，并将其一个作为代表矢量数据的指定装置。

15.如权利要求4所述的图像处理系统，其特征在于还包括：

指定上述再现的对象和上述第2对象为满足同一性的上述差分分量的范围的指定装置。

16.如权利要求1所述的图像处理系统，其特征在于还包括：

变更存储于上述第2存储装置中的参照目标的变更装置。

17.如权利要求15所述的图像处理系统，其特征在于：

上述变更装置在解除对上述第1对象的参照时，上述第2存储装置存储上述第2对象的矢量数据。

18.一种图像处理系统，其特征在于包括：

对于存在具有同一性的多个对象的图像信息，存储成为代表的第1对象的矢量数据的第1存储装置；

作为在和上述第1对象之间具有同一性的第2对象的数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息和与上述第1对象的差分信息进行存储的第2存储装置；

在重构上述图像信息之际，从存储于上述第1存储装置中的上述矢量数据重构上述第1对象的第1重构装置；以及

在重构上述图像信息之际，从存储于上述第2存储装置中所存储的上述属性信息参照第1对象，利用关于该第1对象的矢量数据和上述差分信息，重构上述第2对象的第2重构装置。

19.如权利要求18所述的图像处理系统，其特征在于：

上述第2重构装置，在不能从作为参照目标的上述第1对象的矢量数据重构上述第2对象时，使用代替对象的矢量数据重构该第2对象。

20.如权利要求19所述的图像处理系统，其特征在于：

将使用代替对象的意思的通知进行弹出显示。

21.如权利要求18所述的图像处理系统，其特征在于还包括：

对于从其他对象所参照的对象进行解除参照的解除装置；以及

在利用上述解除装置解除参照目标之际，提示警告消息的提示装置。

22.如权利要求21所述的图像处理系统，其特征在于还包括：

对于从其他对象所参照的对象进行禁止解除参照的解除的禁止装置。

23.一种图像处理方法，其特征在于包括：

输入图像信息的输入工序；

将上述图像信息进行矢量化的矢量化工序；

将包含于上述图像信息中的第1对象的矢量数据存储于存储装置的第1存储工序；

判定包含于上述图像信息中的第2对象和上述第1对象的同一性的判定工序；以及

在上述第1及第2对象中存在同一性时，代替该第2对象的矢量数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息进行存储的第2存储工序。

24.一种图像处理方法，是一种

对于存在具有同一性的多个对象的图像信息，存储成为代表的第1对象的矢量数据的第1存储装置；

作为在和上述第1对象之间具有同一性的第2对象的数据，将包含有关对上述第1对象的矢量数据的参照目标的信息的属性信息和与上述第1对象的差分信息进行存储的第2存储装置的图像处理系统的图像处理方法；

其特征在于包括：

在重构上述图像信息之际，从存储于上述第1存储装置中的上述矢量数据重构上述第1对象的第1重构工序；

在重构上述图像信息之际，从存储于上述第2存储装置中所存储的上述属性信息参照第1对象，利用关于该第1对象的矢量数据和上述差分信息，重构上述第2对象的第2重构工序。

Images