CN1116390A - 压缩音频/视频信号接收机的静噪装置 - Google Patents
压缩音频/视频信号接收机的静噪装置 Download PDFInfo
- Publication number
- CN1116390A CN1116390A CN95104856A CN95104856A CN1116390A CN 1116390 A CN1116390 A CN 1116390A CN 95104856 A CN95104856 A CN 95104856A CN 95104856 A CN95104856 A CN 95104856A CN 1116390 A CN1116390 A CN 1116390A
- Authority
- CN
- China
- Prior art keywords
- signal
- audio
- video
- decompress
- ion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4396—Processing of audio elementary streams by muting the audio signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
- H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
- H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
- H04N7/56—Synchronising systems therefor
Abstract
一个压缩音频/视频(A/V)接收机提供与重放相关的解压分量信号一致的A/V分量时间基准信号(PTS)(208、212、214、220、222)。同步装置产生一个出现音频和视频分量PTS的差的函数(217-291)。表示相关音频和视频同步状态的该函数与预定的阈值(225)进行比较,当超过阈值时产生一个静噪控制信号。静噪电路(229)对控制信号作出响应,当重放的音频和视频分量信号不同步时,静噪电路禁止音频重放。
Description
本发明涉及压缩音频/视频(A/V)信号接收机中的音频和/或视频分量的静噪控制的装置。
MPEG是由国际标准组织的电影专家组建立的压缩视频信号协议。该协议确定了一种通用信号格式,它包括帧内编码和运动补偿预测编码。由于帧与帧编码格式的变化以及图象内容的变化,所以不同的帧具有非常分散的压缩数据量。压缩具有不同数据量等的不同的帧的结果是数据帧趋向于异步传输。
也可以根据MPEG协议压缩音频信号。压缩的音频信号可以与视频信号相关联,但是独立传输。为了传输,压缩的音频信号被分成包,然后这些包以与压缩的视频信号非同步的方式被进行分时多路复用。
相关的压缩音频和视频分量不仅是独立异步的,而且在传输过程中不存在相互的暂时关系或同步性。
MPEG压缩音频和视频分量信号可以包括出现时间标记(PTS)以便在特定的压缩信号段和系统基准时钟信号之间建立一个基准。接收机装置用音频和视频PTS使各个减压分量再次同步,并恢复它们暂时的相互关系。
重放的A/V材料的一个特别烦人的特点是嘴唇同步的损失,这是指嘴唇或嘴的动作与相关的说话或话音之间的同步的损失。本发明的一个目的是消除嘴唇同步的损失所带来的烦恼。
根据本发明的A/V接收机提供与相关的解压分量信号的重放吻合的A/V分量时序基准信号(PTS)。同步装置产生出现分量音频和视频PTS的差的函数。表示相关的音频和视频同步的这一函数与一个预定的阈值进行比较,当超过阈值时,产生一个静噪控制信号。当重放的音频和视频分量信号时序偏离相互同步时,静噪电路对控制信号作出响应,禁止音频重放。
图1是音频/视频压缩装置的框图。
图2是体现本发明的音频/视频解压装置的框图。
图3是提供接收机系统时钟信号的装置的框图,该时钟信号具有与压缩装置的系统时钟基本相同的频率。
图4是图2装置的操作流程图。
图5是可以在图2中实施的另一个静噪电路的框图。
图1表示一个可以实现本发明的典型的系统,该系统是一个压缩数字视频信号传输装置。在该系统中,来自源10的视频信号施加到视频信号压缩部件11,它可以包括一个利用离散的余弦变换的运动补偿预测编码器。来自部件11的压缩视频信号送入格式器12。格式器根据某些信号协议如MPEG(由国际标准化组织(Organization Inter-nationale De Normalisation)开发的标准)安排压缩的视频信号和其它辅助数据。标准化的信号被施加到传输处理器13,为了传输的目的,该处理器将信号分成数据包,并增加某些辅助以抗噪声。一般以非均匀的速率出现的传输包被送入速率缓冲器14,该缓冲器以相对恒定的速率提供输出数据,以便有效地利用带宽较窄的传输信道。经缓冲的数据被送至调制解调器15,该调制解调器进行信号传输。
系统时钟22提供时钟信号,使至少包括传输处理器的大部分装置运行。该时钟将工作在一个固定的频率下,例如27MHz。然而如此处所示,它用来产生时序信息。系统时钟与计数器23的时钟输入端相连,计数器23例如可以是以模230计数。计数器输出的计数值送至两个锁存器24和25。锁存器24由视频源使之满足条件,在各帧的间隔锁存计数值。这些计数值表示出现时间标记PTS,并通过格式器12包含在压缩视频信号流中,接收器利用这些计数值提供相关的音频和视频信息的嘴唇同步。锁存器25由传输处理器13(或系统控制器21)使之满足条件,根据预定的方案锁存计数值。这些计数值表示系统时钟基准SCR,并作为辅助数据嵌入各个辅助传输包着中。
来自源10的与视频信号相关的音频信号被施加到音频信号压缩器18。压缩器18提供帧取样脉冲(独立于视频帧),以便控制锁存器19。锁存器19对取样脉冲作出相应,接收由计数器23提供的计数值。这些被锁存的值对应于音频出现时间标记PTSaud。PTSaud被包含进由压缩器18提供的压缩音频信号中。压缩的音频信号被施加到传输处理器17,为了传输的目的,该处理器将信号分成数据包,并增加某些辅助操作以抗噪声。由处理器17提供的音频传输数据包送至多路开关选择器16,它对音频和视频传输包进行分时多路复用。在图中,分开的传输处理器示于音频和视频信号处理通道中。对数据速率中等的系统而言,两个传输处理器和多路开关选择器16的功能可以包含进单个传输处理器中。
系统控制器21是一个被编程以便与各种处理部件协调的可变状态的装置。注意只要在处理部件之间提供适当的信号交换,就可以通过共同的时钟装置,使控制器21、压缩器11和18、传输处理器13和17、以及速率缓冲器14可以或可以不同步操作。然而,两个压缩器都驱动来自同一基准计数器23的PTS值,于是在压缩输出信号中形成了两个压缩信号之间的精确的时序关系。
图2表示体现本发明的一个示范性接收机装置,其中调制解调器200执行调制解调器15的相反功能,速率缓冲器206实际上执行速率缓冲器14的相反功能。反向传输处理器202通过服务将各个传输包分开,并在速率缓冲器206的不同存储器块中分配各个包有效部分。这样做以后各个传输包信号的有效部分与辅助数据分开,辅助数据送至控制器210。在另一结构中,分开的传输处理器可以包括在每个处理通道中,并安排来识别和处理只与各个通道相关的数据。
来自速率缓冲器206的压缩视频数据进入视频解压器214。速率缓中器206接收速率不一致的压缩视频数据,并根据请求向解压器214提供数据。解压器对压缩视频信号作出响应,产生用于在适合的显示器或存储设备(未示出)中显示或存储等的非压缩视频信号。
来自反向传输处理器202的压缩音频数据送至速率缓冲器206,该缓冲器根据系统协议向音频解压器212提供压缩音频信号。解压器212对压缩音频信号作出响应,产生用于在适合的扬声器或存储设备(未示出)中重放或存储等的非压缩音频信号。
反向处理器202也向系统时钟发生器208提供来自辅助传输数据的SCR和控制信号。时钟发生器对这些信号作出响应,产生与至少传输处理器操作同步的系统时钟信号。系统时钟信号送至接收机系统控制器210,以控制适当处理部件的时序。
图3表示一个示范性时钟发生器208的细节。来自接收机调制解调器200的数据送至包括辅助包检测器31的反向传输处理器202’。反向传输处理器202’将传输首标数据从各个传输包有效部分中分离出来。处理器202’对传输首标数据作出响应,多路分配所要求的相关音频和视频节目分量的有效部分和相关辅助数据的有效部分。音频视频和辅助有效部分被写入速率缓冲器208的分开的存储器块中。各个存储器块中的每一个都作为先入先出存储器或FIFO运行,当从调制解调器中得到数据时便写数据,而当相应的分量信号处理器(未示出)请求数据时便读数据。存在于特定辅助包中的SCR被选择路径存入存储器部件34中。
辅助包检测器31可以是一个匹配滤波器,它用来识别表示包括SCR的辅助传输包的代码字,在包括这种数据的传输包出现时产生一个控制脉冲。该控制脉冲用来获取在准确地与检测时间有关的时间由局部计数器36当前显示的计数值,并将其存储在锁存器35中。局部计数器36用来对电压控制振荡器37提供的脉冲进行计数。计数器36是以模M计数的,它可以(但不是必需)和译码器中的相应的计数器(计数器23)的模数相等。如果M不同于N,那么其差值可以包含在误差等式中。
电压控制振荡器37受由时钟控制器39提供的经低通滤波器38滤波的误差信号的控制。误差信号以下述方式产生。将在时间n到达的SCR表示为SCRn,将在锁存器35中同时获取的局部计数值表示为LCRn。时钟控制器读SCR和LCR的连续值,并形成正比于差值的误差信号E
E|SCRn-SCRn-1|-|LCRn-LCRn-1|用误差信号E使电压控制振荡器37的频率趋向于等于该差值。如前所述,由于包含模计数器引起的负误差可以忽略。由时钟控制器39产生的误差信号可以是脉宽调制信号,它可以利用模拟部件中的低通滤波器38变成一个模拟误差信号。
本系统的限制是系统两端的计数器对相同的频率或者甚至它们的倍数计数。这就需要电压控制振荡器的标称频率非常接近编码器的系统时钟的频率。
上述方法提供了相当快的同步,但是可能引起长时间的误差。长时间误差LTE正比于差值
LTE|LCRn-LCRO|-|SCRn-SCRO|此处SCRo和KCRo例如是第一次出现的SCR和相应的接收机计数器中的锁存值。名义上误差信号E和LTE在分散的步骤中将发生变化。这样,一旦系统“被同步”,误差信号将在零点附近变动一个单位。较好的同步方法是用误差信号E启动对电压控制振荡器的控制,直到误差信号E中出现一个单位的变动,然后转换到用长时间误差信号LTE来控制电压控制振荡器。
可以用VCXO37提供的系统时钟信号操作至少传输处理器和速率缓冲器。由于它在频率上至少与译码器系统时钟同步,所以由于时钟时序误差引起的速率缓冲器的上溢或下溢基本不存在。
再次参照图2描述音频/视频同步。回忆一下出现时间标记PTSvid是包括在与预定视频数据相关的压缩视频信号中的。PTSvid表示将要显示的相关视频的有关时间。类似地,压缩音频信号包括出现时间标记PTSaud,它与将在与各个PTSaud有关的时间重放的音频相关。由于各个取样是在不同的时刻确定的,所以在接收机PTSaud和PTSvid可以不直接进行比较,以提供A/V同步。各个PTS值与连续的时基进行比较,该时基是由VCXO37提供的接收机的时钟。这是通过对系统时钟208产生的局部计数值LCR取样实现的,以便获取局部时间标记。
当与相关的PTS相关的数据出现时,对LCR进行取样。例如,当输出各个音频帧以便重放时,音频解压器212发出一个PTSaud。在这些时间,控制信号使锁存器220对LCR进行取样,其值将表示为LAS作为局部音频标记。类似地,当视频解压器提供一个视频帧以便显示时,它提供一个PTSvid和一个控制脉冲,使锁存器222存储LCR的当前值。这些LCR值表示为LVS作为局部视频标记。
LAS和相应的PTSaud被送至减法器218的各个输入端,减法器218根据以下关系式产生信号ΔA-PTS:
ΔA-PTS=PTSaud-LASLVS和相应的PTSvid被送至减法器217的各个输入端,减法器217根据以下关系式产生信号ΔV-PTS:
ΔV-PTS=PTSvid-LVS信号ΔV-PTS和ΔA-PTS被送入下一个减法器219的各个输入端,减法器219根据以下关系式产生A/V同步误差信号ERRPTS:
ERRPTS=ΔV-PTS-ΔA-PTS音频和视频的同步需要A/V同步误差变为零。于是,当相应的音频和视频PTS的值之差等于相应的PTS出现之间的以局部基准为单位的时间,音频和视频信号将同步。
可以采用两种机制来基于误差信号ERRPTS调整A/V同步:跳跃和重复数据部分以及转变时钟偏差。跳跃音频的固定的间隔或“帧”使音频数据流相对于视频信号提前了一个固定的间隔。重复(或不用数据情况下的静噪)使音频数据流相对于视频信号延迟了固定的间隔。跳跃和重复音频帧在许多情况下是听得见的,因此只能用于同步的粗调。即使如此,对可觉察的音频/视频同步误差来说,简短的跳跃或重复可以是较好的。如果音频帧小于40毫秒,那么通过跳跃/重复的粗调导致同步误差在±20毫秒内,这是在A/V同步的工业标准以内。然而,如果音频转变时基与源的时基不匹配,那么这种同步将变差。一旦粗略地调整了同步,安排音频转变时钟频率的变化来进一步改善A/V同步。
误差信号ERRPTS施加至滤波器和处理部件216。此处滤波器的功能是使信号ERRPTS变得平滑,最大限度地减小另外也可由信号噪声产生的异常影响。然后运用部件216中的处理功能检验变得平滑的误差信号,确定是否应采用音频的跳跃/重复来进行音频和视频信号的同步粗调,和/或是否应对音频处理的频率进行调整,从而实现同步细调。如果确定必须进行同步粗调,那么处理器216向音频解压器212提供一个控制信号(S/R),使解压器跳跃或重复当前的解压音频帧。另外,或除了粗调,如果确定必须进行同步细调,那么处理器216向音频时基215提供一个控制信号,调整音频处理时钟信号的频率。
图4的流程图详细地示出了处理规则。系统在标以开始的400启动后,系统在401监测音频解压器是否出现PTSaud,如果检测到PTSaud,那么在403被读出,并且获取和存储局部时钟基准LAS。如果没有出现PTSaud,那么系统在402监测视频解压器是否出现PTSvid。如果出现PTSvid,那么读PTSvid,并且获取和存储局部时钟基准LVS。如果PTSaud和PTSvid都已经读出,那么根据下式在405计算ERRPTS:
ERRPTS=ΔV-PTS-ΔA-PTS在406检验误差信号的幅度是否大于音频帧周期的一半。如果它大于音频帧周期的一半,那么在407检验误差信号的极性。如果极性为正,那么在409重复当前的音频帧。如果极性为负,那么在408跳跃当前的音频帧。跳跃或重复帧以后,系统返回到开始位置,等待下一次出现PTS。
在步骤406,如果误差信号的幅度小于音频帧周期的一半,那么在410检验误差确定它是否大于零。如果误差大于零,那么在412检验误差,确定它是否小于前一个误差信号。如果小于前一个误差信号,则表示系统正趋于同步,并且不改变同步控制参数。系统返回到开始位置,等待下一次出现PTS。相反,如果误差超过前一个误差信号,那么在414调整音频系统处理时钟减小其频率。
在步骤410,如果误差小于零(负),那么在411确定它是否大于前一个误差信号。如果大于前一个误差信号,则同样表示系统正趋于同步,并且不改变同步控制参数。另外,如果当前误差信号小于前一个误差信号,那么系统进一步脱离频率,并在413增大音频处理时钟频率。处理步骤411和413之后,系统返回,等待下一次出现PTS。在本例中应注意的是,系统通过跳跃或重复音频帧只进行粗调,直到A/V同步误差减小到小于音频帧周期的一半。
在另一实施例中,经滤波的误差信号与和各个音频帧的大小有关的预定的阈值进行比较。如果误差信号小于阈值,则表示音频—视频时间误差小于一音频帧,误差信号送至音频时基电路215,其中用它来调整音频信号处理(解压)时钟的频率。另外,如果误差信号大于阈值,那么可以通过音频帧周期来除误差信号,确定音频和视频信号未对准的音频帧的数目。商的整数部分送入音频解压器,使音频解压器跳跃或重复那个数的音频帧。误差信号的极性将确定是否音频帧将跳过或重复。名义上压缩数据在被解码之前就放在一个缓冲器存储器中,因此通过控制允许存储器读/写的命令,就能简单地跳跃或重复音频帧。
商的小数部分送入音频时基电路215,用它调整音频处理时钟,对A/V同步进行精细调整。
音频PTS的产生率与音频解压器的处理速度成正比。音频解压器的处理速度直接与用来操作音频解压器的时钟信号频率成正比。如果音频解压器的时钟频率与用来操作视频解压器的时钟无关,并且可细调,那么音频和视频PTS出现的相关速率便可调,并且A/V是准确同步的。
解压音频信号送至数/模转换器(DAC)227。来自DAC227的模拟输出信号再通过电阻器228送至模拟处理电路(未示出)。静噪晶体管229的导电通路连接在电阻器228和地电位之间。晶体管的控制电极与阈值检测器225的输出端相连。大于Vbe的正控制电压使得晶体管229将来自DAC227的音频输出信号箝位在地电位,从而对音频信号静噪。
一般压缩的音频信号将包括多个分量,如左声道信号、右声道信号,等。为了简化起见,图2只示出了一个音频输出,然而每个音频通道将包括一个由公共静噪控制信号控制的静噪电路。
对音频信号静噪出于各种原因,不单是嘴唇同步的丧失。本装置的独特性在于它是基于嘴唇误差进行静噪的。
观众可以注意到-20ms或+40ms的嘴唇同步误差。在所示的示范性系统中,如果嘴唇同步误差超过大约13ms时就对音频静噪。选择13ms的阈值,它小于20ms但大于MPEG1,层II音频帧(它是24ms)的一半。选择阈值略大于音频帧的一半是因为用A/V同步帧跳跃和重复,在半帧(12ms)初始的同步状态是可能的,而大约12ms或小于12ms的阈值将导致同步,但对音频静噪。此外,等于帧一半的阈值由于计算的嘴唇同步误差中的较小的波动将产生间歇静噪,而嘴唇同步误差中较小的波动是由于时钟和PTS的选通脉冲取样不确定的缘故。
静噪控制信号是由阈值检测器225产生的,该检测器监测从减法器219得到的A/V同步误差信号。当误差信号超过对应于13ms的值时,产生静噪控制值。为了使噪声或其它脉动条件不能引起产生错误的静噪信号,在来自减法器219的误差信号进入阈值检测器225之前可以对其进行低通滤波。
从检测器225发出并在DAC227和音频解压器212终止的虚线箭头表示另外的静噪可能性。例如,可以设计静噪控制信号来禁止DAC227的输出或解压器212的输出。在任一种情况下,禁止功能将使得各个处理部件输出一个信号,其幅度值为输出信号动态范围的一半。图2的电路也表示通过视频DAC224的控制可以进行视频静噪(或消隐)。
图5表示另一个静噪电路。在本实施例中,由滤波器216产生的跳跃/重复(S/R)信号用作主静噪控制。该信号通过或门230送至静噪电路。如果在特定的系统中,用来调整音频时基的精细控制跨越包括至少一个音频帧的一半的范围,那么可以将阈值检测器231包括进来监测音频时基精细控制信号,并产生辅助静噪控制信号。该辅助控制信号也通过或门230送至静噪电路。
图5的装置表示另一个可能的静噪电路,包括与门226,用于有选择地将来自解压器212的解压音频信号送至DAC227。名义上音频信号是双极性(AC)的,并在零值上下波动。当处于非耦合状态时,与门按要求输出零值,它是信号动态范围的中点。
最近研制出了压缩A/V直接广播卫星系统,其中多个分成包的节目是分时多路复用的,并通过一个转发器传输。特定的节目包括仅一个音频信号,避免了嘴唇同步问题。然而,如果系统时钟未同步,不希望的音频可能被重放。因此,可以包括另一个阈值检测器232来监测由图3所示的时钟控制器39产生的误差信号。当由控制器产生的误差信号表示频率偏离锁定状态例如0.2时,阈值检测器232产生一个静噪控制信号。该静噪控制信号送至或门230进行音频静噪,直到系统时钟基本与相应的编码系统时钟同步。类似地,可以连接检测装置来测量音频时基215的频率偏移,以便产生在门电路230中经过或逻辑运算的另一个静噪信号。
Claims (10)
1.在处理压缩音频/视频信号的一种接收机中,装置的特征在于:
提供所述压缩音频/视频信号的检测器(200,202,206);
对所述压缩音频/视频信号作出响应,提供解压音频信号的音频解压器(212);
对所述压缩音频/视频信号作出响应,提供解压视频信号的视频解压器(214);
产生误差信号的检测装置(217—219),该误差信号表示相关的解压音频信号和解压的视频信号的非同步的程度;以及
当所述误差信号超过一个预定的阈值(225)时对所述解压音频信号静噪的静噪装置(229)。
2.权利要求1所述的装置,其特征在于所述静噪装置包括:
对所述误差信号作出响应的阈值检测器,当所述误差信号分别大于和小于所述预定的阈值时,所述阈值检测器产生一个具有第一和第二状态的控制信号;以及
对所述控制信号作出响应的信号箝位装置,当所述控制信号呈现所述第二状态时,所述箝位装置使所述解压音频信号通过,当所述控制信号呈现所述第一状态时,所述箝位装置为所述解压音频信号提供一个替换值。
3.权利要求2所述的装置,其特征在于所述箝位装置包括相连的数/模转换器,用于接收所述解压音频信号。
4.权利要求2所述的装置,其特征在于所述箝位装置包括相连的与门,用于接收所述解压音频信号,并具有一个与所述阈值检测器相连的允许输入端。
5.权利要求2所述的装置,进一步的特征在于:
对所述压缩音频/视频信号作出响应的同步电路,用于产生系统时钟信号,该系统时钟信号与用于产生所述压缩音频/视频信号的编码器系统时钟信号有预定的关系,并包括提供另一个误差信号的检测器,该误差信号表示所述系统时钟信号的非同步的程度;
对所述另一个误差信号作出响应的另一个阈值检测器,当所述另一个误差信号分别大于和小于所述另一个预定的阈值时,所述另一个阈值检测器产生一个具有第一和第二状态的控制信号;以及
将来自所述阈值检测器和另一个阈值检测器的所述控制信号进行组合的或门电路。
6.权利要求1所述的装置,其特征在于产生误差信号的所述检测装置是一个嘴唇同步检测器。
7.权利要求1所述的装置,其特征在于所述音频/视频信号的音频和视频分量包括在预定的时间确定并与一个编码器系统时钟有关的各个时间标记PTSaud和PTSvid,并且所述音频和视频解压器提供与解压音频和视频信号关联的所述时间标记PTSaud和PTSvid,并且产生所述误差信号的所属检测装置包括:
一个局部时钟信号源;
在所述局部时钟信号的周期确定相应的时间标记PTSaud和PTSvid出现之间的时间T的装置;
计算相应的时间标记PTSaud和PTSvid的值之间的差,并将该差值与所述时间T进行比较,以便产生一个A/V同步控制信号的装置;以及
当所述A/V同步控制信号超过一个预定值时产生所述误差信号的阈值检测器。
8.权利要求7所述的装置,其中所述各个解压装置在预定的间隔对音频信号解压,并且所述装置的进一步的特征在于:
对所述A/V同步控制信号作出响应、使解压的音频和视频信号同步的装置,并包括产生使所述音频解压器跳跃或重复预定次数的所述音频信号的另一个控制信号的装置;以及
对所述另一个控制信号与所述误差信号进行或逻辑运算,以便产生控制所述静噪装置的复合误差信号的电路。
9.权利要求7所述的装置,进一步的特征在于:
对所述压缩音频/视频信号作出响应的同步电路,用于将所述局部时钟信号与用于产生所述压缩音频/视频信号的编码器系统时钟信号同步,并包括提供另一个控制信号的检测器,该控制信号表示所述系统时钟信号的非同步的程度;
对所述另一个控制信号作出响应的另一个阈值检测器,当所述另一个控制信号分别大于和小于所述另一个预定的阈值时,所述另一个阈值检测器产生具有第一和第二状态的另一个误差信号;以及
将来自所述阈值检测器和另一个阈值检测器的所述控制信号进行组合的或门电路。
10.权利要求1所述的装置,其特征在于所述音频/视频信号的音频和视频分量包括在预定的时间确定并与一个编码器系统时钟有关的各个时间标记PTSaud和PTSvid,并且所述音频和视频解压器提供与解压音频和视频信号关联的所述时间标记PTSaud和PTSvid,并且所述检测装置产生作为相关的解压音频和视频的所述PTSaud和PTSvid的值之间的差的函数的所述误差信号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US245113 | 1994-05-17 | ||
US245,113 | 1994-05-17 | ||
US08/245,113 US5467139A (en) | 1993-09-30 | 1994-05-17 | Muting apparatus for a compressed audio/video signal receiver |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1116390A true CN1116390A (zh) | 1996-02-07 |
CN1088305C CN1088305C (zh) | 2002-07-24 |
Family
ID=22925345
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN95104856A Expired - Lifetime CN1088305C (zh) | 1994-05-17 | 1995-05-16 | 压缩音频/视频信号接收机的静噪装置 |
Country Status (12)
Country | Link |
---|---|
US (1) | US5467139A (zh) |
EP (1) | EP0683604B1 (zh) |
JP (1) | JP3932059B2 (zh) |
KR (1) | KR100366401B1 (zh) |
CN (1) | CN1088305C (zh) |
BR (1) | BR9502039A (zh) |
CA (1) | CA2147013C (zh) |
DE (1) | DE69527573T2 (zh) |
MY (1) | MY112618A (zh) |
PL (1) | PL177313B1 (zh) |
RU (1) | RU2150792C1 (zh) |
TW (1) | TW325632B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6757432B2 (en) | 1998-07-17 | 2004-06-29 | Matsushita Electric Industrial Co., Ltd. | Apparatus for transmitting and/or receiving stream data and method for producing the same |
CN100444629C (zh) * | 2003-05-28 | 2008-12-17 | 松下电器产业株式会社 | 数字接口接收装置 |
CN1745526B (zh) * | 2002-04-19 | 2010-09-29 | 汤姆森许可公司 | 用于同步音频和视频流的设备和方法 |
Families Citing this family (78)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5486864A (en) * | 1993-05-13 | 1996-01-23 | Rca Thomson Licensing Corporation | Differential time code method and apparatus as for a compressed video signal |
JPH07202820A (ja) * | 1993-12-28 | 1995-08-04 | Matsushita Electric Ind Co Ltd | ビットレート制御システム |
JP3408617B2 (ja) * | 1994-03-16 | 2003-05-19 | 富士通株式会社 | 画像符号化データの同期ワード多重化方式 |
US5603016A (en) * | 1994-08-03 | 1997-02-11 | Intel Corporation | Method for synchronizing playback of an audio track to a video track |
US5598352A (en) * | 1994-09-30 | 1997-01-28 | Cirrus Logic, Inc. | Method and apparatus for audio and video synchronizing in MPEG playback systems |
US5594660A (en) * | 1994-09-30 | 1997-01-14 | Cirrus Logic, Inc. | Programmable audio-video synchronization method and apparatus for multimedia systems |
US5920842A (en) * | 1994-10-12 | 1999-07-06 | Pixel Instruments | Signal synchronization |
JP3575100B2 (ja) * | 1994-11-14 | 2004-10-06 | ソニー株式会社 | データ送信/受信装置及び方法並びにデータ記録/再生装置及び方法 |
JP3149328B2 (ja) * | 1995-01-09 | 2001-03-26 | 松下電器産業株式会社 | 送信装置と受信装置 |
US5920572A (en) * | 1995-06-30 | 1999-07-06 | Divicom Inc. | Transport stream decoder/demultiplexer for hierarchically organized audio-video streams |
US7512698B1 (en) * | 1995-07-14 | 2009-03-31 | Broadband Royalty Corporation | Dynamic quality adjustment based on changing streaming constraints |
US9832244B2 (en) * | 1995-07-14 | 2017-11-28 | Arris Enterprises Llc | Dynamic quality adjustment based on changing streaming constraints |
US5570372A (en) * | 1995-11-08 | 1996-10-29 | Siemens Rolm Communications Inc. | Multimedia communications with system-dependent adaptive delays |
US5784572A (en) * | 1995-12-29 | 1998-07-21 | Lsi Logic Corporation | Method and apparatus for compressing video and voice signals according to different standards |
US5835493A (en) * | 1996-01-02 | 1998-11-10 | Divicom, Inc. | MPEG transport stream remultiplexer |
JPH09200569A (ja) * | 1996-01-17 | 1997-07-31 | Sony Corp | フレームシンクロナイザー |
US5920833A (en) * | 1996-01-30 | 1999-07-06 | Lsi Logic Corporation | Audio decoder employing method and apparatus for soft-muting a compressed audio signal |
US5918205A (en) * | 1996-01-30 | 1999-06-29 | Lsi Logic Corporation | Audio decoder employing error concealment technique |
JP3052824B2 (ja) * | 1996-02-19 | 2000-06-19 | 日本電気株式会社 | オーディオ再生時刻調整回路 |
US5828414A (en) * | 1996-02-23 | 1998-10-27 | Divicom, Inc. | Reduction of timing jitter in audio-video transport streams |
US5917482A (en) * | 1996-03-18 | 1999-06-29 | Philips Electronics N.A. Corporation | Data synchronizing system for multiple memory array processing field organized data |
WO1997041683A1 (en) * | 1996-04-29 | 1997-11-06 | Princeton Video Image, Inc. | Audio enhanced electronic insertion of indicia into video |
USRE39344E1 (en) * | 1996-07-05 | 2006-10-17 | Matsushita Electric Industrial Co., Ltd. | Method for display time stamping and synchronization of multiple video object planes |
US6002441A (en) * | 1996-10-28 | 1999-12-14 | National Semiconductor Corporation | Audio/video subprocessor method and structure |
US5845251A (en) * | 1996-12-20 | 1998-12-01 | U S West, Inc. | Method, system and product for modifying the bandwidth of subband encoded audio data |
US5864820A (en) * | 1996-12-20 | 1999-01-26 | U S West, Inc. | Method, system and product for mixing of encoded audio signals |
US6463405B1 (en) | 1996-12-20 | 2002-10-08 | Eliot M. Case | Audiophile encoding of digital audio data using 2-bit polarity/magnitude indicator and 8-bit scale factor for each subband |
US6477496B1 (en) | 1996-12-20 | 2002-11-05 | Eliot M. Case | Signal synthesis by decoding subband scale factors from one audio signal and subband samples from different one |
US6782365B1 (en) | 1996-12-20 | 2004-08-24 | Qwest Communications International Inc. | Graphic interface system and product for editing encoded audio data |
US5864813A (en) * | 1996-12-20 | 1999-01-26 | U S West, Inc. | Method, system and product for harmonic enhancement of encoded audio signals |
US6516299B1 (en) | 1996-12-20 | 2003-02-04 | Qwest Communication International, Inc. | Method, system and product for modifying the dynamic range of encoded audio signals |
JP3000949B2 (ja) * | 1997-02-12 | 2000-01-17 | 日本電気株式会社 | 音声・画像同期圧縮再生装置及びその方法 |
US6266091B1 (en) | 1997-07-31 | 2001-07-24 | Lsi Logic Corporation | System and method for low delay mode operation video decoding |
US6289053B1 (en) | 1997-07-31 | 2001-09-11 | Lsi Logic Corporation | Architecture for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
US6236681B1 (en) | 1997-07-31 | 2001-05-22 | Lsi Logic Corporation | Method for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
US6310918B1 (en) | 1997-07-31 | 2001-10-30 | Lsi Logic Corporation | System and method for motion vector extraction and computation meeting 2-frame store and letterboxing requirements |
US6101221A (en) * | 1997-07-31 | 2000-08-08 | Lsi Logic Corporation | Video bitstream symbol extractor for use in decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
US6122316A (en) * | 1997-07-31 | 2000-09-19 | Lsi Logic Corporation | MPEG decoding system meeting 2-frame store and letterboxing requirements |
US7366670B1 (en) * | 1997-08-05 | 2008-04-29 | At&T Corp. | Method and system for aligning natural and synthetic video to speech synthesis |
KR19990040286A (ko) * | 1997-11-17 | 1999-06-05 | 윤종용 | 스크린 뮤트기능을 갖는 영상 재생장치 및 그에 따른 스크린 뮤트방법 |
JP3063841B2 (ja) | 1997-11-26 | 2000-07-12 | 日本電気株式会社 | オーディオ・ビデオ同期再生装置 |
US6195368B1 (en) | 1998-01-14 | 2001-02-27 | Skystream Corporation | Re-timing of video program bearing streams transmitted by an asynchronous communication link |
US6292490B1 (en) | 1998-01-14 | 2001-09-18 | Skystream Corporation | Receipts and dispatch timing of transport packets in a video program bearing stream remultiplexer |
US6351474B1 (en) * | 1998-01-14 | 2002-02-26 | Skystream Networks Inc. | Network distributed remultiplexer for video program bearing transport streams |
US6246701B1 (en) | 1998-01-14 | 2001-06-12 | Skystream Corporation | Reference time clock locking in a remultiplexer for video program bearing transport streams |
US6351471B1 (en) * | 1998-01-14 | 2002-02-26 | Skystream Networks Inc. | Brandwidth optimization of video program bearing transport streams |
JP2000050182A (ja) * | 1998-08-03 | 2000-02-18 | Japan Advanced Inst Of Science & Technology Hokuriku | A−v用オーディオ信号処理方法 |
DE19930824C2 (de) * | 1999-07-03 | 2001-05-31 | Grundig Ag | Bild- und Tonwiedergabegerät und Verfahren für dessen Betrieb |
US6583821B1 (en) | 1999-07-16 | 2003-06-24 | Thomson Licensing S.A. | Synchronizing apparatus for a compressed audio/video signal receiver |
CA2313979C (en) * | 1999-07-21 | 2012-06-12 | Thomson Licensing Sa | Synchronizing apparatus for a compressed audio/video signal receiver |
DE19956913C2 (de) * | 1999-11-26 | 2001-11-29 | Grundig Ag | Verfahren und Vorrichtung zur Anpassung der Laufzeitdifferenz von Video- und Audiosignal in einem Fernsehgerät |
JP2001231035A (ja) * | 2000-02-14 | 2001-08-24 | Nec Corp | 復号同期制御装置、復号装置、及び復号同期制御方法 |
EP1139665A1 (en) * | 2000-03-29 | 2001-10-04 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for changing the output delay of audio or video data encoding |
JP4481444B2 (ja) * | 2000-06-30 | 2010-06-16 | 株式会社東芝 | 画像符号化装置 |
FR2815805B1 (fr) * | 2000-10-23 | 2005-09-02 | Telediffusion De France Tdf | Procede de synchronisation de signaux numeriques |
US7039116B1 (en) * | 2000-11-07 | 2006-05-02 | Cisco Technology, Inc. | Methods and apparatus for embedding and format conversion of compressed video data |
US7030930B2 (en) * | 2001-03-06 | 2006-04-18 | Ati Technologies, Inc. | System for digitized audio stream synchronization and method thereof |
US8880709B2 (en) | 2001-09-12 | 2014-11-04 | Ericsson Television Inc. | Method and system for scheduled streaming of best effort data |
US7158187B2 (en) | 2001-10-18 | 2007-01-02 | Matsushita Electric Industrial Co., Ltd. | Audio video reproduction apparatus, audio video reproduction method, program, and medium |
WO2003039142A1 (fr) | 2001-10-29 | 2003-05-08 | Matsushita Electric Industrial Co., Ltd. | Appareil de synchronisation audio/video |
JP3629253B2 (ja) * | 2002-05-31 | 2005-03-16 | 株式会社東芝 | 音声再生装置および同装置で用いられる音声再生制御方法 |
US7283566B2 (en) * | 2002-06-14 | 2007-10-16 | Silicon Image, Inc. | Method and circuit for generating time stamp data from an embedded-clock audio data stream and a video clock |
KR100943811B1 (ko) * | 2002-12-04 | 2010-02-24 | 엔엑스피 비 브이 | 오디오/비디오 동기화 테스트 방법 |
US20040117840A1 (en) * | 2002-12-12 | 2004-06-17 | Boudreau Paul A. | Data enhanced multi-media system for a set-top terminal |
WO2004084553A1 (ja) * | 2003-03-19 | 2004-09-30 | Matsushita Electric Industrial Co., Ltd. | データ処理装置 |
US7693222B2 (en) * | 2003-08-13 | 2010-04-06 | Ericsson Television Inc. | Method and system for re-multiplexing of content-modified MPEG-2 transport streams using PCR interpolation |
US7471337B2 (en) * | 2004-06-09 | 2008-12-30 | Lsi Corporation | Method of audio-video synchronization |
US7400653B2 (en) * | 2004-06-18 | 2008-07-15 | Dolby Laboratories Licensing Corporation | Maintaining synchronization of streaming audio and video using internet protocol |
EP1766962A4 (en) * | 2004-06-22 | 2009-03-25 | Sarnoff Corp | METHOD AND APPARATUS FOR MEASURING AND / OR CORRECTING AUDIOVISUAL SYNCHRONIZATION |
US20060209210A1 (en) * | 2005-03-18 | 2006-09-21 | Ati Technologies Inc. | Automatic audio and video synchronization |
KR100638138B1 (ko) * | 2005-05-24 | 2006-10-24 | 주식회사 픽스트리 | 비디오/오디오 부호화 및 다중화 기능을 가진 하드웨어장치 및 그 작동 방법 |
EP1898642A1 (en) * | 2005-06-29 | 2008-03-12 | D&M Holdings, Inc. | Reproducing apparatus |
US8670537B2 (en) * | 2006-07-31 | 2014-03-11 | Cisco Technology, Inc. | Adjusting audio volume in a conference call environment |
JPWO2011074383A1 (ja) | 2009-12-14 | 2013-04-25 | 新日鐵住金株式会社 | 誘導加熱装置の制御装置、誘導加熱システム及び誘導加熱装置の制御方法 |
US8640181B1 (en) * | 2010-09-15 | 2014-01-28 | Mlb Advanced Media, L.P. | Synchronous and multi-sourced audio and video broadcast |
TWI513320B (zh) * | 2012-06-25 | 2015-12-11 | Hon Hai Prec Ind Co Ltd | 視訊會議裝置及其唇形同步的方法 |
CN104935827B (zh) * | 2014-03-21 | 2018-07-06 | 北京同步科技有限公司 | 视频帧同步时嵌入音频的处理系统及处理方法 |
US10178281B2 (en) | 2014-07-28 | 2019-01-08 | Starkey Laboratories, Inc. | System and method for synchronizing audio and video signals for a listening system |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4398220A (en) * | 1980-09-05 | 1983-08-09 | Tokyo Shibaura Denki Kabushiki Kaisha | Circuit for detecting the operational state of a television receiver |
USRE33535E (en) * | 1985-09-16 | 1991-02-12 | Audio to video timing equalizer method and apparatus | |
JPH06103859B2 (ja) * | 1988-10-24 | 1994-12-14 | 松下電器産業株式会社 | 音声信号復調回路 |
JP2944131B2 (ja) * | 1990-03-22 | 1999-08-30 | 株式会社東芝 | ビデオ記録再生装置 |
GB2244184B (en) * | 1990-05-16 | 1993-11-17 | Thames Television | Audio delay detector |
JP2808884B2 (ja) * | 1990-10-31 | 1998-10-08 | 松下電器産業株式会社 | テレビジョン信号変換装置 |
JPH0817485B2 (ja) * | 1991-01-29 | 1996-02-21 | 三洋電機株式会社 | Muse音声デコーダ |
JPH05191784A (ja) * | 1992-01-13 | 1993-07-30 | Pioneer Electron Corp | Muse音声デコーダおよびmuse伝送システム |
US5287182A (en) * | 1992-07-02 | 1994-02-15 | At&T Bell Laboratories | Timing recovery for variable bit-rate video on asynchronous transfer mode (ATM) networks |
KR0155730B1 (ko) * | 1993-03-31 | 1998-11-16 | 김광호 | 뮤트회로 및 방법 |
-
1994
- 1994-05-17 US US08/245,113 patent/US5467139A/en not_active Expired - Lifetime
-
1995
- 1995-04-07 TW TW084103313A patent/TW325632B/zh not_active IP Right Cessation
- 1995-04-13 CA CA002147013A patent/CA2147013C/en not_active Expired - Fee Related
- 1995-04-27 MY MYPI95001099A patent/MY112618A/en unknown
- 1995-05-09 EP EP95107007A patent/EP0683604B1/en not_active Expired - Lifetime
- 1995-05-09 DE DE69527573T patent/DE69527573T2/de not_active Expired - Lifetime
- 1995-05-12 JP JP14798595A patent/JP3932059B2/ja not_active Expired - Fee Related
- 1995-05-13 KR KR1019950011793A patent/KR100366401B1/ko not_active IP Right Cessation
- 1995-05-15 BR BR9502039A patent/BR9502039A/pt not_active IP Right Cessation
- 1995-05-16 RU RU95107648/09A patent/RU2150792C1/ru not_active IP Right Cessation
- 1995-05-16 CN CN95104856A patent/CN1088305C/zh not_active Expired - Lifetime
- 1995-05-16 PL PL95308615A patent/PL177313B1/pl not_active IP Right Cessation
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6757432B2 (en) | 1998-07-17 | 2004-06-29 | Matsushita Electric Industrial Co., Ltd. | Apparatus for transmitting and/or receiving stream data and method for producing the same |
CN1745526B (zh) * | 2002-04-19 | 2010-09-29 | 汤姆森许可公司 | 用于同步音频和视频流的设备和方法 |
CN100444629C (zh) * | 2003-05-28 | 2008-12-17 | 松下电器产业株式会社 | 数字接口接收装置 |
US7826562B2 (en) | 2003-05-28 | 2010-11-02 | Panasonic Corporation | Digital interface receiver apparatus |
Also Published As
Publication number | Publication date |
---|---|
DE69527573D1 (de) | 2002-09-05 |
CN1088305C (zh) | 2002-07-24 |
EP0683604B1 (en) | 2002-07-31 |
PL177313B1 (pl) | 1999-10-29 |
JP3932059B2 (ja) | 2007-06-20 |
TW325632B (en) | 1998-01-21 |
CA2147013C (en) | 2004-12-07 |
EP0683604A3 (en) | 1998-10-28 |
PL308615A1 (en) | 1995-11-27 |
RU95107648A (ru) | 1997-02-10 |
KR100366401B1 (ko) | 2003-02-26 |
BR9502039A (pt) | 1996-01-16 |
US5467139A (en) | 1995-11-14 |
JPH0846884A (ja) | 1996-02-16 |
KR950035369A (ko) | 1995-12-30 |
EP0683604A2 (en) | 1995-11-22 |
RU2150792C1 (ru) | 2000-06-10 |
CA2147013A1 (en) | 1995-11-18 |
MY112618A (en) | 2001-07-31 |
DE69527573T2 (de) | 2003-01-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1088305C (zh) | 压缩音频/视频信号接收机的静噪装置 | |
JP3976759B2 (ja) | 音声信号と映像信号を同期させる装置 | |
RU2117411C1 (ru) | Устройство для уплотнения видеосигнала и устройство для синхронизации | |
CN1222154C (zh) | 用于对压缩的视频信号接收系统进行同步的装置 | |
EP1443770A2 (en) | Encoder and method for encoding | |
JP2002501702A (ja) | ビデオ及び音声信号処理 | |
CN1156162C (zh) | 一种实现音频/视频信号同步的装置和方法 | |
EP1860884A1 (en) | Video processing | |
CN1160696C (zh) | 用于压缩的音频/视频信号接收机的同步装置和方法 | |
US7903774B2 (en) | Method for creating a system clock in a receiver device and corresponding receiver device | |
JPH114433A (ja) | 画像受信装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CX01 | Expiry of patent term |
Expiration termination date: 20150516 Granted publication date: 20020724 |