CN101252634B - 数码相机、存储器控制设备、图像处理装置及其方法 - Google Patents

Abstract

本发明涉及数码相机、存储器控制设备、图像处理装置及其方法。本发明的图像处理装置包括：将图像数据按静止图像编码的静止图像编码器；将所述图像数据按一系列移动图像编码的移动图像编码器；设置在通向所述静止图像编码器和移动图像编码器的所述图像数据的输入路线中，对所述图像数据执行过滤处理的图像校正单元；以及控制上述这些各个部件动作的控制单元，所述图像处理装置具有响应于所述移动图像编码器执行编码处理期间的静止图像记录指令信号，而使一帧的图像数据暂时存储的存储单元，被存储在所述存储单元中的一帧的图像数据是在所述图像校正单元进行校正之后的图像数据。

Description

数码相机、存储器控制设备、图像处理装置及其方法

本申请是申请日为2000年12月18日，申请号为00817749.X，发明名称为“数码相机、存储器控制设备、图像处理装置及其使用的图像处理方法”的发明专利申请的分案申请。

技术领域

本发明涉及诸如存储器控制设备和电子静止照相机的数码相机。本发明还涉及可用于这方面的一种图像处理方法和图像处理装置。本发明涉及根据MPEG(活动图片专家组)和JPEG(联合照相编码专家组)标准来编码或解码的技术，并涉及利用该技术的装置。

背景技术

近些年来，越来越要求用电子静止照相机取代利用19世纪开发的银盐照相技术的照相机。在电子静止照相机中，“JPEG”被用作一种数据压缩与扩展技术，以便在传送和存储图像数据的情况下有效地处理图像数据。JPEG方法的技术核心在于离散余弦变换(DCT)。

由于根据JPEG方法也可以对活动图像数据进行压缩和扩展，因此，有一种使用该方法的电子静止照相机，它配备有活动图像拍摄功能。利用JPEG方法以帧单元来压缩和扩展活动图像数据的技术被称作“M-JPEG”(活动-JPEG)。

另一方面，“MPEG”是压缩和扩展包括活动图像的多媒体数据的技术之一。在MPEG方法中，视频部分中所用的技术核心在于活动补偿预测(MC)和DCT。结合MC和DCT的编码技术被称作“混合式编码技术”。可以说，MPEG方法是将MC结合入JPEG方法的技术。

在利用MPEG方法的电子静止照相机中，需要对应于活动图像的一帧的快照可以在拍摄活动图像时被记录下来；例如，日本专利申请公开号Heill-75148中揭示的这种技术。已知，在这种类型的电子静止照相机中提供了一个专用的存储器区域，用于避开和存储快照数据。但是，在这类照相机中，直到指令拍摄快照才利用该专用存储器区域，以便不提高在拍摄活动图像时的存储器的有效使用率。使其保持小尺寸和低成本在评估商品价值中发挥了至关紧要的作用，人们承认在实施区域和成本性能方面有改进的余地。这是本发明的发明者认识到的第一个问题。

发明者认识到的第二个问题也涉及类似的改进余地。由于所拍的快照时常利用视频打印机或类似物被打印在纸介质上，因此，要求很高的图像质量。但是，当用与快照一样的高图像质量来记录活动图像时，存储器容量很快会用光。这样，已知的一种技术按与拍摄静止图像时一样的像素密度层次来记录静止图像，并记录活动图像，其像素不能执行静止图像的边缘平滑或其强调处理等，因此需要新近提供一种滤波器电路，以便实现这些功能。

发明者识别的第三个问题涉及在拍摄快照时用户的可用性。按照惯例，只在完成活动图像的拍摄之后才确定所拍快照的结果，以致有许多情况是：当拍摄快照有错误时，会错过适当地拍摄快照的好机会。而且，所提供的用于活动图像和快照的两种拍摄模式不太可能成为用户友好的设计。

发明内容

所以，本发明的一个目的是：提供一种技术，该技术在数码相机和其相关技术领域中的实施区域或成本性能方面提供各种优点。本发明的另一个目的是：提供一种技术，以进一步实现在数码相机和相关技术领域中的用户友好商品。这些目的和与其相关的目的在下文中将逐渐清晰。

本发明的一种特定模式涉及一种图像处理装置。该装置包括：在对图像数据执行至少伽玛校正或白平衡调节之后输出图像数据的信号处理电路；将图像数据按静止图像编码的静止图像编码器；将图像数据编码成一系列活动图像的活动图像编码器；设置在通向静止图像编码器和活动图像编码器的图像数据的输入路线中的图像校正单元，它执行对图像数据的过滤处理；以及控制一系列这些处理的控制单元。

通过实施这种结构，静止图像和活动图像可以由同一图像校正单元进行过滤处理。可以用一种方式来设置那些过滤处理，以便使其内容各不相同。例如，有关静止图像编码器的对图像数据执行的过滤处理(下文也称作“第一过滤处理”)可以包括像素值转换处理，有关活动图像编码器的对图像数据执行的过滤处理(下文也称作“第二过滤处理”)可以包括像素密度转换处理。可以准备多种类型的第一过滤处理，可以提供从这些处理中选择一项合意的过滤函数的选择器。过滤处理可以被设置成其中的输入与输出一致的恒等变换处理。

该装置可进一步包括一个存储单元，该存储单元响应于活动图像编码器的编码处理过程中的静止图像记录指令信号来暂时存储一帧的图像数据。该图像数据可以是图像校正单元进行校正之前或之后的图像数据。

本发明的另一种模式涉及一种图像处理方法。在该方法中，对将由一共用图像校正单元按静止图像编码的图像数据(在下文中可能只被缩写为“静止图像数据”)和按活动图像编码的图像数据(在下文中可能只被缩写为“活动图像数据”)进行过滤处理，这两种图像数据是通过指示伽玛校正或白平衡调节而产生的。根据这种方法，例如，可以对静止图像数据执行边缘强调处理，并可以对活动图像数据执行像素减数处理。

本发明的另一种模式涉及一种图像处理方法。在这种方法中，静止图像数据的处理路线和活动图像数据的处理路线被统一，以便它们被输入到共同的图像校正单元，这两种数据已由信号处理电路进行处理；以及按分时的方式来执行预定的处理。也就是说，在对静止图像数据和活动图像数据分别执行处理的定时，图像校正单元用作相同的或不同的处理器。当图像校正单元执行过滤处理并且静止图像数据和活动图像数据被处理时，可以动态地改变滤波器系数。

本发明的另一种模式涉及数码相机。这种照相机包括：执行处理(包括对照片图像信号的A-D转换)的信号处理电路；将从信号处理电路输出的图像数据按静止图像编码的静止图像编码器；将图像数据按一系列活动图像编码的活动图像编码器；以及设置在通向静止图像编码器和活动图像编码器的图像数据的输入路线中的图像校正单元，它对图像数据执行过滤处理。

本发明的另一种模式涉及数码相机。这种照相机能够在拍摄活动图像时记录静止图像，它包括：产生图像信号的一个显示控制单元，照片图像数据通过该显示控制单元被显示在显示器上；以及一个控制单元，当照片图像数据作为活动图像被显示在显示器上时，该控制单元指示显示控制单元在显示器上显示对应于部分活动图像的一幅静止图像(例如，对应于一帧的静止图像)。通过这个结构，当在活动图像的记录过程中拍摄快照时，可以确定其内容，以便如果其结果不满意，则可以再拍摄另一张快照。

本发明的另一种模式涉及数码相机。这种照相机包括：将照片图像数据按静止图像编码的一个静止图像编码器；将照片图像数据按一系列活动图像编码的一个活动图像编码器；记录由静止图像编码器和活动图像编码器编码的图像数据的一个记录单元；产生图像信号的一个显示控制单元，照片图像数据通过该显示控制单元被显示在显示器上；以及控制一系列处理的一个控制单元，其中，控制单元被构制成当照片图像数据正作为活动图像被显示在显示器上时，按响应于静止图像拍摄指令信号的定时的图像数据照片被显示在显示器上。这种照相机还可包括一个单元(例如，操作按钮和开关或类似物)，它输入静止图像的拍摄指令。

控制单元可以按这样一种方法来控制显示控制单元，以便并行地显示活动图像和静止图像。通过控制单元的操作被并行显示的静止图像或活动图像中的任何一种图像可以被设置为显示的主图片，以便被显示于其上，这些可以是可切换的，例如，可以设置允许或拒绝显示静止图像。可以在预定的时期内显示静止图像，显示时期可以根据用户的指令来确定。当显示静止图像时，用户可以(例如)通过按一个预定的按钮来删除它。

本发明的另一种模式涉及数码相机。这种相机能够在拍摄活动图像期间记录快照，它包括：产生图像信号的一个显示控制单元，照片图像数据通过该显示控制单元被显示在显示器上；以及一个控制单元，当照片图像数据正作为活动图像被显示在显示器上时，该控制单元指示显示控制单元将快照显示在显示器上。

本发明的另一种模式涉及数码相机中的图像处理方法。该方法包括：拍摄活动图像的处理；其拍摄活动图像期间的拍摄快照的处理；显示所拍活动图像的处理；以及显示所拍快照的处理，其中，活动图像和快照按同时可见的方式被显示在数码相机中。除了活动图像和快照被并行地显示在单个显示器上的情况以外，它们可以被显示在不同的显示器上，只要它们是同时可见的，就足够了。而且，可以在预定的有限时间周期内产生这种同时可见的状态。

本发明的另一种模式涉及一种存储器控制设备。该设备包括：包含多个存储器区域的一个存储单元，这些存储器区域按顺序存储被输入的数据；以及一个控制单元，该控制单元按循环使用存储器区域的方式来控制存储单元的输入/输出，其中，存储单元的输入/输出由控制单元按这样一种方式加以控制，当控制单元将数据存储在多个存储器区域内的任意的存储器区域中时，循环使用剩余的存储器区域。在每个存储器区域中，数据可以被存储在预定的块单元中(例如，在图像帧的单元中或在数据的编码组的单元中)。

本发明的另一种模式涉及数码相机。这种数码相机配备有上述的存储器控制设备并能够记录对应于拍摄活动图像时的部分活动图像的静止图像。存储单元按顺序将被输入的活动图像数据存储在多个存储器区域中。控制单元按这样一种方式控制存储单元的输入/输出，当数据按“存储静止图像”指令定时被收进多个存储器区域中时，活动图像数据被收进剩余的存储器区域(不包括存储所述数据的存储器区域)中。

控制单元可以按这样一种方式来控制，当数据按“存储静止图像”指令定时再次接进时，取消以前存储的数据，即，允许由其他数据重写，活动图像数据被收进其余的存储器区域(不包括存储最近收进的数据的存储器区域)中。换句话说，它可以按这样一种方式进行控制，活动图像数据被收进剩余的存储器区域(不包括存储以前被存储的数据的存储器区域和存储最近收进的数据的存储器区域)中。

本发明的另一种模式涉及配备有存储器控制设备的一种图像处理装置，该存储器控制设备执行控制，图像数据由此被存储在存储器中。该存储器包括暂时存储活动图像数据和静止图像数据的一个“共用”区域，以便分别为其提供预定的图像处理。当存储静止图像数据时，存储器控制设备利用“共用”区域中的一个区域，所具有的活动图像已完成处理，当存储活动图像数据时，存储器控制设备在“共用”区域中按顺序利用除存储有未被处理的静止图像数据的区域以外的各个区域。

可以提供配备有这种图像处理装置的一种数码相机。在这种情况下，当在拍摄活动图像期间第二次指令拍摄静止图像时，在第二次存储静止图像数据的情况下，存储器控制设备可以利用除首次存储静止图像数据照片的区域以外的一个区域。这种数码相机还可以包括一个控制单元，该控制单元根据用户的指令来选择首次的静止图像数据照片或第二次的静止图像数据照片中的任何一个，以便最后对其加以存储。而且，在第二次存储静止图像数据的情况下，通过重写其内容可以利用首次存储静止图像数据照片的区域。

而且，上述各个元件等的任意组合，以及在方法、装置、记录介质、计算机程序等之间改变的其各种表示包括在本发明的范围内。

附图简述

通过以下的较佳实施例及其附图，会进一步了解上述的各种目的、其他的目的、特点和优点。

图1是电路方框图，表现了根据具体表现本发明的一个实施例的电子静止照相机。

图2是示意方框图，表现了根据本实施例的JPEG核心电路和MPEG核心电路。

图3是示意方框图，表现了根据本实施例的图像数据校正电路。

图4是电路图，表现了根据本实施例的图像数据校正电路的滤波器单元。

图5是流程图，表现了根据本实施例的电子静止照相机的各种操作。

图6是流程图，表现了根据本实施例的电子静止照相机的各种操作。

图7是流程图，表现了根据本实施例的电子静止照相机的各种操作。

图8是流程图，表现了根据本实施例的电子静止照相机的各种操作。

图9表现了根据本实施例在由电子静止照相机记录快照时所获得的显示屏幕。

图10描述了根据本实施例的帧缓冲器的一种使用模式。

图11描述了根据本实施例的帧缓冲器的使用模式的另一个例子。

实现发明的最佳方式

图1是电路方框图，表现了根据一个实施例的利用JPEG和MPEG方法的电子静止照相机1。

电子静止照相机1包括图像拾取设备2、信号处理电路3、图像数据校正电路4、JPEG核心电路5、MPEG核心电路6、帧缓冲器7、显示电路8、显示器9、存储器卡10、输入/输出电路11、数据总线12与13、控制核心电路14和一组操作按钮15。

控制核心电路14响应于这组操作按钮15的“开/关”信号来控制电子静止照相机1的每个部件2-13。这组按钮15包括一个静止图片记录按钮15a、一个移动图片记录按钮15b和其他的选择按钮15c。

图像拾取设备2包括一个CCD(电荷耦合设备)等，并且拍摄主题图像，以便产生输出信号。在图像拾取设备2的输出信号被A-D转换之后，通过执行白平衡调节和伽玛校正等，包括A-D转换电路的信号处理电路3在图片单元中产生原始图像数据(例如，其像素数目是垂直1200 X水平1600)。由信号处理电路3产生的原始图像数据被转移到帧缓冲器7或显示电路8中的任何一个，或者经由数据总线被转移到这两者。显示电路8产生在单个图片单元中经由数据总线12被转移的图像数据的图像信号。显示器9将由显示电路8产生的图像信号显示为主题图像。

帧缓冲器7包括一个可再写的半导体存储器(例如，SDRAM(同步动态RAM)、DRAM、Rambus DRAM和类似物)，存储经数据总线12转移的图片，即，将图像数据存储在各个帧单元中，并一幅图片接一幅图片地读出被存储的图像数据。在这个帧缓冲器7中，提供了存储器区域7a(在下文中也被称作“在避开中使用的存储器区域7a”)，它暂时避开可应用的一帧的静止图像数据，并且响应于记录活动图像期间的静止图片记录按钮15a的“开”信号来对其加以存储。

从帧缓冲器7被读出的一幅图片接一幅图片的图像数据经由数据总线12被转移到图像数据校正单元4。图像数据校正电路4对从信号处理电路3被输入的图像数据执行校正处理(这以后将加以描述)。从图像数据校正电路4中产生的一幅幅图片的图像数据(已经被执行校正处理)经由数据总线12被转移到JPEG核心电路5或MPEG核心电路6。

存储器卡10按可分开的方式被安装到电子静止照相机1上，并且其内包括一个快闪存储器10a。快闪存储器10a存储经由数据总线13被转移的一幅幅图片的压缩图像数据，并且一幅图片接一幅图片地读出被存储的压缩图像数据，以便将其输出到数据总线13。

输入/输出电路11将经由数据总线13被转移的一幅幅图片的图像数据输出到被连接到电子静止照相机1的外部装置(例如，外部显示器、个人计算机、打印机或类似物)，并将从这些外部装置被输入的图像数据输出到数据总线13。从存储器卡10被读出的图像数据或经由输入/输出电路11被输入的图像数据经由数据总线13被转移到JPEG核心电路5或MPEG核心电路6。

如图2所示，JPEG核心电路5包括DCT电路16、量化电路17、赫夫曼(Huffman)编码电路18、Huffman解码电路19、逆量化电路20和逆DCT(IDCT)电路21。在JPEG核心电路5中，一幅图片的图像数据由JPEG方法的标准被分成多个宏块集合，然后在其上为每个块执行压缩-扩展处理。DCT电路16、量化电路17和Huffman编码电路18构成JPEG编码器，以便对静止图像数据执行压缩-编码处理，Huffman解码电路19、逆量化电路20和逆DCT电路21构成JPEG解码器。JPEG核心电路5或JPEG编码器用作本发明中的“静止图像编码器”的一个例子。

DCT电路16接收一个块单元中的一幅图片的图像数据，紧靠从帧缓冲器7读出的一幅幅图片的图像数据，并对图像数据执行二维离散余弦变换(DCT：离散余弦变换)，以便产生DCT系数。通过参考被存储在RAM中的量化表格中所存储的一个量化门限值(未示出)，量化电路17使从DCT电路16被提供的DCT系数量子化。

通过参考被存储在RAM中的Huffman表格中所存储的Huffman代码(未示出)，Huffman编码电路18对由量化电路17量子化的DCT系数执行可变长度的编码，以便被压缩的图像数据一幅图片接一幅图片地被产生。由Huffman编码电路18产生的被压缩的图像数据经由数据总线13被转移到存储器卡10或输入/输出电路11中的至少一个。

通过将第一和第二MC(活动补偿预测)电路22a与22b加到Huffman编码电路18，来构成MPEG核心电路6。这样，DCT电路16、量化电路17、Huffman编码电路18、Huffman解码电路19、逆量化电路20和逆DCT电路21由JPEG核心电路5和MPEG核心电路6共享，由来自控制核心电路14的切换信号来选择是使用JPEG核心电路5还是使用MPEG核心电路6(其中，第一和第二MC电路22a与22b被加到这个电路5)。预先假定分开为JPEG和MPEG提供上述的量化表格和Huffman表格。

在MPEG核心电路6中，一幅图片的图像数据由MPEG方法的标准被分成多个宏块集合，然后在其上为每个块执行压缩-扩展处理。DCT电路16、量化电路17、Huffman编码电路18和第一MC电路22a构成MPEG编码器，以便对活动图像数据执行压缩-编码处理，Huffman解码电路19、逆量化电路20、逆DCT电路21和第二MC电路22b构成MPEG解码器。MPEG核心电路6或MPEG编码器用作本发明中的“活动图像编码器”的一个例子。由MPEG编码器产生的被压缩的图像数据也经由数据总线13被转移到存储器卡10或输入/输出电路11中的至少一个。

在JPEG核心电路5或MPEG核心电路6中，通过参考Huffman代码，Huffman解码电路19对经由数据总线13被转移的一幅幅图片的被压缩图像数据执行可变长度的解码，以便一幅图片接一幅图片地产生被扩展的图像数据。通过参考量化门限值，逆量化电路20对由Huffman解码电路19产生的一幅幅图片的被扩展图像数据进行逆量化，以便产生DCT系数。

逆DCT电路21对由逆量化电路20产生的DCT系数执行二维逆离散余弦变换(IDCT：逆DCT)。在MPEG核心电路6中，第二MC电路22b对一幅幅图片的被扩展图像数据(逆DCT电路21已对其执行逆离散余弦变换)执行MC处理。

来自JPEG核心电路5或MPEG核心电路6的被扩展图像数据经由数据总线12被转移到帧缓冲器7。帧缓冲器7存储被转移的一幅幅图片的图像数据。显示电路8从一幅幅图片的图像数据(经由数据总线12从帧缓冲器7被转移)中产生图像信号，以便该信号作为主题图像被显示在显示器9上。

如图3所示，图像数据校正单元4包括一个数字滤波器单元23、一个ROM24和一个定时控制单元25。数字滤波器单元23包括一个空间滤波器，该空间滤波器是非循环类型的数字滤波器(例如，FIR(限定脉冲响应)滤波器)。如图4所示，数字滤波器单元23包括n个单元的显示元件26...，它们显示每个取样周期的从信号处理电路3被输入的n位的输入信号、n+1个单元的乘法器27...，以及使来自乘法器27...的信号盘旋的一个加法器28。乘法器27...的各自的系数a_n、a_n-1......a₂、a₁是确定滤波器特征的系数，用于活动图像数据的过滤处理的系数和用于静止图像数据的过滤处理的系数事先被写在ROM 24中。这些系数通过制造阶段的模拟被事先设置为适当的值。

例如，当活动图像数据被过滤处理时，通过利用线性插入的概念和其他的概念来改变每个取样周期的每个系数的值，可以实现满意的低像素密度图像。举例来说，让我们考虑将像素的水平数目减少到2/3的情况。假设三个像素p₁～p₃被水平并排地放在原始图像中。现在，通过对活动图像数据的过滤处理，这些像素被转换成两个像素q₁和q₂。为了实现这一点，q₁和q₂都被表示为p₁、p₂和p₃的初次线性和。也就是说，在确定表示像素数目的减少程度的比率时，通过用实验或类似的方法来确定线性和的每个系数，可以实现用于减少数据数量的过滤处理。举例来说，像素的数目可以被减少到480(垂直)×720(水平)。

另一方面，当对静止图像数据执行过滤处理时，可以通过设置每个系数来构成高通滤波器，以便强调高频区。因此，可以获得边缘部分退化较少的清晰的图像，同时像素的数目被保持在恒定的比率。虽然在本实施例中设置n＝8，但根据设计的自由性，这一点当然可以改变。

定时控制单元25根据控制核心电路14的控制来控制从ROM 24读出系数的定时、输入/输出数据的闩锁的定时、滤波器操作等的定时。

根据上述结构，将参考图5至图8所示的流程图来描述用于记录图像数据的操作。在图5中，当静止图片记录按钮15a被切换到“开”时，执行图6所示的静止图像处理；而当移动图片记录按钮15b被切换到“开”时，执行图7所示的活动图像处理。

(静止图像记录)

参考图6，从图像拾取设备2被收进的原始图像信号按对应于静止图片记录按钮15a的“开”信号的定时被输入到信号处理电路3，然后被转换成一幅图片的数字原始图像数据，以便被收进帧缓冲器7中(S1)。一幅图片的原始图像数据从帧缓冲器7被发送到图像数据校正电路4，也被发送到显示电路8，以便静止图像被显示在显示器9上(S2)。

对被收进图像数据校正电路4中的数据执行为处理静止图像而设计的上述校正处理(S3)，并且，所校正的数据被输入到JPEG核心电路5。然后，在对其执行预定的压缩-编码处理之后，它们将被记录在快闪存储器10a中(S5)。

(活动图像记录)

参考图7，从图像拾取设备2被收进的原始图像信号按对应于移动图片记录按钮15b的“开”信号的定时被输入到信号处理电路3，然后被转换成一幅幅图片的数字原始图像数据，以便被陆续收进帧缓冲器7中(S11)。一幅幅图片原始图像数据从帧缓冲器7被发送到图像数据校正电路4，并且也被发送到显示电路8，以便活动图像被显示在显示器9上(S12)。

对陆续被收进图像数据校正电路4中的数据执行为处理活动图像而设计的上述校正处理(S13)，所校正的数据被输入到MPEG核心电路6。然后，在对其执行预定的压缩-编码处理之后(S14)，它们将被记录在快闪存储器10a中(S15)。这项操作继续下去，直到“开”信号再次从移动图片记录按钮15b被发送出去(S16)。

(快照记录)

参考图7，当“开”信号在活动图像的记录期间从静止图片记录按钮15a被发送出去时，控制核心电路14判断该快照拍摄从外部来源得到指令，然后执行图8所示的快照处理(S17)。于是，一帧的图像数据被暂时避开并被存储在存储器区域7a中，用于在帧缓冲器7中进行避开(S21)。在此避开操作的过程中，继续记录活动图像。换言之，从图像拾取设备2被收进的原始图像信号被输入到信号处理电路3，然后被转换成一幅幅图片的数字原始图像数据，以便被陆续收进帧缓冲器7中(S22)。一幅幅图片的原始图像数据从帧缓冲器7被发送到图像数据校正电路4，并且也被发送到显示电路8。对陆续被收进图像数据校正电路4中的数据执行为处理活动图像而设计的上述校正处理(S23)，所校正的数据被输入到MPEG核心电路6。然后，在对其执行预定的压缩-编码处理之后，它们将被记录在快闪存储器10a中(S25)。

在本实施例中，一幅幅图片的原始图像数据从帧缓冲器7被发送到显示电路，同时在避开中使用的存储器区域7a中被避开的一帧的图像数据被发送出去。目前正在被拍摄的活动图像和将被记录为快照的静止图像被并行地显示(S26)在显示器9上。图9表现了活动图像和静止图像被并行地显示在显示器9上的一个例子，其中，尺寸是图片的1/16的活动图像200被显示在屏幕的右上部，而静止图像100被显示为主图片。

在预定的时期(例如，5秒)内显示静止图像，其后，显示单单被切换到活动图像的显示(S27)，操作返回到图7所示的正常的显示图像处理(S28)。在并行显示静止图像期间，用户可以在显示器9上确定是否拍摄到理想的快照。当“开”信号在静止图像的显示期间两次从静止图片记录按钮15a被发送出去时，根据按对应于“开”信号的定时收进的数据来执行S21～S27的处理(S29)。在这种情况下，在避开中使用的存储器区域7a的内容由新的数据取代。

图10用于解释活动图像处理和快照处理中的帧缓冲器7的使用状态。为帧缓冲器7提供了四个正常的存储器区域A～D，一幅图片(那是一帧的数据)为每个存储器区域A-D所存储。当然，根据对照相机1的说明，可适当地改变存储器区域的数目。

在图7所示的正常的活动图像处理中，如图10(a)所示，来自信号处理电路3的一幅幅图片的数字原始数据按A→B→C→D的顺序被存储，并从首先被输入的一个开始按顺序被输出到数据总线12(首入首出)。当数据被存储在最后的存储器区域D中时，再次使用存储器区域A。也就是说，循环使用存储器区域A～D。关于帧缓冲器7的循环使用，可以采用LRU(最近最少使用)运算和其他方法(例如，页面存储器控制方法)。

当快照的“开”信号在活动图像的处理期间从静止图片记录按钮1 5a被发送出去时，按对应于“开”信号的定时收进的数据被存储在一个特定的存储器区域中，所述区域被用作用于避开静止图像数据的存储器区域7a。例如，当按记录快照的定时收进的数据被存储在第三个存储器区域C中时，如图10(b)所示，存储器区域C被用作用于避开的存储器区域7a，并且，在活动图像处理中，其后，循环使用剩余的存储器区域A、B和D。其后，当按记录快照的定时再次被收进的另一批数据这次被存储在第二个存储器区域B中时，取消在第三个存储器区域C中的数据，也就是说，如图10(c)所示，数据从受保护的主题中被除去，第二个存储器区域B被用作在避开中使用的存储器区域7a，其后，在活动图像处理中，循环使用存储器区域A、C和D(而不是第二个存储器区域B)。

如上所述，使用四个存储器区域A～D的顺序取决于将被执行的运算；可以按顺序使用存储器区域(例如，ACDBAC...或ACDABC...或类似的情况)。简而言之，当存在已存储完成处理的活动图像数据(即其中允许重写的活动图像数据)的多个存储器区域时，可以利用任何存储器区域，用于避开数据。也在这些情况下，这种用法被称作“循环使用”。当首先只准备存储器区域中的两个存储器区域时，存储快照的记录数据，以便在活动图像数据被收进单个存储器区域之后，其后的活动图像数据被陆续输出。也在这种情况下，它被称作“循环使用”。

如图7所示，当活动图像记录完成时，控制核心电路14判断是否在活动图像的记录期间执行静止图像的避开操作(S18)；如果执行，则一帧的数据(正被存储在避开中使用的存储器区域7a)，经由数据总线12被转移到图像数据校正电路4，并对静止图像记录执行类似的处理(S19)。

根据本实施例的电子静止照相机，提供以下的操作和效果。

(1)由于静止图像在拍摄活动图像时可作为快照被抽取，因此，改进了作为电子静止照相机的功能。

(2)电子静止图像作为快照被显示在显示器9上，因此，用户可以容易地确定快照的拍摄状态，并且，如果他/她不喜欢这张快照，他/她能够立即拍摄另一张快照。从而可以减小快照误拍的频率。这样，可以提高作为电子静止照相机的商品的价值。

(3)除了上述(2)以外，目前正在拍摄的活动图像被并行显示，以便也可以实时确定活动图像的拍摄状态。

(4)除了以上的(2)和(3)以外，通过在显示器9上显示将作为主图片被记录的静止图像，可以容易地确定快照的拍摄状态，同时用小尺寸显示活动图像

(5)除了以上的(2)以外，由于在显示器9上暂时显示将作为快照被记录的静止图像，因此，不会长期干扰确定显示器9上的活动图像的记录所必要的操作。

(6)如图10所示，直到指令静止拍摄快照并且所有区域都被用作正常的存储器区域，才会提供在避开中使用的存储器区域7a，以便提高帧缓冲器7的使用效率。

(7)通过使用数据校正电路4，静止图像数据可以被校正为一幅更理想的图像。

(8)由于这样的构制不仅使活动图像数据而且使静止图像数据通过数据校正电路4，因此，也可以通过将系数存储在ROM 24中来校正处理静止图像，从而实现低成本和改进功能。由于不需要提供静止图像专用的校正接成电路，因此，可以避免装置尺寸变大和消耗功率增加的趋势。

(9)DCT电路16、量化电路17、Huffman编码电路18、Huffman解码电路19、逆量化电路20和逆DCT(IDCT)电路21被分享于JPEG核心电路5和MPEG核心电路6中，以便可以简化电子静止照相机1的结构、一个算术处理运算等。

(10)所提供的用于快照的在避开中使用的存储器区7a促进了静止图像和活动图像的分类和搜索，并可以实现更快的再现。

(11)当指示快照拍摄时，图像数据在被输入到图像数据校正电路4之前被避开；结果，当其后处理图像数据校正电路4处的数据时，将促进垂直方向上的过滤处理和调整处理，并且可以不中断地记录活动图像。

目前的这些实施例包括以下各个被修改的例子。

(i)在图8中的S26处，只有静止图像被显示在显示器9上。

(ii)在图8中的S26处，颠倒静止图像的尺寸和被并行地显示在显示器9上的活动图像的尺寸，以便活动图像成为主图片。而且，提供了一种结构，从而使使用按钮或类似物的用户可以指示允许和拒绝显示静止图像。

(iii)在图8中的S29处，有关最近拍摄的快照的图像数据与老数据(不因此被取代)并行存储。也就是说，如图11所示，在正常的活动图像处理中，循环使用帧缓冲器7的存储区域A-D(图11(a))。接下来，当按记录第一张快照的定时收进的数据被存储在第三个存储器区域C中时，存储器区域C被用作在避开中使用的存储器区域7a(图11(b))，并且，其后在活动图像处理中，循环使用剩余的三个存储器区域A、B和D。当按记录第二张快照的定时收进的数据被存储在第二个存储器区域B中时，第二和第三个存储器区域B与C被用作在避开中使用的存储器区域7a(图11(c))，并且，其后在活动图像处理中，循环(即交替)使用两个存储器区域A和D。用这种方式可以记录多张快照。增加可以拍摄的快照的数目将减少其中帧缓冲器7可被用于活动图像处理的区域。这样，可以拍摄的快照的数目需要被设置成在处理活动图像时不会发生帧缓冲器7的溢出。

(iv)用磁-光盘、光盘、磁盘或类似物来代替存储器卡10。

(v)当指令拍摄快照时，其中在图像数据校正电路4处已完成处理的图像数据暂时被避开到在避开中使用的存储器区域7a。这样，当其后在JPEG核心电路5中执行预定的压缩处理时，可以容易地取出数据。

(vi)静止图像数据不通过图像数据校正电路4。

(vii)在压缩和扩展活动图像数据中使用M-JPEG技术。

(viii)除了用于压缩和扩展静止图像数据的JPEG以外，使用基于差异处理的差异YUV、基于块的Hadamard变换、Slant变换或Haar变换方法的压缩技术被用于压缩静止图像数据。

(ix)当对静止图像数据执行过滤处理时，可以通过设置每个系数值来构成低通滤波器、带通滤波器或类似物，以便不强调高频范围。从而可以抑制混淆或粗糙。

(x)当对静止图像数据执行过滤处理时，扩展颜色信号的动态范围并设置每个系数值，以便获得生动的图像。此外，可以根据用途或用户的爱好来使用任意的线性或非线性滤波器。

(xi)如图1所示，所提供的选择按钮1 5c选择以上实施例和以上的(ix)与(x)的校正功能。从而可以根据用户的爱好来构成静止图像，并进一步改进作为电子静止照相机1的功能。选择按钮15c是本发明中的“选择器”的一个例子。

(xii)图像数据校正电路4中的过滤处理可以是这样的：可以将过滤处理设置成恒等变换处理。在这种情况下，被输入的静止图像数据完整无损地被输出。在这个结构中，当必要时，可以容易并有效地运用过滤函数。例如，在图4中，为了实现恒等变换，只将系数α₁设置为1，剩余的系数α_n-1...α₂、α₁都被设置为0。本发明的特征是：使静止图像数据和活动图像数据通过图像数据校正电路4这个特点，并且，恒等变换处理当然属于过滤处理的概念。

(xiii)虽然所描述的是快照或活动图像被显示在主图片中，但是，将哪一个设置到主图片可以由用户选择。通过用户操作选择按钮15c或类似物，控制核心电路14可以切换将哪一个设置到主图片。而且，控制核心电路14可以包括一种模式，通过该模式，快照的显示根据用户的指令被禁止，或者，可以在用户所规定的时期内显示快照。

工业可用性

如已描述的内容，本发明可以用于数码相机或图像处理方法、图像处理装置及其使用的存储器控制电路。

Claims (3)

1.一种图像处理装置，其特征在于它包括：

在活动图像拍摄过程中以帧为单位依次存储其图像数据的帧缓冲器；

将从所述帧缓冲器读出的图像数据以帧为单位按静止图像进行编码的静止图像编码器；

将从所述帧缓冲器读出的图像数据作为涉及多个帧的一系列活动图像来进行编码的活动图像编码器；

设置在通向所述静止图像编码器和活动图像编码器的所述图像数据的输入路线中，对所述图像数据执行过滤处理的图像校正单元；

控制上述帧缓冲器、静止图像编码器、活动图像编码器和图像校正单元的控制单元；

所述控制单元进行控制，使得响应于所述活动图像编码器编码处理期间的静止图像记录指令信号，使一帧的图像数据作为按照所述记录指令信号所拍摄的静止图像而暂时避开并存储到所述帧缓冲器内的一个特定的存储区域中，并且在所述帧缓冲器内，循环使用剩余的存储区域来存储当前拍摄中的活动图像的图像数据，

其中，被避开并存储在所述帧缓冲器中的一帧的图像数据是在所述图像校正单元进行校正之后获得的图像数据。

2.如权利要求1所述的图像处理装置，其特征在于：

在所述活动图像编码器完成编码处理之后，所述控制单元将被存储在所述帧缓冲器中的图像数据发送到所述静止图像编码器，从而被记录在记录单元中。

3.如权利要求1或2所述的图像处理装置，其特征在于：

所述静止图像的避开并存储是在所述帧缓冲器的许可范围内进行的。

Images