CN101355671B - 成像装置、图像记录装置及图像记录方法 - Google Patents

成像装置、图像记录装置及图像记录方法 Download PDF

Info

Publication number
CN101355671B
CN101355671B CN2008102137855A CN200810213785A CN101355671B CN 101355671 B CN101355671 B CN 101355671B CN 2008102137855 A CN2008102137855 A CN 2008102137855A CN 200810213785 A CN200810213785 A CN 200810213785A CN 101355671 B CN101355671 B CN 101355671B
Authority
CN
China
Prior art keywords
image
parts
priority
notified
imaging device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008102137855A
Other languages
English (en)
Other versions
CN101355671A (zh
Inventor
田上靖行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101355671A publication Critical patent/CN101355671A/zh
Application granted granted Critical
Publication of CN101355671B publication Critical patent/CN101355671B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00283Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00129Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a display device, e.g. CRT or LCD monitor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00251Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/001Sharing resources, e.g. processing power or memory, with a connected apparatus or enhancing the capability of the still picture apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0089Image display device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Abstract

一种用于摄取和记录图像的成像装置,其特征在于包括:成像部件,用于摄取图像;通信部件,用于与一个以上外部成像装置之间进行信号的发送接收;显示部件,用于显示图像;显示控制部件,用于使显示装置显示由所述成像部件得到的摄取图像、以及由所述外部成像装置摄取和发送并由所述通信部件接收的接收图像;图像选择部件,用于从所述摄取图像和所述接收图像当中选择期望的图像;以及记录控制部件,进行控制以将由所述图像选择部件选择的图像的信号记录在记录介质中,所述显示控制部件将由所述图像选择部件选择的图像与未被选择的图像相区别从而以可识别的状态显示。

Description

成像装置、图像记录装置及图像记录方法
本发明是以下专利申请的分案申请:申请号:200480018012.1,申请日:2004.6.23,发明名称:成像装置、图像记录装置及图像记录方法
技术领域
本发明涉及用于摄取和记录图像的成像装置、图像记录装置及图像记录方法,尤其涉及适于当多个成像装置分别摄取图像时使用的成像装置、图像记录装置及图像记录方法。
背景技术
最近,能够摄取运动图像并以数字数据的形式记录运动图像的家用数码摄像机得到了广泛使用。这种摄像机可以播放摄像机自己所捕获和记录的图像信号,并且在摄像机中的LCD(液晶显示屏)或者外部的监视器上显示图像信号。某些数码摄像机还具有将通过通信线缆等从另一成像装置或图像记录装置接收的图像信号记录到记录介质中的功能。此外,还提出了一种具有下述功能的摄像机装置,即,将摄像机装置自身的成像器摄取的图像信号连同由其音频收集部分所得到的音频信号一起通过并入在摄像机装置中的无线发射机或其他部件发送给外部设备(例如,在JP-A-11-306663中的段[0013]-[0018]、图1中披露)。
另一方面,在诸如广播之类的专业领域中,在分别由多个摄像机摄取的图像信号当中进行选择以记录所选的图像信号是很常见的。此外,提出了用于在图像信号当中进行选择的方法,使得预先确定要成像的对象,并且自动识别和选择其中显示该对象的图像。例如,已知有一种用于自动控制监控摄像机的装置,其中例如关于作为要成像的对象的多个人中的每一个的数据和关于多个摄像机的设置的数据被预先登记在数据库中,并且当这些人中的任一个接近限制区域时,此人携带的小发射机就被天线检测到,从而响应于指示检测的信号在数据库中进行搜索,以便根据搜索结果选择监控摄像机来控制(例如,在JP-A-9-46694中的段[0014]-[0019]和图1中披露)。对摄像机类似的选择和控制可以通过让作为要成像的对象的多个人中的每一个携带无线标签(wireless tag)来实现。此外,提出了一种用于会议等的系统,其中为每个与会者准备摄像机和麦克风,使得根据通过麦克风进行的讲话的音频等级来改变选择记录的摄像机图像信号。
随着家用摄像机的普及,最近常常出现这种情况:在诸如运动会或结婚典礼之类的场合,多个观众或参与者中的每一个都携带摄像机。在这种情况下,要求每个个人的摄像机不仅能够使用该摄像机自身摄取的图像,还能够使用其他人的其他摄像机摄取的图像。然而,常规上没有提供这种功能。
通常,摄像机记录音频和图像。在从多个摄像机中切换一个摄像机(其中选择记录来自该摄像机的图像信号)时常常出现这样的情况:观察者觉得在切换时,比起屏幕上场景的转移以及由于转移而伴随而来的屏幕的不规则,音频连贯性的不自然更令人不满。然而,还没有提出减轻观察者在切换时对不自然的音频连贯性的不满的方法。
在从多个摄取的图像中选择要记录在记录介质中的图像的情况下,最好自动识别和记录其中存在预定对象的图像。然而,在如上述公开JP-A-9-46694中披露的技术中,作为成像对象的人应当携带小发射机、无线标签等,这种方法除了用于发送和接收图像和音频信号的器件外,还需要引入使用小发射机、无线标签等的通信系统,这导致该装置的成本和尺寸增加。此外,基于要成像的对象者进行的讲话音频等级而切换所选图像的摄像机的方法,仅仅适用于特定的用途(例如在会议中),而不是通用的。
考虑到上述间题而开发了本发明,因此本发明的一个目的是提供一种能够记录从分别由多个成像装置摄取的图像当中所选的图像的成像装置。
本发明的另一目的是提供一种能够记录从分别由多个成像装置摄取的图像当中所选的图像的图像记录装置。
本发明的再一个目的是一种用于成像装置的图像记录方法,根据该方法从分别由多个成像装置摄取的图像当中选择图像,并且记录所选的图像。
发明内容
本发明提供一种用于摄取和记录图像的成像装置,其特征在于包括:
成像部件,用于摄取图像;
通信部件,用于与一个以上外部成像装置之间进行信号的发送接收;
显示部件,用于显示图像;
设置部件,接受与图像中要识别的对象的特征信息有关的设置;
图像识别部件,根据所述设置部件通知的特征信息,对由所述外部成像装置发送并由所述通信部件接收的接收图像以及由所述成像部件得到的摄取图像,执行图像识别处理;
合成图像生成部件,用于使显示部件以合成方式同时显示由所述成像部件得到的摄取图像、以及所述接收图像;
记录控制部件;以及
优先级确定部件,
若由所述图像识别部件从所述接收图像和摄取图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给所述优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给所述合成图像生成部件和所述记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在所述显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
本发明还提供一种用于记录被输入的图像的图像记录装置,其特征在于包括:
图像接收部件,用于接收由多个外部成像装置摄取并发送来的多个图像的信号;
设置部件,接受与图像中要识别的对象的特征信息有关的设置;
图像识别部件,根据所述设置部件通知的特征信息,对来自所述多个外部成像装置的接收图像,执行图像识别处理;
合成图像生成部件,用于进行控制以将由所述图像接收部件接收的多个接收图像以合成方式同时显示在显示部件中;
记录控制部件;以及
优先级确定部件,
若由所述图像识别部件从来自所述多个外部成像装置的所述接收图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给所述优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给所述合成图像生成部件和所述记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在所述显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
本发明还提供一种用于记录由多个成像装置摄取的图像的图像记录方法,其特征在于,至少一个所述成像装置:
接受与图像中要识别的对象的特征信息有关的设置;
将本成像装置的摄取图像的信号发送给其他成像装置,并且接收所述其他成像装置的摄取图像的信号;
基于所述特征信息,对从所述其他成像装置接收的接收图像和本成像装置的摄取图像,执行图像识别处理;
将所述本成像装置的摄取图像和所述接收图像以合成方式同时显示在显示部件中;以及
若在图像识别处理过程中从所述接收图像和所述摄取图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给本成像装置的优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给本成像装置的合成图像生成部件和记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
该成像装置可以通过成像器摄取图像,并且通过通信器件接收由外部成像装置摄取和发送的图像。图像合成器使显示器以合成方式同时显示由成像器摄取的图像和从外部成像装置接收的图像。图像选择器从成像器所摄取的图像和接收到的图像中选择期望的图像。记录器将图像选择器所选的图像的信号记录在记录介质中。为此,用户浏览显示器中显示的图像,并且使图像选择器选择用户期望的图像,以便将该图像记录在记录介质中。
可以这样配置,即,成像器所摄取的图像信号可以通过通信器件发送给外部成像装置。当采用这样的配置时,可以在结构相同的多个成像装置之间传输图像,而不管每个图像是由哪个成像装置摄取的,并且可以选择性地记录图像。
本发明还提供一种用于记录分别由多个成像装置摄取的图像的方法,特征在于,每个成像装置能够:将由每个成像装置摄取的图像的信号发送给其他成像装置中的至少一个,并且接收分别由至少一部分其他成像装置所摄取的至少一个图像的信号;合成由每个成像装置所摄取的图像和分别从至少一部分其他成像装置接收的至少一个图像,以在屏幕上同时显示由每个成像装置所摄取的图像和至少一个接收到的图像;和从由每个成像装置所摄取的图像和由至少一部分其他成像装置所摄取的至少一个图像中选择期望的图像,并且记录所选图像的信号。
根据该图像记录方法,摄取各个图像的每个成像装置将每个成像装置摄取的图像信号发送给至少一部分其他成像装置,接收分别由至少一部分其他成像装置摄取的至少一个图像的信号,在显示屏上以合成的方式同时显示每个成像装置摄取的图像和分别从至少一部分其他成像装置接收的至少一个图像,从这些图像中选择期望的图像,并且将所选图像的信号记录在记录介质中。因此,各个成像装置所摄取的图像可以在结构相同的成像装置之间传输,从而在每个成像装置中选择性地记录图像。每个成像装置的用户可以浏览屏幕上显示的图像并且选择期望的图像以记录到记录介质中。
附图说明
图1是示出根据本发明一个实施例的数码摄像机的内部结构的方框图。
图2示出根据本发明实施例的、包括多个数码摄像机的摄像机系统的结构。
图3是控制部分的功能的方框图,其从由成像装置摄取的图像和分别从其他成像装置接收的图像当中选择图像,并且记录所选的图像。
图4图解使用视频解码器的解码处理。
图5示出一屏幕式样的例子,其中以合成方式显示了由成像装置摄取的图像和由其他成像装置摄取的图像。
图6是图解从由成像装置摄取的图像和分别由其他成像装置摄取的图像当中选择图像、并且记录所选图像的处理的流程图。
图7是控制部分中的功能的方框图,其使用图像识别技术从由成像装置摄取的图像和从其他成像装置接收的图像当中自动选择图像,并且记录所选图像。
图8A和8B图解作为图像识别处理的例子的色彩识别处理。
图9是图解根据第一图像选择方法的处理的流程图。
图10是图解根据第二图像选择方法的处理的流程图。
图11是图解根据第三图像选择方法的处理的流程图。
图12示出当摄取沿着田径场中的跑道奔跑的赛跑者的图像时摄像机设置的例子。
具体实施方式
下面将参照附图描述本发明的一个实施例。在下面的描述中,根据本发明的成像装置采用数码摄像机的形式。
图2示出根据本发明实施例的、包括多个数码摄像机的摄像机系统的结构。
如图2所示,在本实施例中,假设本发明应用于包括多个数码摄像机1-3的摄像机系统,每个摄像机能够摄取图像并且将该图像以数字数据的形式记录在记录介质中。数码摄像机1-3能够通过无线通信来相互传输数据。数码摄像机1-3中的每一个具有发送数码摄像机所摄取的图像数据的功能,以及接收由其他成像装置中的任一个摄取的图像数据的功能。此外,数码摄像机1-3中的每一个可以从数码摄像机所摄取的图像和分别从至少一个其他成像装置接收的至少一个图像当中选择图像,并且将所选图像记录在记录介质中。
这样的摄像机系统可以应用于诸如运动会、运动比赛场地、结婚典礼和派对之类的场合,其中多个观众或参与者分别携带数码摄像机1-3。在这些场合中,数码摄像机1-3中的每一个可以选择性地记录视频摄像机自身摄取的图像或从其他视频摄像机接收的图像,从而使得每个用户享受所记录的图像内容的增强,而更少为错过拍摄机会而懊恼。
尽管在图2所示的例子中提供三个数码摄像机1-3,但该摄像机系统可以应用到使用两个或更多数码摄像机的情况。
图1是示出根据本发明一个实施例的数码摄像机的内部结构的方框图。图1代表性地图解了数码摄像机1的内部结构,并且其他数码摄像机2和3具有相同的内部结构。
如图1所示,数码摄像机1包括摄像块10、摄像信号处理部分20、视频编码器30、视频解码器40、音频处理部分50、控制部分60、LCD控制器70、LCD 80、触摸板90、输入部分100、走带机构(tape deck)部分110和无线通信模块120。
摄像块10包括:包括多个镜头的光学块;诸如CCD(电荷耦合器件)之类的成像元件;预处理电路;光学块、CCD等的驱动器;定时发生电路;和其他(未示出)。摄像块10通过成像元件对光学块上入射的光执行光电转换,并且进一步通过预处理电路执行取样/保持和AGC(自动增益控制)处理。所得到的信号然后经过A/D转换,以输出数字图像数据。根据来自控制部分60的控制信号控制光学块和成像元件的操作。
摄像信号处理部分20对从摄像块10输出的图像数据执行诸如AWB(自动白平衡)处理、AF(自动聚焦)处理和AE(自动曝光)处理之类的各种摄像信号处理。经受了各种处理的图像数据输出到视频编码器30和控制部分60。
视频编码器30将经受了摄像信号处理的图像数据编码或压缩成诸如MPEG(运动图像专家组)格式之类的预定视频数据格式,并且将编码的图像数据提供给控制部分60。
视频解码器40对从控制部分60接收的图像数据执行解压缩或解码处理,并且将解码后的图像数据提供给控制部分60。
音频处理部分50包括放大器、A/D转换器、D/A转换器、用于压缩或编码处理和解压缩或解码处理等的电路等。麦克风51和扬声器52连接到音频处理部分50。音频处理部分将表示通过麦克风51收集的音频的信号放大并转换成数字信号,并且进一步将该数字信号压缩或编码成诸如MPEG-AUDIO之类的预定音频数据格式。编码的信号被输出到控制部分60。还可以额外提供模拟音频信号的外部输入端子,以便由音频处理部分50压缩或编码通过外部输入端子输入的信号,并且将编码的信号提供给控制部分60。音频处理部分50对从控制部分60提供的编码的音频数据进行解压缩或解码,并且将解码后的数据转换成模拟信号,模拟信号被放大并播放,即,从扬声器52输出。
控制部分60由微计算机构成,其总体控制数码摄像机1,并且被配置成使得CPU、RAM和ROM(未示出)例如通过系统总线相互连接。控制部分60输出用于通过CPU执行存储在ROM中的程序来控制数码摄像机1的每个功能部分的控制信号,ROM可以包括例如闪速EEPROM(电可擦可编程ROM)。由DRAM(动态RAM)构成的RAM主要用作CPU的工作区,并且用来临时存储例如中间处理结果。
LCD控制器70从控制部分60提供的图像数据生成图像信号,并且将图像信号提供给LCD 80以在其上显示图像。LCD 80具有触摸板90。用户可以通过用手指或指示工具按压触摸板90来输入信息。此外,输入部分100包括各种按键、控制杆、拨号盘和/或其他。当通过触摸板90和/或输入部分100输入一些信息时,从中输出控制信号到控制部分60。
集成了作为记录图像和音频数据的记录介质的磁带的录像带盒(videocassette)111被装入走带机构部分110和从中弹出。走带机构部分110调制从控制部分60提供的图像数据、音频数据和/或其他数据,并且将调制的数据写入到录像带盒111中的磁带上。从磁带读取的信号被解调以提供给控制部分60。
无线通信模块120包括:使用诸如OFDM(正交频分复用)之类的信号调制方法传输信号的天线;RF收发机;用于执行控制部分60的基带处理、接口处理以及其他处理的处理器;以及其他。无线通信模块120根据由控制部分60控制的通信过程与外部数码摄像机2、3进行无线通信。作为通信标准,可以采用例如IEEE(电气和电子工程师学会)802.11g定义的无线LAN。
将对数码摄像机1的基本操作进行描述。
当要记录由数码摄像机1摄取的图像时,在开始记录之前,来自对象的光经历摄像块10的成像元件的光电转换,并且执行预处理以获得被输入到信号处理部分20的数字化的图像数据。经过摄像信号处理的图像数据通过控制部分60输入到LCD控制器70。这样,摄像块10所捕获的实际图像显示在LCD 80上。
当在该状态下通过输入部分100输入开始图像记录的指令时,所摄取的图像数据从摄像信号处理部分20被发送到视频编码器30,在视频编码器30中,数据被压缩或编码,并且转换成预定的视频格式,然后以视频流的形式输入到控制部分60。另一方面,通过麦克风收集的音频信号由音频处理部分50压缩或编码,并且转换成预定音频格式的数据,然后以音频流的形式输入到控制部分60。控制部分60将视频流和音频流多路复用、输出到走带机构部分110、根据预定的方法进行调制、然后顺序记录在录像带盒111中的磁带上。
为了播放记录在录像带盒111中的数据,由走带机构部分110读取数据,并且由控制部分60将其分为视频流和音频流。视频流由视频解码器40解压缩或解码,并通过控制部分60输入到LCD控制器70。这样,在LCD 80上播放图像。另一方面,音频流由音频处理部分50解压缩或解码,并以声音的形式从扬声器52播放或输出。
当要将所摄取的图像发送到其他数码摄像机2、3中的每一个时,从摄像信号处理部分20输出的图像数据通过控制部分60输入到无线通信模块120,并且根据预定的通信过程无线地发送。
当无线通信模块120接收到由其他数码摄像机2、3中的每一个摄取并无线发送的图像时,接收到的数据被输入到控制部分60,并且从中分离出视频流。视频流由视频解码器40解压缩或解码以获得解码后的图像数据,该图像数据通过控制部分60输出到LCD控制器70。LCD控制器70接收到图像后将其显示在LCD 80上。响应于通过输入部分100或触摸板90进行的输入而分离的视频流通过控制部分60被输出到走带机构部分110,并且记录在录像带盒111中的磁带上。
可以连同图像一起记录通过无线通信模块120接收到的音频。然而,在本实施例中,由音频处理部分50压缩或编码的音频数据总是记录在磁带上。
数码摄像机1通过无线通信模块120接收由其他数码摄像机2、3中的每一个摄取的图像,并且将由此接收到的图像和摄像块10所摄取的图像以合成的方式同时显示在LCD 80上,以便允许用户选择期望记录在录像带盒111中的图像。下文中将详细描述这一操作。
图3是示出控制部分60的功能的方框图,所述控制部分60对从由数码摄像机摄取的图像和从其他数码摄像机接收的图像当中选择的图像执行记录。在下面的描述中,数码摄像机1、2和3所摄取的图像将分别称为图像A、图像B和图像C。
如图3所示,控制部分60包括用于显示合成图像的图像合成部分61、用于选择性地记录图像的记录控制部分62、和用于从接收到的信号中提取图像信号的数据分离部分63。
来自摄像信号处理部分20、由摄像块10捕获的实际图像(图像A)数据和经视频解码器40解压缩或解码的图像B和C的数据输入到图像合成部分61。图像合成部分61生成合成图像,其中这些输入的图像显示在单个屏幕上,并且该合成图像输出到LCD控制器70。在该合成图像中,如稍后所述,根据通过触摸板90输入的指令选择记录的图像在所有显示的图像中以最大的尺寸显示,而其他图像以较小的尺寸在子屏幕或分屏幕上显示。
经视频编码器30压缩或编码的图像A的数据和由数据分离部分63从接收的信号中分离的图像B和C的数据输入到记录控制部分62。记录控制部分62将根据来自触摸板90的控制信号从三个图像中选择的图像的数据输出到走带机构部分110,以便让输出的数据记录到录像带盒111中的磁带上。
数据分离部分63从分别从数码摄像机2和3发送并通过无线通信模块20接收的信号中分离出图像B和C的数据,并且将分离出的数据输出到记录控制部分62和视频解码器40。
在通过无线LAN在数码摄像机1-3之间建立通信的情况下,摄像机以不涉及接入点的“专门模式”(ad hoc mode)进行通信。在这种情况下,使用单个通信信道将数码摄像机所摄取的图像发送到一个或多个数码摄像机。因此,当数码摄像机1从数码摄像机2和3接收图像B和C时,为每个图像使用单独的通信信道进行通信。数据分离部分63识别每个通信信道的接收到的分组,并且提取每个图像B、C的数据。
由数据分离部分63分离的各个图像B和C的数据由视频解码器40解压缩和编码,并输入到图像合成部分61。这样,在通过无线通信接收多个图像的情况下,应当解压缩或解码多个信道的图像。为了达到这个目的,可以例如提供对应于要接收的图像数目的多个视频解码器40,以便分别解压缩或解码图像。或者,可以只提供一个视频解码器40,以分时的方式来工作以便解压缩或解码每个图像。
图4图解视频解码器40如何执行图像数据的解压缩或解码。
在该实施例中,控制部分60中的RAM用作临时存储图像数据的缓冲器64。缓冲器64具有其中分别存储有还未经压缩或编码的各个图像A-C的数据的区域64a-64c,以及其中存储有已经过压缩或编码的各个图像B和C的数据的区域64d和64e。这些缓冲器区域可以由例如连接到摄像信号处理部分20、视频编码器30和视频解码器40中的每一个的帧存储器(未示出)来提供。数据分离部分63从接收到的分组中顺序地分离各个图像B和C的数据,并且将分离出的数据写入区域64d和64e。此外,数据分离部分63向视频解码器40输出信道信息,该信息例如包括对应于接收到图像数目的信道数目、以及用于识别发送图像的信道的信道ID。在本实施例中,例如分别为图像B和C分别分配信道ID“Ch-1”和“Ch-2”。
基于通知的信道信息,视频解码器40确定要从/向缓冲器64中的哪个区域读取/写入特定图像数据。当作为信道信息通知两个信号ID时,首先对ID为“Ch-1”的信道执行处理,即,首先从区域64d读取图像B的数据并且将其解压缩或解码,然后将解码后的数据写入区域64b。然后,对ID为“Ch-2”的信道执行处理,即,从区域64e读取图像C的数据并且将其解压缩并编码,然后将编码后的数据写入区域64c。以预定数量的像素交替执行对这两个信道的处理,并且并行地执行对应于图像B和C的相应两个信道的解压缩或解码处理。
现在将描述图像合成部分61如何生成图像并将其显示在LCD 80上。图5示出了一屏幕式样的例子,其中以合成方式显示了由成像装置摄取的图像和由其他成像装置摄取的图像。
当摄取图像的第一个数码摄像机从其他数码摄像机接收图像时,第一数码摄像机的图像合成部分61生成其中同时显示了多个图像的合成图像。该合成图像显示在第一数码摄像机的LCD 80上,并且第一数码摄像机的用户可以通过在所显示的合成图像中的相应位置操控或触摸LCD 80来选择要记录的图像。例如,图5所示的显示合成图像200包括父屏幕201和两个子屏幕202和203。
当前选择要记录的图像显示在父屏幕201中,当前未选择的图像显示在子屏幕202和203中。当用户操控触摸板90或者在触摸板90中触摸子屏幕202和203时,记录所选的子屏幕202或203的图像,并且当前在父屏幕201中显示的图像被所选子屏幕的图像代替。这样,用户可以通过浏览显示合成图像200一次浏览所有可记录的图像,并且选择要记录的图像。
由A、B和C构成的合成图像不限于上面所述的合成图像。例如,屏幕可以被分成其中分别显示图像A、B和C的多个部分。此外,可以采用这样的方式,即,当选择图像时,显示图像的位置或屏幕不改变,但所选图像以某种方式明显地指示出来,例如,改变显示所选图像的屏幕框的色彩。在这种情况下,由第一数码摄像机摄取的图像可以总是以最大尺寸显示。
下面将参照图6描述当执行上述图像记录时执行的处理,图6是图解从由第一数码摄像机所摄取的图像和从其他数码摄像机接收的图像当中选择性地记录图像的处理的流程图。
在步骤S61中,以合成的方式在LCD 80上显示图像A、B和C。当采用图4所示的结构时,将从摄像信号处理部分20输出的图像A的数据顺序写入缓冲器64的区域64a中。来自数码摄像机2和3的图像B和C的数据由视频解码器40解压缩或解码,并且各个解码后的数据被顺序写入区域64b和64c中。图像合成部分61控制缓冲器64中读取数据的区域,并且合成图像。例如,默认所选的图像是由第一数码摄像机摄取的图像A,因此在父屏幕201中显示图像A。
在步骤S62中,基于是否存在来自触摸板90的控制信号,确定是否通过触摸板90进行了图像的选择。当确定进行了选择时,流程转到步骤S63,而当确定未进行选择时,流程转到步骤S64。
在步骤S63中,图像合成部分61根据在步骤S52中进行的选择改变LCD80的屏幕显示。当当前显示图5所示的显示合成图像200时,控制缓冲器64中读取数据的区域以便在父屏幕201中显示所选图像。
在步骤S64中,基于来自输入部分100中放置的预定开关的控制信号或者响应于操作触摸LCD 80上显示的开关按键而从触摸板90发送的控制信号,确定是否进行了指示开始记录的操控。当确定进行了操控时,流程转到步骤S65,而当确定未进行操控时,流程返回到步骤S62。
在步骤S65中,将当前所选图像的数据连同来自音频处理部分50的音频数据一同记录在录像带盒111的磁带上。所记录的音频数据不限于来自音频处理部分50的数据。例如,可以采用这样的方式,即,从另一数码摄像机接收音频数据连同图像数据,并且记录音频数据。或者,在诸如便携半导体存储器之类的另一记录介质装入到第一数码摄像机中的情况下,可以读取记录在该记录介质中的音频数据并将其记录到磁带上。
在步骤S66中,与步骤S62类似,确定是否进行了图像选择。当确定进行了选择时,流程转到步骤S67,而当确定未进行选择时,流程转到步骤S68。
在步骤S67中,图像合成部分61基于步骤S66中进行的选择,改变LCD80的屏幕显示。同时,记录控制部分62切换图像数据的输入,以便使走带机构部分110记录所选图像。要注意的是,此时不进行音频数据的切换,而是连续记录当前正在记录的音频数据。
在步骤S68中,基于是否存在来自输入部分100或触摸板90的控制信号,确定是否要终止记录,当不终止记录时,流程返回到步骤S66。
在存在如上述构成的多个数码摄像机的情况下,每个数码摄像机可以从每个数码摄像机摄取的图像和由其他数码摄像机摄取并通过无线通信接收的图像当中,选择性地在磁带上记录图像。因此,每个数码摄像机的用户可以有效地使用数码摄像机所摄取的图像,从而丰富了所记录的图像的内容,而较少错过拍摄机会。由于在LCD 90上以合成的方式一次显示可记录的图像,以使得用户可以自由地选择图像来记录,因此用户可以在浏览所有图像的同时选择期望的图像,增进了用户的友谊。
不管所选的图像如何,持续记录来自音频处理部分50等的单通道的音频数据。这样,在播放所记录的图像的同时,保证在切换图像时音频的连贯性,不然的话所述连贯性将会恶化使观看者不快。因此,增强了所记录内容的质量。
尽管在数码摄像机1中的磁带上记录图像A、B和C中的任一数据,但也可以适配为记录由这些图像A-C构成的合成图像的数据。在记录合成图像的数据的情况下,可以采用这样的方式,即,可容易地根据通过触摸板90等的操作或操控而进行的选择来改变在合成图像的图像中的相对位置,并且在数码摄像机中,由图像合成部分61生成的合成图像的数据输出到视频编码器30,该视频编码器压缩或编码数据使得输出编码的数据给走带机构部分110,以记录在磁带上。因此,要求数码摄像机能够并行压缩或编码至少两个信道的图像。
可以采用这样的方式,即,当选择从一个数码摄像机接收到的图像并将其记录在另一摄像机中时,通过无线通信向作为图像发送方的该数码摄像机通知进行了这样的选择。在这种情况下,向发送方数码摄像机的用户通知关于由发送方数码摄像机摄取的图像正在被另一数码摄像机记录的事实的指示。例如,做出这样的指示,即,发送方摄像机的LCD上由发送方摄像机摄取的图像的框的色彩改变。
将描述上述实施例的改进。在改进中,使用图像识别技术来确定在每个可记录的图像中是否存在期望的对象,并且根据确定结果自动选择要记录的图像。
图7是示出控制部分60中的功能的方框图,其控制部分通过图像识别技术从数码摄像机摄取的图像和来自其他数码摄像机的图像当中自动选择图像,并且记录所选图像。
在下面的描述中,根据改进实施例的数码摄像机的基本结构与图1所示的相同。在图7中用相同的附图标记表示与图3所示的数码摄像机的那些部件对应的部件。
如图7所示,该数码摄像机的控制部分60包括:特征设置部分65,用于设置对象的特征;图像识别和处理部分66,用于在图像中识别具有所设置的特征的对象;和优先级确定部分67,除了将根据优先级设置将要记录的图像通知给图像合成部分61外,还将其通知给记录控制部分62和数据分离部分63。
特性设置部分65接收与图像中要识别的对象的特征的设置有关的输入,并且将该设置通知给图像识别和处理部分66。例如,可以通过在触摸板90上进行点击或拖曳、或者通过使用输入部分100中预定的开关输入诸如对象的色彩的信息或其他关于对象的信息,以选择LCD 80上显示的图像中感兴趣的对象来输入设置。
图像识别和处理部分66基于来自摄像信号处理部分20的图像A的数据和经过视频解码器40解压缩或解码的图像B和C的数据,并且根据特征设置部分65通知的特征信息,执行图像识别处理,并且将其中存在该对象的每个图像通知给优先级确定部分67。
当被图像识别和处理部分66通知包括对象的多个图像或者没有被通知任何包括对象的图像时,优先级确定部分67根据通过触摸板90或输入部分100输入的关于优先级顺序的信息,将优先级最高的图像通知给图像合成部分61和记录控制部分62。优先级顺序是按照通过触摸板90或输入部分100输入信息的用户的期望设置的。
图8A和8B图解作为图像识别处理的例子的色彩识别处理。
作为数码摄像机可以执行的图像识别处理,例如有色彩识别处理。在色彩识别处理中,使用感兴趣的对象中唯一找到的特定色彩作为特征信息,并且确定在图像中是否存在该色彩。例如,当运动会中的运动员是要记录的对象时,运动员戴着在环境中很少出现的特有色彩的丝带,以使得可以执行色彩识别处理。
图8A示意性示出要处理的图像的像素的矩阵的一部分。该附图示出了在图像的一区域中存在四种色彩CL1-CL4的像素的例子。在该例子中,图像识别和处理部分66根据输入图像中的每个像素的色彩信息计算或累加在给定区域中每种色彩的像素的数目,并且获得如图8B所示的直方图。使用该直方图,可以根据是否存在由特征设置部分65按期望预先设置的预定色彩的像素,确定是否应当记录图像。
可以应用上述方法之外的其他方法。例如,根据对象的轮廓(figure)中的特征点从图像中提取对象。人脸的模式识别就是这样的例子,其可以这样实现,即,使用关于作为对象的人脸的几何特征的信息(例如,包括眼睛、嘴、鼻子和其他部分的形状和位置),或者捕获整个人脸的特征作为具有密度等级(density gradation)的普通二维图像。当在编码要识别的图像中采用面向对象的编码技术时,将有效地提高提取感兴趣的对象的准确度。
回来参照图7,当从输入图像中提取出感兴趣的对象时,图像识别和处理部分66将该图像通知给优先级确定部分67。当仅被通知一个图像时,优先级确定部分67将未经过任何处理的这一图像发送给图像合成部分61和记录控制部分62。然后,图像合成部分61生成一个其中所选的图像被特写的图像,例如,其中所通知的图像显示在父屏幕中的图像。所生成的图像显示在LCD 80上。记录控制部分62选择所通知的图像并将该图像输出到走带机构部分110,该走带机构部分110将图像记录在磁带上。
当被图像识别和处理部分66通知包括感兴趣的对象的多个图像时,优先级确定部分67根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给图像合成部分61和记录控制部分62。优先级顺序可以按照用户的期望设置。例如,可以应用这样一条规则,使得离对象近的摄像机列入优先,或者使相对于对象位于良好角度、能够摄取比其他摄像机好的图像的摄像机列入优先。
在无法通过图像识别和处理部分66从任何图像中提取出感兴趣的对象的情况下,可以基于预置的优先级顺序进行图像选择。现在将通过三个例子说明如何基于优先级顺序选择图像。
图9是图解根据第一图像选择方法的处理的流程图。
在步骤S91中,确定包括感兴趣的对象的至少一个图像是否从图像识别和处理部分66通知给了优先级确定部分67。当作出了肯定的判断时,流程转到步骤S92。当确定没有通知图像时,流程转到步骤S93。
在步骤S92中,优先级确定部分67从至少一个所通知的图像中选择预置的最高优先级的图像,并且将所选图像通知给图像合成部分61和记录控制部分62,以便将所选图像记录在磁带上。
在步骤S93中,优先级确定部分67从所有图像中选择优先级最高的图像,并且将所选图像通知给图像合成部分61和记录控制部分62,以便将所选图像记录在磁带上。
例如,上述第一图像选择方法适用于下述情况:其中将摄取一般最常选择的主要图像的摄像机是事先已知的,并且很少进行向任何其他摄像机所摄取的图像的切换,例如棒球转播。
图10是图解根据第二图像选择方法的处理的流程图。
与图9的流程图类似,在步骤S101和S102中,确定是否从图像识别和处理部分66通知了包括感兴趣的对象的至少一个图像,当作出了肯定的判断时,优先级确定部分67通知至少一个所通知的图像中优先级最高的图像。当在步骤S101中确定没有通知图像时,流程转到步骤S103。
在步骤S103中,确定从所讨论的图像流开始以来是否通知了包括感兴趣的对象的至少一个图像。当没有通知图像时,流程转到步骤S104,但是当通知了至少一个图像时,流程转到步骤S105。
在步骤S104中,优先级确定部分67从所有图像中选择优先级最高的图像,并且通知所选图像。
在步骤S105中,优先级确定部分67选择被通知和最近选择过的图像作为要记录的图像,并且通知所选图像。
图11是图解根据第三图像选择方法的处理的流程图。
与图9和10的流程图类似,在步骤S111和S112中,确定是否从图像识别和处理部分66通知了包括感兴趣的对象的至少一个图像,当作出了肯定的判断时,优先级确定部分67通知至少一个所通知的图像中优先级最高的图像。当在步骤S111中确定没有通知图像时,流程转到步骤S113。
与图10的流程图类似,在步骤S113和S114中,确定从所讨论的图像流开始以来是否通知了包括感兴趣的对象的至少一个图像,当没有通知图像时,从所有图像中选择优先级最高的图像,并且通知所选图像,但是当通知了至少一个图像时,流程转到步骤S115。
在步骤S115中,选择比最近通知和选择过的图像低一级的图像作为要记录的图像,并且通知该图像。
将参照捕获例如赛跑者沿着田径场中的跑道奔跑的图像的情况,描述通过采用第二和第三图像选择方法中的每一个获得的效果。图12是图解当摄取在田径场中的跑道上的赛跑者的图像时摄像机配置的例子的图。
在图12的例子中,为了摄取沿着田径场中的跑道301奔跑的赛跑者302的图像,采用包括三个数码摄像机1-3的摄像机系统。数码摄像机1-3摄取跑道301中各个位置的图像,即,起跑线及附近、中间部分和终点线及附近。然而,三个数码摄像机1-3中没有一个可以摄取整个跑道301的图像,并且在摄像机拍摄的区域之间还留下未包括在任何摄取图像中的区域303和304。因此,在赛跑者开始赛跑的时刻和赛跑者越过终点线的时刻之间捕获赛跑者302的图像期间,存在一段时间,在该段时间中赛跑者没有出现在任何摄像机的屏幕上。
通常,当在数码摄像机1-3所摄取的任何图像中无法识别感兴趣的对象的情况下采用图9所示的选择最高优先级图像的方法时,每当感兴趣的对象变得无法识别时,所选图像就切换回到由最高优先级的数码摄像机所摄取的图像,导致场景不自然的转移。因此,该方法不适合图12的场合。
另一方面,根据图10所示的第二图像选择方法,在当前没有在任何摄取的图像中识别出感兴趣的对象、但从记录开始以来该对象至少被识别出一次的情况下,选择最近选择过的图像,这样在摄取图像期间所选图像就不会不自然地反复切换回同一数码摄像机摄取的图像。
让我们考虑在图12的场合中摄取图像的情况。当赛跑者302开始赛跑时,赛跑者302最初在数码摄像机1所摄取的图像中被识别,并且选择这一图像。然后,在进入区域303后,赛跑者302变得在任何图像中都无法识别,但图10的步骤S105的处理继续选择数码摄像机1所摄取的图像。然后,赛跑者302再次在数码摄像机2所摄取的图像中被识别,并因此选择这一图像。这样,就不会出现起跑线的图像被不自然地插入所记录的奔跑中的赛跑者302的图像中的情况。因此,创建的图像内容的场景保持平滑移动。
另一方面,在图11所示的第三图像选择方法中,在没有在任何摄取的图像中识别出感兴趣的对象、但从记录开始以来该对象至少被识别出一次的情况下,选择比最近选择过的图像低一级的图像。这样,与第二图像选择方法类似,就不会出现不自然地插入最高优先级的数码摄像机所摄取的图像的情况。
让我们考虑数码摄像机1、2和3以该顺序排优先级时在图12的场合中摄取图像的情况。最初,开始赛跑的赛跑者302的图像被数码摄像机1摄取。然后,当赛跑者302进入区域303后,所选图像切换到由第二优先级的数码摄像机2所摄取的图像。在该切换之后,赛跑者302出现在所选图像被切换到的图像中。然后,赛跑者到达区域304,并且所选图像切换到由数码摄像机3所摄取的图像。之后,以与上述类似的方式,赛跑者302出现在所选图像被切换到的图像中。这样,图像之间的切换是沿着赛跑者302运动的方向进行的,使切换显得自然。因此,改善了所创建的运动图像内容的质量。
如上所述,数码摄像机中的每一个具有下述功能,即通过图像识别技术从由每个数码摄像机摄取的图像和从其他数码摄像机摄取的图像中提取对象,并且自动选择从中提取对象的图像以记录所选图像。这样,用户可以在专心摄取图像的同时记录内容增强的图像,而不必观看从其他数码摄像机接收的图像。
上述实施例是本发明对于数码摄像机的应用。然而,本发明可以应用到诸如数码照相机(特别是具有视频捕获功能的照相机)之类的其他成像装置。此外,记录所选图像的记录介质不限于录像带盒,而可以是便携半导体存储器,或者诸如硬盘或光盘之类的盘记录介质。
本发明可应用于没有成像功能的图像记录装置。例如,录像机或使用诸如硬盘或光盘之类的盘记录介质的其他装置,可以适配用来通过无线通信或其他方式接收分别由多个摄像机摄取的多个图像,并且将这些图像以合成的方式同时显示在外部监控器上,以便选择一个图像以记录在记录介质中。可以在存在多个上述数码摄像机的地点设置多个这样的图像记录装置,以便记录从分别由多个数码摄像机摄取的图像当中选择的图像。这样,可以容易地创建内容增强的运动图像。
可以在记录介质中记录图像的合成,而不是单独记录图像。例如,使用图像识别技术将对象从由第一摄像机摄取的第一图像中消除,于是屏幕的左部变成单色背景。然后,将来自另一摄像机的第二图像与第一图像的背景合成。可在所有接收的图像中选择要合成的图像。
可以采用这样的方式,即,从另一网络(特别是诸如因特网之类的广域网)接收多个图像,并且从中选择要记录的图像。例如,将在因特网上流式传输的运动图像和在网站上找到或从记录介质中读取的静止图像实时地合成,并且将合成的图像记录在记录介质中。这允许通过轻而易举地从因特网中的大量内容或用户所拥有的内容中选择图像并合成所选图像来创建新内容。
如上所述,根据本发明的成像装置可以显示由通过成像装置自身摄取的图像和通过外部成像装置摄取并通过通信设备接收的图像所组成的合成图像,以便在显示器上显示由这些图像构成的合成图像,以供用户观看,该用户使用图像选择器选择期望的图像以记录所选图像。这样,丰富了记录图像的内容,而更少地错过拍摄机会。此外,可以采用这样的方式,即,表示成像装置自身摄取的图像的信号通过通信设备发送给外部成像装置。在这种情况下,结构相同的多个成像装置的每一个都可以发送自身摄取的图像并且接收另一装置摄取的图像,从而允许选择性地记录图像。
根据本发明的图像记录方法允许结构相同的多个成像装置的每个发送自身摄取的图像并且接收另一装置摄取的图像,从而允许选择性地记录图像。此外,每个成像装置的用户可以观看显示在屏幕上的图像,并且从中选择一个期望的图像以便将所选图像记录在记录介质中。这样,每个成像装置的用户可以丰富所记录的图像的内容,并且更少地错过拍摄机会。

Claims (3)

1.一种用于摄取和记录图像的成像装置,其特征在于包括:
成像部件,用于摄取图像;
通信部件,用于与一个以上外部成像装置之间进行信号的发送接收;
显示部件,用于显示图像;
设置部件,接受与图像中要识别的对象的特征信息有关的设置;
图像识别部件,根据所述设置部件通知的特征信息,对由所述外部成像装置发送并由所述通信部件接收的接收图像以及由所述成像部件得到的摄取图像,执行图像识别处理;
合成图像生成部件,用于使显示部件以合成方式同时显示由所述成像部件得到的摄取图像、以及所述接收图像;
记录控制部件;以及
优先级确定部件,
若由所述图像识别部件从所述接收图像和摄取图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给所述优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给所述合成图像生成部件和所述记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在所述显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
2.一种用于记录被输入的图像的图像记录装置,其特征在于包括:
图像接收部件,用于接收由多个外部成像装置摄取并发送来的多个图像的信号;
设置部件,接受与图像中要识别的对象的特征信息有关的设置;
图像识别部件,根据所述设置部件通知的特征信息,对来自所述多个外部成像装置的接收图像,执行图像识别处理;
合成图像生成部件,用于进行控制以将由所述图像接收部件接收的多个接收图像以合成方式同时显示在显示部件中;
记录控制部件;以及
优先级确定部件,
若由所述图像识别部件从来自所述多个外部成像装置的所述接收图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给所述优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给所述合成图像生成部件和所述记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在所述显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
3.一种用于记录由多个成像装置摄取的图像的图像记录方法,其特征在于,至少一个所述成像装置:
接受与图像中要识别的对象的特征信息有关的设置;
将本成像装置的摄取图像的信号发送给其他成像装置,并且接收所述其他成像装置的摄取图像的信号;
基于所述特征信息,对从所述其他成像装置接收的接收图像和本成像装置的摄取图像,执行图像识别处理;
将所述本成像装置的摄取图像和所述接收图像以合成方式同时显示在显示部件中;以及
若在图像识别处理过程中从所述接收图像和所述摄取图像中识别出具有与所述特征信息对应的对象的图像,则将该图像通知给本成像装置的优先级确定部件,当仅通知一个图像时,所述优先级确定部件将未经过任何处理的这一图像发送给本成像装置的合成图像生成部件和记录控制部件;当通知多个图像时,则所述优先级确定部件根据预置的图像优先级顺序,从所通知的图像中选择优先级最高的图像,并且将优先级最高的图像通知给所述合成图像生成部件和所述记录控制部件,
当被通知所述未经过任何处理的这一图像或所述优先级最高的图像时,所述合成图像生成部件进行控制,以生成一个其中被通知的图像被特写的图像并显示在显示部件中,并且所述记录控制部件进行控制,以将通知了的图像的信号记录在记录介质中。
CN2008102137855A 2003-06-26 2004-06-23 成像装置、图像记录装置及图像记录方法 Expired - Fee Related CN101355671B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003182626A JP4292891B2 (ja) 2003-06-26 2003-06-26 撮像装置、画像記録装置および画像記録方法
JP182626/03 2003-06-26

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CNB2004800180121A Division CN100499775C (zh) 2003-06-26 2004-06-23 成像装置、图像记录装置及图像记录方法

Publications (2)

Publication Number Publication Date
CN101355671A CN101355671A (zh) 2009-01-28
CN101355671B true CN101355671B (zh) 2011-04-20

Family

ID=33549558

Family Applications (2)

Application Number Title Priority Date Filing Date
CN2008102137855A Expired - Fee Related CN101355671B (zh) 2003-06-26 2004-06-23 成像装置、图像记录装置及图像记录方法
CNB2004800180121A Active CN100499775C (zh) 2003-06-26 2004-06-23 成像装置、图像记录装置及图像记录方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CNB2004800180121A Active CN100499775C (zh) 2003-06-26 2004-06-23 成像装置、图像记录装置及图像记录方法

Country Status (6)

Country Link
US (2) US7725015B2 (zh)
EP (1) EP1638326B1 (zh)
JP (1) JP4292891B2 (zh)
KR (1) KR101000605B1 (zh)
CN (2) CN101355671B (zh)
WO (1) WO2005002218A1 (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4292891B2 (ja) * 2003-06-26 2009-07-08 ソニー株式会社 撮像装置、画像記録装置および画像記録方法
US9148585B2 (en) 2004-02-26 2015-09-29 International Business Machines Corporation Method and apparatus for cooperative recording
JP5055686B2 (ja) * 2004-05-13 2012-10-24 ソニー株式会社 撮像システム、撮像装置、撮像方法
EP1713253A1 (en) * 2005-04-14 2006-10-18 Thomson Licensing Camera system with PIP in viewfinder
CN1941884A (zh) 2005-09-27 2007-04-04 联想(北京)有限公司 一种显示信号无线传输方法和装置以及显示设备
JP4878218B2 (ja) 2006-06-02 2012-02-15 キヤノン株式会社 通信機能を備えた撮像装置、その制御方法、及びプログラム
JP4941709B2 (ja) * 2006-06-29 2012-05-30 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP4978324B2 (ja) 2007-06-14 2012-07-18 株式会社日立製作所 画像記録装置、画像記録システム、画像再生方法
AU2008282223B2 (en) 2007-07-30 2014-07-03 Contour Ip Holding, Llc Components of a portable digital video camera
JP5056359B2 (ja) 2007-11-02 2012-10-24 ソニー株式会社 情報表示装置、情報表示方法および撮像装置
JP5098966B2 (ja) * 2008-11-20 2012-12-12 株式会社ニコン 撮像装置
JP5282959B2 (ja) * 2009-03-31 2013-09-04 カシオ計算機株式会社 撮像装置、再生方法、およびプログラム
JP5709367B2 (ja) * 2009-10-23 2015-04-30 キヤノン株式会社 画像処理装置、および画像処理方法
DK177946B9 (da) 2009-10-30 2015-04-20 Maersk Oil Qatar As Brøndindretning
KR101251391B1 (ko) * 2009-12-18 2013-04-05 에스케이플래닛 주식회사 복수의 단말기간 영상공유시스템 및 방법, 그 단말기
CN110825905A (zh) * 2010-02-19 2020-02-21 株式会社尼康 电子设备
US20110242002A1 (en) * 2010-03-30 2011-10-06 Jonathan Kaplan Hand-held device with a touch screen and a touch strip
EP4007270A1 (en) 2010-09-13 2022-06-01 Contour IP Holding, LLC Portable digital video camera configured for remote image acquisition control and viewing
TWI439134B (zh) * 2010-10-25 2014-05-21 Hon Hai Prec Ind Co Ltd 三維場景數位影像監控系統及方法
US9369635B1 (en) * 2011-01-07 2016-06-14 Apptopus, Inc. Director/camera communication system and method for wireless multi-camera video production
JP2012175175A (ja) * 2011-02-17 2012-09-10 Nikon Corp 画像記憶装置、カメラおよび撮影システム
KR101302803B1 (ko) * 2011-05-26 2013-09-02 주식회사 엘지씨엔에스 네트워크 카메라를 이용한 지능형 감시 방법 및 시스템
JP5967473B2 (ja) * 2011-06-03 2016-08-10 パナソニックIpマネジメント株式会社 撮像装置及び撮像システム
JP5861564B2 (ja) * 2012-06-01 2016-02-16 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9110988B1 (en) 2013-03-14 2015-08-18 Google Inc. Methods, systems, and media for aggregating and presenting multiple videos of an event
JP5720711B2 (ja) * 2013-03-21 2015-05-20 カシオ計算機株式会社 撮像装置、通信方法及びプログラム並びに通信システム
KR102072509B1 (ko) * 2013-06-03 2020-02-04 삼성전자주식회사 그룹 리코딩 방법, 저장 매체 및 전자 장치
KR20150027934A (ko) * 2013-09-04 2015-03-13 삼성전자주식회사 다각도에서 촬영된 영상을 수신하여 파일을 생성하는 전자 장치 및 방법
JP6355319B2 (ja) * 2013-11-13 2018-07-11 キヤノン株式会社 再生装置及びその制御方法、管理装置及びその制御方法、映像再生システム、並びにプログラム及び記憶媒体
CN103841322A (zh) * 2014-02-20 2014-06-04 宇龙计算机通信科技(深圳)有限公司 一种终端及协同拍照方法
US10932103B1 (en) * 2014-03-21 2021-02-23 Amazon Technologies, Inc. Determining position of a user relative to a tote
US20150281744A1 (en) * 2014-03-31 2015-10-01 Karen Chapman Viewing system and method
US9313449B2 (en) * 2014-04-30 2016-04-12 Adobe Systems Incorporated Cross-device information exchange via web browser
CA2977204C (en) 2015-03-05 2023-04-04 Sony Corporation Photoelectric conversion of video data having a predetermined photoelectric conversion characteristic
JP6561724B2 (ja) * 2015-09-24 2019-08-21 カシオ計算機株式会社 電子機器、制御方法及びプログラム
JP2017079392A (ja) * 2015-10-20 2017-04-27 株式会社レイトロン 無線撮影システムおよび撮影装置
US10447965B2 (en) * 2016-10-04 2019-10-15 39Degrees C Inc. Apparatus and method for processing image
KR101730115B1 (ko) * 2016-10-04 2017-04-26 주식회사 삼십구도씨 영상 처리 장치 및 영상 처리 방법
JP6558379B2 (ja) * 2017-01-17 2019-08-14 京セラドキュメントソリューションズ株式会社 画像形成システム
JP6402816B2 (ja) * 2017-10-27 2018-10-10 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
CN107948512A (zh) * 2017-11-29 2018-04-20 奇酷互联网络科技(深圳)有限公司 拍摄方法、装置、可读存储介质及智能终端
CN111083364B (zh) * 2019-12-18 2023-05-02 荣耀终端有限公司 一种控制方法、电子设备、计算机可读存储介质、芯片
US11910103B2 (en) * 2020-07-28 2024-02-20 Eys3D Microelectronics, Co. Electronic system and image aggregation method thereof
JP6815555B1 (ja) * 2020-09-02 2021-01-20 Kddi株式会社 画像表示装置及びプログラム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0451690A (ja) 1990-06-19 1992-02-20 Fujitsu Ltd テレビ会議録画制御方式
JP2776654B2 (ja) 1991-08-06 1998-07-16 日本電気株式会社 テレビ会議システムの回線切替方式
JPH06197335A (ja) 1992-12-24 1994-07-15 A W New Hard:Kk テレビ電話
JPH06325180A (ja) * 1993-05-14 1994-11-25 Matsushita Electric Ind Co Ltd 移動体自動追跡装置
JPH07115611A (ja) 1993-10-18 1995-05-02 Toshiba Corp 撮像装置
US5572248A (en) * 1994-09-19 1996-11-05 Teleport Corporation Teleconferencing method and system for providing face-to-face, non-animated teleconference environment
JPH0946694A (ja) 1995-07-31 1997-02-14 Mitsubishi Electric Corp 監視カメラ自動制御装置
JP3766999B2 (ja) 1995-12-28 2006-04-19 ソニー株式会社 撮像装置
JPH09233458A (ja) 1996-02-28 1997-09-05 Toshiba Corp 画像選択方法および画像選択装置
JP4280337B2 (ja) 1998-10-09 2009-06-17 キヤノン株式会社 撮像装置およびその制御方法
US6359837B1 (en) * 1999-06-30 2002-03-19 Casio Computer Co., Ltd. Camera, camera system, information recording system, timepiece, and link system for camera and timepiece
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
JP3955170B2 (ja) * 2000-07-03 2007-08-08 富士フイルム株式会社 画像検索システム
JP3656823B2 (ja) 2000-09-04 2005-06-08 三菱電機株式会社 自動監視方法および自動監視装置
US7450156B2 (en) * 2000-09-13 2008-11-11 Fujifilm Corporation Communication device, communication system, communication method and communication terminal apparatus
US7003795B2 (en) * 2001-06-26 2006-02-21 Digeo, Inc. Webcam-based interface for initiating two-way video communication
US20030041333A1 (en) * 2001-08-27 2003-02-27 Allen Paul G. System and method for automatically answering and recording video calls
JP4292891B2 (ja) * 2003-06-26 2009-07-08 ソニー株式会社 撮像装置、画像記録装置および画像記録方法
US20060007317A1 (en) * 2004-07-07 2006-01-12 Rehn-Lieh Lin Method for displaying remote images
JP4419759B2 (ja) * 2004-09-01 2010-02-24 株式会社ニコン 電子カメラシステム
US7619658B2 (en) * 2004-11-15 2009-11-17 Hewlett-Packard Development Company, L.P. Methods and systems for producing seamless composite images without requiring overlap of source images
US9082456B2 (en) * 2005-01-31 2015-07-14 The Invention Science Fund I Llc Shared image device designation
JP2007028555A (ja) * 2005-07-21 2007-02-01 Sony Corp カメラシステム,情報処理装置,情報処理方法,およびコンピュータプログラム

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
JP平4-51690A 1992.02.20
JP特开2002-77887A 2002.03.15
JP特开平5-41743A 1993.02.19
JP特开平6-197335A 1994.07.15
JP特开平9-233458A 1997.09.05

Also Published As

Publication number Publication date
KR101000605B1 (ko) 2010-12-10
US20060280496A1 (en) 2006-12-14
JP4292891B2 (ja) 2009-07-08
US20100209078A1 (en) 2010-08-19
US7725015B2 (en) 2010-05-25
EP1638326B1 (en) 2014-07-09
CN100499775C (zh) 2009-06-10
WO2005002218A1 (ja) 2005-01-06
EP1638326A4 (en) 2011-02-09
EP1638326A1 (en) 2006-03-22
JP2005020385A (ja) 2005-01-20
CN101355671A (zh) 2009-01-28
KR20060028644A (ko) 2006-03-30
US8045850B2 (en) 2011-10-25
CN1813473A (zh) 2006-08-02

Similar Documents

Publication Publication Date Title
CN101355671B (zh) 成像装置、图像记录装置及图像记录方法
CN102906818B (zh) 存储视频摘要的方法和显示相应于视频摘要的视频帧的系统
JP7080208B2 (ja) 複数のメディアストリームの処理
CN1939054B (zh) 用于在pvr窍门模式回放期间提供可见消息的系统
CN102193794B (zh) 链接实时媒体情境到相关的应用程序和服务
CN103190156A (zh) 视频比特流的传输系统
JP4548297B2 (ja) 情報処理装置及び情報処理方法
CN105874780A (zh) 对一组图像生成文本色彩的方法和装置
CN106416220A (zh) 将视频自动插入照片故事
US20110032979A1 (en) Image display control device and imaging device provided with the image display control device, image processing device and imaging device using the image processing device
US20080240503A1 (en) Image Processing Apparatus And Image Pickup Apparatus Mounting The Same, And Image Processing Method
CN102630003B (zh) 图像数据记录设备及其控制方法
CN101276410A (zh) 图像处理装置和安装了它的摄像装置、图像处理方法
CN101945216A (zh) 摄像装置和动态图像再现方法
US20180098025A1 (en) Apparatus and method for processing image
JP5169239B2 (ja) 情報処理装置および方法、並びにプログラム
US10447965B2 (en) Apparatus and method for processing image
US20180332439A1 (en) Method, device, and non-transitory computer-readable recording medium for supporting relay broadcasting using mobile device
US7558466B2 (en) Moving image playback apparatus and its control method, computer program, and computer-readable storage medium
KR100691530B1 (ko) 정보표시장치 및 정보표시방법
JP4371170B2 (ja) 撮像装置、画像記録装置および画像記録方法
KR100539524B1 (ko) 양방향 데이터 송수신 방법
US8255433B2 (en) Recorder
WO2007023440A2 (en) Video processing apparatus
JP2002281438A (ja) 要約映像特定装置、および要約映像特定方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110420

Termination date: 20180623

CF01 Termination of patent right due to non-payment of annual fee