CN101017493A - 具有链接信息的索引信息的产生装置和方法 - Google Patents

具有链接信息的索引信息的产生装置和方法 Download PDF

Info

Publication number
CN101017493A
CN101017493A CNA2006101689290A CN200610168929A CN101017493A CN 101017493 A CN101017493 A CN 101017493A CN A2006101689290 A CNA2006101689290 A CN A2006101689290A CN 200610168929 A CN200610168929 A CN 200610168929A CN 101017493 A CN101017493 A CN 101017493A
Authority
CN
China
Prior art keywords
information
master image
critical area
link information
link
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006101689290A
Other languages
English (en)
Inventor
菊地弘晃
今井田秀之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101017493A publication Critical patent/CN101017493A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74Browsing; Visualisation therefor
    • G06F16/748Hypervideo
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815Electronic shopping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8583Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by creating hot-spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Abstract

在此揭露了一种具有链接信息的索引信息产生装置。该装置包括一个数据库,其列出了应用到关键区域的区域识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域。该装置还包括一个信息嵌入部分,其配置为参考所述数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息。

Description

具有链接信息的索引信息的产生装置和方法
相关申请的交叉参考
本发明包括涉及2005年7月6日于日本专利局提交的日本专利申请JP2005-198172的实质内容,其全部内容在此结合进来作为参考。
技术领域
本发明涉及用于产生具有链接信息的索引信息的装置和方法,其中该链接信息被嵌入由操作者任意指定的关键区域中。本发明还涉及一种用于产生图像数据的装置和方法,其中响应于对嵌入标签信息的部分区域的点击操作,与该部分区域相关联的信息被显示在屏幕上。本发明还涉及一种记录媒体,其中记录有用于实施所述功能的程序。
背景技术
同近些年来通信基础设施的建立和记录容量的增长一样,还存在将至此所提出的各种服务应用到实际中的需求。所描述的这种技术在例如日本专利公开号为Hei 7-231308的文件中揭露。
发明内容
然而,还没有建立一种技术能够通过实际工作量应用标签信息到运动图像中的特定部分区域。
本发明的发明人提出一种技术,其可通过实际工作量应用标签信息到主图像中。
(A)具有链接信息的索引信息
首先,本发明的发明人提出,作为产生具有链接信息的索引信息的装置,该装置具有以下处理功能:
(a)模式1
(a1)数据库,其列出了应用到关键区域中的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;以及
(a2)处理功能,配置为参考该数据库在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息。
(b)模式2
(b1)数据库,其列出了应用到关键区域中的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;以及
(b2)处理功能,配置为参考该数据库在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息。
(B)具有标签信息的图像数据
此外,本发明的发明人还提出,作为可以响应于对嵌入标签信息的特定区域的点击操作而在屏幕上显示与该特定区域相关联的信息的图像数据的产生装置,该装置具有以下处理功能:
(a)模式1
(a1)数据库,其列出了应用到关键区域的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;
(a2)处理功能,配置为参考该数据库在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息;以及(a3)处理功能,配置为以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
(b)模式2
(b1)数据库,其列出了应用到关键区域的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;
(b2)处理功能,配置为参考该数据库在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息;以及(b3)处理功能,配置为以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
本发明的发明人提出了通过将链接信息嵌入到索引信息来提供具有链接信息的索引信息的技术,该索引信息列出了应用到形成关键图像的关键区域的区域识别信息和时间信息之间的对应关系,或该索引信息列出了应用到形成关键图像的关键区域的对象识别信息和时间信息之间的对应关系。
只要区域识别信息和链接信息之间的对应关系或链接信息和对象识别信息之间的对应关系被确定,关键区域和链接信息之间的协调就可以有效地实施。
此外,本发明的发明人还提出了以相互关联的关系输出具有链接信息的索引信息、主图像和关键图像的技术。因此,用户可以使得与嵌入有标签信息的部分区域相关联的信息只在观看者在主图像的屏幕上点击该部分区域时才被显示。
本发明的以上和其它的目的、特征和优点将从以下的描述和所附的权利要求中变得明显,并结合附图,其中相同的部分或元件用相同的参考符号标明。
附图说明
图1是显示线性编辑系统的配置例子的方框图;
图2A至2C显示工作屏幕的显示例子和产生的关键图像之间的对应关系的示意图;
图3是显示标签信息产生装置的功能性配置例子的方框图;
图4是图示关键图像和指定标签信息的关键信息之间的对应关系的图表;
图5是图示索引信息和定义标签信息的关键信息之间的对应关系的类似图;
图6图示了索引信息的例子;
图7是图示标记操作和响应于该标记操作而执行的内部过程之间的对应关系的流程图;
图8是图示被安装到关键信息输入装置中的程序的处理的实质的概要的流程图;
图9是显示非线性编辑系统的配置例子的方框图;
图10A和10B是显示处理图像的示意图,其中主体的图像的鞋子被设置为关键区域;
图11是显示关键区域设置部分的内部配置例子的方框图,该关键区域设置部分基于颜色状况对关键区域实施自动提取功能;
图12是显示处理图像的示意图,其中关键区域被设置以追踪主题图像的每个鞋子的特征量;
图13是显示关键区域设置部分的内部配置例子的方框图,该关键区域设置部分实施对关键区域的自动追踪功能;
图14A和14B是图示在起始点选择的工作屏幕上设置的关键区域和在终止点选择的另一个工作屏幕上设置的关键区域之间的位置关系的示意图;
图15是显示主体图像的鞋子在这两个不同时间点之间线性移动的轨迹的示意图;
图16是显示关键区域设置部分的内部配置的另一例子的方框图,该关键区域设置部分实施对关键区域的自动追踪功能;
图17A、17B、18A和18B是显示以固定形状准备的关键区域的形状例子的示意图;
图19A和19B是图示主图像的尺寸和关键图像的尺寸之间的关系的示意图;
图20A和20B是显示索引信息中的链接信息的嵌入图像的概图;
图21是显示链接信息嵌入部分的内部配置例子的概图;
图22是图示具有链接信息的索引信息的产生例子的视图;
图23是显示用于带有标签信息的图像数据的产生装置的内部配置例子的方框图;
图24是图示相应于用于带有标签信息的图像数据的产生装置的程序的处理实质的概要的流程图;
图25至31B是图示不同数据输出例子的示意图;
图32是显示图像再现系统的例子的方框图;
图33是显示图像再现系统通过使用计算机实施的配置例子的方框图;
图34是图示观看者的操作和响应于该操作而执行的内部过程之间的对应关系的流程图;
图35是图示相应于标签信息显示控制功能的程序的处理主体的概要的流程图;
图36A和36B是图示到主图像的指针的显示和相应的在特定时间点的关键图像之间的对应关系的示意图;
图37是显示相关信息的显示例子的示意图;以及
图38至41B是显示向导功能的不同显示例子的示意图。
具体实施方式
下面,本发明的一个优选实施例通过结合标签信息的产生、分配和再现阶段而被描述。
应当注意到,对于附图中没有显示的或当前说明书中没有描述的细节,相关技术领域的已知技术可被应用。
此外,下面描述的实施例仅仅是本发明的例子,并且本发明并不局限于特定的实施例。
A.标签信息产生装置
以下是一种标签信息的产生装置,其可通过实际工作量产生标签信息。
A-1.线性编辑系统
标签信息产生装置可被实施为一个线性编辑系统。
a.系统配置
图1显示了线性编辑系统的配置例子。
参考图1,所示的线性编辑系统包括主图像再现装置1,整合输出装置3,关键信息输入装置5,显示装置7,关键图案再现装置9和关键图像记录装置11。
主图像再现装置1再现记录在磁带上的主图像。主图像再现装置1可以例如由VTR(视频磁带记录器)来形成。由主图像再现装置1再现的主图像被输出到整合输出装置3。同时再现的时间码被输出到关键信息输入装置5。应当注意到时间码是提供主图像的时间位置的时间信息的各种类型之一。
整合输出装置3整合关键图案,该关键图案给输入的主图像提供标签信息的嵌入信息。该整合输出装置3可以例如由特征生成器形成。该关键图案基于由整合输出装置3从关键信息输入装置5中提供的关键区域信息来产生。该关键区域信息被作为在屏幕和选择范围内关于关键图案位置的信息而被给出。该整合图像被输出给显示装置7。
图2A至2C显示了显示装置7的屏幕的例子。特别地,图2A显示了被选择作为标签信息嵌入屏幕的屏幕的例子(工作屏幕的例子)。该工作屏幕被给出作为主图像,该主图像在主图像再现装置1的再现动作暂时停止时被输出。
图2B显示了工作屏幕的例子,其中由整合输出装置3产生的关键图案21和23被与主图像整合。在这个例子的情况中,关键图案21具有这样的位置和范围使其包围显示在屏幕右侧的整个车辆。同时,关键图案23具有这样的位置和范围使得它们单独包围显示在屏幕左下方的两个鞋子。
关键图案的形状可以由任意方法来确定,例如其中由整合输出装置3自动选择的方法、其中形状是通过关键信息输入装置5而选择的另外的方法或其中形状是使用例如套索(lasso)的画图工具而任意指定的进一步的方法。在图2A至2C的情况中,方形和圆形通过关键信息输入装置5而选择。
关键图案21和23中的每个都要在其中放置的位置和范围可由操作者通过对显示装置7的整合屏幕的确认而确定。
以下是被称作“关键区域”的单独的关键图案被分配在屏幕上的位置和范围。
关键信息输入装置5用于输入定义标签信息的关键信息。
在本说明书中,“标签信息”表示嵌入任意指定的部分区域中的信息。
在本线性编辑系统中,“关键图像”和“索引信息”被产生作为标签信息。
这里,“关键图像”表示与主图像成对并且指示标签信息的嵌入位置的图像。同时,“索引信息”是代表关键区域和该关键区域关于关键图像的每个时间点的识别信息之间的对应关系的信息。
同时,“定义标签信息的关键信息”表示对于关键区域和索引信息的产生是必要的信息,例如,位置、范围、时间和区域等的识别信息。然而在本例子的情况中,时间信息作为时间码从主图像再现装置1中被给出。
关键信息输入装置5可以例如由视频编辑机器或计算机形成。在图1中,显示了关键信息输入装置5由计算机形成。
关键图案的位置和范围通过可以是鼠标等的输入装置5A来输入。同时,用于关键图案的识别的信息通过使用键盘的键操作,鼠标的点击操作或类似的操作而被输入。
应当注意到,对于关键图案的位置和范围,可以给出一个要被标记的部分区域的大致位置和大致范围。因此,并不需要严格的定位。所以,对关键区域的设置可以在实际工作量的范围内而实施。例如,这种设置可以通过与通用编辑操作的标题插入所需的工作量相同的工作量来实施。
在本例子的情况中,灰度等级数值(亮度数值)被使用作为用于识别关键图案的信息的一种。当给定灰度等级数值时,即使关键区域的设定部分的亮度发生变化,该设定部分也能够被确认。然而,也有可能标签信息在其分发时经历压缩过程。因此,优选地该灰度等级数值以这样的程度隔开,即即使在这样的压缩过程之后其也能够被区别。例如,数值“20”被输入用于相应于车辆的关键图案21,而另一个数值“40”被输入用于相应于鞋子的关键图案23。
关键信息输入装置5输出关键区域信息和区域识别信息到关键图案产生装置9以产生关键图像,并输出时间码到关键图像记录装置11。此外,关键信息输入装置5输出索引信息,该索引信息是关键区域和具有工作屏幕的时间信息的区域识别信息的结合。
关键图案产生装置9基于为工作屏幕设置的关键区域信息和区域识别信息产生关键图案。该关键图案产生装置9可以由例如关键发生器或特征发生器形成。图2C显示了包括关键图案21和23的屏幕的例子。
还应当注意到关键图案产生装置9不断地产生相同的关键图案直到接收到新的关键区域信息和新的区域识别信息为止。这表示关键信息不需要对所有帧输入。从这一点,工作量可以大大降低。
然而,如果关键图案的发生位置是固定的,那么在标签信息嵌入位置和目标对象(主体图像)之间会显现出一些偏移。因此,操作者会确认显示装置7的屏幕并适当修改或重置关键区域的位置和范围。
由关键图案产生装置9产生的关键图案被与时间码一同提供给关键图像记录装置11,在那里其被记录为具有等于主图像的时间长度的关键图像。
还应注意到,由于该装置被形成为线性编辑系统,因此使用磁带作为关键图像记录装置11的记录媒体。
b.标签信息产生装置的功能性配置
作为标签信息产生装置的线性编辑系统的功能性配置被描述。应注意到下面描述的索引信息包括时间信息,区域识别信息和对象识别信息。
图3显示了作为标签信息产生装置的功能性配置。参考图3,该标签信息产生装置包括时间信息获取部分31,关键区域设置部分33,识别信息应用部分35,对象识别信息应用部分36,关键图像产生部分37和索引信息产生部分39。
在这些组件中,时间信息获取部分31,关键区域设置部分33,识别信息应用部分35,对象识别信息应用部分36和索引信息产生部分39通过关键信息输入装置5来实施。同时,关键图像产生部分37通过关键图案产生装置9和关键图像记录装置11来实施。
时间信息获取部分31实现获取为工作屏幕选择的主图像的时间信息的处理功能。
关键区域设置部分33实现将关键区域设置为相应于由操作者任意指定的主图像中部分区域的位置的处理功能。
识别信息应用部分35实现对设置的关键区域应用区域识别信息以允许区分关键区域和外围区域的功能。
对象识别信息应用部分36实现提供识别信息以允许对设置的关键区域指定的对象进行识别的功能。在本例子的情况下,由于区域识别信息被作为数字数值而给出,因此对象识别信息被作为字符而给出。因此,确认操作可以通过对象识别信息而更容易地被执行。还应注意到对象识别信息可作为数字数值被给出。
关键图像产生部分37是实现处理功能以产生与主图像相同的时间信息被加在其上的关键图像的功能性部分,并且相应于产生关键图像的功能,其中区域识别信息被应用到通过工作屏幕设置的关键区域。图4图示了关键图像和定义标签信息的关键信息之间的对应关系。从图4中可以看出关键图像被作为一个其时间位置与主图像以一对一的对应关系相对应的图像而产生。
索引信息产生部分39对应于产生索引信息的处理功能,该索引信息列出了在区域识别信息,时间信息和应用到关键区域的对象识别信息之间的对应关系。
图5图示了索引信息和定义标签信息的关键信息之间的对应关系。如从图5中可看到的,索引信息以其中记录了时间信息,区域识别信息和对象识别信息的文本类型或XML文档类型的信息而给出。
图6图示了索引信息的例子。时间码以“小时:分:秒:帧”的形式被给出。因此,图6表示了在晚于主图像的“00小时:00分:10秒:00帧”之后有两条标签信息被设置。
换句话说,图6表示了使用灰度等级数值“20”和“40”设置的两条标签信息。
在图6中,对象识别信息也被记录,因此操作者可以确认每条区域识别信息与哪个主图像的对象(主体图像)相对应。由于对象识别信息被插入,因此其也可被利用来确认区域识别信息和期望的对象是否互相符合。
c.标记操作和内部处理之间的关系
图7示出了标记操作和响应于该标记操作而执行的内部过程之间的对应关系。应当注意到标记操作通过关键信息输入装置5的输入装置5A而被输入。
当接收到工作屏幕的选择操作时,关键信息输入装置5发布再现主图像的指令到主图像再现装置1。此外,当接收到工作屏幕的确定操作时,关键信息输入装置5发布暂时停止再现操作的指令到主图像再现装置1。
此外,当在工作屏幕的确定之后接受部分区域的指令输入时,关键信息输入装置5将关键区域信息提供给整合输出装置3。此时,工作屏幕(主图像的静态屏幕)的关键图案的整合图像被显示在显示装置7的屏幕上。
此外,当关于指定部分区域的区域识别信息的指定输入被接受时,关键信息输入装置5提供区域识别信息给整合输出装置3并输出该区域识别信息到关键图案产生装置9。接下来,关键图像被产生。因此,关键信息输入装置5基于区域识别信息,时间信息和对象识别产生索引信息。
图8图示了将安装到关键信息输入装置5中的程序的过程实质。
参考图8,该程序决定工作屏幕是否被确定(S1)。如果工作屏幕被确定,那么该程序获取时间码作为时间信息(S2)。然后,该程序接收对关键区域的设置(S3)。在关键区域被设置之后,该程序接受对与该关键区域对应的区域识别信息的设置(S4)。
然后该程序决定标记是否结束(S5)并重复对新的关键区域的设置过程直到决定了结束。
然后,在标记结束之后,该程序发布输出最终确定的索引信息和关键图像的指令(S6)。
标签信息产生过程由执行上述处理程序的关键信息输入装置5来实施。
d.效果
通过将主图像再现装置1,整合输出装置3,关键图案产生装置9和关键图形记录装置11连接到具有上述处理功能的关键信息输入装置5以构建一个线性编辑过程,通过实际工作量来记录标签信息的系统能够被实施。
换句话说,关键区域可以不通过输入例如元数据的基于文本的数据,而简单地通过对区域的视觉指定来设定。此外,根据主图像的实质,大部分上述工作可被自动化。
此外,曾经设置的关键区域还关于随后的帧而继续直到关于新的选择屏幕的新的关键区域被设置(还包括同样的对象被使用的情况)。因此,可以实现输入工作量的降低。
此外,由于灰度等级数值被采纳作为区域识别信息,不同的关键区域可以从不同的亮度中被简单地、视觉地确定。
此外,由于列出时间信息和独立关键区域的信息之间的对应关系的索引信息被自动产生,所以当与手动输入相比较时,与独立关键区域的信息协调操作可以被有效地执行。
A-2.非线性编辑系统
标签信息产生装置也可被实施为非线性编辑系统。
a.系统配置
图9显示了非线性编辑系统的配置例子。该非线性编辑系统基本上由计算机本身形成。
参考图9,所示的非线性编辑系统包括CPU(中央处理单元)(处理器)41,输入装置43,显示装置45,硬盘驱动装置47和主存储器49。
特别地,图1中线性编辑系统的主图像再现装置1和关键图像记录装置11由硬盘驱动装置47代替。同时,整合输出装置3和关键图案产生装置9通过由使用主存储器49作为工作区域的CPU 41所执行的程序来实施。
当然,关键信息输入装置5也通过由使用主存储器49作为工作区域的CPU41所执行的程序来实施。
例如,当确定工作屏幕时,从硬盘驱动装置47读出的主图像通过主存储器49被输出到显示装置45。
此外,当设置关键区域时,由输入装置43的操作产生的关键图案和主图像在主存储器49中整合并被输出到显示装置45。因此,通过输入装置43输入的索引信息被反映到关键图案上。
应当注意到,在主存储器49中产生的关键图案(图2C和图4)和索引信息(图5)被硬盘驱动装置47所记录。
b.效果
同样在非线性编辑系统中,可以实施与线性编辑系统中那些相同的效果。换句话说,能够通过实际工作量记录标签信息的系统可以被实施。
A-3.关键区域输入辅助功能
a.相应于颜色条件的区域提取
在前面描述中,关键区域由手动操作设置。
这里,描述了从工作屏幕中指定的部分区域中设置满足由操作者预先指定的颜色条件的区域做为关键区域的技术。
图10A和10B显示了处理图像。特别地,图10A和10B图示了其中主体图像的鞋子被设置为关键区域的例子。应当注意到主题图像的鞋子是红颜色的。
在这个例子中,如从图10A中看到的,包括鞋子在内的广阔区域51被指定。此时,如果特别的颜色条件(例如,从色调数值XX到另一色调数值YY范围内的红色级别)被确定为关键区域的提取条件,那么仅相应于鞋子的部分区域53可被准确提取。应当注意到提取条件的登记可以在区域指定之前或之后执行。
图11显示了关键区域设置部分33(图3)的内部配置的例子,其实施了相应于颜色条件的关键区域自动提取功能。
参考图11,关键区域设置部分33包括指定区域保持部分61,区域提取部分63和提取条件保持部分65。在提到的组件中,指定区域保持部分61是用于存储通过输入装置指定的区域51的存储区域。换句话说,该指定区域保持部分61是用于保持提供提取处理范围的区域的保存区域。
区域提取部分63是信号处理部分,其从主图像中指定的区域51内提取满足颜色条件的部分区域。
提取条件保持部分65是用于保持提取条件的存储区域。在本例子中,提取条件保持部分65被使用来保持通过输入装置指定的颜色条件。
该处理功能是有效的,特别是当将要被设置为关键区域的区域和外围区域之间的色调差别很大时。
应当注意到,提取条件不仅可包括颜色状态还可包括特别的形状或图案。同样在其它情况中,用于输入的工时数量的简化可以类似于基于颜色条件的区域提取情况而被实施。
b.基于特征量的对关键区域的追踪功能
在前面描述中,关键区域由手动操作设置。
这里,描述了用于存储设置的关键区域的特征量和响应于主图像中主体的运动而自动追踪关键区域的技术。
图12图示了处理图像。图12还表示了其中主体图像的鞋子被设置为关键区域的例子。
当关键区域追踪功能被采纳时,只要为其设置关键图像的主图像保留在屏幕中,关键图像也可被移动以追踪主图像中主体图像的运动,如在图12中看到的那样。
当上述追踪功能被结合时,操作者的操作量被大大减少。
图13显示了关键区域设置部分33(图3)的内部配置,其实施对关键区域的自动追踪功能。
参考图13,该关键区域设置部分33包括特征量存储部分81和区域追踪部分83。特征量存储部分81是用于存储相应于通过输入装置设置的关键区域的主图像的特征量(例如,色调,亮度,形状等等)的存储区域。
区域追踪部分83是信号处理部分,其从主图像中提取满足存储的特征量的部分区域并将所提取的区域输出作为关键区域信息。应当注意到,已知的图像处理技术被应用于提取部分区域的技术。
还应注意到,在实施例中,提出了关键区域的手动输入,可选地,这种特征量可以在关键区域的设置操作之前独立地被登记,使得满足特征量的部分区域被从主图像中自动提取设置为关键区域。
对于特征量,例如特定的颜色范围,特定颜色的组合,特定符号或形状或特定字符串可以被使用。对所述功能的使用允许标签信息应用操作的相当部分自动化。
此外,有可能自动应用标签信息到一些实时广播节目。例如如果预先登记了体育实时转播节目中广告牌的特性,那么在屏幕上出现的广告牌可以被自动设置为关键区域。换句话说,在广告牌中自动嵌入标签信息技术上是可能的。
例如当广告牌具有红颜色时,如果红色的颜色范围被指定为特征量,那么屏幕中红色的部分区域可以被设置为关键区域。还应注意到,根据图像的拾取角度,另一个满足特征量而又不是广告牌的部分区域例如运动员或观众有可能被提取。在该例子中,操作者可点击广告牌以使得其它区域被从设置主体中除去不作为关键区域。
可选地例如,当广告牌包括在蓝色背景上的黄色字符时,如果这个颜色图案被指定作为特征量,那么包括类似颜色图案的部分区域可被设置为关键区域。
此外例如,如果广告牌的形状或代表广告牌的特殊符号被设置为特征量,那么包括类似形状或符号的部分区域可被设置为关键区域。
此外例如,如果代表出现在广告牌上的企业或商品名称的字符串被指定为特征点,那么包括类似字符串的部分区域可被设置为关键区域。在这个例子中,可以结合使用字符识别技术。
c.内插过程对关键区域的追踪功能
在前面描述中,描述了基于特征量的对关键区域的自动追踪功能。
在此,描述了当设置为关键区域的主体图像从特定工作屏幕(起始点)到另一工作屏幕(终止点)的运动轨迹被估计时,由使用在这两个屏幕上设置的关键区域的位置信息的内插算法操作在这两个屏幕之间自动设置关键区域位置的技术。
图14A和14B图示了处理图像。图14A和14B还图示了主体图像中的车辆被设置为关键区域的例子。
特别地,图14A图示了关键区域被设置为在屏幕上被选择作为起始点的车辆所在的部分区域91时的状态。
图14B图示了关键区域被设置为在屏幕上被选择作为终止点的车辆所在的部分区域93时的状态。
图15显示了主体图像的车辆在两个时间点之间线性移动的轨迹。在这个例子中,在这两个时间点之间的任意时间点,标记的主体中的车辆在考虑到运动的加速度而被估计位于部分区域95。
因此,如果采用了自动设置被估计的部分区域作为关键区域的技术,那么可以预见通过小量的工作来实现相当准确的区域指定。
此外,当与上面描述的基于特征量的追踪过程相比较时,算法操作量被减少。
图16显示了关键区域设置部分33(图3)的内部配置的例子,该关键区域设置部分33实施对关键区域的自动追踪功能。
参考图16,关键区域设置部分33包括关键区域保持部分101和区域位置内插部分103。关键区域保持部分101是具有用于存储在工作屏幕上设置的作为起始点的关键区域的位置的区域101A和用于存储在工作屏幕上设置的作为终止点的关键区域的位置的区域101B的存储区域。
区域位置内插部分103是信号处理部分,其内插在起始点时关键区域的位置和终止点时关键区域的位置之间的关键区域的位置,以响应于这两点之间的时间位置。
当涉及到运动的加速度或轨迹时,区域位置内插部分103涉及用于确定关键区域的位置的信息。
然而在图15的情况中,由于车辆线性移动,在两点之间基于时间比例而确定的位置被估计作为关键区域的位置。
A-4.修改
在此,描述了对线性编辑系统和非线性编辑系统的修改。
在上面描述中,在设置关键区域时,位置和范围被输入作为关键区域信息。
然而,当假定关键区域具有固定配置(固定范围)时,只有位置被输入。
同时,关键区域可具有如图17A所示的圆形形状或如图17B所示的椭圆形形状。此外,关键区域还可具有如图18A所示的正方形形状或如图18B所示的多边形形状或任何其它多边形形状。另外,关键区域可具有任何配置。上述这种用于关键区域的图案优选地被关键操作选择性地使用。
应注意到关键区域的配置可根据时间而自动变化的功能可优选地被选择。例如,在起始点的特定关键区域被指定为圆形区域而在终止点的特定区域被指定为椭圆形,在中间点使关键区域的配置从圆形配置一点点变形为椭圆形配置的变形功能被应用。该变形功能是公知的功能。
此外,虽然在前面描述中使用时间码作为代表主图像和关键图像的再现位置的时间信息,但是也有可能使用帧编号。
此外,虽然在前面描述中主图像111的尺寸和关键图像113的尺寸是相等的,如图19A所示,但关键图像113的尺寸可被设置为主图像111的尺寸的一部分,如图19B所示。例如,关键图像113的尺寸可以为主图像111的尺寸的一半(1/2)或四分之一(1/4)。
例如,当主图像的尺寸是1920×1080而关键图像的尺寸是960×540时,关键图像的尺寸在水平和垂直方向都是主图像的一半。因此,关键图像上的位置(x,y)=(10,20)被给出为关键图像上的位置(5,10)。
关键图像和主图像之间的位置关系在设置关键区域时已经确认。因此,即使关键图像的尺寸小一些也没有问题。
而且,关键图像尺寸的减小可以降低数据尺寸。
此外,虽然在上面描述中使用灰度等级数值(亮度数值)作为与关键区域对应的区域识别信息,但是也可以使用色调数值。
例如,尽管相应于红色、蓝色、黄色或绿色的色调数值被使用,其也可被利用于对区域的识别而没有任何问题。此外,当多个关键区域在屏幕上被视觉确认时,它们可以被根据颜色的差别而容易地确认。
此外,虽然在前面的描述中,使用“鞋子”、“车辆”、“广告牌”或类似的东西作为主体图像,即标签信息的嵌入对象(关键区域的设置对象),但是出现在主图像中的例如执行者、运动员的人、动物或生物或类似的内容可被用作标签信息的嵌入对象(关键区域的设置对象)。
B.具有链接信息的索引信息的产生装置和具有标签信息的图像数据的产生装置
B-1.具有链接信息的索引信息的产生装置
在此,描述了应用链接信息到之前产生的索引信息的装置。换句话说,描述了具有链接信息的索引信息的产生装置。
如果使用如上所述产生的索引信息,那么可以识别关于主图像在相同屏幕内设置的关键区域。然而,在这个阶段,服务的对象的信息不能被提供给观看者。
因此,本发明的发明人应用链接信息到之前产生的索引信息。
图20A和20B显示了链接信息的嵌入图像。
特别地,图20A图示了在URL(统一资源定位器)由链接信息嵌入部分121嵌入的情况下链接信息的嵌入图像。
图20B图示了在商业消息(CM)识别符(本地地址)由链接信息嵌入部分121嵌入的情况下链接信息的另一个嵌入图像。应注意到技术上也有可能嵌入CM本身作为链接信息。
在链接信息通过这种方式嵌入到索引信息中的情况下,可以推断嵌入标签信息的部分区域和URL或CM之间的一致性。
图21显示了链接信息嵌入部分121的内部配置的例子。参考图21,该链接信息嵌入部分121包括数据库121A和信息嵌入部分121B。
数据库121A是存储在应用到关键区域的提供由操作者任意指定的主图像中的部分区域的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系的区域。
换句话说,数据库121A是存储对象识别信息和链接信息之间的对应关系或区域识别信息和链接信息之间的对应关系的区域。应注意到该对应关系是预先登记的。可选地,对应关系可每次手动输入。
信息嵌入部分121B是关于数据库将对应的链接信息嵌入到索引信息中的信号处理部分,该索引信息列出了区域识别信息和应用到关键区域的时间信息之间的对应关系。
图22图示了具有链接信息的索引信息的产生的例子。更具体地,图22图示了URL被作为链接信息嵌入的例子。
在图22的情况中,两条标签信息被设置为“00小时:14分:10秒;00帧”。两条标签信息之一是相应于一只鞋的区域识别信息“20”,而另一条是相应于一个车辆的区域识别信息“40”。
在当前例子的情况下,对于区域识别信息“20”, http://www.xxx.com/yy/yy对应于部分区域的链接信息。
同样,对于区域识别信息“40”, http://www.zzz.com/yy/yy对应于部分区域的链接信息。
通过使用链接信息嵌入部分121,关键区域和链接信息之间的对应工作可以有效地执行,只要用于识别关键区域的信息(例如,区域识别信息或对象识别信息)和链接信息之间的对应关系的匹配特性可以被确保。
此外,当在这种方式下,主图像和主图像的相关信息被彼此分别处理时,由于它们的维护可彼此分别被执行,所以可以预见各种优点。
例如,当相关信息站点的地址改变,例如URL的链接被取消时,只需要维护具有链接信息的索引信息。因此,可以减轻维护或管理所需的负担。
此外,当在重分配(重播)时与任何广告客户的联系终止时,只需要从具有链接信息的索引信息中单独地删除有关部分。因此,降低了工作的负担。
此外,例如,当关键区域被额外登记时,尽管需要标记操作,但是仅需要更新关键图像和索引信息(具有链接信息的索引信息)。因此,没有必要触及主图像。
B-2.具有标签信息的图像数据的产生装置
如果所有上述具有链接信息的标签信息,主图像和关键图像都可用,那么对本发明的发明人所期望的服务的提供就可以被允许。换句话说,有可能使用观看主图像的观看者的点击操作作为显示相关信息的触发。
另一方面,如果图像和信息都可由它们自己处理,那么有可能只记录或复制主图像。当链接信息是CM时,只对主图像的记录或复制表示广告机会的丢失。然而,这阻碍了在其中CM是主要经济来源的媒体工业的发展。
因此,本发明的发明者提出了具有以互相关联的关系输出链接信息的索引信息、主图像和关键图像的技术。该技术可以提高标签信息(具有链接信息和关键图像的索引信息)被与主图像完整地复制或记录的必然性。
特别地,如果需要作为主图像的复制或记录中的条件是所有具有链接信息的索引信息、主图像和关键图像都可用,那么广告机会也可被确保并可允许免费的欣赏。
此外,即使如果需要作为允许主图像被正常产生的条件是所有具有链接信息的索引信息、主图像和关键图像都可用,那么广告机会也可被确保并可允许免费欣赏。
此外,当主图像被存储在硬盘驱动装置或一些其它随机访问性记录媒体中并之后欣赏时,该技术作为对跳过CM的对策也是有效的。这是因为,不同于插入到主图像之间间隙的CM,标签信息的目的不是CM跳过功能。
此外,显示CM时,需要观看者的点击操作。因此,观看者不会有在这种显示不考虑观看者的愿望而自由地突然出现的情况下的心理抵制。事实上,由于观看者点击主图像中嵌入标签信息的区域,结果观看者对该主图像感兴趣,因此可以预期比在不断给出的显示流中包括CM的情况中更高的广告效果。
a.系统配置
下面,描述了具有标签信息的图像数据产生装置。
图23显示了具有标签信息的图像数据产生装置的内部配置的例子。参考图23,所示的具有标签信息的图像数据产生装置包括链接信息嵌入部分121(图21)和数据输出部分123。
数据输出部分123是输出具有互相关联关系的具有链接信息的索引信息、主图像(包括实时图像)和关键图像的信号处理部分。
应注意到具有标签信息的图像数据产生装置还可被实施为图24所示的程序。
特别地,具有标签信息的图像数据产生装置可以由嵌入链接信息到索引信息以产生具有链接信息的索引信息的过程(S11)和以相互关联关系输出具有链接信息的索引信息、主图像和关键图像的另一过程(S12)来实施。
在此,具有关联的标签信息的图像数据的输出目的地是传输线或记录媒体。当传输目的地是传输线时,分配的形式例如可以是下载、流或广播。
b.输出的数据格式
下面,描述了从数据输出部分123输出的具有标签信息的图像数据的数据输出例子。
b1.数据输出例子1
图25图示了数据输出例子之一。参考图25,在所示数据输出例子中,具有链接信息的索引信息被应用并整合到均为非压缩格式的主图像和关键图像使得它们被当作一个文件对待。产生的文件具有被应用到其的唯一扩展名“cmov”。在其中主图像、关键图像和具有链接信息的索引图像被整合的文件在此以后被称为“comv文件”。当然,有可能应用一些其它扩展名。例如可以应用“ocv”(对象点击视频)。
如在本数据输出例子中主图像、关键图像和具有链接信息的索引信息被整合时,可以有效避免只有主图像被分离并被其自己利用的情况。
当图像数据被作为文件格式对待时,本数据输出例子适于例如流、下载或记录媒体形式的分配。
b2.数据输出例子2
图26图示了另一个数据输出的例子。参考图26,在所示数据输出例子中,具有链接信息的索引信息被应用并与均为压缩编码形式的主图像和关键图像整合使得它们被作为一个文件对待。还是在这个例子中,唯一的扩展名“cmov”被应用于产生的文件。
压缩编码系统可以是任何可逆的压缩编码系统和不可逆的压缩编码系统,尽管这不仅可应用于本例子,也可应用于其它输出例子。通常,对于分配,具有较高压缩率的不可逆压缩编码系统被使用。另一方面,对于主要数据的存储或在编辑阶段,使用可逆的压缩编码系统。
应注意到,尽管在图26中没有示出,报头被应用于产生的文件。该报头被包括在具有链接信息的索引信息中或被单独准备。
该报头描述了具有链接信息的索引信息在文件中的位置、主图像和关键图像的顶部位置,帧的数目,图片尺寸(水平和垂直方向的像素数目),压缩系统,具有链接信息的索引信息/主图像/关键图像在文件中的安排信息(地址偏移)等等。
本数据输出例子还能有效地避免由于主图像、关键图像和具有链接信息的索引信息被互相整合而使得只有主图像被分离和利用的情况。此外,由于数据是压缩编码格式,所以数据量较小。此外,本数据输出例子还适用于当图像数据被作为文件格式对待时例如流、下载或记录媒体形式的分配。
此外,本数据输出例子只允许具有链接信息的索引信息被在开始时或任意定时读出。因此,很容易显示相关信息的表格。
b3.数据输出例子3
图27图示了另一个数据输出例子。参考图27,在所示数据输出例子中,主图像和关键图像被压缩编码并彼此整合以使得它们被作为单独的文件对待,类似于上面描述的两个输出例子。在这个例子中,唯一的扩展名“cmov”被应用。
本输出例子的唯一的特性是具有链接信息的索引信息被放置在压缩的关键图像的元数据区域中。该元数据是描述关于主图像的信息的数据。该元数据包括例如时间码、版权信息、图像拾取人信息、字符、图像拾取地点等等。
本数据输出例子还能有效避免由于主图像、关键图像和具有链接信息的索引信息被互相整合而使得只有主图像被分离和利用的情况。此外,由于数据是压缩编码格式,所以数据量较小。此外,本数据输出例子还适用于当图像数据被作为文件格式对待时例如流、下载或记录媒体形式的分配。
还应注意到具有链接信息的索引信息还可被放置于压缩的主图像的元数据区域。
此外,本数据输出例子中,每条具有链接信息的索引信息都有必要具有关于相应场景(时间段)的标签信息。因此,有可能使每一条独立的具有链接信息的索引信息的尺寸是固定的或彼此相等。因此,本数据输出形式适用于广播或长时间段的内容。
b4.数据输出例子4
图28图示了另一个数据输出例子。参考图25,其中主图像被分配于四个数据信道中的三个并且关键图像被分配于剩下的一个数据信道的图像数据被压缩编码,并且具有链接信息的索引信息被应用来形成文件。
应注意到图28图示了其中用于R(红)、G(绿)和B(蓝)的三条信道被分配于用于主图像的三条数据信道的数据输出例子。当然,这三条数据信道可被选择地用于一个亮度数据和两个颜色差别数据。
还是在本例子中,整合的文件具有被应用于之的唯一扩展名“cmov”。
还是在本数据输出例子中,主图像、关键图像和具有链接信息的索引图像被整合,这样可有效地避免只有主图像被分离并被其自己利用。此外,由于数据是压缩编码格式,所以数据量较小。此外,当图像数据被作为文件格式对待时,本数据输出例子还适用于例如流、下载或记录媒体形式的分配。
b5.数据输出例子5
图29图示了另一个数据输出例子。参考图29,在本数据输出例子中,其中主图像被分配于四条数据信道中的三条并且关键图像被分配于剩下的一条数据信道的图像数据被压缩编码,并且具有链接信息的索引信息被应用来形成文件。特别地,唯一的扩展名“cmov”被应用于产生的整合文件。
然而,在本输出例子中,具有连接信息的索引信息被放置于关键图像的元数据区域中。
还是在本输出例子中,用于R(红)、G(绿)和B(蓝)的三条信道被分配给用于主图像的三条数据信道。然而,也可选择地将一个亮度数据和两个颜色差别数据应用于这三条数据信道。
本数据输出例子还能有效避免由于主图像、关键图像和具有链接信息的索引图像的互相整合而使得只有主图像被分离和利用的情况。此外,由于数据是压缩编码格式,所以数据量较小。此外,本数据输出例子还适用于当图像数据被作为文件格式对待时流、下载和记录媒体形式的分配。
还应注意到,在对本输出例子的压缩编码过程中,当文件中应用了具有链接信息的索引信息的关键图像(一个信道)和主图像(三条信道)被整合时,文件可被压缩编码。在这个例子中,可逆编码系统被使用于压缩编码,这在编辑阶段或对于主要数据存储是有效的。
6.数据输出例子6
图30A和30B图示了另几个数据输出的例子。参考图30A和30B,在所示数据输出例子中,主图像被输出到主信道而关键图像被输出到子信道。因此,具有链接信息的索引信息被放置在主图像或关键图像的元数据区域。
图30A显示了当具有链接信息的索引信息被放置到关键图像(子信道)的元数据区域中的例子,而图30B显示了当具有链接信息的索引信息被放置到主图像(主信道)的元数据区域中的例子。
当前数据输出例子适用于图像数据以广播形式分配的情况。当采用本数据格式,也是以广播形式时,与由观看者指定的部分区域相关的信息可被显示在屏幕上的系统可被实施。应注意到,在记录主图像时,如果记录与主信道(主图像)配对的子信道的条件符合,那么本数据输出例子能有效地避免只有主图像被分离和利用的情况。
例如,如果主图像被以当前两个数据输出形式中的任意一个广播时,这种应用是可能的,即尽管主图像可以被现有调谐器以正常方式接收,但是对拷贝的禁止是有效的,或扰颜功能对禁止接收主图像变得有效。
另一方面,可以通过调谐器来预见这种应用,该调谐器与当前本数据输出格式兼容,即当关键图像和具有链接信息的索引图像在同时被接收时(当点击功能有效时),这种对拷贝的禁止或扰频功能可以被取消。
此外,当存储在硬盘驱动装置或类似的时,这种应用是有可能的,即当文件以cmov文件格式存储时,对主图像拷贝的禁止、扰频功能或类似可以被取消。
b7.数据输出例子7
图31A图示了另一个数据输出的例子。参考图31A,该数据输出例子还适用于广播形式。然而本数据输出例子不使用子信道。换句话说,关键图像和具有链接信息的索引信息被放置在主信道中主图像的元数据区域。
当采用当前数据格式时,甚至是以广播格式,由观看者指定的部分区域的相关信息可以被显示在屏幕上的系统可以被实现。此外,主图像、关键图像和具有连接的索引图像被互相整合,并且这还能有效地避免只有主图像被分离并被其自身利用的情况。
其还能有效地与具有链接信息的索引信息一起来记录代表元数据区域中链接信息的链接目的地的相关信息(例如CM),如图31B所示。
还应注意到链接信息被作为代表相关信息(例如CM)在哪一页上的信息或对独立的相关信息唯一的识别信息(例如数目)给出。
在这个例子中,由于链接目的地的相关信息被整合,所以没有必要通过因特网获取相关信息。因此,本数据输出形式在再现装置没有连接到因特网时是有效的。同样,当再现装置被连接到因特网时,本数据输出形式在通信带宽不足或通信条件不是很好时也是有效的。
还应注意到将代表链接信息的链接目的地的相关信息与主图像以这种方式整合对这里描述的cmov文件格式文件的数据输出例子也是有效的。
C.标签信息显示控制装置和信息处理装置(显示装置)
在此,描述了当具有标签信息的图像数据被再现时的处理动作,即由观看者一侧的信息处理装置执行的处理动作。
还应注意到信息处理装置可以是标签信息显示控制装置或任何商品形式的装置,只要其能通过软件实施与标签信息显示控制装置同样的功能。
例如,信息处理装置可以是计算机、磁盘装置、光盘播放器、机顶盒,家庭服务器或任何其它大容量存储装置、显示装置、游戏机、数码相机、便鞋信息终端、便鞋电话机或类似的。
具有标签信息的图像数据可以由图像处理装置以两种再现模式来再现。
再现模式之一是累积类型的再现。
累积类型的再现是在具有标签信息的全部图像数据被存储在记录媒体上时的状态开始的再现。
例如,以其被记录在光盘或其它大容量媒体上的形式分配的具有标签信息的图像数据(cmov文件)可被再现。
例如可选地,通过因特网下载的具有标签信息的图像数据(cmov文件)可从本地媒体中被再现。
通过这种再现,主图像和关键图像被彼此同步地再现。然而关键图像不被显示在显示屏幕上。
例如可选地,通过广播形式或流形式接收的主图像、关键图像和具有链接信息的索引信息可被从记录有从主图像、关键图像和具有链接信息的索引信息中重建的具有标签信息的图像数据(cmov文件)的记录媒体中再现。还应注意到该记录媒体可以是便携记录媒体或结合在再现装置中的本地媒体。
同时,另一种再现模式是流类型再现。
流类型再现是以下载顺序的流文件的再现。
应注意到,在流类型再现中,具有链接信息的索引信息被首先下载并存储在主存储器中。之后,主图像和关键图像被以再现顺序下载并存储在存储器中,然后主图像和关键图像被彼此同时地再现。
还是在这个例子中,关键图像不被再现。
C-1.图像再现系统
以下,描述了被通常使用于存储类型再现和流类型再现的图像再现系统。
a.功能配置
图32显示了图像再现系统的配置例子。
参考图32,所示的图像再现系统包括标签信息显示控制装置131、输入装置133、再现装置135和显示装置137。
首先,图像再现系统中除了标签信息显示控制装置131的组件被描述。
输入装置133被用来输入来自欣赏具有标签信息的图像数据的观看者的操作指令。
再现装置135被用于从记录区域产生具有标签信息的图像数据。适于记录媒体的再现机制被用作为再现装置135。应注意到大容量记录媒体被用于积累类型的再现而主存储器(半导体存储设备)被用于流类型的再现。
显示装置137显示主图像。各种显示设备可被用于显示装置137。例如CRT显示单元、平板显示单元或投影类型显示装置(例如液晶板或DMD(注册商标)设备)可被用于显示装置137。
标签信息显示控制装置131是控制上述外围装置以控制对主图像的显示和对指定区域中的相关信息的显示的控制单元。标签信息显示控制装置131可由任何硬件或软件来实施。
在此,描述了标签信息显示控制装置131的功能性配置。
标签信息显示控制装置131包括再现控制部分141、索引信息读出部分143、指针运动接受部分145、指针位置获取部分147和指针位置决定部分149。该标签信息显示控制装置131进一步包括识别信息读出部分151、链接信息读出部分153和相关信息显示控制部分155。
该再现控制部分141是当主图像的再现指令被接收时,引起与主图像具有相同时间信息(例如时间码)的关键图像被同时再现的控制装置。换句话说,再现控制部分141控制主图像和关键图像的同步再现。
索引信息读出部分143是读出与主图像和关键图像相关联的具有链接信息的索引信息的信号处理装置。
指针运动接受部分145是接受由主图像的观看者通过输入装置133在屏幕范围内对指针的运动的信号处理装置。
指针位置获取部分147是获取屏幕中的指针的位置的信号处理装置。
指针位置决定部分149是参考与主图像同时再现的关键图像来决定指针位置是否在关键区域内的信号处理装置。换句话说,指针位置决定部分149执行在具有与当前被显示的主图像相同的时间位置的关键位置和该指针之间的匹配决定。
识别信息读出部分151是当指针位置在关键区域之内时读出对关键区域设置的区域识别信息的信号处理装置。例如,当指针属于对应于鞋子的关键区域时,该关键区域的灰度等级数值被读出。
链接信息读出部分153是基于参考的关键图像的时间信息和读出的区域识别信息参考具有链接信息的索引信息而读出对应于区域识别信息的链接信息的信号处理装置。
相关信息显示控制部分155是从读出的链接信息指定的链接目的地中获取相关信息并将获取的相关信息进行显示的信号处理装置。
例如,当链接信息被作为URL给出时,相关信息显示控制部分155从通过没有示出的通信功能而访问的网站获取必要的相关信息并提供所获取的相关信息给显示装置137。
另一方面,例如,当链接信息是与主图像一起接收的或存储的相关信息的识别信息时,该相关信息显示控制部分155通过再现装置135获取必要的相关信息并提供获取的相关信息给显示装置137。
b.特别例子
图33显示了当图像再现系统由计算机实施时的配置例子。
参考图33,所示的图像再现系统包括CPU(处理器)161、输入装置163、显示装置165、硬盘驱动装置167和主存储器169。
特别地,图33中所示的标签信息显示控制装置131的处理功能通过由CPU161执行的程序来实施。
例如,决定由观看者指定的指针的坐标位置是否包括在关键区域中的决定过程和基于应用到指针位于其中的关键区域的区域识别信息来读出链接信息的读出过程由CPU 161来执行。
应注意到图33所示的图像再现系统被配置为执行积累类型的再现。换句话说,所示的图像再现系统被这样配置以使得主图像、关键图像和具有标签信息的索引图像被从硬盘驱动装置167中读出到主存储器169。
因此,当图像再现系统被另外配置为执行流类型的再现时,处理被提前到主图像、关键图像和具有标签信息的索引信息被直接存储到主存储器169中的状态。
C-2.观看者的操作和内部过程之间的关系
图34图示了观看者的操作和响应于该操作而执行的内部过程之间的对应关系。应注意到观看者的操作通过输入装置163(133)而输入。
当用于主图像的再现的操作被接受时,CPU 166发布指令以读取具有链接信息的索引信息并再现(显示)主图像。因此,CPU 161也发布指令以执行关键图像的同步再现。此外,CPU 161还启动此后描述的向导功能。该向导功能是通知观看者嵌入关键区域的存在并协助对于关键区域的适当操作的功能。
另一方面,当CPU 161接受标记对象(主题图像)的点击操作时,其检测点击坐标(获取指针位置)并从应用了相同时间的关键图像获取对应于该点击坐标的区域识别信息。例如,CPU 161获取灰度等级数值。
此后,CPU 161参考与相同时间或包括该时间的时间间隔一致的具有标签信息的索引信息而使用区域识别信息来获取对应于链接信息的相关信息。获取的相关信息被显示在显示装置165的屏幕上。该显示可以是在主图像上的叠加显示或子屏幕显示。
图35图示了对应于上述标签信息显示控制功能的程序的过程的实质。
参考图35,该程序以读取具有标签信息的索引信息的过程开始(S21)。然后,该程序控制对主图像和关键图像的同步再现(S22)。
此后,该程序接受显示在显示装置165的屏幕上的指针运动的输入并决定指针位置(S23,S24)。
图36A显示了显示指针171的例子。图36A中,指针171位于主题图像鞋子的位置。
然后,该程序决定该指针的位置是否在关键区域中(S25)。在决定过程中,该程序参考与主图像在相同时间的关键图像。图36B图示了与主图像成对的关键图像。关键图像也是用于内部处理并事实上不显示给观看者。
图36A和36B显示了设置为“00小时:14分:30秒:12帧”的图像的例子。在该例子中,正方形的关键区域(灰度等级数值=20)被设置在对应于车辆的位置,而另一个圆形的关键区域(灰度等级数值=40)被设置在对应于每一只鞋子的位置。
决定过程根据指针的坐标(X,Y)是否位于关键区域中而被执行。
如果在决定过程中决定指针位置不在任何关键区域中(如果得到否定结果),那么该程序返回到指针的运动被接受的状态。这是因为指针指定了其中没有嵌入标签信息的区域。
另一方面,如果在决定过程中决定指针位置在关键区域中(如果得到肯定结果),那么该程序基于关键区域的区域识别信息来访问具有链接信息的索引信息以读出关于该操作的相同时间与对应的区域识别信息对应的链接信息(S26)。
然后,该程序获取由链接信息提供的相关信息并控制显示装置165以在屏幕上显示该相关信息(S27)。
图37显示了显示相关信息的例子。在图37中,代表相关信息的来源的URL地址(http://www.xxxx.com/yy/yy)被显示在屏幕的上部。
同时,在屏幕的中部,用指针指定的鞋子以大屏幕尺寸显示。同时,价格(在所示例子中为“$98”)被显示在屏幕的左上部分。
当然,相关信息的显示窗口可以通过观看者的操作被关闭。
然后,该程序决定主图像的再现是否终止(S28)。如果再现继续(得到否定结果),那么该程序返回到对指针位置的输入接受阶段以准备对另一个关键区域进行指定。
另一方面,如果确认再现终止(得到肯定结果),那么该程序终止标签信息的显示控制功能。
上述这种处理程序由CPU 161执行以标签信息显示过程。
C-3.向导功能
如上所述,通过再现具有标签信息的图像数据,嵌入在指针位置的相关信息可以通过观看者的主观操作而在屏幕上被确认。
这里,描述了适于协助观看者指定关键区域的显示功能。
a.向导功能1
当关键图像被原本仅准备于决定过程时,其还可被利用来协助观看者的屏幕操作。
例如,当关键区域被包括在与主图像同步再现的关键图像中时,在观看者可以认出该部分区域的显示模式中,显示对应于关键区域的主图像的部分区域的功能(关键区域显示控制部分)可以被结合作为标签信息显示控制装置131的功能。
图38显示了采用这种显示功能的显示例子。在图38中,主图像和关键图像以整合状态被显示。
在这个例子中,嵌入标签信息的主图像的部分区域可以以改变的亮度被显示。不同于主图像的原始亮度的亮度被提供给关键图像,嵌入标签信息的部分区域可以很容易地被区别。
应注意到亮度改变可被提供来响应提供给形成关键图像的每个关键区域的区域识别信息(灰度等级数值或色调数值)。
可选地,相同的亮度改变可被提供给所有的关键区域而不用根据提供给关键区域的区域识别信息间的差别。这是因为对观看者而言,必要的是识别其中嵌入了标签信息的部分区域,而不是识别区域之间的区别。
顺便说一下,亮度改变不仅可关于原始亮度级别来提高亮度而执行,还可通过降低亮度或周期性地打开或关闭亮度来执行。在此,亮度改变可由主图像亮度的百分之几的级别来提供。
应注意到均一地改变嵌入标签信息的部分区域的亮度的方法会恶化主图像的图片质量并妨碍欣赏。
因此,依赖于亮度改变的显示模式只有在部分区域的亮度被改变的显示模式被观看者选择时才优选地执行。当然,可选择地,嵌入标签信息的区域的亮度可被正常改变。
同时,作为改变嵌入标签信息的部分区域的显示模式来通知观看者的技术,其中用于显示的部分区域的色调被改变的方法也是可用的。
例如,色调的改变可被提供来响应提供给形成关键图像的每个关键区域的区域识别信息(色调数值或灰度等级数值)。
可选地,相同色调改变可被提供给所有关键区域而不根据提供给关键区域的区域识别信息间的差别。例如,红色可被提供于或红色框架可被显示于嵌入标签信息的所有整个部分区域。当然,任意颜色可被用于显示。
同样,依赖色调改变的显示模式仅在部分区域的亮度被改变的显示模式被观看者选择时才优选地执行。当然,可选择地,嵌入标签信息的区域的亮度可被正常改变。
b.向导功能2
上述向导功能1改变嵌入标签信息的部分区域的显示模式而不根据指针的位置。然而,其很可能会干扰对主图像的欣赏。
因此,当决定指针位置在关键区域内或接近关键区域时,以这种观看者能够认出该部分区域的显示模式显示嵌入标签信息的主图像的部分区域的功能(标签区域位置通知部分)可被结合为标签信息显示控制装置131的功能。
图39A和39B显示了采用这种显示功能的例子。还是在图39A和39B中,标签信息以同上面描述的其它例子中相同的方式被嵌入到主题图像的鞋子中。
特别地,图39A显示了当指针173没有位于设置在关键屏幕上的任何关键区域中时的显示例子。同时,在显示屏幕上没有发现任何变化。
因此,观看者可以确定在当前指针位置没有标签信息。此外,不会妨碍对主图像的欣赏。
图39B显示了当指针位置173位于设置在关键图像上的关键区域中时的显示例子。在这个例子中,对应于鞋子的关键区域的显示模式改变。例如,亮度的改变或色调的改变与向导功能1中的情况相同。
根据这些变化,观看者可以视觉地确认标签信息被嵌入在当前指针位置。
应注意到,在本显示例子中,主图像显示模式的改变仅在相应于鞋子的关键区域中被执行,而不发生在相应于车辆的关键区域中。
因此,当显示标签信息时主图像图片质量的恶化可以被减小。本显示例子特别在标签信息被嵌入到大量区域中时有效。
c.向导功能3
在上述两个向导功能中,主图像的显示模式被改变。然而,这可能恶化观看者对主图像的欣赏。
因此,将改变指针的显示模式的功能(指针形状改变部分)集成为标签信息显示控制装置131的功能的技术被描述,该指针位于当决定指针位置在关键区域范围内时嵌入标签信息的主图像的部分区域中。
图40A、40B和41A、41B显示了当采用刚才描述的显示功能时不同的显示例子。
特别地,图40A和41A显示了当指针175没有位于设置在关键屏幕上的任何关键区域中时的显示例子。在这个例子中,指针175以基本尺寸和基本形状被显示。
图40B和41B显示了当指针175位于设置在关键屏幕上的关键区域中时的显示例子。
在图40B中,指针177被以相同的尺寸但是与例如亮度或色度的显示模式不同的显示模式而显示。
在图41B中,指针179被以相同的亮度和相同的色度但是改变的显示模式而显示。
在这个显示功能中,由于只有指针的显示模式改变了,因此对主图像的图片质量没有影响。
此外,由于只有指针的显示模式被改变,所以算法操作量较小。此外,由于吸引观看者注意力的指针的显示模式被改变,所以观看者可以容易地确认关键区域。
D.其它实施例
a.这里描述的相应于功能的程序可以通过网络被分配或存储在存储媒体之上或之中并与存储媒体一起被分配。用于分配的存储媒体可以是磁存储媒体、光记录媒体、半导体存储媒本或任何其它存储媒体。
b.可以在本发明的精神和范围内对这里描述的实施例作以各种修改。同样,可以通过基于本发明的公开内容的创造或组合来做出各种变形和应用。

Claims (38)

1.一种具有链接信息的索引信息的产生装置,包括:
数据库,其列出了应用到关键区域的区域识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;以及
信息嵌入部分,配置为参考该数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息。
2.如权利要求1所述的具有链接信息的索引信息的产生装置,其中所述数据库结合时间信息记录对应关系。
3.一种具有链接信息的索引信息的产生装置,包括:
数据库,其列出了应用到关键区域的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;以及
信息嵌入部分,配置为参考该数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息。
4.如权利要求3所述的具有链接信息的索引信息的产生装置,其中所述数据库结合时间信息记录对应关系。
5.一种具有标签信息的图像数据的产生装置,包括:
数据库,其列出了应用到关键区域的区域识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;
信息嵌入部分,配置为参考该数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息;以及
数据输出部分,配置为以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
6.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分的输出目的地是传输线。
7.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以广播形式输出具有链接信息的索引信息、主图像和关键图像。
8.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以分布形式输出具有链接信息的索引信息、主图像和关键图像。
9.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分的输出目的地是记录媒体。
10.如权利要求5所述的具有标签信息的图像数据的产生装置,其中主图像是实况转播图像。
11.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分将具有链接信息的索引信息、主图像和关键图像共同作为一个文件输出。
12.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过对主图像和关键图像压缩编码而获得的两个压缩编码数据以产生一个文件。
13.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过对图像数据压缩编码而获得的单一压缩编码数据以产生一个文件,其中四个数据信道中的三个被分配给主图像而剩下的一个数据信道被分配给关键图像。
14.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过对图像数据压缩编码而获得的压缩编码数据以产生一个文件,其中四个数据信道中的三个被分配给主图像而剩下的一个数据信道被分配给关键图像,具有链接信息的索引信息被作为附带信息嵌入到关键图像中。
15.如权利要求5所述的具有标签信息的图像数据的产生装置,其中当具有链接信息图像的索引信息被放置在主图像的元数据区域或关键图像中时,所述数据输出部分输出主图像到主信道并同时输出关键图像到子信道。
16.如权利要求5所述的具有标签信息的图像数据的产生装置,其中当关键图像和具有链接信息的索引信息被放置在主图像的元数据区域中时,所述数据输出部分输出主图像到主信道。
17.如权利要求5所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以与具有链接信息的索引信息、主图像和关键图像相关联的关系输出相关信息的主体,其给出了嵌入在具有链接信息的索引信息中的链接信息的链接目的地。
18.一种具有标签信息的图像数据的产生装置,包括:
数据库,其列出了应用到关键区域的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中关键区域提供了由操作者任意指定的主图像中的部分区域;
信息嵌入部分,配置为参考该数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息;以及
数据输出部分,配置为以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
19.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分的输出目的地是传输线。
20.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以广播形式输出具有链接信息的索引信息、主图像和关键图像。
21.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以分布形式输出具有链接信息的索引信息、主图像和关键图像。
22.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分的输出目的地是记录媒体。
23.如权利要求6所述的具有标签信息的图像数据的产生装置,其中主图像是实况转播图像。
24.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分将具有链接信息的索引信息、主图像和关键图像共同作为一个文件输出。
25.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过对主图像和关键图像压缩编码而获得的两个压缩编码数据以产生一个文件。
26.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过时图像数据压缩编码而获得的单一压缩编码数据以产生一个文件,其中四个数据信道中的三个被分配给主图像而剩下的一个数据信道被分配给关键图像。
27.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分应用具有链接信息的索引信息到通过对图像数据压缩编码而获得的压缩编码数据以产生一个文件,其中四个数据信道中的三个被分配给主图像而剩下的一个数据信道被分配给关键图像,具有链接信息的索引信息被作为附带信息嵌入到关键图像中。
28.如权利要求6所述的具有标签信息的图像数据的产生装置,其中当具有链接信息的索引信息被放置在主图像的元数据区域或关键图像中时,所述数据输出部分输出主图像到主信道并同时输出关键图像到子信道。
29.如权利要求6所述的具有标签信息的图像数据的产生装置,其中当关键图像和具有链接信息的索引信息被放置在主图像的元数据区域中时,所述数据输出部分输出主图像到主信道。
30.如权利要求6所述的具有标签信息的图像数据的产生装置,其中所述数据输出部分以与具有链接信息的索引信息、主图像和关键图像相关联的关系输出相关信息的主体,其给出了嵌入在具有链接信息的索引信息中的链接信息的链接目的地。
31.一种具有链接信息的索引信息的产生方法,包括步骤:
参考数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域。
32.一种具有链接信息的索引信息的产生方法,包括步骤:
参考数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域。
33.一种具有标签信息的图像数据产生方法,包括步骤:
参考数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域;以及
以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
34.一种具有标签信息的图像数据产生方法,包括步骤:
参考数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的对象识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域;以及
以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
35.一种记录程序的计算机可读记录媒体,该程序包括步骤:
参考数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的区域识别信息和用于访问该部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域。
36.一种记录程序的计算机可读记录媒体,该程序包括步骤:
参考数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的对象识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域。
37.一种记录程序的计算机可读记录媒体,该程序包括步骤:
参考数据库,在列出了应用到关键区域的区域识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的区域识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域;以及
以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
38.一种记录程序的计算机可读记录媒体,该程序包括步骤:
参考数据库,在列出了应用到关键区域的对象识别信息和时间信息之间的对应关系的索引信息中嵌入对应的链接信息,其中该数据库列出了应用到关键区域的对象识别信息和用于访问部分区域的相关信息的链接信息之间的对应关系,其中该关键区域提供了由操作者任意指定的主图像中的部分区域;以及
以相互关联的关系输出该嵌入了链接信息的具有链接信息的索引信息、主图像以及应用了通过结合时间信息来指定关键区域的区域识别信息的关键图像。
CNA2006101689290A 2005-07-06 2006-07-06 具有链接信息的索引信息的产生装置和方法 Pending CN101017493A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005198172 2005-07-06
JP2005198172A JP2007018198A (ja) 2005-07-06 2005-07-06 リンク情報付きインデックス情報生成装置、タグ情報付き画像データ生成装置、リンク情報付きインデックス情報生成方法、タグ情報付き画像データ生成方法及びプログラム

Publications (1)

Publication Number Publication Date
CN101017493A true CN101017493A (zh) 2007-08-15

Family

ID=37618334

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006101689290A Pending CN101017493A (zh) 2005-07-06 2006-07-06 具有链接信息的索引信息的产生装置和方法

Country Status (3)

Country Link
US (1) US8019183B2 (zh)
JP (1) JP2007018198A (zh)
CN (1) CN101017493A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857810A (zh) * 2011-05-30 2013-01-02 索尼公司 信息处理设备、信息处理方法和程序
CN107948734A (zh) * 2017-12-05 2018-04-20 深圳市茁壮网络股份有限公司 一种广告视频的筛选方法及系统

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8379989B2 (en) * 2008-04-01 2013-02-19 Toyota Jidosha Kabushiki Kaisha Image search apparatus and image processing apparatus
US8826322B2 (en) 2010-05-17 2014-09-02 Amazon Technologies, Inc. Selective content presentation engine
JP5522789B2 (ja) * 2010-06-09 2014-06-18 日本放送協会 リンク機能付動画再生装置およびリンク機能付動画再生プログラム
US8792728B2 (en) * 2010-09-27 2014-07-29 Hewlett-Packard Development Company, L.P. Near-duplicate image detection
US9565476B2 (en) * 2011-12-02 2017-02-07 Netzyn, Inc. Video providing textual content system and method
JP2013174965A (ja) * 2012-02-23 2013-09-05 Toshiba Corp 電子機器、電子機器の制御システム、及びサーバ
CN110139130B (zh) 2012-10-12 2022-09-20 佳能株式会社 流传输数据的方法、发送和接收视频数据的方法和设备
GB2506911B (en) * 2012-10-12 2015-12-09 Canon Kk Method and correponding device for streaming video data
JP6314321B2 (ja) 2013-03-26 2018-04-25 パナソニックIpマネジメント株式会社 画像生成装置、撮影装置、画像生成方法及びプログラム
JP5854019B2 (ja) * 2013-09-27 2016-02-09 ブラザー工業株式会社 端末装置、及びプログラム
JP5861684B2 (ja) * 2013-09-27 2016-02-16 ブラザー工業株式会社 情報処理装置、及びプログラム
JP5854018B2 (ja) * 2013-09-27 2016-02-09 ブラザー工業株式会社 通信システム、情報処理装置、及びプログラム
JP6232632B1 (ja) * 2016-08-09 2017-11-22 パロニム株式会社 動画再生プログラム、動画再生装置、動画再生方法、動画配信システム及びメタデータ作成方法
JP2020077942A (ja) * 2018-11-06 2020-05-21 パロニム株式会社 領域設定装置、領域設定方法、及びプログラム
JP6831027B1 (ja) * 2020-02-28 2021-02-17 株式会社ドワンゴ 配信システム、動画生成装置、および動画生成方法

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4527828A (en) * 1983-08-08 1985-07-09 General Motors Corporation Side mounted jump seat for an automotive vehicle
US4515216A (en) * 1983-10-11 1985-05-07 Halliburton Company Method of using thixotropic cements for combating lost circulation problems
US4555269A (en) * 1984-03-23 1985-11-26 Halliburton Company Hydrolytically stable polymers for use in oil field cementing methods and compositions
US4588032A (en) * 1984-08-09 1986-05-13 Halliburton Company Fluid spacer composition for use in well cementing
US4676832A (en) * 1984-10-26 1987-06-30 Halliburton Company Set delayed cement compositions and methods of using the same
US4687516A (en) * 1984-12-11 1987-08-18 Halliburton Company Liquid fluid loss control additive for oil field cements
DE3729023C2 (de) * 1986-08-29 1995-03-16 Canon Kk Bildbearbeitungsgerät
US5238064A (en) * 1991-01-08 1993-08-24 Halliburton Company Squeeze cementing
US5121795A (en) * 1991-01-08 1992-06-16 Halliburton Company Squeeze cementing
US5534917A (en) * 1991-05-09 1996-07-09 Very Vivid, Inc. Video image based control system
US5332041A (en) * 1992-12-30 1994-07-26 Halliburton Company Set-activated cementitious compositions and methods
JPH06208500A (ja) * 1993-01-12 1994-07-26 Matsushita Electric Ind Co Ltd ハイパーテキスト付き映像データ作成装置
US5346012A (en) * 1993-02-01 1994-09-13 Halliburton Company Fine particle size cement compositions and methods
US5348584A (en) * 1993-06-30 1994-09-20 Halliburton Company Hydrocarbon liquid and water dispersible particulate cement compositions
US5389145A (en) * 1993-12-29 1995-02-14 The Western Company Of North America Cement mixing system
US5447197A (en) * 1994-01-25 1995-09-05 Bj Services Company Storable liquid cementitious slurries for cementing oil and gas wells
US5585333A (en) * 1994-10-12 1996-12-17 Halliburton Company Hydrocarbon base cementitious drilling fluids and methods
US5484478A (en) * 1995-04-19 1996-01-16 Halliburton Company High temperature set retarded cement compositions and methods
US5978520A (en) * 1995-07-31 1999-11-02 Hitachi, Ltd. Method of recognizing image data and apparatus therefor
US5588488A (en) * 1995-08-22 1996-12-31 Halliburton Company Cementing multi-lateral wells
JP3625096B2 (ja) * 1995-12-26 2005-03-02 ソニー株式会社 テレビジョン放送装置およびテレビジョン放送方法並びにテレビジョン信号受信装置およびテレビジョン信号受信方法
US5774666A (en) * 1996-10-18 1998-06-30 Silicon Graphics, Inc. System and method for displaying uniform network resource locators embedded in time-based medium
US6060434A (en) * 1997-03-14 2000-05-09 Halliburton Energy Services, Inc. Oil based compositions for sealing subterranean zones and methods
US6258757B1 (en) * 1997-03-14 2001-07-10 Halliburton Energy Services, Inc. Water based compositions for sealing subterranean zones and methods
US5913364A (en) * 1997-03-14 1999-06-22 Halliburton Energy Services, Inc. Methods of sealing subterranean zones
US5933141A (en) * 1998-01-05 1999-08-03 Gateway 2000, Inc. Mutatably transparent displays
US6134243A (en) * 1998-01-15 2000-10-17 Apple Computer, Inc. Method and apparatus for media data transmission
US6173778B1 (en) * 1998-05-27 2001-01-16 Bj Services Company Storable liquid systems for use in cementing oil and gas wells
US6310970B1 (en) * 1998-06-24 2001-10-30 Colorcom, Ltd. Defining surfaces in border string sequences representing a raster image
US7284066B1 (en) * 1998-09-11 2007-10-16 Lv Partners, Lp Method and apparatus for matching a user's use profile in commerce with a broadcast
US6660080B2 (en) * 1999-01-12 2003-12-09 Halliburton Energy Services, Inc. Particulate flow enhancing additives
US6379456B1 (en) * 1999-01-12 2002-04-30 Halliburton Energy Services, Inc. Flow properties of dry cementitious and non-cementitious materials
US6245142B1 (en) * 1999-01-12 2001-06-12 Halliburton Energy Services, Inc. Flow properties of dry cementitious materials
US6170575B1 (en) * 1999-01-12 2001-01-09 Halliburton Energy Services, Inc. Cementing methods using dry cementitious materials having improved flow properties
US6271181B1 (en) * 1999-02-04 2001-08-07 Halliburton Energy Services, Inc. Sealing subterranean zones
US6477269B1 (en) * 1999-04-20 2002-11-05 Microsoft Corporation Method and system for searching for images based on color and shape of a selected image
US6138759A (en) * 1999-12-16 2000-10-31 Halliburton Energy Services, Inc. Settable spotting fluid compositions and methods
US6674129B1 (en) * 1999-12-17 2004-01-06 Koninklijke Phillips Electronics N.V. ESD diode structure
GB2364226A (en) * 2000-06-30 2002-01-16 Nokia Corp Method of selecting an object by controlling an on screen pointer
US6457523B1 (en) * 2000-07-07 2002-10-01 Halliburton Energy Services, Inc. Delayed thixotropic cement compositions and methods
US6668929B2 (en) * 2000-07-26 2003-12-30 Halliburton Energy Services, Inc. Methods and oil-based settable spotting fluid compositions for cementing wells
US6666268B2 (en) * 2000-07-26 2003-12-23 Halliburton Energy Services, Inc. Methods and oil-based settable drilling fluid compositions for drilling and cementing wells
US6315042B1 (en) * 2000-07-26 2001-11-13 Halliburton Energy Services, Inc. Oil-based settable spotting fluid
US6716282B2 (en) * 2000-07-26 2004-04-06 Halliburton Energy Services, Inc. Methods and oil-based settable spotting fluid compositions for cementing wells
US7207006B1 (en) * 2000-09-01 2007-04-17 International Business Machines Corporation Run-time hypervideo hyperlink indicator options in hypervideo players
JP2002218433A (ja) * 2001-01-15 2002-08-02 Yoshiki Koura デジタルビデオシステム、ビデオ画像にリンクされた情報の取得方法、双方向視聴システム、双方向視聴装置、デコード装置、伝達媒体ならびに記録媒体。
US6561273B2 (en) * 2001-06-19 2003-05-13 Halliburton Energy Services, Inc. Oil based compositions and method for temporarily sealing subterranean zones
JP2003036451A (ja) * 2001-07-23 2003-02-07 Gtv:Kk 画像処理装置、ゲーム装置、画像データ生成方法、およびそのプログラム
JP4045768B2 (ja) * 2001-10-04 2008-02-13 富士ゼロックス株式会社 映像処理装置
US6616753B2 (en) * 2001-12-11 2003-09-09 Halliburton Energy Services, Inc. Methods and compositions for sealing subterranean zones
JP2003323439A (ja) * 2002-05-01 2003-11-14 Nippon Telegr & Teleph Corp <Ntt> マルチメディア情報提供方法、装置、プログラム及び該プログラムを格納した記録媒体
US6516884B1 (en) * 2002-07-23 2003-02-11 Halliburton Energy Services, Inc. Stable well cementing methods and compositions
WO2004039462A1 (en) * 2002-11-01 2004-05-13 M.B.T.L. Limited Monitoring sports
US6708760B1 (en) * 2002-11-19 2004-03-23 Halliburton Energy Services, Inc. Methods and cement compositions for cementing in subterranean zones
US6989057B2 (en) * 2002-12-10 2006-01-24 Halliburton Energy Services, Inc. Zeolite-containing cement composition
US7048053B2 (en) * 2002-12-10 2006-05-23 Halliburton Energy Services, Inc. Zeolite compositions having enhanced compressive strength
US6964302B2 (en) * 2002-12-10 2005-11-15 Halliburton Energy Services, Inc. Zeolite-containing cement composition
US7421727B2 (en) * 2003-02-14 2008-09-02 Canon Kabushiki Kaisha Motion detecting system, motion detecting method, motion detecting apparatus, and program for implementing the method
JP2004303386A (ja) * 2003-04-01 2004-10-28 Sony Corp タイムコード発生装置及び方法、タイムコード読取り装置及び方法、映像記録再生装置
US6907928B2 (en) * 2003-07-30 2005-06-21 Bj Services Company Storable cementitious slurries containing boric acid and method of using the same
US7032669B2 (en) * 2003-07-31 2006-04-25 Halliburton Energy Services, Inc. Compositions and methods for preventing coagulation of water-in-oil emulsion polymers in aqueous saline well treating fluids
US6983800B2 (en) * 2003-10-29 2006-01-10 Halliburton Energy Services, Inc. Methods, cement compositions and oil suspensions of powder
US20050198173A1 (en) * 2004-01-02 2005-09-08 Evans Alexander W. System and method for controlling receipt of electronic messages
GB0402035D0 (en) * 2004-01-30 2004-03-03 Hewlett Packard Development Co Physical object with memory tags and apparatus for writing and using such objects
US7490057B2 (en) * 2005-02-11 2009-02-10 Vista Print Technologies Limited Product marketing system and method
JP4277817B2 (ja) * 2005-03-10 2009-06-10 富士ゼロックス株式会社 操作履歴表示装置、操作履歴表示方法およびプログラム
JP4345722B2 (ja) * 2005-07-15 2009-10-14 ソニー株式会社 動体追跡制御装置、動体追跡システム、動体追跡制御方法及びプログラム
US7077203B1 (en) * 2005-09-09 2006-07-18 Halliburton Energy Services, Inc. Methods of using settable compositions comprising cement kiln dust

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102857810A (zh) * 2011-05-30 2013-01-02 索尼公司 信息处理设备、信息处理方法和程序
CN107948734A (zh) * 2017-12-05 2018-04-20 深圳市茁壮网络股份有限公司 一种广告视频的筛选方法及系统
CN107948734B (zh) * 2017-12-05 2020-09-11 深圳市茁壮网络股份有限公司 一种广告视频的筛选方法及系统

Also Published As

Publication number Publication date
US20070009100A1 (en) 2007-01-11
US8019183B2 (en) 2011-09-13
JP2007018198A (ja) 2007-01-25

Similar Documents

Publication Publication Date Title
CN100437453C (zh) 标签信息显示控制设备及方法、信息处理设备和显示设备
CN101017493A (zh) 具有链接信息的索引信息的产生装置和方法
CN101017696B (zh) 标签信息产生装置和标签信息产生方法
CN102696223B (zh) 多功能多媒体装置
US7444656B2 (en) Post production visual enhancement rendering
CN104781805B (zh) 用于元数据引导的动态和个人数据管护的方法和装置
CN102103631A (zh) 内容提供服务器和方法及内容再现设备、方法和系统
US20120308073A1 (en) Systems and methods for generating bookmark video fingerprints
JP2006270960A (ja) 拡張可能な、コンテンツの識別および索引付け
CN1033704A (zh) 电子化商店
KR100630643B1 (ko) 정보 프로세서, 켄텐츠 기록 방법, 및 저장 매체
CN107534796A (zh) 检测视频节目的片段
CN1628314A (zh) 替换广告的布局
CN101312065A (zh) 内容显示方法、内容显示装置、记录介质和服务器装置
CN105612743A (zh) 编码的媒体的音频视频回放同步
CN102084361A (zh) 媒体资产管理
CN105340278A (zh) 自动前卷和后卷制作
CN101075233B (zh) 多媒体内容收集部件、系统及其方法
CN101167134A (zh) 针对先前记录的媒体内容创建和编辑操作列表的方法、装置和系统
CN101578859B (zh) 基于编辑状态的图像数字处理
GB2505654A (en) Method for generating file relationship data
US20140195650A1 (en) Digital Media Objects, Digital Media Mapping, and Method of Automated Assembly
US20060248014A1 (en) Method and system for scheduling tracking, adjudicating appointments and claims in a health services environmentand broadcasters
EP4128799A1 (en) Producing video for content insertion
Rubin Preserving digital public television: Not just an archive, but a new attitude to preserve public broadcasting

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20070815

C20 Patent right or utility model deemed to be abandoned or is abandoned