CN1471703A - 乐曲认识方法与系统、存放乐曲认识程序的存储介质、商业广告认识方法与系统、存放商业广告认识程序的存储介质 - Google Patents

乐曲认识方法与系统、存放乐曲认识程序的存储介质、商业广告认识方法与系统、存放商业广告认识程序的存储介质 Download PDF

Info

Publication number
CN1471703A
CN1471703A CNA018178200A CN01817820A CN1471703A CN 1471703 A CN1471703 A CN 1471703A CN A018178200 A CNA018178200 A CN A018178200A CN 01817820 A CN01817820 A CN 01817820A CN 1471703 A CN1471703 A CN 1471703A
Authority
CN
China
Prior art keywords
data
file
melody
mentioned
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA018178200A
Other languages
English (en)
Other versions
CN100461261C (zh
Inventor
伊能美和子
小林竜浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Communications Corp
Original Assignee
NTT Communications Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Communications Corp filed Critical NTT Communications Corp
Publication of CN1471703A publication Critical patent/CN1471703A/zh
Application granted granted Critical
Publication of CN100461261C publication Critical patent/CN100461261C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63—Querying
    • G06F16/632—Query formulation
    • G06F16/634—Query by example, e.g. query by humming
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63—Querying
    • G06F16/638—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/121—Musical libraries, i.e. musical databases indexed by musical parameters, wavetables, indexing schemes using musical parameters, musical rule bases or knowledge bases, e.g. for automatic composing methods
    • G10H2240/131—Library retrieval, i.e. searching a database or selecting a specific musical piece, segment, pattern, rule or parameter set
    • G10H2240/141—Library retrieval matching, i.e. any of the steps of matching an inputted segment or phrase with musical database contents, e.g. query by humming, singing or playing; the steps may include, e.g. musical analysis of the input, musical feature extraction, query formulation, or details of the retrieval process
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99941—Database schema or data structure
    • Y10S707/99944—Object-oriented database structure
    • Y10S707/99945—Object-oriented database structure processing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S707/00—Data processing: database and file management or data structures
    • Y10S707/99941—Database schema or data structure
    • Y10S707/99948—Application of database or data structure, e.g. distributed, multimedia, or image

Abstract

提供了一种从接收数据生成广播内容物播出单的播出单生成方法。方法包括如下步骤：预先抽出广播内容物特征保存于内容物特征文件，将广播内容物关联信息保存于内容物信息数据库；抽出接收数据特征而保存于广播特征文件；通过对照内容物特征文件和广播特征文件数据来检索给定种类广播内容物；若给定种类广播内容物名被判明则将对应于给定种类广播内容物的数据作为检索结果文件保存；从检索结果文件与内容物信息数据库生成给定种类广播内容物播出单。

Description

乐曲认识方法与系统、存放乐曲认识程序的存储介质、 商业广告认识方法与系统、存放商业广告认识程序的存储介质
技术领域
本发明涉及乐曲认识方法与系统以及存放乐曲认识程序的存储介质，尤其是涉及实时地对TV(电视)及FM(调频广播)等广播的图像或语音信息中所广播的乐曲加以认识与储存的乐曲认识方法与系统、以及存放乐曲认识程序的存储介质。
另外，本发明还涉及CM(Commercial，商业广告)认识方法与系统、以及存放CM认程序的存储介质，尤其是涉及实时地对电视及FM等广播的CM加以认识与储存的CM认识方法与系统、以及存放CM认识程序的存储介质。
背景技术
已往，并不存在对实时广播的图像信息及音乐信息等内容物(contents)中使用的乐曲名加以实时认识而储存于存储装置的系统。
又，对实时广播的CM加以实时认识、储存的装置也不存在。而仅以给定长度分割出的CM信息来比较认识CM数据的系统则更不存在。
如上所述，在已往系统中，不存在对被播放乐曲进行监视的技术，不能将乐曲名同播放时刻信息一道储存到存储装置里。当对某乐曲名附加时刻信息时只有靠人工处理，不能实时地附加所广播乐曲名、该乐曲被广播的时刻信息。
又，关于CM也一样，不存在对被播放图像或语音信息中被广播的CM实时认识储存的装置，除了靠人工处理别无它法，使得在实时性、扩大规模上受到限制。
发明内容
针对上述情况，本发明目的就在于提供一种可以对电视及FM等播放的图像或语音信息中所广播乐曲的乐曲名实时认识与储存的播出单生成技术。
又，本发明目的还在于提供一种不仅可以对无线播放的还可以对通过因特网等通信网络譬如以倾泻下载方式传送的广播数据、在既无标志信息也无透明信息的情况下也可以实时地对目标乐曲数据加以比较认识的播出单生成技术。
又，本发明目的还在于提供一种可以对电视及TM等播放的图像或语音信息中被广播的CM实时认识与储存的CM认识技术。
为实现上述目的，本发明可行如下技术方案。
本发明为一种播出单生成方法，从所接收数据生成内容物的播出单，其中，包括如下步骤：
预先抽出内容物特征而保存于内容物特征文件中，将该内容物关联信息保存于内容物信息数据库；
抽出上述所接收数据的特征而保存于数据特征文件中；
通过对照上述内容物特征文件数据和上述数据特征文件数据来检索内容物；
若上述内容物特征文件数据和上述数据特征文件数据一致，则将对应于该数据的数据作为检索结果文件保存；
从上述检索结果文件与上述内容物信息数据库生成该内容物的播出单。
根据本发明，可以根据被播放的广播数据等自动生成时间序列播出单。上述的所谓数据特征文件譬如是广播特征文件。
在上述技术方案中，还可包括如是步骤：当于上述检索步骤上述数据特征文件中某数据不含在上述内容物特征文件中时，将该数据登记于上述内容物特征文件中。
根据本发明，可以自动向内容特征文件登记数据。
在上述技术方案中，还可包括如下步骤：
使上述内容物特征文件中不含有的数据所对应的内容物可为人所视听；
将该内容物关联信息登记于上述内容物信息数据库。
根据本发明，可以自动地将业已登记的内容物特征文件的数据所关联信息进行登记，可以利用该登记信息自动地生成时间序列播出单。
在上述技术方案中，还可包括如下步骤：
当于上述检索步骤上述数据特征文件中某数据不含在上述内容物特征文件中时，使该数据所对应的内容物可为人所视听；
将该内容物同该内容物关联信息一道追加于上述播出单。
根据本发明，可以补充时间序列播出单，可以生成更高精度的播出单。
为实现上述目的，本发明还可行如下技术方案。
本发明为一种乐曲认识方法，从所接收数据认识乐曲，其中，包括如下步骤：
预先抽出乐曲内容物特征而保存于内容物特征文件中；
抽出上述所接收数据的特征而保存于广播特征文件中；
通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲名作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
根据本发明，可以自动生成乐曲有关时间序列播出单。
在上述技术方案中，还可包括如下步骤：
判定一下上述所接收数据是否为乐曲；
若为乐曲，则将表明其数据是乐曲的事项以及该数据接收时刻保存于乐曲抽出文件中；
当于上述乐曲检索步骤中上述广播特征文件中某数据的乐曲名没被判明时，将该数据保存于乐曲名未抽出文件中；
从上述广播特征文件和上述乐曲抽出文件以及上述乐曲名未抽出文件生成乐曲未检出文件。
根据本发明，对于尽管是乐曲但却没有记载于时间序列播出单者也可以掌握。
在上述技术方案中，还可包括如下步骤：
使上述乐曲未检出文件中记录的乐曲可为人所闻听；
将同该乐曲未检出文件中业已记录的乐曲有关的乐曲名及时刻追加于上述播出单中。
根据本发明，可以补充时间序列播出单，可以生成更高精度的播出单。
在上述技术方案中，可以利用上述检索结果文件和具有被同乐曲名赋与关联的信息的内容物信息数据库，生成上述时间序列播出单。
上述时间序列播出单可包括时刻、该时刻广播的乐曲名、以及该乐曲名关联的信息。
根据本发明，可以自动生成具有乐曲名及该乐曲名关联的种种信息的时间序列播出单。
在上述技术方案中，可在多地域接收广播数据，将在各地域接收的数据发送至中心系统，在该中心装置以上述乐曲认识方法生成上述时间序列播出单。
根据本发明，可以生成同各地广播台所广播内容有关的时间序列播出单。
又，本发明还可以是一种乐曲认识方法，从所接收数据认识乐曲，其中，包括如下步骤：
预先抽出乐曲内容物特征而保存于内容物特征文件中；
在多地域接收广播数据；
在各地域，抽出上述所接收数据的特征而作为广播特征文件数据发送至中心系统；
在该中心系统，通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲名作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
根据发明，由于可以在各地生成广播特征文件而传送至中心，所以可降低对中心的传送量。
在上述技术方案中，还可具备下列特征：
上述内容物信息数据库及上述乐曲名关联的信息包含CM有关信息；
上述内容物信息数据库中CM有关信息预先以CM认识方法登记于上述内容物信息数据库中；
该CM认识方法包括如下步骤：
从所接收数据检出CM数据；
抽出上述CM数据特征而保存于广播特征文件中；
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据；
当广播特征文件中数据不存在于主CM内容物特征文件中时，将该数据作为新CM登记于含在上述内容物信息数据库中的主CM内容物特征文件中。
根据本发明，可以生成含有CM信息的时间序列播出单。
为实现上述目的，本发明还可行如下技术方案。
本发明为一种CM认识方法，从所接收数据认识CM，保存所认识CM数据，其特征在于，包括如下步骤：
从所接收数据检出CM数据；
抽出上述CM数据特征而保存于广播特征文件中；
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据；
当上述广播特征文件中数据不存在于主CM内容物特征文件中时，将该数据作为新CM登记于主CM内容物特征文件中。
这样，可以使得由人工进行的CM监测作业实现自动化，可以提供能够用于生成时间序列播出单的CM数据。
在上述技术方案中，上述从所接收数据检出CM数据的步骤可包括检出CM数据开始点及结束点的步骤。
可在抽出上述CM数据特征之际，对一定长度部分—自被检出的上述CM数据的上述开始点与上述结束点之中心向该开始点与该结束点侧均等地延长而切割的部分—加以特征化。
根据本发明，可以吸收CM数据输入误差。
在上述技术方案中，还可包括如下步骤：
根据上述数据对照结果显示不存在于主CM内容物特征文件中的CM数据；
将该CM数据关联信息登记于含主CM内容物特征文件的CM管理数据库群的各数据库中。
根据本发明，可以对业已自动地登记于主CM内容物特征文件的CM数据关联信息进行登记，利用该信息可以生成具有CM相关信息的时间序列播出单。
另外，本发明其它目的、特征、功能以及优点可通过以下结合附图对细节的描述得以清楚理解。
附图说明
图1是本发明原理示意图。
图2是本发明原理结构图。
图3是本发明乐曲认识系统框图。
图4是本发明乐曲认识系统概要动作时序流程图。
图5是本发明CM认识系统框图。
图6是本发明CM认识系统概要动作流程图(其一)。
图7是本发明CM认识系统概要动作流程图(其二)。
图8是本发明第1具体例的乐曲认识系统框图。
图9是本发明第1具体例的乐曲认识系统动作流程图。
图10是本发明第1实施例的应用例示意图。
图11是制作时间序列播出单时所用的各个文件其及关系的示意图。
图12是时间序列播出单属性信息的示意图。
图13是时间序列播出单属性信息的示意图。
图14是本发明第2具体例的CM认识系统框图。
图15是用于CM特征数据的剪辑方法的示意图。
图16是本发明第3具体例的系统结构图。
图17是图16所示系统概要动作流程图。
图18是本发明第3具体例的系统的详细动作流程图。
图19是乐曲数据储存方法示意图。
图20是CM数据储存方法示意图。
图21是从乐曲·CM未抽出文件生成内容物特征文件的处理的示意图。
具体实施方式
第一实施方案
图1及图2示出了本实施例原理。
如图1所示，根据本实施例，预先抽出内容物(contents)特征而保存于内容物特征文件(步骤1)；抽出所接收数据特征而保存于广播特征文件(步骤2)；通过对照内容物特征文件与广播特征文件的数据来检索乐曲(步骤3)；若乐曲被判明则将该乐曲有关信息作为检索结果文件加以保存(步骤4)；根据检索结果文件生成乐曲的时间序列播出单(步骤5)。
又，如图2所示，本实施方案的乐曲认识系统原理结构包括：内容物生成单元300—预先生成内容物，且抽出乐曲内容物特征而保存于内容物特征文件320；和特征抽出单元105—抽出所接收数据特征而保存于广播特征文件140；和乐曲检索单元120—通过对照内容物特征文件320与广播特征文件140的数据来检索乐曲，且将检索结果保存于检索结果文件150；以及播出单生成单元200—从检索结果文件150生成时间序列的乐曲的时间序列播出单。
图3示出了本发明乐曲认识系统概要。该图所示系统包括：播放捕捉检索装置100、乐曲确认登记装置200、内容物生成装置300。这些装置都由PC(个人计算机)等构成。须指出的是，以一台具备所有这些装置的功能的PC也可以实现本系统，只不过考虑到PC处理负荷、性能价格比以及当前硬件规格等情况而分成3个装置。
播放捕捉检索装置100包括：播放捕捉部110、检索部120、乐曲抽出文件130、广播特征文件140、检索结果文件150、乐曲名未抽出文件160、乐曲未检出文件170、以及时刻数据提供部180。
播放捕捉部110就电视台、电台广播连续地监测广播数据，判定一下所监测广播数据是乐曲还是非乐曲；若是乐曲，则将表明监测时间内所广播的是乐曲的事项记录于乐曲抽出文件130，而且从该乐曲中实时地以7.5秒间隔抽出广播数据特征而保存于广播特征文件140。又，以7.5秒间隔将该乐曲作为数码数据保存于图中省略的文件中。在此，播放捕捉部110是根据来自时刻数据提供部180的时刻信息进行上述处理的。另外，对被捕捉信息记录时赋与时间标识。
这里，之所以用7.5秒间隔，是由于一般在想知道CM中所插播乐曲时CM播放时间目前最短是15秒，通过取其一半时间作检索时间可以切实地进行乐曲数据检索。
须指出的是，关于播放捕捉部110进行的是乐曲还是非乐曲的判定，可以利用预先判定是乐曲还是非乐曲(不是乐曲，而是讲话等)的已有技术(譬如”乐览”(乐曲非乐曲检出技术)：特愿平8-340293，特愿平10-68158等)。播放捕捉部110利用该技术把表明判定出是乐曲的事项登记于乐曲抽出文件130。
检索部120将保存有内容物生成装置300所生成内容物特征的文件读取于内存，进一步还读取广播特征文件140，进行两个文件的对照(matching)，将对照结果存放于检索结果文件150。将没有对照上的数据存放于乐曲名未抽出文件160。
关于上述对照检索，可以采用日本专利第3065314号”高速信号检索方法与装置及其存储介质”等记载的学习活动(learning active)检索方法。根据该方法，求内容物特征文件数据与广播特征文件数据的类似值，通过比较所求类似值与阈值来进行检索。欲知其详细请参见上述日本专利第3065314号。
乐曲抽出文件130由表明是乐曲的信息被赋与时间标识的数据构成，播放捕捉检索部100所生成的广播特征文件是TAZ文件(二进制文件)。须指出的是，TAZ文件是学习活动检索中可以进行高速比较处理的文件。
还有，对于广播内容，将之保存于图中省略的WAV文件等之中。
在广播特征文件140，保存播放捕捉部110自动捕捉的被播放的广播数据而且抽出特征后的广播数据的特征数据。
在乐曲未检出文件170，保存从乐曲抽出文件130、乐曲名未抽出文件160以及广播特征文件140抽出的虽为乐曲但却没有对照出来的数据。
在检索结果文件150，保存检索部120对内容物生成装置300所生成的内容物特征文件(后述)和广播特征文件140的对照结果。即，对照结果为一致的数据所对应的信息(乐曲名等)将保存于检索结果文件，而将广播特征文件140当中的在内容物特征文件不存在的数据保存于乐曲名未抽出文件(后述)。
乐曲确认登记装置200包括乐曲确认部210以及登记部220，其输出时间序列播出单230。
乐曲确认部210利用检索结果文件150以及内容物信息数据库330来抽出业已被认识的乐曲所对应的时刻、乐曲名、作曲者、节目(CM)名、委托客户、商品、演员、以及CD信息等，将这些提供给登记部220。
登记部220按时间顺序将乐曲确认部210所抽出的内容登记于时间序列播出单230。
又，在乐曲确认登记装置200，通过操作者对存放在乐曲未检出文件的广播内容进行确认来认识乐曲，将对应数据追加于时间序列播出单。另外，可以通过操作者根据乐曲未检出文件时刻信息闻听由播放捕捉部110以WAV文件等方式捕捉的乐曲来确认广播内容。
内容物生成装置300包括内容物生成部310、内容物特征文件320、以及内容物信息数据库330。
内容物生成部310从记录有乐曲的介质获取内容物，把乐曲名以及可以通用于内容物特征文件320的属性数据保存于内容物信息数据库330，进一步还抽出乐曲特征同乐曲名一起保存于内容物特征文件320。
内容物特征文件320是内容物生成部310所生成的文件，其中保存乐曲名及该乐曲特征信息。
内容物生成部310将乐曲的所有属性数据都存放于内容物信息数据库330。
下面描述上述乐曲认识系统的动作。
图4示出了本发明乐曲认识系统动作概要。
步骤101：在内容物生成装置300，把来自乐曲内容物存储介质等的乐曲以及该乐曲的属性数据登记于内容物信息数据库330。属性数据譬如是乐曲名、作曲者、节目名、委托客户、商品名、演员名等信息。
步骤102：在内容物生成装置300，抽出乐曲特征而保存于内容物特征文件320。
到此为止的处理是下述处理的前处理。
步骤103：在播放捕捉检索装置100捕捉被播放图像或语音等。在此，“被播放图像或语音等”包括通过因特网广播的图像或语音等。
步骤104：播放捕捉检索装置100利用任意一种就捕捉内容检测是乐曲还是非乐曲的技术来检测广播数据是乐曲还是非乐曲。
步骤105：在步骤103所捕捉的是乐曲的场合，将表明该时间广播的是乐曲的事项记录于乐曲抽出文件130。所谓记录表明是乐曲的事项譬如是指在该时间建立代表乐曲的标志。
步骤106：在上述步骤104、105的同时，还实时地以7.5秒间隔抽出乐曲特征而保存于广播特征文件140。又，乐曲的广播数据也保存于图中省略的文件中。
步骤107：接着在播放捕捉检索装置100，启动检索应用程序以进行乐曲检索，而且还把于上述步骤102由内容物生成装置300生成的内容物特征文件320的内容读入内存。
步骤108：播放捕捉检索装置100的检索部120还读入广播特征文件140，进行两个文件的对照。这时，设采用上述学习活动检索技术。
步骤109：将上述对照结果保存于检索结果文件150。对于没对照上的特征数据，将存放于乐曲名未抽出文件160。
步骤110：接着在乐曲确认登记装置200，从内容物生成装置300读取内容物信息数据库330的各内容。
步骤111：乐曲确认登记装置200还进一步从播放捕捉检索装置100读取检索结果文件150。
步骤112：据此，乐曲确认登记装置200从检索结果文件150中数据和内容物信息数据库330中数据抽出乐曲名、作曲者、所捕捉节目、委托客户、商品、演员等信息，进行将这些数据按时间顺序排列的处理，生成时间序列播出单而当作时间序列播出单数据库230保存起来。
步骤113：还通过操作者视听乐曲来确认同记录于乐曲来检出播出单的特征数据对应的乐曲名，以补充时间序列播出单。
第二实施方案
下面，作为本发明第2实施方案来说明认识保存电视以及FM/AM所播放的图像或语音信息当中CM(商业广告)的CM认识系统。须指出的是，通过参照该CM认识系统所生成的CM数据，可以从第一实施方案中被认识的乐曲生成包含CM数据数据的播出单。
图5是本发明CM认识系统概要示意图。
该图所示CM认识系统包括播放捕捉检索装置400、CM确认更新部500以及CM管理数据库群600。
播放捕捉检索装置400包括捕捉部410、检索部420、FM/AM·CM文件430、广播特征文件440、CM数据文件450、TV·CM数据文件460以及时刻数据提供部470。
捕捉部410就电视台、电台广播连续地监测广播数据，通过判定CM结束与开始来判定所监测广播数据是否为CM；若是CM，则将所监测CM数据存放于TV·CM数据文件460或存放于FM/AM·CM文件430。捕捉部410还根据时刻数据提供部470所提供的时刻信息对CM数据赋与时间标识。
进一步，捕捉部410还从所捕捉数据生成CM的特征数据而存放于广播特征文件440。后面将要提到，在生成广播特征文件440时，为了吸收由CM开始与结束点划分出的数据的切断点误差，还将数据再加工成一定长度(8.0秒)数据—自CM数据中心向两侧均等地延长而切断的数据。于是，利用学习活动检索技术所揭示的技术对该再加工后数据实行特征数据化而以TAZ格式存放。TAZ文件是在检索部420的学习活动检索上可以实行高速比较处理的文件。
检索部420，将广播特征文件440和CM管理数据库群600中的保存有CM特征的文件读入内存，进行两个文件的对照，将对照结果存放于CM数据文件450。须指出的是，假设检索部420采用学习活动检索(日本专利3065314号等)。这时，对于对照结果显示没有检索到CM者，将其CM数据以播放时间为名称保存于CM数据文件450。
捕捉部410所捕捉的FM/AM播放CM数据被当作WAV格式(只有语音的格式)文件保存在FM/AM·CM文件430。
广播特征文件440中保存从410所捕捉的CM数据抽出的CM特征数据。广播特征文件440是TAZ文件(二进制文件)。
捕捉部410所捕捉的电视播放CM数据被当作AVI格式文件保存在TV·CM数据文件460。
CM确认更新部500读取保存着CM名没有被判明的CM数据的CM数据文件450。由于CM数据文件450的CM为新CM的可能性大，所以操作者譬如利用Windows Media Player 7等软件进行新登记CM确认，抽出作广告者(委托客户)、商品名、乐曲名以及演员名等，存放于CM管理数据库群600的文件中。
CM管理数据库群600包括CM主文件610、商品主文件620、演员主文件630、乐曲名主文件640、作广告者主文件650、以及主CM内容物特征文件660。在CM确认更新部500抽出商品主文件620、演员主文件630、乐曲名主文件640、作广告者主文件650、以及主CM内容物特征文件660中的数据。这些主文件是按存放在CM主文件610中CM数据属性生成的主文件。
下面描述根据上述结构的动作。
图6及图7是本发明CM认识系统概要动作流程图。
步骤301：在播放捕捉检索装置400的捕捉部410，捕捉被播放的广播数据。
步骤302：检索部410从所捕捉广播数据检测出CM数据，按前述方法从CM数据抽出广播特征。
步骤303：将所抽出广播特征存放于广播特征文件440，进入步骤307。
步骤304、305：在上述处理同时，将电视CM存放于TV·CM数据文件460。
步骤306：若被抽出的CM是业已FM/AM播放过的CM时，还将该CM存放于FM/AM·CM文件430。
步骤307：在步骤303之后，检索部420将广播特征文件440和CM管理数据库群600的CM内容物特征文件660读取于内存，比较两个文件而行学习活动检索。
步骤308：当通过检索判明CM时转到步骤307，进行下个广播特征文件440数据与CM内容物特征文件660的检索。而当没有判明CM时则转到步骤309。
步骤309：没有判明CM时将播放时间作为名称登记于CM数据文件450。
步骤310：在CM确认更新部500，操作者利用现有软件等进行业已登记于CM数据文件450的CM的确认。
步骤311：由操作者进行CM主文件610维护，进一步，还从CM主文件610开始进行各属性主文件的维护。
这样，就可以将新CM登记到数据库里。
第三实施例
也可以象第一实施方案所示的从所认识乐曲生成时间序列播出单那样，从第二实施方案中所认识的CM生成时间序列播出单。
又，也可以象第二实施方案的CM例那样来更新有关乐曲的内容物特征文件、内容物信息数据库。
进一步，也可以一边象第一实施方案那样生成时间序列播出单一边象第二实施方案那样来更新有关CM或乐曲的内容物特征文件、内容物信息数据库。其具体例后述。
下面，根据附图描述对应于上述各实施方案的具体例。
对应于第一实施方案的具体例(第1具体例)
图8是本发明第1具体例的乐曲认识系统框图。
关于该图所示各装置，同图3所示结构一样者标注同一标号，并省略说明。
图9是本发明第1具体例的乐曲认识系统动作流程图。
下面根据图8及图9描述本发明乐曲认识系统。
如图8所示，在本乐曲认识系统中连接有：播放捕捉检索装置100—由实时地捕捉广播内容的PC110和检索广播特征文件140的PC120连接而成；和内容物生成装置300—具有对保持乐曲内容物特征的内容物特征文件320及内容物信息数据库330加以管理的PC310；以及乐曲确认登记装置200—将时间序列播出单登记于数据库。
图9所示处理系列A中，PC110捕捉播放内容(步骤201)，从所捕捉数据以7.5秒间隔输出广播特征文件140(步骤202)；接着，PC120利用从内容物生成装置300获取并预先在内存打开的内容物特征文件320的内容与广播特征文件140，以学习活动检索方式检索乐曲(步骤203)，将检索结果输出至检索结果文件150(步骤205)。又，此时，若经检索没有判明乐曲，则将特征数据存放于乐曲名未抽出文件(步骤207)。
上述处理一完成，就会在乐曲确认登记装置200从检索结果文件150的检索结果和内容物信息数据库生成时间序列播出单而保存于数据库230。
在图9所示处理系列B中，播放捕捉检索装置100的PC110判定一下广播数据是否为乐曲(步骤301)；若是乐曲则将向乐曲抽出文件130输出表明是乐曲的事项以及时间标识(步骤302)。又，乐曲本身也赋与时间标识而保存于图中省略的WAV文件等中。
这样，通过合并乐曲名未抽出文件160(处理系列A的)和乐曲抽出文件130(处理系列B的)就可以输出按时间分的乐曲未检出文件170(步骤208、209)，可以通过操作者向检索结果文件150反馈。据此就可以补充时间序列播出单。
须指出的是，作为操作者的操作是：一边在进行检索的PC120上确认乐曲未检出文件的内容一边在检索结果文件150中补充所需数据项目。
还须指出的是，设上述内容物特征文件320、检索结果文件150采用TAZ文件(用于学习活动检索的二进制文件)。
在播出单生成方面要结合检索结果文件和包含CM主文件等的内容物信息数据库。关于其具体例，描述应用例于下。
须指出的是，在图8所示例子中，PC110对于全国各地广播内容可以通过从相应区域进行数据接收而作捕捉，进而进行广播特征文件生成等。也可以在全国各地配置PC110，各PC110捕捉当地广播内容而生成广播特征文件，然后将该广播特征文件发送给配置在中心的PC120。
下面描述本发明应用例。
图10是上述本发明具体例的应用例示意图。
该图中，内容物管理中心对应于图8所示内容物生成装置300。又，设数据中心对应于图8的播放捕捉检索装置100。
首先，在内容物管理中心，从唱盘公司得到试听CD等，从CD销售商店等购入DVD、新版CD等，根据这些存储介质将内容物连同内容物属性存放于内容物信息数据库330，而且还抽出内容物特征而存放于内容物特征文件320(在图10的例子中为乐曲数据库)。
接着，数据中心利用频道选择器获取譬如通过配置在全国各地的天线得到的(电视(VHS)或FM等广播内容、或者通过抛物面天线得到的卫星广播内容。在数据中心，以7.5秒间隔对所获取广播数据进行数码化处理，同时抽出数据特征而存放于广播特征文件140，而且还判别一下是乐曲还是讲话等非乐曲，继而将判别结果存放于乐曲抽出文件130。
在数据中心的检索用PC，以检索引擎(学习活动检索技术)从内容物管理中心预先获取的内容物特征文件以及广播特征文件检索乐曲而存放于检索结果文件150。
据此，在数据中心内的用做乐曲确认登记装置200的PC中，利用检索结果文件、内容物信息数据库330生成时间序列播出单。在图10的例子中，是按时刻(赋与检索结果文件的时间标识)顺序将乐曲名、作曲者、节目(CM)、委托客户、商品、演员、以及CD信息等作为时间序列播出单而登记于供网点(Web Site)用的数据库。又，对于不能检索出的乐曲，由操作者进行乐曲追加。
图11示出了制作时间序列播出单时所用的各个文件其及关系。
如该图所示，从广播特征文件和内容物特征文件生成检索结果文件和乐曲名未抽出文件。进而从检索结果文件和内容物信息数据库生成时间序列播出单。
另一方面，通过从乐曲抽出文件和乐曲名未抽出文件等生成乐曲未检出文件、并由操作者确认该文件记录的乐曲所对应的乐曲名等，可以补充时间序列播出单。又，对于乐曲名等得到确认的乐曲，可以视需要进行特征化处理，据此将之追加于内容物特征文件中。这样，当捕捉相当于TAZ4的乐曲时就可以认识该乐曲。
下面参考图12、13描述利用内容物信息数据库生成图10所示时间序列播出单的方法。
图12示意的是就播出单确定时刻9点时的各项目的示意图。如该图所示，内容物信息数据库包括始自TAZ数据而串联起来的各数据库(主数据库)。因此，只要从TAZ数据判明乐曲名，就可以通过自音源主文件开始逐一查找各主文件而获取时刻9点的各信息。另外，从广播台名和时刻还可以得知节目名。就这样，可以生成含有各种关联信息的时间序列播出单。
图13所示的是时刻11点46分时的情形，同上述一样，可以根据TAZ数据并利用各主文件来获取对应于该时刻的各种信息。
下面说明本发明乐曲认识系统模拟结果。该模拟以含有7首乐曲的实际FM广播录音(约35分)作广播取样；以CD乐曲193首作数据库取样，其中有6首含在上述广播取样中。
模拟条件设为：以7.5秒间隔将广播取样同所有193首乐曲对照(193首＝20小时)；PC服务器的规格—用1个CPU(Pentium Xeon933MHZ)、2GB内存、Linux gcc 291。
在上述条件下实施本发明方法模拟的结果显示：所有应检出的6首都被正确地检出；时间误差大致在7.5内；就速度而言，约45秒完成了35分(2100秒)长检索，即实际时间下速度的50倍(＝2100/45)，就是说若实际时间都占用的话则可处理大约9000首。
又，虽然上述实施例中是就图8、图9描述的，但是也可以把图9所示动作设计成程序，将之存放于同数据中心及内容物管理中心所用计算机连接的硬盘、软盘以及CD-ROM等可移动存储介质中，当实施本发明之际将其安装于数据中心及内容物管理中心所用计算机。据此可以容易地实现本发明。
对应于第二实施方案的具体例(第2具体例)
在此描述的是从被广播的广播数据实时地检出CM而加以认识保存之例。通过将这样保存的CM数据用作上述主文件，可以生成含CM关联信息的时间序列播出单。
图14是本发明第2实施例的CM认识系统框图。
关于该图所示构成要素，同图5所示结构一样者标注同一标号，并省略说明。
本实施例的CM认识系统包括：播放捕捉检索装置400—由捕捉广播内容的捕捉PC410和比较广播特征文件440与CM内容物特征文件660的学习活动检索PC420；和CM确认更新部500—参照学习活动检索PC420输出的CM数据450进行CM确认及更新处理；以及CM管理数据库群600—管理CM的各主文件。
在此说明一下图14中的文件格式。
广播特征文件440是存放实时抽出的TV·CM及FM/AM·CM两者特征的TAZ格式文件。
TV·CM数据文件460是存放TV·CM的AVI格式文件，其被同广播特征文件440内容成对地管理。
FM/AM·CM文件430是存放FM/AM·CM的WAV格式文件，其被同广播特征文件440内容成对地管理。
CM数据文件450是存放应新登记的CM的文件，当为TV·CM时数据譬如以AVI格式存放，而当为FM/AM·CM时数据譬如以WAV格式存放。
CM管理数据库群600的主CM内容物特征文件660以TAZ格式存放。
下面参照上述过的图6、7描述以上结构下之动作。
捕捉部410捕捉播放内容(步骤301)。然后，捕捉PC410靠CM检测模块获取CM的开始和结束点。该CM检测内部模块可见于特愿平6-312976”图像切断点检测方法及装置”(谷村·外村)等。
接着，为了吸收由CM检测模块所切出数据的切断点误差，还如图15所示，将切出数据再加工成一定长度(8.0秒)数据—自CM数据中心向两侧均等地延长而切断的数据，将其作为广播特征抽出(步骤302)而存放于广播特征文件440(步骤303)。
捕捉PC410，当靠CM检测模块切断的播放数据为TV数据时将之以AVI格式存放，播放数据为FM/AM数据时将之以WAV格式存放(步骤304、305以及306)。
接着，学习活动检索PC420将广播特征文件440以及CM管理数据库群600的主CM内容物特征文件660读入内存，进行学习活动检索(步骤307)。在此，若CM在CM内容物特征文件660没有登记则将之登记于CM数据文件450(步骤309)，而且若在CM内容物特征文件660没有登记时还将该CM无条件地登记于主CM内容物特征文件660。
接着，在CM确认更新部500进行业已登记于CM数据文件450的CM之确认(步骤310)。CM确认处理利用现有软件进行。又，通过靠操作者追加各种最终附加信息来将该CM登记于CM主文件610。进一步，还根据业已登记于CM主文件610的CM的属性，以对应数据更新商品主文件620、演员主文件630、乐曲名主文件640、作广告者主文件650、以及主CM内容物特征文件660(步骤311)。
又，虽然上述实施例中是就图6、图7所示流程描述的，但是也可以把图6所示动作设计成程序，将之存放于同播放捕捉检索装置所用计算机连接的硬盘、软盘以及CD-ROM等可移动存储介质中，当实施本发明之际将其安装于播放捕捉检索装置所用计算机(捕捉PC、学习活动检索PC)。据此可以容易地实现本发明。
在上述实施例中，虽然所示出的对TV、FM/AM等广播台播放的广播数据进行捕捉而加以认识保存的处理，但是并非仅限于此例，对于通过因特网等通信网络传送的数据也可以应用和上述一样的处理。
须指出的是，在上述实施例中示出的对乐曲以7.5秒、对CM以8秒间隔进行特征化的例子不过只是一例而已，并非限定于此。
对应于第三实施方案的具体例(第3具体例)
在此描述的是通过捕捉乐曲、CM而如第一实施例那样生成播出单、同时如第二实施例那样登记内容物生成部中数据之例。
图16示出了本发明第3具体例的系统结构。
如该图所示，本第3具体例的乐曲CM认识系统包括：播放捕捉检索装置700—捕捉广播内容、进行乐曲及CM检索；和内容物生成装置800—生成内容信息数据库；以及CM确认登记装置900—从检索结果文件及内容信息数据库生成时间序列播出单，而且将被新确认乐曲或CM的属性信息登记于内容物生成装置800。
播放捕捉检索装置700包括播放捕捉部710、检索部720、乐曲CM抽出文件730、广播特征文件740、检索结果文件750、乐曲·CM未抽出文件760、乐曲·CM未检出文件770、以及内容物特征文件生成部780。内容生成装置包括内容物生成部810、内容物特征文件820、以及内容物信息数据库830。
图17是图16所示系统概要动作流程图。参照图17描述动作概要。
首先在内容物生成装置800抽出乐曲、CM的特征而作为内容特征文件保存(步骤401)。在播放捕捉检索装置700，播放捕捉部710捕捉含有乐曲、CM的广播内容物作为AVI文件、WAV文件等保存，同时还抽出内容物特征而保存于广播特征文件740(步骤402)。接着，利用内容物特征文件820与广播特征文件740检索乐曲、CM(步骤403)。于是，当乐曲或CM被判明时，将乐曲或CM有关信息保存于检索结果文件(步骤404)，生成时间序列播出单(步骤405)。而当乐曲或CM没有判明时，将没被判明乐曲或CM的特征数据等保存于乐曲·CM未抽出文件(步骤406)，生成对应于该乐曲、CM的内容物特征文件，自动登记于内容物生成装置800的内容物特征文件820(步骤407)。
下面以图18所示播放捕捉检索装置700的处理流程图进一步详述以上处理。
如图8所示，本实施例中播放捕捉检索装置700的处理可以分为：进行乐曲、CM检索的处理系列1；和进行乐曲检索、乐曲判别、保存的处理系列2；以及进行CM检出、保存的处理系列3。
在处理系列2，同第一实施例一样，判定广播内容是否为乐曲，生成乐曲抽出文件，而且还将乐曲数据作为WAV文件等保存起来(步骤501-503)。乐曲数据保存方法见图9。这样，每隔7.5秒即将被判定为乐曲的部分保存起来。
在处理系列3，同第二实施例一样，通过检测广播切断点生成CM抽出文件，而且还将CM数据作为AVI文件等保存起来(步骤511-513)。其处理情形见图20。这样，就将切断点间的CM部分保存了起来。
须指出的是，CM抽出文件是象乐曲方面的乐曲抽出文件那样的文件，记录有表明是CM的事项和其时间。
在处理系列1，就乐曲而言同第一实施例一样，就CM而言则同第二实施例一样，进行特征抽出、乐曲或CM检索(步骤521、522)。
在判明了乐曲或CM名的场合，生成检索结果文件750(步骤523)。而在没有判明乐曲或CM名的场合，则将数据存放于CM未抽出文件(步骤524)，利用该数据自动生成内容物特征文件(步骤525)，假登记于内容特征文件520。
图21示出了从乐曲·CM未抽出文件生成内容物特征文件的处理。若此，从对应于乐曲·CM未抽出文件中数据的乐曲、CM的数据文件(AVI或WAV)生成内容物特征文件。
又，象第一实施例那样，从乐曲·CM未抽出文件与乐曲CM抽出文件等生成乐曲·CM未检出文件(步骤526)，由操作者确认乐曲、CM，以被确认乐曲、CM来进行时间序列播出单补充(步骤527)。进一步，还利用确认结果进行内容物生成装置中各数据库更新(将TAZ文件与乐曲名、作曲者等关联起来)，据此将假登记内容物特征文件转为正式登记(步骤528)。
通过进行这样的处理，可以一边进行时间序列播出单生成一边进行以时间序列播出单为基础的内容物特征文件的数据追加、以及乐曲或CM关联信息的登记。
如上所述，根据实时认识乐曲的本发明，以7.5秒间隔对播放的广播数据(CM所用乐曲等)加以数码化、特征化，同预先准备的乐曲的内容特征文件进行对照，能以被广播的时刻信息连同乐曲名作为时间序列播出单保存于存储装置上。据此，可以获取乐曲名、作曲者、节目(CM)、委托客户、商品、演员、以及CD信息等的按时刻分的播出单，可以获取有意义的信息结果。这些可以被销售对象活用于市场信息等。
须指出的是，之所以用7.5秒间隔进行数码化特征化，是由于目前一般CM广播时间最短是15秒，为切实地进行检索而取其一半时间。故，视内容物种类而将数码化间隔时间变更为其它值也有效，并非一定是7.5秒。
又，根据本发明，对于已往由人工进行的CM监测作业可以实时地自动认识，即便没有标志信息或透明信息等也照样可以实时登记TV以及FM/AM播放的CM数据。进而，还可以将此CM数据用于生成时间序列播出单。
又，根据本发明，在生成时间序列播出单过程中，由于对于乐曲名没被判明的数据可以自动登记于内容物生成装置，所以可以充实内容物生成装置中数据库数据，可以生成更高精度的时间序列播出单。
本发明并非仅限于上述实施例，在不脱离本发明范围情况下可以进行种种变形应用。

Claims (39)

1 一种播出单生成方法，从所接收数据生成内容物的播出单，其中，包括如下步骤：
预先抽出内容物特征而保存于内容物特征文件中，将该内容物关联信息保存于内容物信息数据库；
抽出上述所接收数据的特征而保存于数据特征文件中；
通过对照上述内容物特征文件数据和上述数据特征文件数据来检索内容物；
若上述内容物特征文件数据和上述数据特征文件数据一致，则将对应于该数据的数据作为检索结果文件保存；
从上述检索结果文件与上述内容物信息数据库生成该内容物的播出单。
2 按权利要求1所述的播出单生成方法，其中，还包括如是步骤：当于上述检索步骤上述数据特征文件中某数据不含在上述内容物特征文件中时，将该数据登记于上述内容物特征文件中。
3 按权利要求2所述的播出单生成方法，其中，还包括如下步骤：
使上述内容物特征文件中不含有的数据所对应的内容物可为人所视听；
将该内容物关联信息登记于上述内容物信息数据库。
4 按权利要求1所述的播出单生成方法，其中，还包括如下步骤：
当于上述检索步骤上述数据特征文件中某数据不含在上述内容物特征文件中时，使该数据所对应的内容物可为人所视听；
将该内容物同该内容物关联信息一道追加于上述播出单。
5 一种乐曲认识方法，从所接收数据认识乐曲，其中，包括如下步骤：
预先抽出乐曲内容物特征而保存于内容物特征文件中；
抽出上述所接收数据的特征而保存于广播特征文件中；
通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲名作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
6 按权利要求5所述的乐曲认识方法，其中，还包括如下步骤：
判定一下上述所接收数据是否为乐曲；
若为乐曲，则将表明其数据是乐曲的事项以及该数据接收时刻保存于乐曲抽出文件中；
当于上述乐曲检索步骤中上述广播特征文件中某数据的乐曲名没被判明时，将该数据保存于乐曲名未抽出文件中；
从上述广播特征文件和上述乐曲抽出文件以及上述乐曲名未抽出文件生成乐曲未检出文件。
7 按权利要求6所述的乐曲认识方法，其中，还包括如下步骤：
使上述乐曲未检出文件中记录的乐曲可为人所闻听；
将同该乐曲未检出文件中业已记录的乐曲有关的乐曲名及时刻追加于上述播出单中。
8 按权利要求5所述的乐曲认识方法，其中，利用上述检索结果文件和具有被同乐曲名赋与关联的信息的内容物信息数据库，生成上述时间序列播出单；
上述时间序列播出单包括时刻、该时刻广播的乐曲名、以及该乐曲名关联的信息。
9 按权利要求5所述的乐曲认识方法，其中，在多地域接收广播数据，将在各地域接收的数据发送至中心系统，在该中心装置以上述乐曲认识方法生成上述时间序列播出单。
10 一种乐曲认识方法，从所接收数据认识乐曲，其中，包括如下步骤：
预先抽出乐曲内容物特征而保存于内容物特征文件中；
在多地域接收广播数据；
在各地域，抽出上述所接收数据的特征而作为广播特征文件数据发送至中心系统；
在该中心系统，通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲名作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
11 按权利要求8所述的乐曲认识方法，其特征在于，
上述内容物信息数据库及上述乐曲名关联的信息包含CM有关信息；
上述内容物信息数据库中CM有关信息预先以CM认识方法登记于上述内容物信息数据库中；
该CM认识方法包括如下步骤：
从所接收数据检出CM数据；
抽出上述CM数据特征而保存于广播特征文件中；
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据；
当广播特征文件中数据不存在于主CM内容物特征文件中时，将该数据作为新CM登记于含在上述内容物信息数据库中的主CM内容物特征文件中。
12 一种CM认识方法，从所接收数据认识CM，保存所认识CM数据，其特征在于，包括如下步骤：
从所接收数据检出CM数据；
抽出上述CM数据特征而保存于广播特征文件中；
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据；
当上述广播特征文件中数据不存在于主CM内容物特征文件中时，将该数据作为新CM登记于主CM内容物特征文件中。
13 按权利要求12所述的CM认识方法，其特征在于，上述从所接收数据检出CM数据的步骤包括检出CM数据开始点及结束点的步骤；
在抽出上述CM数据特征之际，对一定长度部分—自被检出的上述CM数据的上述开始点与上述结束点之中心向该开始点与该结束点侧均等地延长而切割的部分—加以特征化。
14 按权利要求12所述的CM认识方法，其中，还包括如下步骤：
根据上述数据对照结果显示不存在于主CM内容物特征文件中的CM数据；
将该CM数据关联信息登记于含主CM内容物特征文件的CM管理数据库群的各数据库中。
15 一种播出单生成系统，是从所接收数据生成内容物的播出单的系统，其特征在于，包括如下各单元：
获取预先保存有内容物特征的内容物特征文件的数据、以及保存有内容物关联信息的内容物信息数据库的数据的单元；和
抽出所接收数据的特征而保存于数据特征文件中的单元；和
通过对照上述内容物特征文件数据和上述数据特征文件数据来检索内容物的单元；和
若上述内容物特征文件数据和上述数据特征文件数据一致则将对应于该数据的数据作为检索结果文件保存的单元；以及
从上述检索结果文件与上述内容物信息数据库生成给定种类的内容物的播出单的单元。
16 按权利要求15所述的播出单生成系统，其中还包括：当于上述检索单元上述数据特征文件中某数据不含在上述内容物特征文件中时将该数据登记于上述内容物特征文件中的单元。
17 按权利要求16所述的播出单生成系统，其中还包括如下单元：
使上述内容物特征文件中不含有的数据所对应的内容物可为人所视听的单元；以及
将该内容物关联信息登记于上述内容物信息数据库的单元。
18 按权利要求15所述的播出单生成系统，其中还包括：
当于上述检索单元上述数据特征文件中某数据不含在上述内容物特征文件中时使该数据所对应的内容物可为人所视听的单元；以及
将该内容物同该内容物关联信息一道追加于上述播出单的单元。
19 一种乐曲认识系统，是从所接收数据认识乐曲的系统，其特征在于，包括如下单元：
获取保存有乐曲内容物特征的内容物特征文件中数据的单元；和
抽出上述所接收数据的特征而保存于广播特征文件中的单元；和
通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲的单元；和
若乐曲名被判明则将该乐曲名作为检索结果文件保存的单元；以及
从上述检索结果文件生成乐曲的时间序列播出单的单元。
20 按权利要求19所述的乐曲认识系统，其中，还包括如下单元：
判定一下上述所接收数据是否为乐曲的单元；和
若为乐曲则将表明其数据是乐曲的事项以及该数据接收时刻保存于乐曲抽出文件中的单元；和
当于上述乐曲检索单元中上述广播特征文件中某数据的乐曲名没被判明时将该数据保存于乐曲名未抽出文件中的单元；以及
从上述广播特征文件和上述乐曲抽出文件以及上述乐曲名未抽出文件生成乐曲未检出文件的单元。
21 按权利要求20所述的乐曲认识系统，其中，还包括如下单元：
使上述乐曲未检出文件中记录的乐曲可为人所闻听的单元；以及
将同该乐曲未检出文件中业已记录的乐曲有关的乐曲名及时刻追加于上述播出单中的单元。
22 按权利要求19所述的乐曲认识系统，其中，
还包括从具有被同乐曲名赋与关联的信息的内容物信息数据库获取数据的单元、以及利用上述检索结果文件和内容物信息数据库的数据生成上述时间序列播出单的单元；
上述时间序列播出单包括时刻、该时刻广播的乐曲名、以及该乐曲名关联信息。
23 一种乐曲认识系统，是从所接收数据认识乐曲的系统，其中，
在多地域具备接收广播数据的装置，还具备从各地域装置接收在各地域所接收数据的中心系统；
上述中心系统包括如下各单元：
获取保存有乐曲内容物特征的内容物特征文件中数据的单元；和
抽出上述所接收数据的特征而保存于广播特征文件中的单元；和
通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲的单元；和
若乐曲名被判明则将该乐曲名作为检索结果文件保存的单元；以及
从上述检索结果文件生成乐曲的时间序列播出单的单元。
24 一种乐曲认识系统，是从所接收数据认识乐曲的系统，其特征在于，
在多地域具备接收广播数据、抽出该广播数据特征的装置，还具备从各地域装置接收在各地域所接收广播数据的特征数据以当作广播特征文件的中心系统；
上述中心系统包括如下各单元：
获取保存有乐曲内容物特征的内容物特征文件中数据的单元；和
通过对照上述内容物特征文件和上述广播特征文件的数据来检索乐曲的单元；和
若乐曲名被判明则将该乐曲名作为检索结果文件保存的单元；以及
从上述检索结果文件生成乐曲的时间序列播出单的单元。
25 一种CM认识系统，用于从所接收数据认识CM、并保存所认识CM数据，其特征在于，包括如下各单元：
从所接收数据检出CM数据的单元；和
抽出上述CM数据特征而保存于广播特征文件中的单元；和
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据的单元；以及
当上述广播特征文件中数据不存在于主CM内容物特征文件中时将该数据作为新CM登记于主CM内容物特征文件中的单元。
26 按权利要求25所述的CM认识系统，其特征在于，上述从所接收数据检出CM数据的单元包括检出CM数据开始点及结束点的单元；
在抽出上述CM数据特征之际，对一定长度部分—自被检出的上述CM数据的上述开始点与上述结束点之中心向该开始点与该结束点侧均等地延长而切割的部分—加以特征化。
27 按权利要求25所述的CM认识系统，其中，还包括如下单元：
根据上述数据对照结果显示不存在于主CM内容物特征文件中的CM数据的单元；以及
将该CM数据关联信息登记于含主CM内容物特征文件的CM管理数据库群的各数据库中。
28 一种计算机可读存储介质，记录有使得计算机执行从所接收数据生成内容物播出单之处理的程序，其中，该程序使得计算机执行如下步骤：
抽出上述所接收数据的特征而保存于数据特征文件中；
获取保存有上述内容物特征的内容物特征文件数据，通过对照该数据和上述数据特征文件数据来检索内容物；
若上述内容物特征文件数据和上述数据特征文件数据一致，则将对应于该数据的数据作为检索结果文件保存；
从上述检索结果文件与保存有内容物关联信息的内容物信息数据库生成该内容物的播出单。
29 按权利要求28所述的计算机可读存储介质，其中，上述程序还使得计算机执行如是步骤：当上述数据特征文件中某数据不含在上述内容物特征文件中时，将该数据登记于上述内容物特征文件中。
30 按权利要求29所述的计算机可读存储介质，其中，上述程序还使得计算机执行如下步骤：
使上述内容物特征文件中不含有的数据所对应的内容物可为人所视听；
将该内容物关联信息登记于上述内容物信息数据库。
31 按权利要求28所述的计算机可读存储介质，其中，上述程序还使得计算机执行如下步骤：
当上述数据特征文件中某数据不含在上述内容物特征文件中时，使该数据所对应内容物可为人所视听；
将该内容物同该内容物关联信息一道追加于上述播出单。
32 一种计算机可读存储介质，记录有使得计算机执行从所接收数据认识乐曲之处理的程序，其中，该程序使得计算机执行如下步骤：
抽出上述所接收数据的特征而保存于广播特征文件中；
通过对照保存有乐曲内容物特征的内容物特征文件和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲特征作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
33 按权利要求32所述的计算机可读存储介质，其中，上述程序还使得计算机执行如下步骤：
判定一下上述所接收数据是否为乐曲；
若为乐曲，则将表明其数据是乐曲的事项以及该数据接收时刻保存于乐曲抽出文件中；
当于上述乐曲检索步骤中上述广播特征文件中某数据的乐曲名没被判明时，将该数据保存于乐曲名未抽出文件中；
从上述广播特征文件和上述乐曲抽出文件以及上述乐曲名未抽出文件生成乐曲未检出文件。
34 按权利要求33所述的计算机可读存储介质，其中，上述程序还使得计算机执行如下步骤：
使上述乐曲未检出文件中记录的乐曲可为人所闻听；
将同该乐曲未检出文件中业已记录的乐曲有关的乐曲名及时刻追加于上述播出单中。
35 按权利要求32所述的计算机可读存储介质，其中，
上述程序还使得计算机执行如是步骤：从具有被同乐曲名赋与关联的信息的内容物信息数据库获取数据，以及利用上述检索结果文件和内容物信息数据库的数据生成上述时间序列播出单；
上述时间序列播出单包括时刻、该时刻广播的乐曲名、以及该乐曲名关联信息。
36 一种计算机可读存储介质，记录有使得计算机执行从所接收数据认识乐曲之处理的程序，其中，该程序使得计算机执行如下步骤：
从各地域装置接收在各地域所接收广播数据的特征数据以当作广播特征文件；
通过对照保存有乐曲内容物特征的内容物特征文件的数据和上述广播特征文件的数据来检索乐曲；
若乐曲名被判明，则将该乐曲名作为检索结果文件保存；
从上述检索结果文件生成乐曲的时间序列播出单。
37 一种计算机可读存储介质，记录有使得计算机执行从所接收数据认识CM、并保存所认识CM数据之处理的程序，其中，该程序使得计算机执行如下步骤：
从所接收数据检出CM数据；
抽出上述CM数据特征而保存于广播特征文件中；
对照上述广播特征文件和预先存放有CM内容物特征的主CM内容物特征文件的数据；
当广播特征文件中数据不存在于主CM内容物特征文件中时，将该数据作为新CM登记于主CM内容物特征文件中。
38 按权利要求37所述的计算机可读存储介质，其特征在于，
上述从所接收数据检出CM数据的步骤包括检出CM数据开始点及结束点的步骤；
在抽出上述CM数据特征之际，对一定长度部分—自被检出的上述CM数据的上述开始点与上述结束点之中心向该开始点与该结束点侧均等地延长而切割的部分—加以特征化。
39 按权利要求37所述的计算机可读存储介质，其特征在于，上述程序还使得计算机执行如下步骤：
根据上述数据对照结果显示不存在于主CM内容物特征文件中的CM数据；
将该CM数据关联信息登记于含主CM内容物特征文件的CM管理数据库群的各数据库中。
CNB018178200A 2000-10-23 2001-10-22 乐曲认识方法与系统 Expired - Fee Related CN100461261C (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP323022/00 2000-10-23
JP2000323022 2000-10-23
JP323022/2000 2000-10-23
JP363883/00 2000-11-29
JP363883/2000 2000-11-29
JP2000363883 2000-11-29

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CNA2008101310902A Division CN101354716A (zh) 2000-10-23 2001-10-22 乐曲认识方法与系统、商业广告认识方法与系统

Publications (2)

Publication Number Publication Date
CN1471703A true CN1471703A (zh) 2004-01-28
CN100461261C CN100461261C (zh) 2009-02-11

Family

ID=26602607

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2008101310902A Pending CN101354716A (zh) 2000-10-23 2001-10-22 乐曲认识方法与系统、商业广告认识方法与系统
CNB018178200A Expired - Fee Related CN100461261C (zh) 2000-10-23 2001-10-22 乐曲认识方法与系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNA2008101310902A Pending CN101354716A (zh) 2000-10-23 2001-10-22 乐曲认识方法与系统、商业广告认识方法与系统

Country Status (9)

Country Link
US (1) US7277852B2 (zh)
JP (1) JPWO2002035516A1 (zh)
KR (1) KR100516403B1 (zh)
CN (2) CN101354716A (zh)
AU (1) AU2001295989A1 (zh)
GB (1) GB2384596A (zh)
HK (1) HK1059133A1 (zh)
TW (1) TW535073B (zh)
WO (1) WO2002035516A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101160615B (zh) * 2005-04-25 2012-11-14 索尼株式会社 音乐内容重放设备和音乐内容重放方法

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7020304B2 (en) 2002-01-22 2006-03-28 Digimarc Corporation Digital watermarking and fingerprinting including synchronization, layering, version control, and compressed embedding
US7917557B2 (en) * 2002-09-05 2011-03-29 Koninklijke Philips Electronics N.V. Method and devices for creating a second playlist based on a first playlist
WO2005039080A1 (ja) * 2003-10-21 2005-04-28 Yutaka Matsushita 情報配信システム
US20050193092A1 (en) * 2003-12-19 2005-09-01 General Motors Corporation Method and system for controlling an in-vehicle CD player
WO2005101998A2 (en) * 2004-04-19 2005-11-03 Landmark Digital Services Llc Content sampling and identification
US20050267750A1 (en) * 2004-05-27 2005-12-01 Anonymous Media, Llc Media usage monitoring and measurement system and method
US20150051967A1 (en) 2004-05-27 2015-02-19 Anonymous Media Research, Llc Media usage monitoring and measurment system and method
TWI247239B (en) * 2004-06-18 2006-01-11 Via Tech Inc Advertising detection method and related system for detecting advertising according to specific beginning/ending images of advertising sections
SG119377A1 (en) * 2004-08-06 2006-02-28 Yamaha Corp Electrical music apparatus capable of connecting with external device
WO2006026736A2 (en) * 2004-08-31 2006-03-09 Integrated Media Measurement, Inc. Detecting and measuring exposure to media content items
JP2006127367A (ja) * 2004-11-01 2006-05-18 Sony Corp 情報管理方法、情報管理プログラムおよび情報管理装置
US7818350B2 (en) 2005-02-28 2010-10-19 Yahoo! Inc. System and method for creating a collaborative playlist
JP4380582B2 (ja) 2005-04-22 2009-12-09 ソニー株式会社 記録再生装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム
JP2006319456A (ja) * 2005-05-10 2006-11-24 Ntt Communications Kk キーワード提供システム及びプログラム
US20070239781A1 (en) * 2006-04-11 2007-10-11 Christian Kraft Electronic device and method therefor
US9124357B2 (en) * 2006-04-20 2015-09-01 Qualcomm Incorporated Media access control for ultra-wide band communication
EP2115732B1 (en) 2007-02-01 2015-03-25 Museami, Inc. Music transcription
WO2008101130A2 (en) 2007-02-14 2008-08-21 Museami, Inc. Music-based search engine
JP2008241850A (ja) * 2007-03-26 2008-10-09 Sanyo Electric Co Ltd 録音または再生装置
US8283546B2 (en) * 2007-03-28 2012-10-09 Van Os Jan L Melody encoding and searching system
JP4933330B2 (ja) * 2007-03-30 2012-05-16 クラリオン株式会社 楽曲再生制御装置および再生リスト作成方法
US8156118B2 (en) 2007-08-20 2012-04-10 Samsung Electronics Co., Ltd. Method and system for generating playlists for content items
JP5087415B2 (ja) * 2008-01-22 2012-12-05 三洋電機株式会社 楽曲メタ情報配信システムにおけるクライアント側装置および音声データ出力装置
US8494257B2 (en) 2008-02-13 2013-07-23 Museami, Inc. Music score deconstruction
US9496003B2 (en) * 2008-09-08 2016-11-15 Apple Inc. System and method for playlist generation based on similarity data
US20110060738A1 (en) 2009-09-08 2011-03-10 Apple Inc. Media item clustering based on similarity data
TWI411927B (zh) * 2010-04-02 2013-10-11 Primax Electronics Ltd 嵌入資訊於輸入影像的方法、自輸入影像中擷取出資訊的方法以及相關裝置
JP2012053722A (ja) * 2010-09-02 2012-03-15 Sony Corp 情報処理装置、情報処理方法、およびプログラム
US20130325853A1 (en) * 2012-05-29 2013-12-05 Jeffery David Frazier Digital media players comprising a music-speech discrimination function
US10936653B2 (en) 2017-06-02 2021-03-02 Apple Inc. Automatically predicting relevant contexts for media items

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2761897A (en) * 1951-11-07 1956-09-04 Jones Robert Clark Electronic device for automatically discriminating between speech and music forms
USRE26104E (en) 1955-12-19 1966-11-01 Data processing apparatus for identify. ing an unknown signal by comparison
US3919479A (en) 1972-09-21 1975-11-11 First National Bank Of Boston Broadcast signal identification system
US4230990C1 (en) 1979-03-16 2002-04-09 John G Lert Jr Broadcast program identification method and system
US4450531A (en) 1982-09-10 1984-05-22 Ensco, Inc. Broadcast signal recognition system and method
US4677466A (en) 1985-07-29 1987-06-30 A. C. Nielsen Company Broadcast program identification method and apparatus
US4739398A (en) 1986-05-02 1988-04-19 Control Data Corporation Method, apparatus and system for recognizing broadcast segments
JPS6356091A (ja) 1986-08-26 1988-03-10 Video Res:Kk テレビ・コマーシャル放送確認方法
US4843562A (en) 1987-06-24 1989-06-27 Broadcast Data Systems Limited Partnership Broadcast information classification system and method
WO1993021636A1 (en) * 1992-04-10 1993-10-28 Avid Technology, Inc. A method and apparatus for representing and editing multimedia compositions
US5436653A (en) 1992-04-30 1995-07-25 The Arbitron Company Method and system for recognition of broadcast segments
JPH0644752A (ja) 1992-07-22 1994-02-18 Ui Kiyan:Kk 曲名の選出方法および曲名の選出装置
US5437050A (en) 1992-11-09 1995-07-25 Lamb; Robert G. Method and apparatus for recognizing broadcast information using multi-frequency magnitude detection
US5577266A (en) * 1993-04-08 1996-11-19 Digital D.J. Inc. Broadcast system with associated data capabilities
US5812937B1 (en) * 1993-04-08 2000-09-19 Digital Dj Inc Broadcast data system with multiple-tuner receiver
JP3447333B2 (ja) * 1993-06-18 2003-09-16 株式会社ビデオリサーチ Ｃｍ自動識別システム
JP2842762B2 (ja) * 1993-06-30 1999-01-06 シャープ株式会社 赤外線利用データ転送装置
JPH08149099A (ja) 1994-11-25 1996-06-07 Niirusen Japan Kk テレビ放送におけるコマーシャル及び番組情報処理システム
JPH09214875A (ja) * 1996-02-07 1997-08-15 Matsushita Electric Ind Co Ltd テレビジョン受信機、およびラジオ受信機
US5918223A (en) * 1996-07-22 1999-06-29 Muscle Fish Method and article of manufacture for content-based analysis, storage, retrieval, and segmentation of audio information
JPH10308921A (ja) 1997-05-08 1998-11-17 Fujitsu Ltd 情報収集装置
JPH11122203A (ja) 1997-10-09 1999-04-30 Video Research:Kk 放送確認システム、及びこのシステムに使用される映像素材制作装置及び放送確認装置
JPH11120198A (ja) * 1997-10-20 1999-04-30 Sony Corp 楽曲検索装置
JPH11205256A (ja) 1998-01-16 1999-07-30 Tetsushi Nakamura 著作権料管理装置
JPH11238088A (ja) 1998-02-19 1999-08-31 Tetsushi Nakamura 著作権料管理装置
EP0944033B1 (en) 1998-03-19 2003-05-28 Tomonari Sonoda Melody retrieval system and method
JP3065314B1 (ja) * 1998-06-01 2000-07-17 日本電信電話株式会社 高速信号探索方法、装置およびその記録媒体
US6956593B1 (en) * 1998-09-15 2005-10-18 Microsoft Corporation User interface for creating, viewing and temporally positioning annotations for media content
JP2000149434A (ja) 1998-11-12 2000-05-30 Sony Corp データ内容情報の記録制御装置及びその方法
JP3434223B2 (ja) 1998-11-19 2003-08-04 日本電信電話株式会社 音楽情報検索装置，音楽情報蓄積装置，音楽情報検索方法，音楽情報蓄積方法およびそれらのプログラムを記録した記録媒体
JP3631650B2 (ja) 1999-03-26 2005-03-23 日本電信電話株式会社 音楽検索装置，音楽検索方法および音楽検索プログラムを記録した計算機読み取り可能な記録媒体
US6332120B1 (en) * 1999-04-20 2001-12-18 Solana Technology Development Corporation Broadcast speech recognition system for keyword monitoring
JP2000347689A (ja) 1999-06-03 2000-12-15 Nec Software Niigata Ltd 音データ検索方法，音データ検索装置および音データ検索プログラムを記録した記録媒体
JP2001060099A (ja) 1999-08-24 2001-03-06 Sony Corp 情報処理装置および方法、並びに媒体
DE19948974A1 (de) 1999-10-11 2001-04-12 Nokia Mobile Phones Ltd Verfahren zum Erkennen und Auswählen einer Tonfolge, insbesondere eines Musikstücks
US6192340B1 (en) * 1999-10-19 2001-02-20 Max Abecassis Integration of music from a personal library with real-time information
JP2001326952A (ja) 2000-05-15 2001-11-22 Nec Corp 放送確認システム、放送確認方法及び装置、放送確認プログラムを記録した記録媒体
JP2001358682A (ja) 2000-06-09 2001-12-26 Nri & Ncc Co Ltd 放送楽曲調査装置、放送楽曲調査方法および記録媒体
US7062528B2 (en) * 2000-07-14 2006-06-13 Sony Corporation Method and system for identifying a time specific event
US7853664B1 (en) * 2000-07-31 2010-12-14 Landmark Digital Services Llc Method and system for purchasing pre-recorded music

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101160615B (zh) * 2005-04-25 2012-11-14 索尼株式会社 音乐内容重放设备和音乐内容重放方法

Also Published As

Publication number Publication date
WO2002035516A1 (fr) 2002-05-02
AU2001295989A1 (en) 2002-05-06
CN101354716A (zh) 2009-01-28
US20040055445A1 (en) 2004-03-25
KR20030096225A (ko) 2003-12-24
JPWO2002035516A1 (ja) 2004-03-04
GB0309208D0 (en) 2003-05-28
CN100461261C (zh) 2009-02-11
TW535073B (en) 2003-06-01
KR100516403B1 (ko) 2005-09-23
US7277852B2 (en) 2007-10-02
HK1059133A1 (en) 2004-06-18
GB2384596A (en) 2003-07-30

Similar Documents

Publication Publication Date Title
CN1471703A (zh) 乐曲认识方法与系统、存放乐曲认识程序的存储介质、商业广告认识方法与系统、存放商业广告认识程序的存储介质
CN1109994C (zh) 文件处理装置与记录媒体
CN1192386C (zh) 分配系统、分配方法、接收装置和接收方法
CN1150540C (zh) 转录装置
CN1525476A (zh) 记录装置、再现装置及文件管理方法
CN1815612A (zh) 信息处理装置、方法和程序
CN1666527A (zh) 对嵌于媒介流中的重复对象提供用户控制的系统和方法
CN1738440A (zh) 用于处理信息的设备，方法和计算机程序
CN1684513A (zh) 信息处理方法、装置及程序
CN1922605A (zh) 辞典制作装置以及辞典制作方法
CN1808613A (zh) 重放装置、重放方法及程序
CN1768373A (zh) 信息处理装置、信息处理方法、及计算机程序
CN1816879A (zh) 视频处理装置、视频处理装置的ic电路、视频处理方法和视频处理程序
CN1677387A (zh) 信息处理装置和方法及程序
CN1756337A (zh) 记录和/或回放内容数据的方法、设备和程序
CN101069181A (zh) 存储设备和记录介质
CN1461482A (zh) 数据管理器
CN1653546A (zh) 记录重放系统、记录重放方法、程序、及记录媒体
CN100336389C (zh) 信息记录装置和方法、信息再现装置和方法
CN101067955A (zh) 内容列表显示方法及装置、内容选择和处理方法及装置
CN101030193A (zh) 信息编辑显示设备、方法、及程序，介质、服务器及信息处理系统
CN1745369A (zh) 信息处理装置、信息处理方法及计算机程序
CN1756334A (zh) 用于处理信息的设备、方法和程序
CN1737802A (zh) 信息处理设备与方法、记录介质,以及程序
CN1251230C (zh) 记录装置及记录方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1059133

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1059133

Country of ref document: HK

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090211

Termination date: 20101022