CN1757229A - 广播接收方法、广播接收系统、记录媒体及程序 - Google Patents

广播接收方法、广播接收系统、记录媒体及程序 Download PDF

Info

Publication number
CN1757229A
CN1757229A CNA2003801099175A CN200380109917A CN1757229A CN 1757229 A CN1757229 A CN 1757229A CN A2003801099175 A CNA2003801099175 A CN A2003801099175A CN 200380109917 A CN200380109917 A CN 200380109917A CN 1757229 A CN1757229 A CN 1757229A
Authority
CN
China
Prior art keywords
word
information
language
identification
corresponding relation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2003801099175A
Other languages
English (en)
Inventor
加藤弓子
釜井孝浩
吉田秀行
广濑良文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1757229A publication Critical patent/CN1757229A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4332Content storage operation, e.g. storage operation in response to a pause request, caching operations by placing content in organized collections, e.g. local EPG data repository
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224Monitoring of user activity on external systems, e.g. Internet browsing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454Content or additional data filtering, e.g. blocking advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815Electronic shopping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/37Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying segments of broadcast information, e.g. scenes or extracting programme ID
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/48Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising items expressed in broadcast information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/087Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
    • H04N7/088Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital

Abstract

不需要花较大的工夫就能简便地取得广播节目和商业广告中上市的对象品。具有接收将与广播内容中上市的对象品带有对应关系且包含规定对象品用的关键字信息的所述添加信息与广播内容同时广播的广播的广播接收单元(313)、利用同义词辞典(316)与添加信息对应地产生识别词汇集的识别词汇集产生部(354)、对收视者发出的语声进行语声识别并且在识别词汇集中包含该语声识别结果识别到的单词时规定与该识别词汇集具有对应关系的关键字信息的语声识别部(352)、以及显示与该规定的关键字信息具有对应关系的添加信息的显示部(318)。

Description

广播接收方法、广播接收系统、记录媒体及程序
技术领域
本发明涉及接收广播台广播来的广播的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。
背景技术
收视已有的电视广播进行广播的节目和商业广告时,收视者有时想获得在节目和商业广告中上市的物品、节目和商业广告中演奏的音乐等对象品。
这种情况下的收视者首先将PC(个人计算机)连接到互联网,在网上检索有关这些对象品的信息,以得到有关目的对象品的信息。
然后,根据得到的信息,联络销售这些对象品的销售店或来到该店,购入这些对象品。以往的收视者按这样的程序买进在节目和商业广告中上市的对象品。
然而,收视者为了得到广播的节目和商业广告中上市的对象品,必须从PC连接互联网,通过互联网下载有关目的对象品的信息,进而必须根据下载的信息,进行用电话等订购对象品之类的操作,与广播接收完全无关,不方便。
也就是说,已有的广播中存在费工夫、不方便、不能简单购得所广播的节目和商业广告中上市的对象品的课题。
因此,为了解决上述课题,本申请的发明人的申请(日本国专利申请2001-258564)中提出能不费工夫地简单购得广播的节目和商业广告中上市的对象品的双向广播购物支援系统。通过完全参考引用,将专利申请2001-258564文献的全部揭示编入本说明。
下面,说明本申请的发明人提出的双向广播购物支援系统。
图37示出表示本申请的发明人申请的双向广播购物支援系统的概念性组成的框图。图39示出表示双向广播购物支援系统(下文简称为购物支援系统)的运作的流程图。图39示出表示图37中部分详细组成的功能框图。
图37中,购物支援系统由广播台10、销售业者20和家庭30构成,家庭30中设置TV/STB310和遥控器320。
广播台10是将节目与节目添加信息一起广播的广播台。销售业者20是以商品的方式经办节目中上市的物品的销售业者。家庭30是接收广播的家庭。
TV/STB310是当作双向广播接收机的电视机或作为STB(Set Top Box:机顶盒)的双向广播接收机。
遥控器320是操作TV/STB310用的单元,具有话筒321。
TV/STB310具有识别词汇存储部311和语声识别部312。即,如图39所示,TV/STB310的组成部分包括广播接收部313、识别词汇产生部314、识别词汇存储部311、语声识别部312、时间表述辞典316、存储时间控制部315、添加信息存储部317、显示部318、发送部319。
广播接收部313是接收广播信号的单元。识别词汇产生部314是根据广播接收部313接收的节目添加信息产生语声识别的对象词汇的单元。识别词汇存储部311是存储所产生的识别词汇的单元。时间表述辞典316是将有关时间的表述(“刚才的”、“现在的”)作为识别词汇保持的辞典。语声识别部312是将识别词汇存储部311和时间表述辞典316用作识别词汇辞典进行语声识别的单元。存储时间控制部315是根据识别的时间表述词汇和收视者的信息选择输入的关系学习各时间表述词汇与实际时间宽度或场面数的关系并对语声识别部312和识别词汇存储部311进行控制的单元。添加信息存储部317是存储与由语声识别指定的节目中的物品等具有对应关系的添加信息的单元。显示部318是显示添加信息的单元。发送部319是将添加信息的选择等收视者的输入结果发送到广播台的单元。
接着,说明这种购物支援系统的运作。
图38示出购物支援系统和服务的运作。下面根据图38进行说明。
首先,收视者在节目收视中注视节目内上市的物品等,发出反映正在注视的特定物品的语声。于是,话筒321输入该语声,并输出到语声识别部312。
语声识别部312对从话筒321输入的语声信号进行语声识别。然后,根据该语声识别结果,语声识别部312判断收视者关注的物品等,并规定相应的节目添加信息,将其存储到添加信息存储部317(步骤331)。
以收视戏剧时为例进行具体说明。例如,收视者在戏剧收视中关注登场的人物穿的西服,穿该西服的登场人物从画面退场时,收视者发出“刚才的红色夹克衫好”等语声。
从话筒321输入收视者发出的语声后,语声识别部312参考时间表述辞典316和识别词汇存储部311,识别输入的语声,并从广播的节目添加信息提取相当的添加信息。
识别词汇存储部311存储的识别词汇是在识别词汇产生部314根据接收的节目添加信息依次产生表示带添加信息的物品和音乐等的词汇的。即,节目添加信息包含在广播台规定带有对应关系的物品和音乐等用的关键字信息,识别词汇产生部314根据此关键字产生识别词汇。然后,语声识别部312通过对“刚才的红色夹克衫好”等收视者发出的语声进行语声识别,从收视者发出的语声提取识别词汇。例如发出“刚才的红色夹克衫好”的语声时,提取识别词汇“红色”、“夹克衫”。然后,选择与提取的识别词汇具有对应关系的关键字信息数量最多的节目添加信息,将选择的节目添加信息存储到添加信息存储部317。即,某节目添加信息同时包含与识别词汇“红色”具有对应关系的关键字信息和与识别词汇“夹克衫”具有对应关系的关键字信息时,使该节目添加信息存储到添加信息存储部317。这样,语声识别部312就能通过选择节目添加信息进行识别。
设语声识别部312选择从收视者发出的语声提取的识别词汇所具有对应关系的关键字信息数量最多的节目添加信息,进行了规定,但不限于此。也可使语声识别部312按照从收视者发出的语声提取的识别词汇所具有对应关系的关键字信息数量最多的顺序选择例如5个节目添加信息,并将选择的节目添加信息存储到添加信息存储部317。这样,使语声识别部312不是规定而是集中节目添加信息也可。
存储时间控制部315进行控制,使预先规定的时间范围或场面数或者根据收视者当前发出语声及其后的输入进行学习的时间表述所具有对应关系的最大时间宽度或场面数内所产生的识别词汇得以保持。后文阐述存储时间控制部315的学习。例如发出“刚才的红色夹克衫好”的语声时,按照时间存储控制部315的控制,语声识别部312提取表示过去的时间表述词汇“刚才”,并参考时间表述辞典316以“刚才”所具有对应关系的时间范围或场面数内广播的节目添加信息为对象,进行上述的规定或集中。
戏剧结束后(步骤332),显示部318显示语声识别指定的在戏剧中登场的物品等所具有对应关系的添加信息(步骤333)。
添加信息包含大小、重量、材料、颜色不同和尺寸不同的价格、制造者、销售者、销售者联络地址等信息,收视者确认这些信息,进行研究并买入时,利用遥控器320、指向设备或语声识别等输入单元,选择添加信息,并输入购买信息。
发送部319将购买信息与相应的添加信息的识别号一起发送到广播台(步骤334)。
具体说明存储时间控制部315如上文所述那样根据识别的时间表述词汇与收视者的信息选择输入的关系,学习各时间表述词汇与实际时间宽度或场面数的关系。存储时间控制部315对每一识别词汇、即存放在时间表述辞典316的有关时间的表述、保持用于与实际时间宽度或场面数带有对应关系的信息。例如,存储时间控制部315对例如识别词汇“刚才”,使其对应于以当前时刻为基准从20秒前到5分钟前的时间宽度;对“现在”,使其对应于以当前时刻为基准到30秒前为止的时间宽度。
因此,如上文所述,存储时间控制部315从语声识别部312收到表示时间表述的识别词汇“刚才”时,控制成对在以当前时刻为基准从20秒前到5分钟前的时间宽度内收到的节目信息进行规定和集中,并且语声识别部312按照该控制对以当前时刻为基准从20秒前到5分钟前的时间宽度内收到的节目信息进行规定和集中,使该规定或集中后的节目添加信息存储到添加信息存储部317。即,存储时间控制部315进行控制,使该时间宽度内产生的识别词汇得以保持。
存储时间控制部315在收到表示时间表述的识别词汇“刚才”时,如上文所述那样对应于以当前时刻为基准从20秒前到5分钟前的时间宽度的情况下,收视者能产生显示在显示部318上显示的节目添加信息与收视者希望的时间宽度不同的节目添加信息。该情况下,收视者的话筒321发出“重新显示”、“希望显示更前面的信息”、“希望显示更后面的信息”等语声。
于是,语声识别部312对来自该收视者的语声进行语声识别,并将语声识别结果通知存储时间控制部315。语声识别部312对语声“希望显示更前面的信息”进行语声识别时,提取“更前面”、“信息”、“显示”作为识别词汇,并通知存储时间控制部315。
存储时间控制部315从语声识别部312接收识别词汇“更前面”、“信息”、“显示”时,修改与表示时间表述的识别词汇“刚才”具有对应关系的时间宽度信息。即,修改成使识别词汇“刚才”对应于以当前时刻为基准从40秒前到5分钟40秒前的时间宽度。然后,存储时间控制部315控制语声识别部312,使语声识别部312将以当前时刻为基准从40秒前到5分钟40秒前的时间宽度内收到的节目添加信息作为对象,再次进行节目添加信息的规定或集中。语声识别部312按照存储时间控制部315的控制再次进行节目添加信息的规定或集中,使规定或集中的节目添加信息存储到添加信息存储部317,并且显示部318显示添加信息存储部317存储的节目添加信息。然后,收视者在显示的节目添加信息包含目的信息时,选择该节目添加信息,并输入购买信息。
通过多次重复这种处理,存储时间控制部315能使表示时间表述的识别词汇又反映收视者的意图,又对应于时间宽度。这就是称为存储时间控制部315进行学习。
综上所述,根据购物支援系统和服务,对收视者有兴趣的节目中登场的物品和音乐等仅进行自然发出语声就能取得信息,进行购入,不中断节目收视,不因做笔记等而妨碍节目本身的收视。
通过使用本申请的发明人提出的购物支援系统,能取得上述优良的效果。
然而,本申请的发明人申请的购物支援系统中,为了规定添加信息,通过判断语声识别的单词与添加信息包含的关键字信息所具有对应关系的关键字的符合程度,规定添加信息,但期望能比此方法更灵活且适当地规定添加信息。即,存在希望能不费工夫、较简便地得到广播的节目和商业广告中上市的对象品的课题。
又期望利用收视者发出语声时的表述,较佳规定添加信息。即,存在以适合收视者发出语声时的表述的方式不费工夫地简便购得广播的节目和语声广播中上市的对象品。
还存在希望根据收视者的兴趣较佳的规定添加信息的课题。即,存在以适合收视者的兴趣的方式不费工夫地简便购得广播的节目和商业广告中上市的对象品的课题。
发明内容
本发明考虑上述课题,其目的是:提供一种能不费较大工夫地较简单购得广播的节目和商业广播中上市的对象品的广播接收方法、广播接收系统、第1装置、第2装置、存储媒体和程序。
本发明考虑上述课题,其目的又是:提供一种能以适合收视者发出语声时的表述的方式不费工夫地简便购得广播的节目和商业广告中上市的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。
本发明考虑上述课题,其目的又是:提供一种能以适合收视者的兴趣的方式不费工夫地简便购得广播的节目和商业广告中上市的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。
为了解决上述课题,第1本发明是一种广播接收方法,其中具有
接收在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述将与所述广播内容同时广播的广播的接收步骤,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生步骤,
对收视者发出的语声进行语声识别的语声识别步骤,
在所述识别词汇集中包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定步骤,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示步骤。
第2本发明是一种广播接收方法,其中具有
接收在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及语言模型与所述广播内容同时广播的广播的接收步骤,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息修改所述语言模型的表述方式中规定的所述单词类组合出现的频度和/或所述语言模型表述方式中将规定的所述单词类作为基准的规定单词出现频度的校正步骤,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别步骤,
根据该语声识别结果规定与该识别词汇集具有对应关系的所述关键字信息的规定步骤,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示步骤。
第3本发明是一种广播接收方法,其中具有
接收在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及规定语言模型用的信息与所述广播内容同时广播的广播的接收步骤,
利用收到的规定所述语言模型用的信息规定预先保持的所述语言模型的语言模型规定步骤,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息修改所规定的所述语言模型的表述方式中规定的所述单词类组合出现的频度和/或所规定的所述语言模型表述方式中将规定的所述单词类作为基准的规定单词出现频度的校正步骤,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别步骤,
根据该语声识别结果规定与该识别词汇集具有对应关系的所述关键字信息的规定步骤,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示步骤。
第4本发明是一种广播接收系统,其中具有
含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置,以及
第2装置,该第2装置含有接收所述第1装置广播的所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元、对收视者发出的语声进行语声识别的语声识别单元、在所述识别词汇集包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第5本发明是一种广播接收系统,其中具有
含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及语言模型与所述广播内容同时广播的广播单元的第1装置,以及
第2装置,该第2装置含有接收所述第1装置广播的所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所述语言模型表述方式中将规定的所述语言类作为基准的规定单词出现频度的校正步骤、利用校正后的语言模型对收视者发出的语声进行语声识别的语声识别单元、根据该语声识别结果规定所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第6本发明是一种广播接收系统,其中具有
含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及规定语言模型用的信息与所述广播内容同时广播的广播单元的第1装置,以及
第2装置,该第2装置含有接收所述第1装置广播的所述广播的接收单元、利用规定接收的语言模型用的信息规定预先保持的所述语言模型的语言模型规定单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所规定的所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所规定的所述语言模型表述方式中将规定的所述语言类作为基准的规定单词出现频度的校正步骤、利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元、根据该语声识别结果规定所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第7本发明是一种第1装置,其中具有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元,
所述广播由第2装置接收,该第2装置具有接收所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元、对收视者发出的语声进行语声识别的语声识别单元、在所述识别词汇集包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第8本发明是一种第1装置,其中具有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及语言模型与所述广播内容同时广播的广播单元,
所述广播由第2装置接收,该第2装置具有接收所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或将所述语言模型的表述方式中规定的所述单词类作为基准的规定单词出现的频度的校正单元、利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元、根据该语声识别结果规定所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第9本发明是一种第1装置,其中具有
含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及规定语言模型用的信息与所述广播内容同时广播的广播单元,
所述广播由第2装置接收,该第2装置具有接收所述广播的接收单元、利用规定接收的所述语言模型用的信息规定预先保持的所述语言模型的语言模型规定单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所规定的所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所规定的所述语言模型表述方式中将规定的所述语言类作为基准的规定单词出现频度的校正单元、利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元、根据该语声识别结果规定所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第10本发明是一种第2装置,其中具有
接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元,
对收视者发出的语声进行语声识别的语声识别单元,
在所述识别词汇集包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第11本发明是第10本发明的第2装置,其中所述同义词辞典的各单词中添加预先决定的频度,
所述语声识别单元将多个单词作为所述语声识别的候补识别时,在所述语声识别的结果中将所述出现频度高的单词规定为识别的单词。
第12本发明是第11本发明的第2装置,其中具有根据所述语声识别结果的识别结果改写所述出现频度的出现频度修改单元。
第13本发明是第11本发明的第2装置,其中具有根据所述语声识别结果的履历信息改写所述出现频度的出现频度修改单元,
在所述识别词汇集的各单词中添加与该单词具有对应关系的所述出现频度,
所述语声识别单元用所述识别词汇集的所述出现频度进行所述语声识别。
第14本发明是一种第2装置,其中具有
接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及语言模型与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
该第2装置具有接收所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所述语言模型的表述方式中将规定的所述单词类作为基准的规定单词出现的频度的校正单元,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元,
根据该语声识别结果规定所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第15本发明是一种第2装置,其中具有
接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及规定语言模型用的信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用规定接收的所述语言模型用的信息规定预先保持的所述语言模型的语言模型规定单元,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所规定的所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所规定的所述语言模型表述方式中将规定的所述单词类作为基准的规定单词出现频度的校正单元,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元,
根据该语声识别结果规定所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第16本发明是第15本发明的第2装置,其中规定所述语言模型用的信息是预先授给所述语言模型的ID。
第17本发明是第15本发明的第2装置,其中规定所述语言模型用的信息是语言模型规定用关键字信息,
所述预先保持的语言模型中添加语言模型规定用关键字信息,
所述语言模型规定单元根据这些语言模型规定用关键字信息的符合程度规定所述语言模型。
第18本发明是第14至第17本发明中任一本发明的第2装置,其中所述校正单元校正所述语言模型表述方式中将规定的所述单词类作为基准的规定单词出现频度时,
所述履历信息包含由所述已进行的语声识别识别的单词,
所述校正单元提取包含与所述关键字信息具有对应关系的单词的所述单词类中含有的单词,
对提取的单词中所述履历信息包含的单词,使所述语言模型表述方式中将所述单词类作为基准的该单词的出现频度增加,并且
对提取的单词中所述履历信息不包含的单词,使所述语言模型表述方式中将所述单词类作为基准的该单词的出现频度减少。
第19本发明是第14至第17中任一本发明的第2装置,其中所述校正单元校正所述语言模型表述方式中规定的所述单词类的组合出现频度时,
所述履历信息包含由所述已进行的语声识别识别的单词,
所述校正单元提取包含与所述关键字信息具有对应关系的单词的单词类,
对提取的所述单词类,使所述语言模型表述方式中规定的所述单词类的组合出现的频度增加,并且
对未提取的所述单词类,使所述语言模型表述方式中规定的所述单词类串之后的该单词类出现的频度减少。
第20本发明是第14至第17中任一本发明的第2装置,其中所述校正单元校正所述语言模型表述方式中规定的所述单词类的组合出现频度时,
所述履历信息含有包含由所述已进行的语声识别识别的单词的单词类,
所述校正单元提取与所述关键字信息具有对应关系的单词类,
对提取的所述单词类,使所述语言模型表述方式中规定的所述单词类的组合出现的频度增加,并且
对未提取的所述单词类,使所述语言模型表述方式中规定的所述单词类的组合出现的频度减少。
第21本发明是第10至第17中任一发明的第2装置,其中具有进行对所显示的所述添加信息的规定操作时将与该规定操作具有对应关系的指示发送到规定发送目的处的发送单元。
第22本发明是第21本发明的第2装置,其中所述节目添加信息是商品销售信息和/或服务销售信息,
与所述规定操作具有对应关系的指示是所述商品和/或所述服务的资料请求信息或购物指示信息。
第23本发明是第15本发明的第2装置,其中预先保持的所述语言模型预先利用网络取得。
第24本发明是一种程序,用于使计算机作为以下各单元起作用:第10本发明的第2装置的接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元,
对收视者发出的语声进行语声识别的语声识别单元,
在所述识别词汇集包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第25本发明是一种程序,用于使计算机作为以下各单元起作用:第14本发明的第2装置的接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及语言模型与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
该第2装置具有接收所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所述语言模型的表述方式中将规定的所述单词类作为基准的规定单词出现的频度的校正单元,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元,
根据该语声识别结果规定所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第26本发明是一种程序,用于使计算机作为以下各单元起作用:第15本发明的第2装置接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、包含规定所述对象品用的关键字信息的所述添加信息及规定语言模型用的信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用规定接收的所述语言模型用的信息规定预先保持的所述语言模型的语言模型规定单元,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且根据已进行的语声识别的语声识别结果履历信息校正所规定的所述语言模型的表述方式中规定的所述单词类的组合出现的频度和/或所规定的所述语言模型表述方式中将规定的所述语言类作为基准的规定单词出现频度的校正单元,
利用校正后的所述语言模型对收视者发出的语声进行语声识别的语声识别单元,
根据该语声识别结果规定所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
第27本发明是一种记录媒体,可由计算机处理,其中承载第24本发明的程序。
第28本发明是一种记录媒体,可由计算机处理,其中承载第25本发明的程序。
第29本发明是一种记录媒体,可由计算机处理,其中承载第26本发明的程序。
附图说明
图1是示出本发明实施方式1的购物支援系统的概略组成的框图;
图2是示出本发明实施方式1的TV/STV的组成的框图;
图3是示出本发明实施方式1的识别词汇产生部的详细组成的框图;
图4是示出本发明实施方式1的购物支援系统的运作梗概的流程图;
图5是示出本发明实施方式1的同义词辞典的例子的图;
图6是示出本发明实施方式1的购物支援系统的运作详况的流程图;
图7是示出本发明实施方式1的识别词汇集的例子的图;
图8是示出本发明实施方式1的购物支援系统的运作详况的流程图;
图9是示出本发明实施方式2的TV/STB的组成的框图;
图10是示出本发明实施方式2的识别词汇产生部360的详细组成的框图;
图11是示出本发明实施方式2的同义词辞典的例子的图;
图12是示出本发明实施方式2的购物支援系统的运作详况的流程图;
图13是示出本发明实施方式2的识别词汇集的例子的图;
图14是示出本发明实施方式2中的归一化频度的识别词汇集的例子;图8是示出本发明实施方式1的购物支援系统的运作详况的流程图;
图15是示出本发明实施方式2的购物支援系统的运作详况的流程图;
图16是示出本发明实施方式3的TV/STB的组成的框图;
图17是示出本发明实施方式3的购物支援系统的运作梗概的流程图;
图18是示出本发明实施方式3的购物支援系统的运作详况的流程图;
图19是示出本发明实施方式3的Ngram语法信息的例子的图;
图20是说明本发明实施方式3的词汇加权修正部的运作用的图;
图21是示出本发明实施方式4的TV/STB的组成的框图;
图22是示出本发明实施方式4的购物支援系统的运作梗概的流程图;
图23是示出本发明实施方式4的购物支援系统的运作详况的流程图;
图24是示出本发明实施方式4的式4的P(Ci|Ci-1)的例子的图;
图25是说明本发明实施方式4的类加权修正部的运作用的图;
图26是示出本发明关联技术1中的节目添加信息自动编制装置的组成的框图;
图27是示出本发明关联技术1中的节目添加信息自动编制装置的运作的流程图;
图28是示出本发明关联技术1中的摄像机、位置固定发送机、添加信息码发送机的关系的图;
图29是示出本发明实施方式5的TV/STB的组成的框图;
图30是示出本发明实施方式5的双向广播购物支援系统的运作的流程图;
图31是示出本发明实施方式6的TV/STB的组成的框图;
图32是示出本发明实施方式6的双向广播购物支援系统的运作的流程图;
图33是示出一例本发明实施方式6的商品信息一览表的图;
图34是示出本发明实施方式7的TV/STB的组成的框图;
图35是示出本发明实施方式7的双向广播购物支援系统的运作的流程图;
图36是示出本发明实施方式7的双向广播购物支援系统的与图35不同的运作的流程图;
图37是示出本申请的发明人申请的双向广播购物支援系统的概念性组成的框图;
图38是示出本申请的发明人申请的双向广播购物支援系统的运作的流程图;
图39是示出本申请的发明人申请的双向广播购物支援系统的详细组成的框图。
附图中,10是广播台,20是销售者,30是家庭,310是TV/STB,313是广播接收部,315是存储时间控制部,316是时间表述辞典,317是添加信息存储部,318是显示部,319是发送部,351是识别词汇存储部,352是语声识别部,355是识别词汇提取部,356是同义词辞典,357是识别词汇扩充部,358是识别词汇自适应部。
实施发明的最佳方式
下面,参照附图说明本发明的实施方式。
实施方式1
首先,说明本发明实施方式1的双向广播购物支援系统。
图1示出表示本发明实施方式1的双向广播购物支援系统的概念性组成的框图。图2示出图2示出表示双向广播购物支援系统(下文称为购物支援系统)的详况的功能框图。
图1中,本实施方式的购物支援系统由广播台10、销售者20和家庭30构成,家庭30中设置TV/STB310和遥控器320。
广播台10是将节目与节目添加信息一起广播的广播台。销售业者20是以商品的方式经办节目中上市的物品的销售业者。家庭30是接收广播的家庭。
TV/STB310是当作双向广播接收机的电视机或作为STB(Set Top Box:机顶盒)的双向广播接收机。
遥控器320是操作TV/STB310用的单元,具有话筒321。
TV/STB310具有识别词汇存储部351和语声识别部352。即,如图2所示,TV/STB310的组成部分包括广播接收部313、识别词汇产生部314、识别词汇存储部351、语声识别部352、时间表述辞典316、存储时间控制部315、添加信息存储部317、显示部318、发送部319。
广播接收部313是接收广播信号的单元。识别词汇产生部354是根据广播接收部313接收的节目添加信息产生作为语声识别的对象词汇的识别词汇集的单元。识别词汇存储部351是存储所产生的识别词汇集的单元。时间表述辞典316是将有关时间的表述(“刚才的”、“现在的”)作为识别词汇保持的辞典。语声识别部352是将识别词汇存储部351和时间表述辞典316用作识别词汇辞典进行语声识别的单元。存储时间控制部315是根据识别的时间表述词汇和收视者的信息选择输入的关系学习各时间表述词汇与实际时间宽度或场面数的关系并对语声识别部352和识别词汇存储部351进行控制的单元。添加信息存储部317是存储与由语声识别指定的节目中的物品等具有对应关系的添加信息的单元。显示部318是显示添加信息的单元。发送部319是将添加信息的选择等收视者的输入结果发送到广播台的单元。
图3示出识别词汇产生部354的部分信息组成。识别词汇产生部354由识别词汇提取部355、识别词汇扩充部357、同义词辞典356、识别词汇自适应部358构成。
识别词汇提取部355是提取与节目添加信息中包含的关键字信息具有对应关系的单词作为关键字的单元。识别词汇扩充部357是扩充提取的关键字并产生识别词汇集的单元。同义词辞典356是以单词间的同义性为基准将多个单词分成各单词类的辞典。实施方式1中,假定一个单词必然仅包含在规定的一个单词类中,一个单词不包含在多个单词类内。实施方式2详细说明一个单词被包含在多个单词类的情况。识别词汇自适应部358是根据语声识别结果校正同义词辞典356记载的各单词出现的频度的单元。
接着,说明上述本实施方式的运作。
图4示出表示本实施方式的购物支援系统的运作的梗概的流程图。图6和图8示出表示本实施方式的购物支援系统的运作详况的流程图。下面,根据图4、图6和图8进行说明。
图2和图4中,将与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和广播内容一起从广播台10广播出来。
广播接收部313接收该广播。于是,识别词汇产生部354提取节目添加信息中包含的关键字信息(步骤351)。进而,识别词汇产生部354提取与关键字信息具有对应关系的关键字的同义词(步骤352)。识别词汇产生部354又将提取的同义词作为识别词汇集存储到识别词汇存储部351(步骤353)。
接着,收视者发出语声时,将其结果反馈到同义词辞典390,并对同义词辞典中被识别的单词进行加权(步骤354)。
下面的说明中,首先详细说明步骤351、352、353的运转,再说明语声识别的运作,然后详细说明步骤354的运作。
首先,用图3和图6进一步详细说明步骤351、352和353的运作。
图5示出同义词辞典390。同义词辞典390是记载单词391、该单词的读音392、包含该单词的单词类393和该单词的出现频度394的辞典。单词类是以单词间的同义性为基准对多个单词分量而得的。在使用本实施方式的购物支援系统的初始状态下,记载从足够大的日语语料库求得的单词类中的出现频度394。
例如,作为单词391的一个例子,有夹克衫,夹克衫的读音392是“jyaketsto”(ジヤケツト),包含夹克衫的单词类393是衣类,作为夹克衫单词类的衣类包含的单词中,夹克衫出现的出现频度394是0.20。作为单词391的一个例子,还有上衣,上衣的读音392是“wuwaki”(ウワギ),包含上衣的单词类393是衣类,作为上衣的的单词类的衣类包含的单词中,上衣出现的出现频率是0.10。
步骤355中,设发送夹克衫的添加信息作为添加信息。作为这时的添加信息,除表示夹克衫的关键字信息外,作为添加信息,还包含夹克衫的价格、颜色和尺寸等的说明、夹克衫销售处的说明等。这样,添加信息除关键字信息外,还包含与添加信息带有对应关系的有关商品信息。后文阐述添加信息详况。
接着,步骤356中,识别词汇提取部355提取添加信息包含的关键字信息。即,送来夹克衫的添加信息时,提取与夹克衫具有对应关系的信息作为关键字信息。然后,识别词汇扩充部357利用同义词辞典356,产生由与提取的关键字信息具有对应关系的关键字和属于同一单词类393的单词构成的识别词汇集。
具体进行说明:设对象品是夹克衫的添加信息的关键字信息所具有对应关系的关键字为夹克衫。于是,识别词汇提取部355从该添加信息提取与关键字信息具有对应关系的关键字,即夹克衫。
然后,识别词汇扩充部357由于包含关键字夹克衫的单词类393是衣类,提取单词类是衣类的单词。在图5的同义词辞典的情况下,判明单词类393是衣类的单词为上衣、夹克衫、西服。于是,识别词汇扩充部357将上衣、夹克衫和西服取为构成识别词汇集的单词。在识别词汇集记载与各单词分别具有对应关系的出现频度394。图7示出这样编制成的识别词汇集395。将夹克衫、西服、上衣各自的读音396分别记为“jyaketsto、fuku、wuwaki”(ジヤケツト、フク、ウワギ)。而且,判明与读音396对应地将单词类内频度397记为0.2、0.3、0.1等。
接着,步骤357中,识别词汇扩充部357将产生的识别词汇集存储到识别词汇存储部351,是其与添加信息对应。
这里,设识别词汇存储部351是半导体存储器或硬盘装置。因此,将产生的识别词汇集以与添加信息具有对应关系的形式存放到半导体存储器或硬盘装置。
接着,说明对收视者在节目收视中发出的语声进行语声识别时的运作。图2中,首先,收视者在节目收视中注视登山节目的物品等,发出反映关注特定物品的语声。于是,话筒321输入该语声,并输出到语声识别部352。
语声识别部352对从话筒321输入的语声信号进行语声识别。然后,根据该语声识别结果,语声识别部352判断收视者关注的物品等,并规定相应的节目添加信息,将其存储到添加信息存储部317。
以收视戏剧时为例进行具体说明。例如,收视者在戏剧收视中关注登场的人物穿的西服,穿该西服的登场人物从画面退场时,收视者发出“刚才的红色夹克衫好”等语声。
从话筒321输入收视者发出的语声后,语声识别部352参考时间表述辞典316和识别词汇存储部351,识别输入的语声,并从广播的节目添加信息提取相当的添加信息。
即,识别词汇存储部351存储的识别词汇集中,图7所示的识别词汇集395包含单词“上衣”,因而语声识别部352规定识别词汇集395。
语声识别部352进行语声识别的结果将多个单词识别为语声识别的候补时,把识别词汇集395的单词类内频度397高的单词定为语声识别结果中识别的单词。
这时,在多个单词分别属于不同的单词类的情况下,例如将各单词类的加权当作相同进行处理。即,可对该多个单词的单词类频度397进行直接比较,并且语声识别部352规定单词类内频度397高的单词。例如,作为识别词汇集,存在从关键字“夹克衫”产生的图7所示的识别词汇集和从关键字“车库”产生的识别词汇集时,语声识别结果将夹克衫和车库识别为语声识别候补的情况下,包含夹克衫的单词类(即衣类)和包含车库的单词类(即建筑物)权重相同,也即平等处理。于是,直接比较夹克衫的单词类内频度397和车库的单词类内频度397,将单词类内频度397高的定为语声识别所得的单词。
本实施方式中,说明了将多个单词识别为语声识别候补时,该多个单词分别属于不同的类的情况下,设以平等出现包含多个单词的各单词类的出现频度的方式进行处理,但不限于此,如果预先从上述足够大的日语资料库求出各单词类出现的频度,并考虑各单词类出现频度,则能进一步准确规定语声识别结果的单词。又可从广播台10利用数据广播播放各单词类的加权,并且在广播接收部313接收该各单词的加权,使语声识别部352也考虑收到的各单词类的加权。还可在通过TV/STB310和网络上连接的PC,从互联网购入商品等情况下,获取其购入履历信息,从取得的购入履历信息产生各单词类的加权,并且在语声识别部352用于语声识别。
这样,语声识别部352规定图7的识别词汇集395时,语声识别部352使与识别词汇集395具有对应关系的添加信息(即夹克衫的添加信息)存储到添加信息存储部317。
于是,根据本实施方式,通过与广播台10广播来的添加信息包含的关键字信息具有对应关系的关键字是夹克衫时产生识别词汇集并用于语声识别,即使收视者发出与夹克衫具有同义性的上衣这种单词的语声的情况下,也能规定与夹克衫具有对应关系的添加信息。同样,在收视者发出与夹克衫具有同义性的西服这种单词的语声的情况下,也能规定与夹克衫具有对应关系的添加信息。因此,能以适合收视者发出语声时的表述的方式不费工夫地简便规定广播的节目和商业广告中上市的对象品。
存储时间控制部315进行控制,使预先规定的时间范围或场面数或者根据收视者当前发出语声及其后的输入进行学习的时间表述所具有对应关系的最大时间宽度或场面数内所产生的识别词汇得以保持。后文阐述存储时间控制部315的学习。例如发出“刚才的红色夹克衫好”的语声时,按照时间存储控制部315的控制,语声识别部352提取表示过去的时间表述词汇“刚才”,并参考时间表述辞典316以“刚才”所具有对应关系的时间范围或场面数内广播的节目添加信息为对象,进行上述的规定。
戏剧结束后,显示部318显示语声识别指定的在戏剧中登场的物品等所具有对应关系的添加信息。
添加信息包含大小、重量、材料、颜色不同和尺寸不同的价格、制造者、销售者、销售者联络地址等信息,收视者确认这些信息,进行研究并买入时,利用遥控器320、指向设备或语声识别等输入单元,选择添加信息,并输入购买信息。
发送部319将购买信息与相应的添加信息的识别号等一起发送到广播台。
具体说明存储时间控制部315如上文所述那样根据识别的时间表述词汇与收视者的信息选择输入的关系,学习各时间表述词汇与实际时间宽度或场面数的关系。存储时间控制部315对每一识别词汇(即存放在时间表述辞典316的有关时间的表述)保持用于与实际时间宽度或场面数带有对应关系的信息。例如,存储时间控制部315对例如识别词汇“刚才”,使其对应于以当前时刻为基准从20秒前到5分钟前的时间宽度;对“现在”,使其对应于以当前时刻为基准到30秒前为止的时间宽度。
因此,如上文所述,存储时间控制部315从语声识别部312收到表示时间表述的识别词汇“刚才”时,控制成对在以当前时刻为基准从20秒前到5分钟前的时间宽度内收到的节目信息进行规定,并且语声识别部312按照该控制对以当前时刻为基准从20秒前到5分钟前的时间宽度内收到的节目信息进行规定,使该规定后的节目添加信息存储到添加信息存储部317。即,存储时间控制部315进行控制,使该时间宽度内产生的识别词汇得以保持。
存储时间控制部315在收到表示时间表述的识别词汇“刚才”时,如上文所述那样对应于以当前时刻为基准从20秒前到5分钟前的时间宽度的情况下,收视者能发起显示在显示部318上显示的节目添加信息与收视者希望的时间宽度不同的节目添加信息。该情况下,收视者的话筒321发出“重新显示”、“希望显示更前面的信息”、“希望显示更后面的信息”等语声。
于是,语声识别部352对来自该收视者的语声进行语声识别,并将语声识别结果通知存储时间控制部315。语声识别部352对语声“希望显示更前面的信息”进行语声识别时,提取“更前面”、“信息”、“显示”作为识别词汇,并通知存储时间控制部315。
存储时间控制部315从语声识别部312接收识别词汇“更前面”、“信息”、“显示”时,修改与表示时间表述的识别词汇“刚才”具有对应关系的时间宽度信息。即,修改成使识别词汇“刚才”对应于以当前时刻为基准从40秒前到5分钟40秒前的时间宽度。然后,存储时间控制部315控制语声识别部352,使语声识别部352将以当前时刻为基准从40秒前到5分钟40秒前的时间宽度内收到的节目添加信息作为对象,再次进行节目添加信息的规定。语声识别部352按照存储时间控制部315的控制再次进行节目添加信息的规定,使规定的节目添加信息存储到添加信息存储部317,并且显示部318显示添加信息存储部317存储的节目添加信息。然后,收视者在显示的节目添加信息包含目的信息时,选择该节目添加信息,并输入购买信息。
通过多次重复这种处理,存储时间控制部315能使表示时间表述的识别词汇又反映收视者的意图,又对应于时间宽度。这就是称为存储时间控制部315进行学习。
接着,用图8的流程图说明图4中步骤354的运作。
如上文所述,进行语声识别时,图3的识别词汇自适应部358将单词识别结果反馈到同义词辞典390,对同义词辞典390中被识别的单词进行加权。
即,图的流程图中,在步骤358设语声识别部352识别到单词A(步骤358)。作为单词A,具体如上文所述,设识别到“wuwaki”(ウワギ)。
同义词辞典自适应部358在同义词辞典390检索等于A的单词(步骤359)。即,同义词辞典自适应部358从同义词辞典390提取读音为“wuwaki”(ウワギ)的单词。因此,提取单词上衣。
接着,同义词辞典自适应部358使单词A(即上衣)的单词类内频度397加上1/设想出现单词总数。这里,设想出现单词总数是指假想设定编制同义词辞典390的出现频度394时出现的单词总数的值,例如将设想出现单词总数取为100。于是,到现在为止的上衣出现频度394为0.10,因而同义词辞典自适应部358将上衣的出现频度394取为0.10+0.01=0.11。这样,同义词辞典自适应部358使语声识别在同义词辞典390的单词中识别的单词A的出现频度394增加。
接着,步骤361中,识别词汇自适应部358从包含单词A的单词类所含的单词中,单词A以外的单词的出现频度减去该单词的出现频度×(1/设想单词出现总数)。包含上衣的单词类是衣类,衣类中作为上衣以外的单词,包含单词夹克衫和西服。因此,使单词夹克衫和西服的出现频度减少。即,到现在为止,夹克衫的频度为0.20,因而识别词汇自适应部358将夹克衫的出现频度394取为0.2-(0.2×(1/100))=0.198。又,到现在为止,西服的频度为0.30,因而同义词辞典自适应部358将西服的出现频度394取为0.3-(0.3×(1/100))=0.297。
每次语声识别部352识别单词,识别词汇自适应部385都进行图8的步骤359、360和361的处理。
广播台10广播新的添加信息的情况下,识别词汇扩充部357产生识别词汇集395时,将上述那样校正的出现频度394用作同义词辞典390的出现频度394。因此,语声识别部351中能较容易识别收视者常说的单词。
综上所述,根据本实施方式的购物支援系统,对收视者有兴趣的登在节目中的物品和音乐,仅自然发出语声就能取得信息,进行购入,节目收视不中断,做笔记等作业不妨碍节目本身的收视。
又,通过利用识别词汇集,不仅与添加信息包含的关键字信息具有对应关系的关键字,而且对该关键字具有同义性的单词,其发出的语声均可规定识别词汇集,因而均能规定添加信息。
本实施方式设发送部319将购买信息与相应的添加信息的设备号等一起发送到广播台,但也可发送到添加信息中包含的销售处。
本实施方式设语声识别部312根据识别结果规定相应的添加信息,但也可仅确定节目内的时间标记,并且添加信息存储部317存储该时间标记及其前的添加信息和时间标记及其前的添加信息所具有对应关系的识别词汇集。即,也能使语声识别部312仅确定收视者发出语声的时刻,并且添加信息存储部317存储该时刻所具有对应关系的添加信息和该时刻前的规定时间段广播的添加信息及该添加信息所具有对应关系的识别词汇集。在收视后,给收视者提示已存储的添加信息,识别收视者发出的语声,进行详细的添加信息的提示和购买信息等的发送。后面阐述的实施方式5~7详细说明这样在节目收视后进行添加信息规定的情况。
本实施方式设添加信息存储部317仅存储选择的添加信息,但也可存储节目的全部添加信息,并仅显示语声识别部选择的添加信息。
本实施方式设存储添加信息,并且在节目结束后进行显示,但也可显示添加信息和预先收录的节目或对广播台送请求信号后再次收到的相应场面。
本实施方式设存储添加信息,并且在节目结束后进行显示,但也可仅存储添加信息识别码,而且对广播台送请求信号后,再次接收并显示添加信息。
本实施方式的广播台10是本发明的第1装置,本实施方式的TV/STB310是本发明的第2装置,本实施方式的广播接收部314是本发明的接收单元,本实施方式的识别词汇产生部354是本发明的识别词汇产生单元的例子,本实施方式的语声识别部352是本发明的语声识别单元的例子,本实施方式的语声识别部352是本发明的规定单元的例子,本实施方式的显示部318是本发明的显示单元的例子,本实施方式的识别词汇自适应部358是本发明的出现频校正单元。
实施方式2
接着,说明本发明实施方式2的双向广播购物支援系统。
示出本发明实施方式2的双向广播购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为识别词汇存储部361和语声识别部362后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图9示出表示双向广播购物支援系统(下文称为购物支援系统)的详况的功能框图。
如图9所示,TV/STB310的组成部分包括广播接收部313、识别词汇产生部360、识别词汇存储部361、语声识别部362、时间表述辞典316、存储时间控制部315、添加信息存储部317、显示部318、发送部319、识别履历信息存储部363。
广播接收部313、时间表述辞典316、存储时间控制部315、添加信息存储部317、显示部318、发送部319与实施方式1相同,因而省略说明。
识别词汇产生部360是根据广播接收部313接收的节目添加信息产生作为语声识别的对象词汇的识别词汇集的单元。与实施方式1不同,其差别处为:识别词汇产生部360在一个单词包含在多个单词类时,产生识别词汇集。识别词汇存储部361是在一个单词包含在多个单词类时存储所产生的识别词汇集的单元。语声识别部362时将识别词汇存储部361和时间表述辞典216用作识别词汇辞典进行语声识别的单元。识别履历存储部363是预先存储语声识别部362已识别的单词和包含该单词的单词类的单元,例如用半导体存储器或硬盘装置构成该存储部。
图10示出部分详细组成的识别词汇产生部360,其组成部分包括识别词汇提取部364、识别词汇扩充部366、同义词辞典365、识别词汇自适应部367。
识别词汇提取部364是提取与节目添加信息中包含的关键字信息具有对应关系的单词作为关键字的单元。识别词汇扩充部366是扩充提取的关键字并产生识别词汇集的单元。同义词辞典356是以单词间的同义性为基准将多个单词分成各单词类的辞典。这样,实施方式2的同义词辞典365能处理一个单词被包含在多个单词类的情况。识别词汇自适应部367是根据语声识别结果校正同义词辞典356记载的各单词出现的频度的单元。
接着,说明上述本实施方式的运作。
图12是示出本实施方式的购物支援系统产生识别词汇集并使其与添加信息对应地存储到识别词汇存储部361的运作的流程图。图15是示出识别收视者发出语声时的运作的流程图。首先,根据图12说明产生识别词汇集,并使其与添加信息对应地存储到识别词汇存储部361前的运作。然后,说明说明对收视者发出的语声进行语声识别时的运作。
图12中,与实施方式1相同,也将与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和广播内容一起从广播台10广播出来。广播接收部313接收该广播。
这里,在图11示出实施方式2中用的同义词辞典400。同义词辞典400与实施方式1的不同,能处理一个单词包含在多个单词类的情况。同义词辞典400记载单词401、该单词的读音461、包含该单词的单词类1(402)、单词类2(403)、……、单词类n(404)、该单词的出现频度405。单词类是指以单词间的同义性为基准划分多个单词的类别。实施方式2的同义词辞典使一个单词401包含在n个单词类中。在使用本实施方式的购物支援系统的初始状态下,记载从足够大的日语资料库求出的出现频度405。与实施方式1不同,此出现频度405记载足够大的日语资料库中的出现频度。
例如,作为单词401的一个例子,有夹克衫,夹克衫的读音462是“jyaketsto”(ジヤケツト),包含夹克衫的单词类1(402)是衣类,单词类2(403)是时尚等。夹克衫出现的出现频度405是0.20。
步骤370中,设发送添加信息夹克衫作为添加信息。此添加信息与实施方式1说明的相同。
接着,步骤371中,识别词汇提取部364提取添加信息包含的关键字信息。即,送来添加信息夹克衫时,提取与夹克衫具有对应关系的详细作为关键字信息。然后,识别词汇扩充部366利用同义词辞典365产生由与提取的关键字信息所具有对应关系的关键字属于相同的单词类1(402)、单词类2(403)、……、单词类n(404)的单词构成的识别词汇集。
具体进行说明。设对象品为夹克衫的添加信息的关键字信息所具有对应关系的关键字是夹克衫。于是,识别词汇提取部364从该添加信息提取与关键字信息具有对应关系的关键字,即夹克衫。
然后,识别词汇扩充部366由于包含关键字夹克衫的单词类1(402)是衣类、单词类2(403)是时尚等,提取单词类是衣类、时尚等的单词。在图11的同义词辞典400的情况下,判明单词类是衣类的单词为夹克衫等。于是,识别词汇扩充部366将夹克衫等当作构成识别词汇集的单词。
图13示出这样编制的识别词汇集406的例子。识别词汇集406由夹克衫、西服、上衣、手提包等构成。识别词汇集的单词406中,还将同义词辞典400的出现频度记为频度409。
接着,步骤372中,识别词汇扩充部366求出识别词汇集中的各单词的频度409。即,在识别词汇集406中使频度409归一化成:合计识别词汇集内各单词的频度409,则为1。
图14示出这样将频度归一化后的识别词汇集410。最后,作为识别词汇集410,记载单词读音411和作为归一化频度的集内频度412。
接着,步骤373中,识别词汇自适应部373从识别履历存储部363提取含有与添加信息的关键字信息具有对应关系的关键字的单词类包含的单词。即,由半导体存储器或硬盘装置构成识别履历存储部363,在识别履历存储部363存储已进行的语声识别所识别的单词和各单词归属的单词类,并且在这些单词中提取包含关键字夹克衫的单词类包含的单词。实施方式2中,作为夹克衫包含的单词类,一般如图11的同义词辞典401所示,有衣类、时尚等多个单词类。
接着,步骤374中,识别词汇自适应部373对与步骤373在识别词汇集410的单词中提取的单词相符的单词的集内频度412加上识别履历中的出现数/设想单词出现数。另一方面,对步骤373未在识别词汇集410的单词中提取的单词的集内频度412减去(集内频度×识别履历中识别词汇集内单词的总出现数)/(设想单词出现数)。
接着,步骤375中,识别词汇自适应部373使集内频度412已得到校正的识别词汇集410与添加信息对应地存储到识别词汇存储部361。
至此,使识别词汇集410与添加信息对应地存储到识别词汇存储部361。
语声识别部362用识别词汇集规定添加信息的运作与实施方式1的相同,因而省略说明。
接着,说明进行语声识别时的运作。下面说明的运作是用于在对已产生的识别词汇集进行语声识别后还重复时,反映其语声识别结果的处理。
即,图15所示的流程图在步骤380中,设语声识别部362识别到单词A。具体而言,设将ウワギ识别为单词A。
步骤381中,识别词汇自适应部367参照同义词辞典400提取包含单词A的单词类。
接着,步骤382中,识别词汇自适应部367使单词A和包含单词A的单词类存储到识别履历存储部363。但是,超过识别履历存储部363的单词存储数上限时,从最旧的单词开始,依次删除。
步骤381、382中存储到识别履历存储部363的单词A等单词用于上述图12的步骤373、374。
另一方面,步骤383中,识别词汇自适应部367在同义词辞典400检索读音为A的单词。本实施方式中,将ウワギ识别为单词A,因而检索ウワギ为读音的单词,提取单词上衣。
接着,步骤384中,识别词汇自适应部367使识别词汇集410中的单词的单词类内频度412加上1/设想出现单词总数。具体而言,将设想单词总数取为100时,把上衣的频度校正成0.1+0.01=0.11。
接着,步骤385中,识别词汇自适应部367从识别词汇集410中的单词A以外的单词的频度减去集内频度×(1/设想单词总数)。具体而言,将夹克衫的频度校正成0.2-(0.2×1/100)=0.198,将西服的频度校正成0.3-(0.3×1/100)=0.297。
每次进行语声识别都重复步骤380至步骤385的处理。
综上所述,综上所述,根据本实施方式的购物支援系统,对收视者有兴趣的登在节目中的物品和音乐,仅自然发出语声就能取得信息,进行购入,节目收视不中断,做笔记等作业不妨碍节目本身的收视。
又,通过利用识别词汇集,不仅与添加信息包含的关键字信息具有对应关系的关键字,而且对该关键字具有同义性的单词,其发出的语声均可规定识别词汇集,因而均能规定添加信息。
实施方式2中,当然也能应用实施方式1说明的各种变换例。
本实施方式的广播台10是本发明的第1装置,本实施方式的TV/STB310是本发明的第2装置,本实施方式的广播接收部313是本发明的接收单元,本实施方式的识别词汇产生部360是本发明的识别词汇产生单元的例子,本实施方式的语声识别部362是本发明的语声识别单元的例子,本实施方式的语声识别部362是本发明的规定单元的例子,本实施方式的显示部318是本发明的显示单元的例子,本实施方式的识别词汇自适应部367是本发明的出现频度校正单元的例子。
实施方式3
接着,说明本发明实施方式3的双向广播购物支援系统。
示出本发明实施方式3的双向广播购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为语法存储部376和语声识别部377后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图16示出表示双向广播购物支援系统(下文称为购物支援系统)的详况的功能框图。
如图16所示,TV/STB310的组成部分包括广播接收部313、识别词汇产生部371、同义词辞典374、词汇加权修正部375、语法存储部376、语声识别部377、识别履历信息存储部363、添加信息存储部317、显示部318、发送部319、遥控器320、话筒321、存储时间控制部315。识别词汇产生部371由范畴别法则372和语法选择部373组成。即,识别词汇产生部371具有半导体存储器或硬盘的功能,并且在半导体存储器或硬盘存储范畴别法则372。语法存储部376也具有半导体存储器或硬盘的功能,其中存储画面阐述的Ngram语法信息。
广播接收部313、存储时间控制部315、添加信息存储部317、显示部318、发送部319、遥控器320、话筒321与实施方式1的相同,因而省略详细说明。
识别词汇产生部371是一种单元,按照范畴别法则所示,预先在自身具有的半导体存储器或硬盘存储戏剧、室外、秋等每一范畴的Ngram语法信息,并选择与广播接收部313送来的场面码具有对应关系的范畴的Ngram语法信息。即,语法选择部373是选择广播接收部313输出的场面码所具有对应关系的范畴的Ngram语法信息的单元。
语法存储部376是具有半导体存储器或硬盘的功能并且将语法选择部373选择的Ngram语法信息存储到这些半导体存储器或硬盘的单元。
词汇加权修正部375是一种单元,利用已单词间的同义性为基准将多个单词分成各单词类的同义词辞典374,根据识别履历存储部363存储的已进行语声识别的语声识别结果的履历信息校正Ngram语法信息表述方式中的将规定单词类作为基准的规定单词出现频度。
语声识别部377是利用语法存储部376存储的Ngram语法信息对收视者发出的语声进行连续语声识别的单元。
接着,说明本实施方式的运作。
首先,用图17的流程图说明运作的梗概。
广播台10对广播来的广播内容进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和规定Ngram语法信息用的场面码。广播接收部313接收该广播。
步骤390中,语法选择部373从广播接收部313输出的数据提取场面码和添加信息包含的关键字信息。这里,场面码是指识别词汇产生部371对每一范畴规定存储的Ngram语法信息用的信息。
接着,步骤391中,语法选择部373选择与广播接收部313输出的场面码具有对应关系的范畴的Ngram语法信息。
接着,步骤392中,词汇加权修正部375用识别履历存储部363存储的识别履历信息和同义词辞典374校正Ngram语法信息表述方式中的以规定单词类为基准的规定单词出现的频度。
接着,步骤393中,识别词汇加权修正部375使校正后的Ngram语法信息存储到语法存储部376。
将这样存储到语法存储部376的Ngram语法信息用于在语声识别部377进行语声识别。步骤393中,由于识别词汇加权修正部375用识别履历信息和同义词辞典374校正Ngram语法信息,能进行语声识别,使与广播的节目和商业广告中上市的对象品带有对应关系的添加信息适合收视者发出语声时的表述。下面详细说明这点。
接着,用图18的流程图进行实施方式3的购物支援系统的详细运作。
图18中,如上文所述,广播台10对广播来的广播内容进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和规定Ngram语法信息用的场面码。
步骤400中,广播接收部313接收该广播。
步骤401中,语法选择部373从广播接收部313输出的数据提取场面码和添加信息包含的关键字信息。
这里,场面码是指识别词汇产生部371对每一范畴规定存储的Ngram语法信息用的信息。例如,作为场面码的例子,该码用于规定戏剧、室外、秋等范畴。识别词汇产生部371按照范畴别法则372所示,按范畴分别存放Ngram语法信息。因此,通过指定场面码,能规定与指定的场面码具有对应关系的范畴的Ngram语法信息。
与实施方式1相同,也设送来添加信息夹克衫,作为添加信息。这时的添加信息除表示夹克衫的关键字信息外,还有夹克衫的价格、颜色、尺寸等。与实施方式1相同,也包含这些方面的说明和夹克衫销售处的说明等。
语法选择部373根据范畴别法则372选择与场面码具有对应关系的Ngram语法信息时,使选择的Ngram语法信息存储到语法存储部376。
这里,Ngram语法信息的通式如下面的式1所示。
(式1)
P = ( W i / W i - 1 W i - 2 . . . W i - n + 1 ) = N ( W i W i - 1 . . . W i - n + 1 ) N ( W i - 1 . . . W i - n + 1 )
式1中,P(Wi|Wi-1Wi-2……Wi-n+1)表示足够大的日语资料库中在单词串Wi -1Wi-2……Wi-n+1后单词Wi出现的概率,N(Wi-1Wi-2……Wi-n+1)表示足够大的日语资料库中单词串Wi-1Wi-2……Wi-n+1出现的频度。
Ngram语法中,将式1近似表示成式2如下。
(式2)
P = ( W i / W i - 1 W i - 2 . . . W i - n + 1 ) ≈ N ( C i C i - 1 . . . C i - n + 1 ) N ( C i - 1 C i - 2 . . . C i - n + 1 ) × N ( W i ) N ( C i )
≈ P ( C i / C i - 1 . . . C i - n + 1 ) × P ( W i / C i )
式2中,P(Ci|Ci-1……Ci-n+1)表示足够大的日语资料库中在单词串Ci-1……Ci-n+1后单词串Ci出现的概率。P(Wi|Ci)表示足够大的日语资料库中单词类Ci包含的单词中单词Wi出现的概率。
具体在n=2时,式1变成式3。
(式3)
P ( W i / W i - 1 ) = N ( W i W i - 1 ) N ( W i - 1 )
而且,式2变成式4。
(式4)
P ( W i / W i - 1 ) ≈ N ( C i C i - 1 ) N ( C i - 1 ) × N ( W i ) N ( C i )
≈ P ( C i / C i - 1 ) × P ( W i / C i )
下面说明n=2的情况,但n大于2时,将单词串Ci-1等改读成单词串Ci-1……Ci-n+1等即可。
式4中,P(Wi|Wi-1)表示单词Wi-1后的单词Wi出现的概率,P(Ci|Ci-1)表示足够大的日语资料库中在单词类Ci-1包含的单词后单词类Ci包含的单词出现的概率,P(Wi|Ci)表示上述日语资料库中单词类Ci包含的单词中单词Wi出现的概率。这里,在同义词辞典374定义单词类Ci和Ci-1等。假设同义词辞典374例如与实施方式1说明的图5的同义词辞典390相同。即,式4示出用在单词类Ci-1包含的单词后单词类Ci包含的单词出现的概率与单词类Ci包含的单词中单词Wi出现的概率的乘积表示单词Wi-1后单词Wi出现的概率。
图19示出作为这样存储到语法存储部376的Ngram语法信息的例子的Ngram语法信息454。Ngram语法信息454中,例如用单词类“指示词”中包含的单词之后单词类“衣类”中包含的单词出现的概率与单词类“衣类”包含的单词中单词“上衣”出现的概率的乘积表示单词“那件”之后单词“上衣”出现的概率。
接着,步骤402和步骤403中,词汇加权修正部375用识别履历存储部363存储的识别履历信息和同义词辞典374校正Ngram语法信息表述方式中的以规定单词类为基准的规定单词出现的频度。即,使用识别履历存储部363存储的识别履历信息和同义词辞典374校正式4的P(Wi|Ci)。
图20示出说明步骤402和步骤403的运作用的图。下面,用图20具体说明步骤402和步骤403的运作。
首先,步骤402中,如上文所述,添加信息包含的关键字信息所具有对应关系的关键字是夹克衫。设在同义词辞典374定义为:使夹克衫包含在“衣类”单词类中。然后,如Ci424所示,设在同义词辞典374将夹克衫、西服、上衣、衬衫定义为“衣类”单词类包含的单词。这种情况下,如Ci424所示,词汇加权修正部375在添加信息包含的关键字信息所具有对应关系的关键字是夹克衫时,提取属于单词类“衣类”的单词,即夹克衫、西服、上衣、衬衫。
接着,步骤403中,作为识别履历信息421,识别履历存储部363中已存储高跟鞋、口红、电视机、夹克衫等单词。识别履历存储部363存储的识别履历信息421表示已进行的语声识别的识别结果所识别的单词的履历。
设语法选择部373根据场面码规定并选择Ngram语法信息时,式4中的P(Wi|Ci)为初始状态。即,设“衣类”单词类包含的单词中,夹克衫出现的概率是0.4;“衣类”单词类包含的单词中,西服出现的概率是0.3;“衣类”单词类包含的单词中,上衣出现的概率是0.2;“衣类”单词类包含的单词中,衬衫出现的概率是0.1。
此情况下,词汇加权修正部375使包含单词夹克衫的“衣类”单词类所属的单词夹克衫西服、上衣、衬衫中,包含在识别履历信息421内的各单词的式4的P(Wi|Ci)加上识别履历信息421中的出现数/设想单词出现数。这里,设想单词出现数含义与实施方式1中说明的相同。识别履历信息421包含夹克衫、西服、上衣、衬衫中的夹克衫和西服,夹克衫出现2次,西服出现1次。这时,将设想单词出现数取为100的情况下,使P(夹克衫|[衣类])加上2/100。而且,使P(西服|[衣类])加上1/100。
词汇加权修正部375又从包含单词夹克衫的“衣类”单词类所属的单词夹克衫西服、上衣、衬衫中,包含在识别履历信息421内的各单词的式4的P(Wi|Ci)减去{校正前P(Wi|[衣类])/属于“衣类”单词类且识别履历信息421不包含的各单词的P(Wi|[衣类])的总和}×{属于识别履历信息421中的“衣类”单词类的单词的出现总数/设想出现单词总数}。即,一般从识别履历信息421不包含的各单词的式4的P(Wi|Ci)减去{校正前P(Wi|Ci)/属于单词类Ci且识别履历信息421不包含的各单词的P(Wi|Ci)的总和}×{属于识别履历信息421中的单词类Ci的单词的出现总数/设想出现单词总数}。
识别履历信息421不包含夹克衫、西服、上衣、衬衫中的上衣的衬衫。这时,将设想单词出现数取为100的情况下,从P(上衣|[衣类])减去(0.2/(P(上衣|[衣类]+P(衬衫|[衣类]))×3/100。而且,从从P(衬衫|[衣类])减去(0.1/(P(上衣|[衣类]+P(衬衫|[衣类]))×3/100。
词汇加权修正部375在包含单词夹克衫的“衣类”单词类所属的单词夹克衫、西服、上衣、衬衫中任一单词都不包含在识别履历信息421中时,有关“衣类”在式4中的P(Wi|Ci)不加校正,原样使用。
词汇加权修正部375如上文所述那样校正式4的P(Wi|Ci),则校正成图20的自适应后422所示。
接着,步骤404中,词汇加权修正部375使校正式4的P(Wi|Ci)后的式4所示的Ngram语法信息与添加信息对应地存储到语法存储部376。
接着,进行语声识别时,语声识别部377用语法存储部376存储的Ngram语法信息对收视者发出的语声进行语声识别。
收视者发出“那件夹克衫好”的语声时,语声识别部377用语法存储部376存储的校正后的Ngram语法信息进行连续语声识别。结果,识别“那件夹克衫好”的语句。在进行语声识别之际将识别的读音串划分成单词时,使用Ngram语法信息。
通过使用Ngram语法信息,设语声识别部377识别到单词“那件”、“夹克衫”、“好”。于是,语声识别部377由于添加信息包含的关键字信息所具有对应关系的关键字“夹克衫”与语声识别到的单词“夹克衫”相符,接着规定夹克衫的添加信息。然后,使规定的夹克衫添加信息存储到添加信息存储部317。有关其后的添加信息处理的运作与实施方式1相同,因而省略说明。
又使语声识别部363每次上文所述那样识别单词识别到的单词存储到识别履历存储部363。
然后,广播台10新送来场面码前,词汇加权修正部375每次对识别履历信息存储部363新存储单词,都将该新存储的单词当作识别履历信息421,重复步骤402和步骤403的运作。这样,词汇加权修正部375在语声识别中也校正式4的P(Wi|Ci)。
广播台10新发来场面码时,词汇加权修正部375将送来场面码前的识别履历信息421作为对象,进行图18的步骤402、403。
实施方式3中用Ngram语法信息进行语声识别后,用添加信息包含的关键字信息所具有对应关系的关键字规定添加信息时,也能用实施方式1或实施方式2说明的识别词汇集规定添加信息。这样,除取得本实施方式的效果外,还能取得实施方式1和实施方式2的效果。
再者,存放在本实施方式的识别词汇产生部371的作为范畴别法则372示出的Ngram语法信息也可用预先利用互联网等网络下载的信息。
本实施方式中,设语法选择部372输入场面码时选择与该场面码具有对应关系的范畴的Ngram语法信息,进行了说明,但不限于此。也可使广播台10送来作为规定Ngram语法信息用的信息的Ngram语法信息规定用关键字信息,并且存储在范畴别法则372的Ngram语法信息也添加Ngram语法信息规定用关键字信息,语法选择部根据这些Ngram语法信息规定用关键字信息规定Ngram语法信息,选择规定的Ngram语法信息。
本实施方式中,设使用Ngram语法信息进行语声识别,进行了说明,但不限于此,使用Ngram以外的语言模型进行语声识别,也能取得同样的效果。这里,Ngram以外的语言模型是指隐式马尔可夫模型(hidden Markovmodel)、概率上下文无关语法(probabilistic context-free grammar)等。可使Ngram以外的语言模型中,例如隐式马尔可夫模型中,根据识别结果,输出识别的单词的“状态”后,使输出语声识别所识别的单词的输出概率增加。或者概率上下文无关语法中,使识别到往识别的单词展开的“非终结符”(例如表示识别的单词归属的类别)的单词被当作“终结符”产生的概率增加。
这样,由于识别加权修正部375校正式4的P(Wi|Ci),较容易识别适合收视者发出的语声的表述的连续语声。因此,能将广播的节目和商业广告中上市的对象品所具有对应关系的添加信息规定成适合收视者发出语声时的表述。
本实施方式的广播台10是本发明的第1装置,本实施方式的TV/STB310是本发明的第2装置,本实施方式的广播接收部313是本发明的接收单元,本实施方式的识别词汇产生部371是本发明的语言模型单元的例子,本实施方式的词汇加权修正部375是本发明的校正单元的例子,本实施方式的语声识别部377是本发明的语声识别单元的例子,本实施方式的语声识别部377是本发明的规定单元的例子,本实施方式的显示部318是本发明的显示单元的例子,本实施方式的场面码是本发明的ID的例子。
实施方式4
接着说明本发明实施方式4的双向广播购物支援系统。
示出本发明实施方式4的双向广播购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为语法存储部376和语声识别部377后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图21示出表示双向广播购物支援系统(下文称为购物支援系统)的详况的功能框图。
如图21所示,TV/STB310的组成部分包括广播接收部313、语法存储部376、语声识别部377、商品数据存储部317、显示部318、发送部319、编类部382、识别履历存储部363、同义词辞典374、类加权修正部部381。
广播接收部313、添加信息存储部317、显示部318、发送部319、遥控器320、话筒321与实施方式1的相同,因而省略详细说明。语法存储部376、语声识别部377、识别履历存储部363与实施方式3的相同,因而省略详细说明。
类加权修正部381是利用以单词间的同义性为基准将多个单词划分成各单词类的同义词辞典374校正Ngram语法信息的表述方式中在规定单词类之后规定单词类出现的频度的单元。
语声识别部377是根据语声识别的结果识别到的单词利用同义词辞典374规定包含该单词的类并且使识别到的单词和包含该单词的类存储到识别履历存储器363的单元。
接着,以和实施方式3的不同点为中心说明此实施方式4的运作。
首先,用图22的流程图说明运作的梗概。
广播台10对广播来的广播内容进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和Ngram语法信息。广播接收部313接收该广播。
步骤410中,广播接收部313使广播来的Ngram语法信息存储到语法存储部376。
接着,步骤411中,类加权修正部381用识别履历存储部363存储的识别履历信息校正Ngram语法信息的表述方式中在规定单词类之后规定单词类出现的概率。
接着,步骤412中,类加权修正部381使校正后的Ngram语法信息存储到语法存储部376。
这样存储到语法存储部376的Ngram语法信息,与实施方式3相同,也用于在语声识别部377进行语声识别。步骤411中,类加权修正部381用识别履历信息校正Ngram语法信息,所以能以适合收视者的兴趣的方式对广播的节目和商业广告中上市的对象品进行语声识别。因此,能以适合收视者发出语声时的兴趣的方式规定与广播的节目和商业广告中上市的对象品带有对应关系的添加信息。下面详细说明这点。
接着,用图23的流程图说明实施方式4的购物支援系统的详细运作。
图23中,如上文所述,广播台10对广播来的广播内容进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息和Ngram语法信息。
步骤420中,广播接收部313接收该广播,并使广播来的Ngram语法信息存储到语法存储部376。
Ngram语法信息已在实施方式3中说明,因而省略说明。与实施方式3不同,实施方式4用识别履历存储部363的识别履历信息校正式4的P(Ci|Ci-1)。
图24示出式4的P(Ci|Ci-1)的例子。例如图24中,判明在称为指示词的单词类之后的称为衣类的类出现的概率是0.30。
接着,步骤421中,广播接收部313一接收添加信息就使其存储到添加信息存储部317。这里,与实施方式3相同,也设收到的添加信息是夹克衫的添加信息。
接着,步骤422和步骤423中,类加权修正部381用识别履历存储部363存储的识别履历信息校正Ngram语法信息的表述方式中在规定单词类之后规定单词类出现的频度。即,用识别履历存储部363的识别履历信息校正式4的P(Ci|Ci-1)。
图25示出说明步骤422和步骤423的运作用的图。下面用图25具体说明步骤422和步骤423的运作。
首先,步骤422中,如上文所述,添加信息包含的关键字信息所具有对应关系的关键字是夹克衫。设在同义词辞典374定义为:使夹克衫包含在“衣类”单词类中。又设识别履历存储部363中存储图25的识别履历信息451所示的识别履历信息。
此识别履历信息451由语声识别所得的单词和包含该单词的单词类组成。即,编类部382用同义词辞典374检测出包含语声识别部377进行语声识别的结果识别到的当作的单词类。然后,编类部382使识别到的单词和包含该单词的单词类预先存储到识别履历存储部363。这样,由编类部382产生识别履历信息451。
类加权修正部381用同义词辞典374规定包含与添加信息的关键字信息对应关键字“夹克衫”的“衣类”单词类,进而从识别履历信息451提取属于“衣类”单词类的单词。如识别履历信息451所示,作为属于“衣类”单词类的单词,提取夹克衫2次,提取西服2次。
接着,步骤423中,如类集合450所示,设对单词类在同义词辞典374定义n个单词类。广播接收部313接收Ngram语法信息,并且设使其存放在语法存储部376时的式4的P(Ci|Ci-1)为初始状态452。例如,在“指示词”单词类包含的单词之后“衣类”单词类包含的单词出现的概率为0.7,在“指示词”单词类包含的单词之后“家具”单词类包含的单词出现的概率为0.3。
此情况下,类加权修正部381在某单词类包含的单词之后“衣类”单词类包含的单词出现的概率P([衣类]|Ci-1)加上“衣类”单词类包含的单词在识别履历信息451中出现的出现数除以设想出现单词总数后所得的值。即,Ci是包含与添加信息的关键字信息具有对应关系的关键字的单词类时,在某单词类包含的单词之后Ci包含的单词出现的概率加上单词类Ci包含的单词在识别履历信息451中出现的出现数除以设想出现单词总数后所得的值。
初始状态452的P([衣类]|[指示词])中,“衣类”单词类的单词在识别履历信息451中出现4个,因而判明将设想单词出现总数取为100,并使该P加上4/100。
另一方面,类加权修正部381在“衣类”单词类以外的单词类取为Cj时,从P(Cj|Ci-1)减去((修正前的P(Cj|Ci-1))×(识别履历没有的单词类Cj的P(Cj|Ci-1)的总和))×((识别履历信息451中的“衣类”单词类所属的单词的出现总数)/(设想出现单词总数))。即,Cj是包含与添加信息的关键字信息具有对应关系的关键字的单词类以外的单词类,并且Ci是包含与添加信息的关键字信息具有对应关系的关键字的单词类时,从P(Cj|Ci-1)减去((修正前的P(Cj|Ci -1))/(识别履历没有的单词类Cj的P(Cj|Ci-1)的总和))×((识别履历信息451中的Ci所属的单词的出现总数)/(设想出现单词总数))。
判明从初始状态452的P([家具]|[指示词])仅减去(0.3/0.3)×(4/100)。通过以上那样进行处理,如图25的自适应后453所示,校正式4的P(Cj|Ci-1)。
接着,步骤424中,类加权修正部381使校正式4的P(Cj|Ci-1)后的式4所示的Ngram语法信息与添加信息对应地存储到语法存储部376。
接着,进行语声识别时,语声识别部377用语法存储部376存储的Ngram语法信息对收视者发出的语声进行语声识别。
收视者发出“那件夹克衫好”的语声时,语声识别部377用语法存储部376存储的校正后的Ngram语法信息进行连续语声识别。结果,识别“那件夹克衫好”的语句。在进行语声识别之际将识别的读音串划分成单词时,使用Ngram语法信息。
通过使用Ngram语法信息,设语声识别部377识别到单词“那件”、“夹克衫”、“好”。于是,语声识别部377由于添加信息包含的关键字信息所具有对应关系的关键字“夹克衫”与语声识别到的单词“夹克衫”相符,接着规定夹克衫的添加信息。然后,使规定的夹克衫添加信息存储到添加信息存储部317。有关其后的添加信息处理的运作与实施方式1相同,因而省略说明。
这样,类加权修正部381校正式4的P(Ci|Ci-1),所以较容易识别适合收视者的兴趣的连续语声。因此,能以适合收视者的兴趣的方式规定与广播的节目和商业广告中上市的对象品带有对应关系的添加信息。
当然,本实施方式中也能应用上述各实施方式说明的各种变换例。
本实施方式中,设广播台10送来Ngram语法信息,进行了说明,但也能与实施方式3相同,利用场面码等选择Ngram语法信息。反之,实施方式3也可如实施方式4说明的那样,从广播台送来Ngram语法信息,以代替根据场面码选择Ngram语法信息。
本实施方式中,设使用Ngram语法信息进行语声识别,进行了说明,但不限于此,使用Ngram以外的语言模型进行语声识别,也能取得同样的效果。这里,Ngram以外的语言模型是指隐式马尔可夫模型(hidden Markovmodel)、概率上下文无关语法(probabilistic context-free grammar)等。设Ngram以外的语言模型中,例如隐式马尔可夫模型中,根据识别结果,输出识别的单词的“状态”S1,则对于各具有迁移到S1的弧的状态Si,使从Si到S1的迁移概率增加。或者概率上下文无关语法中,设将识别的单词“终结符”进行展开的“非终结符”为C1,则也可以使展开包含C1的符号的生成规则的概率增加。
本实施方式的广播台10是本发明的第1装置,本实施方式的TV/STB310是本发明的第2装置,本实施方式的广播接收部313是本发明的接收单元,本实施方式的类加权修正部381是本发明的校正单元的例子,本实施方式的语声识别部377是本发明的语声识别单元的例子,本实施方式的语声识别部377是本发明的规定单元的例子,本实施方式的显示部318是本发明的显示单元的例子。
实施方式5
接着,说明本发明实施方式5的双向广播购物支援系统。
示出本发明实施方式4的双向广播购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为时间与语言模型信息存储部2005和语声识别部377后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图29示出表示购物支援系统的详况的功能框图。
如图29所示,TV/STB310的组成部分包括广播接收部313、控制部2001、音响输出部2003、图像显示部2004、时间选择输入单元2002、时间与语言模型信息存储部2005、信息选择部2006、语声识别部377、话筒321和发送部319。
广播接收部313、发送部319、遥控器320、话筒321与实施方式1的相同,因而省略详细说明。
控制部2001是控制音响输出部2003、图像显示部2004、信息选择部2006等的单元。
音响信号输出部2003是将控制部2001输出的音响信号作为语声从该部2003具有的扬声器输出的单元。
图像显示部2004是在该部2004具有的显示器显示控制部2001输出的视像信号的单元。
时间选择输入单元2002包含按键开关,是购物支援系统的用户在节目收视中存在感兴趣的物品时指定该时的时间位置的单元。
时间与语言模型信息存储部2005是存储时间选择输入单元2002指定的时间位置和与该时间位置具有对应关系的语言模型信息的单元。
语声识别部377是用Ngram语法信息对购物支援系统的用户发出的语声进行语声识别的单元。
信息选择部2006是根据语声识别部377进行语声识别而识别到的单词与添加信息包含的关键字信息所具有对应关系的关键字的符合程度选择添加信息的单元。信息选择部2006具有实施方式3的识别词汇产生部371、同义词辞典374、词汇加权修正部375、识别履历存储部363、添加信息存储部317等的各种功能。
发送部319是将选择的添加信息包含的购买信息与相应的添加信息的识别号一起发送到广播台的单元。本实施方式的TV/STB310内置记录收视的节目等的硬盘。
接着,说明上述那样的本实施方式的运作。
图30示出表示本实施方式的TV/STB310的运作的流程图。下面,根据图30说明运作。
广播台10对作为广播来的广播内容的节目内容2007进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息(商品信息)2008和作为Ngram语法信息的节目添加信息(Ngram语法)2009。广播接收部313接收该广播。与实施方式3不同,本实施方式广播台也广播节目添加信息(Ngram语法)2009。
控制部2001进行控制,使广播接收部313接收的节目内容2007作为节目内容2010输出到音响信号输出部2003和图像显示部2004,同时还使音响信号输出部2003从扬声器输出节目内容2010的声信号,而且使图像显示部2004在显示器上显示节目内容2010的视像信号。控制部2001还控制成:将节目内容2007、节目添加信息(商品信息)2008、节目添加信息(Ngram语法)2009等广播来的信息暂时记录到内置的硬盘。
现在,设对音响信号输出部2003的扬声器和图像显示部2004的显示器输出例如戏剧的节目。而且,设本实施方式的购物支援系统的用户正在收视戏剧。
于是,收视者正在收视节目的期间,显示器上放映登场人物的西服、用作戏剧的道具的家具和书本等节目中收视者感兴趣的物品时,该用户操作时间选择输入单元2002,粘贴时间上的附笺。
即,用户在显示器放映节目收视中感兴趣的物品时,按压时间选择输入单元2002具有的按键开关。
时间选择输入单元2002将输入用户通过按压按键开关输入的附笺粘贴命令的时间点10秒前的时刻和输入附笺粘贴命令的时间点10秒后的时刻作为时间位置,输出到控制部2001(步骤501)。
控制部2001从时间选择输入单元2002输入时间位置时,使该时间位置和该时间位置包含的节目添加信息(Ngram语法)2009带有对应关系,作为时间信息和与时间具有对应关系的Ngram语法2011,存放到时间与语言模型信息存储部2005(步骤502)。
接着,在用户结束节目收视后或中断收视后,控制部2001读出时间与语言模型信息存储部2005中存放的时间位置和与时间对应的Ngram语法,从内置的硬盘提取该读出的时间位置包含的节目内容的声信号和视像信号,并分别输出到音响信号输出部2003和图像显示部2004(步骤503)。这样,时间与语言模型信息存储部2005存放的时间位置包含的场面是放映穿西服的戏剧登场人物的场面时,再次给用户提示时间位置指定的时间宽度(即20秒)的穿西服的戏剧登场人物。
控制部2001还将与登场的时间位置具有对应关系的Ngram语法信息输出到信息选择部2006。信息选择部2006将该Ngram语法信息输出到语声识别部377。
又,控制部2001从内置的硬盘提取读出的时间位置包含的节目添加信息(商品信息)2008,输出到信息选择部2006。
用户再次观看所提示的由时间位置指定的场面,并且对话筒321输入规定登场人物穿的西服的语声(步骤504)。例如,用户对话筒321发出“那件西服好”的语声。
于是,语声识别部377使用从时间与语言模型信息存储部2005读出的节目添加信息(Ngram语法)2009,即Ngram语法信息,对语声信号“那件西服好”进行语声识别(步骤505)。
即,用户发出“那件西服好”的语声时,语声识别部377使用从时间与语言模型信息存储部2005读出并且如实施方式3那样优化的Ngram语法信息,进行连续语声识别。优化Ngram语法信息的方法与实施方式3相同,因而省略详细说明。结果,识别语句“那件西服好”。在进行语声识别之际将识别的读音串划分成单词时,使用Ngram语法信息。
通过使用Ngram语法信息,设语声识别部377识别到单词“那件”、“西服”、“好”。于是,语声识别部377接着将单词串“那件”、“西服”、“好”输出到信息选择部2006。
信息选择部2006由于提取的添加信息(商品信息)2013包含的关键字信息所具有对应关系的关键字“西服”与语声识别到的单词“西服”相符,规定西服的添加信息。然后,将规定的西服添加信息作为选择信息2013,输出到发送部319。发送部319将选择信息2013包含的购买信息与相应的添加信息的识别号等一起发送到广播台(步骤506)。
时间选择输入单元2002含有触摸板的情况下,用户在显示器放映节目收视中感兴趣的物品时,接触触摸板的附笺键即可。时间选择输入单元2002含有话筒的情况下,用户在显示器放映节目收视中感兴趣的物品时,发出“粘贴附笺”等语声即可。
本实施方式中,设信息选择部2006利用与实施方式3相同的方法优化从时间与语言模型信息存储部2005读出的Ngram语法信息,进行了说明,但不限于此,也可利用与实施方式4相同的方法进行优化。
本实施方式中,设时间与语言模型信息存储部2005将时间位置和作为节目添加信息(Ngram语法)2009的Ngram语法信息当作时间信息和与时间具有对应关系的Ngram语法2011加以存放,进行了说明,但不限于此。时间与语言模型信息存储部2005也可仅存放时间位置,不存放Ngram语法信息。这时,控制部2001可在步骤503中,从存放在内置的硬盘的节目添加信息(Ngram语法)2009提取读出的时间位置包含的Ngram语法信息,并将其输出到信息选择部2006。
本实施方式中,设时间与语言模型信息存储部2005将时间位置和作为节目添加信息(Ngram语法)2009的Ngram语法信息当作时间信息和与时间具有对应关系的Ngram语法2011加以存放,进行了说明,但不限于此。时间与语言模型信息存储部2005也可除存放时间位置和作为节目添加信息(Ngram语法)2009的Ngram语法信息外,还存放时间位置包含的节目添加信息(商品信息)2008。这时,控制部2001可在步骤503中,从时间与语言模型信息存储部2005读出已读出的时间位置包含的添加信息(商品信息)2008,并将其输出到信息选择部2006。
本实施方式中,设广播台10送来节目添加信息(Ngram语法)2009,进行了说明,但也可使广播台10广播实施方式1和实施方式2说明的识别词汇集,以代替节目添加信息(Ngram语法)2009。这时,控制部2001、语声识别部377和信息选择部2006处理识别词汇集,以代替Ngram语法信息,信息选择部2006和语声识别部377的运作与实施方式1和实施方式2相同,也用识别词汇集规定添加信息(商品信息)2008。
本实施方式中,设将节目添加信息(商品信息)2008全部记录到内置的硬盘并且仅提示时间选择输入单元2002指定的时间位置包含的节目添加信息(商品信息)2008,进行了说明,但不限于此。也可仅存储并提示时间选择输入单元2002指定的时间位置包含的节目添加信息(商品信息)2008。
这样,根据本实施方式,不是在节目收视中,而是在节目结束后或节目中断后,进行规定添加信息(商品信息)的运作,所以能进行添加信息(商品信息)的规定,而不在节目收视期间使用户的节目收视中断。
实施方式6
接着,说明本发明实施方式6的购物支援系统。
示出本发明实施方式6的购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为商品信息与语言模型信息存储部2015和语声识别部377后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图31示出购物支援系统(下文称为购物支援系统)的详况的功能框图。
如图31所示,TV/STB310的组成部分包括广播接收部313、控制部2001、音响输出部2003、图像显示部2004、时间选择输入单元2002、商品信息与语言模型信息存储部2015、信息选择部2016、语声识别部377、话筒321和发送部319。
广播接收部313、发送部319、遥控器320、话筒321与实施方式1的相同,因而省略详细说明。
控制部2001是控制音响输出部2003、图像显示部2004、信息选择部2006等的单元。
音响信号输出部2003是将控制部2001输出的音响信号作为语声从该部2003具有的扬声器输出的单元。
图像显示部2004是在该部2004具有的显示器显示控制部2001输出的视像信号的单元。
时间选择输入单元2002包含按键开关,是购物支援系统的用户在节目收视中存在感兴趣的物品时指定该时的时间位置的单元。
商品信息与语言模型信息存储部2015是将语言模型信息(Ngram语法信息)和商品信息作为与时间选择输入单元2002指定的时间位置具有对应关系的添加信息加以存储的单元。
语声识别部377是用Ngram语法信息对购物支援系统的用户发出的语声进行语声识别的单元。
信息选择部2016是根据语声识别部377进行语声识别而识别到的单词与添加信息包含的关键字信息所具有对应关系的关键字的符合程度选择添加信息的单元。信息选择部2006具有实施方式3的识别词汇产生部371、同义词辞典374、词汇加权修正部375、识别履历存储部363、添加信息存储部317等的各种功能。
发送部319是将选择的添加信息包含的购买信息与相应的添加信息的识别号一起发送到广播台的单元。
本实施方式的TV/STB310可如实施方式5那样内置记录节目等的硬盘,但也可不内置硬盘。
接着,以和实施方式5的不同点为中心说明上述本实施方式的运作。
图31示出表示本实施方式的TV/STB310的运作的流程图。下面,根据图31说明运作。
广播台10对作为广播来的广播内容的节目内容2007进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息(商品信息)2008和作为Ngram语法信息的节目添加信息(Ngram语法)2009。广播接收部313接收该广播。与实施方式3不同,本实施方式广播台也广播节目添加信息(Ngram语法)2009。
控制部2001进行控制,使广播接收部313接收的节目内容2007作为节目内容2010输出到音响信号输出部2003和图像显示部2004,同时还使音响信号输出部2003从扬声器输出节目内容2010的声信号,而且使图像显示部2004在显示器上显示节目内容2010的视像信号。
现在,设对音响信号输出部2003的扬声器和图像显示部2004的显示器输出例如戏剧的节目。而且,设本实施方式的购物支援系统的用户正在收视戏剧。
步骤511的运作与实施方式5的步骤501的运作相同。
接着,控制部2001从时间选择输入单元2002输入时间位置时,将作为该时间位置包含的节目添加信息(商品信息)2008的商品信息和作为节目添加信息(Ngram语法)2009的Ngram语法信息当作与选择的时间具有对应关系的商品信息和Ngram语法2017,存放到商品信息与语言模型信息存储部2015(步骤512)。
接着,在用户结束节目收视后或中断收视后,控制部2001读出商品信息与语言模型信息存储部2015存放的Ngram语法信息和商品信息,并将商品信息以一览表的方式输出到图像显示部2004。图像显示部2004在显示器上显示商品信息一览表(步骤513)。图33示出这样进行显示的商品信息的例子。即,如图33那样显示在时间选择输入单元2002指定时间位置的范围放映的商品的商品信息。这样,给用户提示指定时间位置的商品信息。
控制部2001还将读出的Ngram语法信息和商品信息输出到信息选择部2006。信息选择部2006将该Ngram语法信息输出到语声识别部377。
用户一面看图33的商品信息一览表,一面对话筒321输入规定西服的语声(步骤514)。例如,用户对话筒321发出“那件西服好”的语声。步骤514以后的运作与实施方式5的运作相同。
实施方式5说明的变换例也能同样用于实施方式6。
这样,根据本实施方式,不是在节目收视中,而是在节目结束后或节目中断后,进行规定添加信息(商品信息)的运作,所以能进行添加信息(商品信息)的规定,而不在节目收视期间使用户的节目收视中断。
实施方式7
接着,说明本发明实施方式7的购物支援系统。
示出本发明实施方式7的购物支援系统的概念性组成的框图相当于在图1中将识别词汇存储部351和语声识别部352分别改为语声和商品信息与语言模型信息存储部2019和语声识别部377后所得的框图。因此,图1的说明与实施方式1重复,加以省略。图34示出购物支援系统(下文称为购物支援系统)的详况的功能框图。
如图34所示,TV/STB310的组成部分包括广播接收部313、控制部2018、音响输出部2003、图像显示部2004、语声和商品信息与语言模型信息存储部2019、信息选择部2020、语声识别部377、话筒321和发送部319。
广播接收部313、发送部319、遥控器320、话筒321与实施方式1的相同,因而省略详细说明。
控制部2018是控制音响输出部2003、图像显示部2004、信息选择部2006等的单元。
音响信号输出部2003是将控制部2018输出的音响信号作为语声从该部2003具有的扬声器输出的单元。
图像显示部2004是在该部2004具有的显示器显示控制部2018输出的视像信号的单元。
语声和商品信息与语言模型信息存储部2019是将语言模型信息(Ngram语法信息)、商品信息和用户发出的语声作为包括购物支援系统的用户在节目收视中对话筒321发出语声的时间点的20秒期间包含的添加信息加以存储的单元。
语声识别部377是用Ngram语法信息对购物支援系统的用户发出的语声进行语声识别的单元。
信息选择部2020是根据语声识别部377进行语声识别而识别到的单词与添加信息包含的关键字信息所具有对应关系的关键字的符合程度选择添加信息的单元。信息选择部2020具有实施方式3的识别词汇产生部371、同义词辞典374、词汇加权修正部375、识别履历存储部363、添加信息存储部317等的各种功能。
发送部319是将选择的添加信息包含的购买信息与相应的添加信息的识别号一起发送到广播台的单元。
本实施方式的TV/STB310可如实施方式5那样内置记录节目等的硬盘,但也可不内置硬盘。
接着,以与实施方式5和实施方式6的不同点为中心说明上述本实施方式的运作。
图35示出表示本实施方式的TV/STB310的运作的流程图。下面,根据图35说明运作。
广播台10对作为广播来的广播内容的节目内容2007进行广播,同时还广播与广播内容中上市的对象品带有对应关系并包含规定对象品用的关键字信息的所述添加信息(商品信息)2008和作为Ngram语法信息的节目添加信息(Ngram语法)2009。广播接收部313接收该广播。即,与实施方式3不同,本实施方式广播台也广播节目添加信息(Ngram语法)2009。
控制部2018进行控制,使广播接收部313接收的节目内容2007作为节目内容2010输出到音响信号输出部2003和图像显示部2004,同时还使音响信号输出部2003从扬声器输出节目内容2010的声信号,而且使图像显示部2004在显示器上显示节目内容2010的视像信号。
现在,设对音响信号输出部2003的扬声器和图像显示部2004的显示器输出例如戏剧的节目。而且,设本实施方式的购物支援系统的用户正在收视戏剧。
于是,收视者正在收视节目的期间,显示器上放映登场人物的西服、用作戏剧的道具的家具和书本等节目中收视者感兴趣的物品时,该用户对话筒321发出语声(步骤521)。
接着,控制部2018将步骤521输入的输入语声、包括输入该输入语声的时间点的位置的20秒期间包含的商品信息和Ngram语法信息存放到语声和商品信息与语言模型信息存储部(步骤522)。即,控制部2018将作为包括对输入语声进行输入的时间点的20秒期间的节目添加信息(商品信息)2008的商品信息和作为节目添加信息(Ngram语法)2009的Ngram语法信息当作与选择时间具有对应关系的商品信息和Ngram语法2017,存放到语声和商品信息与语言模型信息存储部2019。控制部2018还将步骤521输入的输入语声当作时间选择时的输入语声2022,存放到语声和商品信息与语言模型信息存储部2019。
接着,控制部2018对语声和商品信息与语言模型信息存储部2019存储的时间选择时的输入语声2022用与该输入语声具有对应关系的、语声和商品信息与语言模型信息存储部2019存储的Ngram语法信息进行控制,使语声识别部377进行语声输入,而不中断节目收视。语声识别部377按照该控制进行语声识别(步骤523)。然后,信息选择部2020在可规定商品信息时,进行商品信息的规定。与实施方式3相同地进行该商品信息的规定运作。进行步骤523的运作时,不中断节目收视。
接着,语声识别部377的语声识别结果,使信息选择部2020能规定商品信息时,进至步骤528;不能规定商品信息,则进至步骤525(步骤524)。能规定商品信息是指例如“那件西服好”等时间选择时的输入语声2022示出具体商品的情况;不能规定商品信息是指例如“啊,好”等时间选择时的输入语声2022不示出具体商品的情况。
步骤528中,控制部2018控制信息选择部2020、音响输出部2003、图像显示部2004,使其在节目收视结束后和节目收视中断后,给用户提示规定的商品信息。按照该控制,在图像显示部2004的显示器上显示规定的商品信息后,进至步骤530。
另一方面,步骤525中,在节目收视结束后和节目收视中断后,控制部2018从语声和商品信息与语言模型信息存储部2019读出包括输入时间选择时的输入语声2022的时间点的20秒期间包含的商品信息,作为商品信息一览表输出到图像显示部2004。于是,图像显示部显示商品信息一览表。图33示出这样显示的商品信息的例子。即,图33那样显示包括输入时间选择时的输入语声2022的时间点的20秒期间包含的商品信息。这样,给用户显示指定时间位置的商品信息。
用户一面看图33的商品信息一览表,一面对话筒321输入规定西服的语声(步骤526)。例如,用户对话筒321发出“那件西服好”的语声。
接着,语声识别部377从语声和商品信息与语言模型信息存储部2019读出包括输入时间选择时的输入语声2022的时间点的20秒期间的Ngram语法信息,用读出的Ngram语法信息进行语声识别(步骤527)。即,用户发出“那件西服好”的语声时,语声识别部377使用从时间与语言模型信息存储部2005读出并且如实施方式3那样优化的Ngram语法信息进行连续语声识别。优化Ngram语法信息的方法与实施方式3相同,因而省略详细说明。进行语声识别之际将语声识别的读音串划分成单词时,使用Ngram语法信息。
通过使用Ngram语法信息,设语声识别部377识别到单词“那件”、“西服”、“好”。于是,语声识别部377接着将单词串“那件”、“西服”、“好”输出到信息选择部2006。
信息选择部2006由于语声和商品信息与语言模型信息存储部2019包含的关键字信息所具有对应关系的关键字“西服”与语声识别到的单词“西服”相符,规定西服的添加信息。
步骤530中,信息选择部2020将规定的西服添加信息作为选择信息2013,输出到发送部319。发送部319将选择信息2013包含的购买信息与相应的添加信息的识别号等一起发送到广播台(步骤530)。
实施方式7中,设在步骤526观看图33的一览表后,输入语声,但也可如实施方式5那样,观看再次提示用时间位置指定的场面的物品,并进行语声输入。
实施方式7中也同样能用实施方式5说明的变换例。
这样,根据本实施方式,不是在节目收视中,而是在节目结束后或节目中断后,进行又提示又规定添加信息(商品信息)的运作,因而能进行添加信息(商品信息)的规定,而不在节目收视中使用户的节目收视中断。
又,本实施方式中的说明,设按照图35所示的流程图进行运作,但不限于此,也可按照图36所示的流程图进行运作。图36所示的流程图与图35所示的流程图,其步骤522的插入位置不同。即,图35中在步骤524前进行步骤522,而图36中仅在步骤524利用语声识别不能规定商品信息时进行步骤522。这样设仅在利用语声识别不能规定商品信息时,存放与有语声输入的时间位置具有对应关系的商品信息和Ngram语法信息,也能取得与本实施方式相同的效果。
关联技术1
接着,说明作为本发明关联的技术的关联技术1。
图26是示出本发明关联技术1的购物支援系统中在编制节目的同时自动编制购物用的节目添加信息的部分的功能框图。图27示出表示本发明关联技术1的在购物支援系统中进行编制节目的同时自动编制购物用的节目添加信息的运作的流程图。
图26中,示出节目记录装置1010和添加信息码发送机1020。
添加信息码发送机1020是利用电波或红外线发送添加信息的码号的发送机。
节目记录装置1010具有话筒1011、摄像机1012、接收部1013、添加信息核对用数据库1014、信息核对部1017、节目添加信息数据库1015和节目存储部1016。
接收部1013是接收添加信息码发送机1020的信号的单元。添加信息核对用数据库1014是记录节目添加信息的码号和节目添加信息的核对信息的数据库。信息核对部1017是根据添加信息核对用数据库1014的内容判断从摄像机和话筒输入的声像信号中是否记录接收部1013接收的添加信息码所具有对应关系的物品、生物或人物的单元。节目添加信息数据库1015是存储节目中记录的添加信息的数据库。节目记录部1016是同步记录声像信号和节目添加信息的单元。
接着,说明上述关联技术1的运作。
下面,参照图27进行说明。进行遵照图27的流程图的运作时,仅在视像中捕获物品、生物或人物等的多对象品内的对象品的情况下,能自动编制广播该对象品的节目添加信息的广播内容。
首先,拍摄前,对具有相应的添加信息的物品、生物或人物安装添加信息码发送机(步骤1031)。
拍摄在摄像机1012和话筒1011输入声像信号的同时,由接收部1013接收添加信息码发送机发送的信号(步骤1032)。
接着,在信息核对部1017判断有没有发送机的信号和接收的信号是否包含添加信息码(步骤1033)。步骤1033中,无发送机信号或接收信号不包含添加信息码时,仅记录摄像机1012和话筒1011输入的声像信号(步骤1040)。
反之,步骤1033中接收内容有添加信息码时,从添加信息核对用数据库1014提取与添加信息码具有对应关系的核对信息(步骤1034),并且信息核对部1017判断摄像机1012和话筒1011输入的声像信号中是否存在符合核对信息的信息(步骤1035)。
步骤1035中判断为输入的声像信号中没有符合核对信息的信息时,仅记录摄像机1012和话筒1011输入的声像信号(步骤1040)。
步骤1035中判断为输入的声像信号中有符合核对信息的信息时,从节目添加信息数据库1015提取相当的节目添加信息,与声像信号同步地加以记录(步骤1036)。
图28示出制作节目和商业广告等的广播内容的拍摄现场。拍摄现场设置摄像机1012,摄像机1012可在拍摄现场移动。例如,摄像机1012能从摄像机1012a的位置自由移动到摄像机1012b的位置。
拍摄现场还分别在不同的固定位置设置位置固定发送机1030a、1030b、1030c。这些位置固定发送机1030a、1030b、1030c建立3维固定坐标。图28中设配置3部位置固定发送机1030a、1030b、1030c,进行说明,但不限于此,也可在固定位置设置3部以上的位置固定发送机。
摄像机1012能进行移动和改变姿态,可通过接收分别来自位置固定发送机1030a、1030b、1030c的信号,计算摄像机1012本身的坐标位置和姿态信息。
另一方面,添加信息码发送机1020通过接收来自位置固定发送机1030a、1030b、1030c的信号,计算本身的坐标位置。然后,添加信息码发送机1020发送本身的坐标位置。
摄像机1012根据摄像机1012本身的坐标位置和姿态、添加信息码发送机1020的坐标位置、作为摄像机1012的内部信息的焦距和视场角,判断添加信息码发送机1020是否在其拍摄范围内。
摄像机1012判断为添加信息码发送机1020在其拍摄范围时,将该添加信息码发送机1020送来的添加信息码输出到信息核对部1017。摄像机1012判断为添加信息码发送机1020不在其拍摄范围时,不将该添加信息码发送机1020送来的添加信息码输出到信息核对部1017。这样,信息核对部1017通过在送来添加信息码1020时,与声信号同步地记录该添加信息码1020所具有对应关系的节目添加信息,能仅在视像中捕获对象品时自动编制广播与该对象品带有对应关系的节目添加信息的广播内容。
综上所述,根据本关联技术1的在编制节目的同时自动编制节目添加信息的系统,制作者在节目编制后,不需要确认全部场面并且在节目中增添记录节目添加信息的作业,可缩短节目编制作业时间,而且减少作业成本。
本关联技术1中,添加信息码发送机1020发送添加信息的码号,但也可发送添加信息核对用数据,并根据收到的数据进行与声像信号的核对,而不用添加信息核对用数据库。
本关联技术中1,信息核对部1017从节目添加信息数据库提取与码号具有对应关系的节目添加信息,使其与声像信号同步地记录,但也可记录链接节目和添加信息的标记数据。
再者,本发明的程序用于使计算机执行上述本发明第2装置的全部或部分单元(或装置、元件等)的功能,并且与计算机协同运作。
本发明的记录媒体承载使计算机执行上述本发明第2装置的全部或部分单元(或装置、元件)的功能用的程序,可由计算机读取,而且读取的所述程序与所述计算机协同执行所述功能。
本发明的上述“部分单元(或装置、元件等)”含义为多个该单元内的一个或几个单元,本发明的上述“部分步骤(或工序、动作、作用等)”含义为多个该步骤内的一个或几个步骤。
本发明的上述“单元(或装置、元件等)的功能”含义为所述单元的全部或部分功能,本发明的上述“步骤(或工序、动作、作用等)的运作”含义为所述步骤的全部或部分运作。
本发明的程序的一种利用方式可以是记录在可由计算机读取的记录媒体并且与计算机相同运作的方式。
本发明的程序的一种利用方式也可以是在传输媒体中输送并且由计算机读取后与计算机协同运作的方式。
作为本发明的数据结构,包括数据库、数据方式、数据表、数据清单、数据类型等。
作为记录媒体,包括ROM等;作为传输媒体,包括互联网等传输媒体、光。电波、声波等。
又,上述本发明的计算机不限于CPU等纯硬件,也可包括固件、OS,甚至外围设备。
综上所述,本发明的结构可用软件方式实现,也可用硬件方式实现。
工业上的实用性
从以上说明可知,本发明可提供能较不费工夫较简便地购得广播的节目或商业广告中上市的对象品的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。
本发明可提供能以适合收视者发出语声时的表述的方式简便不费工夫地购得广播的节目或商业广告中上市的对象品的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。
本发明可提供能以适合收视者的兴趣的方式简便不费工夫地购得广播的节目或商业广告中上市的对象品的广播接收方法、广播接收系统、第1装置、第2装置、记录媒体和程序。

Claims (11)

1、一种广播接收方法,其特征在于,包括
接收在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、将包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播的接收步骤,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生步骤,
对收视者发出的语声进行语声识别的语声识别步骤,
在所述识别词汇集内包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定步骤,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示步骤。
2、一种广播接收系统,其特征在于,包括
含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、将包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置,以及
第2装置,该第2装置含有接收所述第1装置广播的所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元、对收视者发出的语声进行语声识别的语声识别单元、在所述识别词汇集内包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
3、一种第1装置,其特征在于,包括
在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、将包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元,
所述广播由第2装置接收,该第2装置具有接收所述广播的接收单元、利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元、对收视者发出的语声进行语声识别的语声识别单元、在所述识别词汇集内包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元、以及显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
4、一种第2装置,其特征在于,包括
接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、将包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用以单词间的同义性为基准将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元,
对收视者发出的语声进行语声识别的语声识别单元,
在所述识别词汇集内包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
5、如权利要求4中所述的第2装置,其特征在于,
所述同义词辞典的各单词中添加预先决定的频度,
所述语声识别单元将多个单词作为所述语声识别的候补识别时、在所述语声识别的结果中将所述出现频度高的单词规定为识别的单词。
6、如权利要求5中所述的第2装置,其特征在于,包括
根据所述语声识别结果的识别结果改写所述出现频度的出现频度修改单元。
7、如权利要求5中所述的第2装置,其特征在于,包括
根据所述语声识别结果的履历信息改写所述出现频度的出现频度修改单元,
在所述识别词汇集的各单词中添加与该单词具有对应关系的所述出现频度,
所述语声识别单元用所述识别词汇集的所述出现频度进行所述语声识别。
8、如权利要求4至7中任一项所述的第2装置,其特征在于,包括
进行对显示所述添加信息的规定操作时、将与该规定操作具有对应关系的指示发送到规定的发送目的处的发送单元。
9、如权利要求8中所述的第2装置,其特征在于,
所述节目添加信息是商品销售信息和/或服务销售信息,
与所述规定操作具有对应关系的指示是所述商品和/或所述服务的资料请求或购入指示信息。
10、一种程序,其特征在于,用于使计算机作为以下各单元起作用:
权利要求4中所述的第2装置的接收含有在与广播台广播来的广播内容中上市的对象品具有对应关系的添加信息中、将包含规定所述对象品用的关键字信息的所述添加信息与所述广播内容同时广播的广播单元的第1装置广播的所述广播的接收单元,
利用以单词间的同义性为基准、将多个单词分成各单词类的同义词辞典并且与所述添加信息对应地产生由包含所述关键字信息所具有对应关系的单词的所述单词类所属的单词组成的识别词汇集的识别词汇集产生单元,
对收视者发出的语声进行语声识别的语声识别单元,
在所述识别词汇集中包含该语声识别结果识别的单词时、规定与该识别词汇集具有对应关系的所述关键字信息的规定单元,以及
显示与该规定的所述关键字信息具有对应关系的添加信息的显示单元。
11、一种记录媒体,可由计算机处理,其特征在于,
承载权利要求10中所述的程序。
CNA2003801099175A 2003-01-15 2003-12-26 广播接收方法、广播接收系统、记录媒体及程序 Pending CN1757229A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003007442 2003-01-15
JP7442/2003 2003-01-15

Publications (1)

Publication Number Publication Date
CN1757229A true CN1757229A (zh) 2006-04-05

Family

ID=32709113

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2003801099175A Pending CN1757229A (zh) 2003-01-15 2003-12-26 广播接收方法、广播接收系统、记录媒体及程序

Country Status (5)

Country Link
US (1) US7698138B2 (zh)
JP (1) JPWO2004064393A1 (zh)
CN (1) CN1757229A (zh)
AU (1) AU2003296157A1 (zh)
WO (1) WO2004064393A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7437296B2 (en) * 2003-03-13 2008-10-14 Matsushita Electric Industrial Co., Ltd. Speech recognition dictionary creation apparatus and information search apparatus
WO2005064592A1 (ja) * 2003-12-26 2005-07-14 Kabushikikaisha Kenwood 機器制御装置、音声認識装置、エージェント装置、車載機器制御装置、ナビゲーション装置、オーディオ装置、機器制御方法、音声認識方法、エージェント処理方法、車載機器制御方法、ナビゲーション方法、オーディオ装置制御方法及びプログラム
JP4857551B2 (ja) * 2004-12-06 2012-01-18 日本電気株式会社 番組情報蓄積装置及び方法並びに番組情報蓄積用プログラム
JP4736511B2 (ja) * 2005-04-05 2011-07-27 株式会社日立製作所 情報提供方法および情報提供装置
JP2007178927A (ja) * 2005-12-28 2007-07-12 Canon Inc 情報検索装置および方法
US20080208589A1 (en) * 2007-02-27 2008-08-28 Cross Charles W Presenting Supplemental Content For Digital Media Using A Multimodal Application
US20110161072A1 (en) * 2008-08-20 2011-06-30 Nec Corporation Language model creation apparatus, language model creation method, speech recognition apparatus, speech recognition method, and recording medium
JP2010072507A (ja) * 2008-09-22 2010-04-02 Toshiba Corp 音声認識検索装置及び音声認識検索方法
US20120017155A1 (en) * 2010-07-19 2012-01-19 John Lynch Instant delayed gratification presentation-interactive electronic commerce
US8688453B1 (en) * 2011-02-28 2014-04-01 Nuance Communications, Inc. Intent mining via analysis of utterances
JP5790509B2 (ja) * 2012-01-05 2015-10-07 富士通株式会社 画像再生装置、画像再生プログラム、及び画像再生方法
US9172999B2 (en) * 2012-08-08 2015-10-27 Verizon Patent And Licensing Inc. Behavioral keyword identification based on thematic channel viewing
CN104023247B (zh) 2014-05-29 2015-07-29 腾讯科技(深圳)有限公司 获取、推送信息的方法和装置以及信息交互系统
US20190066676A1 (en) * 2016-05-16 2019-02-28 Sony Corporation Information processing apparatus
CN107665710B (zh) * 2016-07-27 2021-02-09 上海博泰悦臻网络技术服务有限公司 移动终端语音数据处理方法及装置
WO2019188269A1 (ja) * 2018-03-27 2019-10-03 ソニー株式会社 情報処理装置、情報処理方法、送信装置、及び送信方法
FR3095563A1 (fr) * 2019-04-26 2020-10-30 Orange Commande d’un service utilisant le traitement d’un flux comprenant des données multimédias

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0916191A (ja) 1995-06-29 1997-01-17 Asahi Chem Ind Co Ltd ナビゲータ用音声認識装置および方法
US6323911B1 (en) * 1995-10-02 2001-11-27 Starsight Telecast, Inc. System and method for using television schedule information
JPH09186943A (ja) 1996-01-08 1997-07-15 Canon Inc データ受信方法とその装置
US6961700B2 (en) * 1996-09-24 2005-11-01 Allvoice Computing Plc Method and apparatus for processing the output of a speech recognition engine
US6131086A (en) * 1997-04-02 2000-10-10 Walker Digital, Llc Method and system for allowing viewers to purchase program products
JPH11110385A (ja) 1997-10-01 1999-04-23 Nippon Hoso Kyokai <Nhk> 言語処理装置および方法
JPH11252533A (ja) 1998-03-05 1999-09-17 Toshiba Corp 情報表示装置
US7536706B1 (en) * 1998-08-24 2009-05-19 Sharp Laboratories Of America, Inc. Information enhanced audio video encoding system
JP3979556B2 (ja) 1998-12-22 2007-09-19 パイオニア株式会社 番組選択装置及び番組選択方法
US6314398B1 (en) 1999-03-01 2001-11-06 Matsushita Electric Industrial Co., Ltd. Apparatus and method using speech understanding for automatic channel selection in interactive television
JP2001022373A (ja) 1999-07-02 2001-01-26 Alpine Electronics Inc 音声認識方法
JP2001229180A (ja) 2000-02-17 2001-08-24 Nippon Telegr & Teleph Corp <Ntt> コンテンツ検索装置
JP4501209B2 (ja) * 2000-03-08 2010-07-14 ソニー株式会社 情報処理装置、情報処理方法およびリモコンのコマンダ
JP2002010207A (ja) 2000-06-26 2002-01-11 Matsushita Electric Ind Co Ltd 放送情報受信装置、放送情報送信装置、放送情報受信方法及び放送情報送信方法
JP2002091477A (ja) 2000-09-14 2002-03-27 Mitsubishi Electric Corp 音声認識システム、音声認識装置、音響モデル管理サーバ、言語モデル管理サーバ、音声認識方法及び音声認識プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002290859A (ja) 2001-03-26 2002-10-04 Sanyo Electric Co Ltd ディジタル放送受信装置
US20020143550A1 (en) * 2001-03-27 2002-10-03 Takashi Nakatsuyama Voice recognition shopping system
JP2002330422A (ja) 2001-04-27 2002-11-15 Sony Corp デジタル放送を用いた商品販売ビジネスの方法、およびデジタル放送受信装置
US6760705B2 (en) * 2001-05-31 2004-07-06 Motorola, Inc. Virtual speech interface system and method of using same
WO2003021943A1 (fr) 2001-08-28 2003-03-13 Matsushita Electric Industrial Co., Ltd. Procede pour recevoir des diffusions
US7324947B2 (en) * 2001-10-03 2008-01-29 Promptu Systems Corporation Global speech user interface
US8261306B2 (en) * 2001-12-11 2012-09-04 Koninklijke Philips Electronics N.V. System for and method of shopping through television
US20060206339A1 (en) * 2005-03-11 2006-09-14 Silvera Marja M System and method for voice-enabled media content selection on mobile devices

Also Published As

Publication number Publication date
WO2004064393A1 (ja) 2004-07-29
AU2003296157A1 (en) 2004-08-10
JPWO2004064393A1 (ja) 2006-05-18
US20060259299A1 (en) 2006-11-16
US7698138B2 (en) 2010-04-13

Similar Documents

Publication Publication Date Title
CN1757229A (zh) 广播接收方法、广播接收系统、记录媒体及程序
CN1145364C (zh) 随广播节目下载计算机软件的系统
CN1179562C (zh) 恢复和显示广播节目等信息的装置
CN1178164C (zh) 信息提取方法和设备,加权方法和图文电视广播接收设备
CN100346286C (zh) 用于改变网络浏览器的布局和功能的方法
CN1433546A (zh) 数据适合化装置、数据适合化方法、存储媒体及程序
CN1156780C (zh) 电子邮件准备装置、终端装置、信息发送系统和程序记录媒体
CN1892880A (zh) 内容提供系统、装置及方法、内容分发服务器及接收终端
CN1624696A (zh) 信息处理设备、方法及其程序、信息处理系统及其方法
CN1345440A (zh) 信息处理设备和处理方法以及信息贮存介质
CN1647073A (zh) 信息搜索系统、信息处理设备和方法、及信息搜索设备和方法
CN1596433A (zh) 信息处理装置、信息处理方法和信息处理系统
CN1767610A (zh) 信息处理装置,信息处理方法及其程序
CN1991728A (zh) 信息处理设备、方法和程序
CN1940910A (zh) 内容提供系统、装置和方法、内容分发服务器和接收终端
CN1950881A (zh) 内容呈现设备、内容呈现方法和内容呈现程序
CN1967695A (zh) 信息处理装置、再现装置、通信方法、再现方法及计算机程序
CN1486416A (zh) 系统、导航方法、介质和信息装置
CN1755663A (zh) 信息处理设备、信息处理方法和程序
CN1748214A (zh) 信息处理装置和方法、及程序
CN1950880A (zh) 信息处理设备、内容标题显示方法和内容标题显示程序
CN1820305A (zh) 内容数据再现设备
CN1816980A (zh) 记录装置、记录方法和程序
CN1545804A (zh) 广播接收方法
CN1437090A (zh) 接口装置、动作控制方法、画面显示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication