Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6959205B2 - Information processing system and information processing method - Google Patents
[go: Go Back, main page]

JP6959205B2 - Information processing system and information processing method - Google Patents

Information processing system and information processing method Download PDF

Info

Publication number
JP6959205B2
JP6959205B2 JP2018175182A JP2018175182A JP6959205B2 JP 6959205 B2 JP6959205 B2 JP 6959205B2 JP 2018175182 A JP2018175182 A JP 2018175182A JP 2018175182 A JP2018175182 A JP 2018175182A JP 6959205 B2 JP6959205 B2 JP 6959205B2
Authority
JP
Japan
Prior art keywords
information processing
information
voice
unit
character information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018175182A
Other languages
Japanese (ja)
Other versions
JP2020046546A (en
Inventor
紘介 和泉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2018175182A priority Critical patent/JP6959205B2/en
Publication of JP2020046546A publication Critical patent/JP2020046546A/en
Application granted granted Critical
Publication of JP6959205B2 publication Critical patent/JP6959205B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、コンテンツに関する処理を行う情報処理システム及び情報処理方法に関する。 The present invention relates to an information processing system and an information processing method for processing contents.

セットトップボックス(Set Top Box;STB)等の映像コンテンツに関する処理を行う情報処理装置を、ユーザの音声によって制御する技術が開発されている(例えば、特許文献1参照)。ユーザの宅内には、スマートスピーカ等の据え置きの集音装置が設けられていることがあり、そのような集音装置を用いて情報処理装置に対する音声を取得できると便利である。 A technique has been developed in which an information processing device that performs processing related to video contents such as a set top box (STB) is controlled by a user's voice (see, for example, Patent Document 1). A stationary sound collecting device such as a smart speaker may be provided in the user's house, and it is convenient to be able to acquire sound to the information processing device using such a sound collecting device.

特表2017−530567号公報Special Table 2017-530567

しかしながら、集音装置及び情報処理装置は別々の装置であるため、集音装置が情報処理装置と連携する機能を有していない場合には、集音装置は情報処理装置へ音声に基づく指示を与えることができない。集音装置に情報処理装置と連携する機能を付与するためには、集音装置を置き換えたり、集音装置の機能をアップデートしたりする必要があるため、大きな手間が掛かる。 However, since the sound collecting device and the information processing device are separate devices, if the sound collecting device does not have a function of linking with the information processing device, the sound collecting device gives an instruction based on voice to the information processing device. Can't give. In order to give the sound collector a function of linking with the information processing device, it is necessary to replace the sound collector or update the function of the sound collector, which requires a great deal of time and effort.

本発明は上述の点に鑑みてなされたものであり、集音装置を用いて情報処理装置を制御するために掛かる手間を削減できる情報処理システム及び情報処理方法を提供することを目的とする。 The present invention has been made in view of the above points, and an object of the present invention is to provide an information processing system and an information processing method that can reduce the time and effort required to control an information processing device using a sound collecting device.

本発明の第1の態様の情報処理システムは、集音装置と、文字情報出力装置と、情報処理装置とを備え、前記集音装置は、周囲からの音声を取得する集音部と、前記集音部が取得した前記音声を音声認識装置へ送信する送信部と、を有し、前記文字情報出力装置は、前記集音装置が送信した前記音声を前記音声認識装置が変換することによって得られた文字を示す文字情報の送信先とする前記情報処理装置を特定する特定部と、前記特定部が特定した前記情報処理装置へ前記文字情報を送信する送信部と、を有し、前記情報処理装置は、前記文字情報を受信する受信部と、前記受信部が受信した前記文字情報に対応する、コンテンツに関する処理を決定する決定部と、前記決定部が決定した前記処理を実行する実行部と、を有する。 The information processing system according to the first aspect of the present invention includes a sound collecting device, a character information output device, and an information processing device. The character information output device has a transmission unit that transmits the sound acquired by the sound collecting unit to the voice recognition device, and the character information output device is obtained by converting the sound transmitted by the sound collecting device by the voice recognition device. The information includes a specific unit that specifies the information processing device as a destination for transmitting character information indicating the character, and a transmission unit that transmits the character information to the information processing device specified by the specific unit. The processing device includes a receiving unit that receives the character information, a determination unit that determines processing related to the content corresponding to the character information received by the receiving unit, and an execution unit that executes the processing determined by the determination unit. And have.

前記情報処理装置の前記決定部は、映像の再生、録画、検索、及び映像に関する情報の出力のうち少なくとも1つの処理を、コンテンツに関する処理として決定してもよい。 The determination unit of the information processing apparatus may determine at least one process of video reproduction, recording, retrieval, and output of information related to the video as a process related to the content.

前記文字情報出力装置は、前記集音装置と前記情報処理装置とを関連付けた情報を記憶する記憶部をさらに有し、前記文字情報出力装置の前記特定部は、前記記憶部において前記音声を取得した前記集音装置に関連付けられた前記情報処理装置を、前記文字情報の送信先として特定してもよい。 The character information output device further has a storage unit that stores information associated with the sound collecting device and the information processing device, and the specific unit of the character information output device acquires the sound in the storage unit. The information processing device associated with the sound collecting device may be specified as a transmission destination of the character information.

前記情報処理装置は、周囲から取得した音声を前記音声認識装置へ送信する第2集音装置として機能し、前記情報処理装置の前記受信部は、前記文字情報出力装置を経由せずに、前記情報処理装置が取得した前記音声を前記音声認識装置が変換することによって得られた文字を示す前記文字情報を受信してもよい。 The information processing device functions as a second sound collecting device that transmits voice acquired from the surroundings to the voice recognition device, and the receiving unit of the information processing device does not go through the character information output device. The character information indicating the character obtained by converting the voice acquired by the information processing device by the voice recognition device may be received.

前記文字情報出力装置の前記送信部は、前記文字が示す単語と、前記単語の種類とを示す前記文字情報を送信してもよい。 The transmission unit of the character information output device may transmit the character information indicating the word indicated by the character and the type of the word.

前記情報処理装置の前記決定部は、前記種類が動作を示す場合に、前記単語に対応するように前記情報処理装置を操作する処理を決定し、前記種類が動作を示さない場合に、前記単語を用いてコンテンツを検索する処理を決定してもよい。 The determination unit of the information processing device determines a process for operating the information processing device so as to correspond to the word when the type indicates an operation, and when the type does not indicate an operation, the word. May be used to determine the process of searching for content.

前記情報処理装置の前記決定部は、前記コンテンツが放送中であるか又は放送予定であるかによって、前記処理を変更してもよい。 The determination unit of the information processing device may change the process depending on whether the content is being broadcast or is scheduled to be broadcast.

前記情報処理装置は、単語同士の関連性を示す情報を記憶する記憶部をさらに有し、前記実行部は、前記文字が示す単語と、前記記憶部において前記単語に関連付けられた単語とを用いて、前記コンテンツを検索してもよい。 The information processing device further has a storage unit that stores information indicating the relationship between words, and the execution unit uses a word indicated by the character and a word associated with the word in the storage unit. You may search for the content.

本発明の第2の態様の情報処理方法は、集音装置と、文字情報出力装置と、情報処理装置とを備えるシステムにおいて、前記集音装置は、周囲からの音声を取得するステップと、前記取得するステップが取得した前記音声を音声認識装置へ送信するステップと、を実行し、前記文字情報出力装置は、前記集音装置が送信した前記音声を前記音声認識装置が変換することによって得られた文字を示す文字情報の送信先とする前記情報処理装置を特定するステップと、前記特定するステップが特定した前記情報処理装置へ前記文字情報を送信するステップと、を実行し、前記情報処理装置は、前記文字情報を受信するステップと、前記受信するステップが受信した前記文字情報に対応する、コンテンツに関する処理を決定するステップと、前記決定するステップが決定した前記処理を実行するステップと、を実行する。 The information processing method according to the second aspect of the present invention is a system including a sound collecting device, a character information output device, and an information processing device. The acquisition step executes the step of transmitting the acquired voice to the voice recognition device, and the character information output device is obtained by converting the voice transmitted by the sound collecting device by the voice recognition device. The step of specifying the information processing device to which the character information indicating the character is transmitted and the step of transmitting the character information to the information processing device specified by the specifying step are executed, and the information processing device is executed. Is a step of receiving the character information, a step of determining a process related to the content corresponding to the received character information by the receiving step, and a step of executing the process determined by the determining step. Run.

本発明によれば、集音装置を用いて情報処理装置を制御するために掛かる手間を削減できるという効果を奏する。 According to the present invention, it is possible to reduce the time and effort required to control the information processing device by using the sound collecting device.

実施形態に係る情報処理システムの模式図である。It is a schematic diagram of the information processing system which concerns on embodiment. 集音装置が音声を取得した場合の処理を示す模式図である。It is a schematic diagram which shows the process when a sound collector acquires a sound. 情報処理装置が音声を取得した場合の処理を示す模式図である。It is a schematic diagram which shows the process when the information processing apparatus acquires voice. 実施形態に係る情報処理システムのブロック図である。It is a block diagram of the information processing system which concerns on embodiment. 実施形態に係る情報処理システムのブロック図である。It is a block diagram of the information processing system which concerns on embodiment. 処理決定部がコンテンツに関する処理を決定する方法を示す模式図である。It is a schematic diagram which shows the method which process decision part determines the process about a content. 処理実行部がコンテンツを検索する方法を示す模式図である。It is a schematic diagram which shows the method of searching the content by the processing execution part. 実施形態に係る情報処理方法のシーケンス図である。It is a sequence diagram of the information processing method which concerns on embodiment. 実施形態に係る情報処理方法のシーケンス図である。It is a sequence diagram of the information processing method which concerns on embodiment.

[情報処理システムSの概要]
図1は、本実施形態に係る情報処理システムSの模式図である。情報処理システムSは、情報処理装置1と、集音装置2と、音声認識装置3と、文字情報出力装置4とを含む。情報処理システムSは、その他のサーバ、端末等の機器を含んでもよい。
[Overview of Information Processing System S]
FIG. 1 is a schematic diagram of an information processing system S according to the present embodiment. The information processing system S includes an information processing device 1, a sound collecting device 2, a voice recognition device 3, and a character information output device 4. The information processing system S may include other devices such as servers and terminals.

情報処理装置1は、映像等のコンテンツに関する処理を行うコンピュータである。情報処理装置1は、コンテンツ又はコンテンツに関する情報を表示可能な、液晶ディスプレイ等の表示部に接続されている。また、情報処理装置1は、周囲の音声を取得可能なマイクロフォン等の集音部を有している。さらに情報処理装置1は、音声認識装置3又は文字情報出力装置4から受信した文字情報に基づいて、コンテンツに関する処理を行う。コンテンツに関する処理は、例えば映像の再生、録画、検索、又は映像に関する情報の出力である。情報処理装置1は、インターネット、ローカルエリアネットワーク等のネットワークNを介して、有線又は無線で音声認識装置3及び文字情報出力装置4と通信する。 The information processing device 1 is a computer that performs processing related to contents such as video. The information processing device 1 is connected to a display unit such as a liquid crystal display capable of displaying content or information related to the content. Further, the information processing device 1 has a sound collecting unit such as a microphone capable of acquiring surrounding sounds. Further, the information processing device 1 performs processing related to the content based on the character information received from the voice recognition device 3 or the character information output device 4. The processing related to the content is, for example, playback, recording, searching, or output of information related to the video. The information processing device 1 communicates with the voice recognition device 3 and the character information output device 4 by wire or wirelessly via a network N such as the Internet or a local area network.

集音装置2は、周囲の音声を取得可能なマイクロフォン等の集音部を有する集音装置である。集音装置2は、ネットワークNを介して、有線又は無線で音声認識装置3と通信する。 The sound collecting device 2 is a sound collecting device having a sound collecting unit such as a microphone capable of acquiring surrounding sounds. The sound collecting device 2 communicates with the voice recognition device 3 by wire or wirelessly via the network N.

音声認識装置3は、情報処理装置1又は集音装置2が取得した音声を文字に変換する処理を行うコンピュータである。音声認識装置3は、音声を文字に変換することによって得られた文字を示す文字情報を、情報処理装置1又は文字情報出力装置4へ送信する。文字情報は、音声を変換することにより得られた文字が示す単語と、単語の種類(品詞等)とを含む。音声認識装置3は、ネットワークNを介して、有線又は無線で情報処理装置1、集音装置2及び文字情報出力装置4と通信する。 The voice recognition device 3 is a computer that performs a process of converting the voice acquired by the information processing device 1 or the sound collecting device 2 into characters. The voice recognition device 3 transmits character information indicating the characters obtained by converting the voice into characters to the information processing device 1 or the character information output device 4. The character information includes a word indicated by a character obtained by converting a voice and a word type (part of speech, etc.). The voice recognition device 3 communicates with the information processing device 1, the sound collecting device 2, and the character information output device 4 by wire or wirelessly via the network N.

文字情報出力装置4は、音声認識装置3が音声を変換することによって得られた文字を示す文字情報を、情報処理装置1へ送信するコンピュータである。文字情報出力装置4は、ネットワークNを介して、有線又は無線で情報処理装置1及び音声認識装置3と通信する。 The character information output device 4 is a computer that transmits character information indicating characters obtained by the voice recognition device 3 converting the voice to the information processing device 1. The character information output device 4 communicates with the information processing device 1 and the voice recognition device 3 by wire or wirelessly via the network N.

情報処理システムSが行う情報処理方法の概略を、図2、図3を用いて以下に説明する。情報処理システムSは、集音装置2及び情報処理装置1のどちらが音声を取得したかによって、図2及び図3に示す異なる処理を行う。 The outline of the information processing method performed by the information processing system S will be described below with reference to FIGS. 2 and 3. The information processing system S performs different processes shown in FIGS. 2 and 3 depending on which of the sound collecting device 2 and the information processing device 1 acquires the sound.

図2は、集音装置2が音声を取得した場合の処理を示す模式図である。第1集音装置としての集音装置2は、ユーザの音声を取得すると、取得した音声を音声認識装置3へ送信する。音声認識装置3は、集音装置2から受信した音声を文字に変換し、得られた文字を示す文字情報を文字情報出力装置4へ送信する。 FIG. 2 is a schematic diagram showing processing when the sound collecting device 2 acquires sound. When the sound collecting device 2 as the first sound collecting device acquires the user's voice, the sound collecting device 2 transmits the acquired voice to the voice recognition device 3. The voice recognition device 3 converts the voice received from the sound collecting device 2 into characters, and transmits the character information indicating the obtained characters to the character information output device 4.

文字情報出力装置4は、音声認識装置3から文字情報を受信し、受信した文字情報の送信先とする情報処理装置1をユーザ情報に基づいて特定する。ユーザ情報は、ユーザごとに送信先を特定するための情報であり、文字情報出力装置4に予め記憶されている。そして文字情報出力装置4は、特定した情報処理装置1へ文字情報を送信する。 The character information output device 4 receives character information from the voice recognition device 3 and specifies an information processing device 1 as a transmission destination of the received character information based on the user information. The user information is information for specifying a transmission destination for each user, and is stored in advance in the character information output device 4. Then, the character information output device 4 transmits the character information to the specified information processing device 1.

情報処理装置1は、文字情報出力装置4から文字情報を受信し、受信した文字情報に対応するコンテンツに関する処理を行う。このように第1集音装置としての集音装置2が音声を取得した場合に、音声認識装置3は、文字情報出力装置4を介してユーザ情報に基づいて特定された情報処理装置1へ文字情報を送信する。これにより、情報処理システムSは、集音装置2と情報処理装置1とが直接連携されていない場合であっても、集音装置2が取得した音声に基づいて生成された文字情報を情報処理装置1へ送信し、コンテンツに関する処理を行わせることができる。 The information processing device 1 receives character information from the character information output device 4, and performs processing related to the content corresponding to the received character information. When the sound collecting device 2 as the first sound collecting device acquires the voice in this way, the voice recognition device 3 sends the character to the information processing device 1 specified based on the user information via the character information output device 4. Send information. As a result, the information processing system S processes character information generated based on the sound acquired by the sound collecting device 2 even when the sound collecting device 2 and the information processing device 1 are not directly linked with each other. It can be transmitted to the device 1 to perform processing related to the content.

図3は、情報処理装置1が音声を取得した場合の処理を示す模式図である。第2集音装置としての情報処理装置1は、ユーザの音声を取得すると、取得した音声を音声認識装置3へ送信する。音声認識装置3は、集音装置2から受信した音声を文字に変換し、得られた文字を示す文字情報を情報処理装置1へ送信する。 FIG. 3 is a schematic diagram showing processing when the information processing device 1 acquires voice. When the information processing device 1 as the second sound collecting device acquires the user's voice, the information processing device 1 transmits the acquired voice to the voice recognition device 3. The voice recognition device 3 converts the voice received from the sound collecting device 2 into characters, and transmits character information indicating the obtained characters to the information processing device 1.

情報処理装置1は、音声認識装置3から文字情報を受信し、受信した文字情報に対応するコンテンツに関する処理を行う。このように第2集音装置としての情報処理装置1が音声を取得した場合に、音声認識装置3は、音声の送信元である情報処理装置1へ文字情報を直接送信する。これにより、情報処理システムSは、ユーザが音声を発してから情報処理装置1がコンテンツに関する処理を行うまでの待ち時間を短縮できる。 The information processing device 1 receives character information from the voice recognition device 3 and performs processing related to the content corresponding to the received character information. When the information processing device 1 as the second sound collecting device acquires the voice in this way, the voice recognition device 3 directly transmits the character information to the information processing device 1 which is the source of the voice. As a result, the information processing system S can shorten the waiting time from when the user emits a voice until the information processing device 1 performs processing related to the content.

[情報処理システムSの構成]
図4、図5は、本実施形態に係る情報処理システムSのブロック図である。図4、図5において、矢印は主なデータの流れを示しており、図4、図5に示したもの以外のデータの流れがあってよい。図4、図5において、各ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図4、図5に示すブロックは単一の装置内に実装されてよく、あるいは複数の装置内に分かれて実装されてよい。ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてよい。
[Configuration of information processing system S]
4 and 5 are block diagrams of the information processing system S according to the present embodiment. In FIGS. 4 and 5, the arrows indicate the main data flows, and there may be data flows other than those shown in FIGS. 4 and 5. In FIGS. 4 and 5, each block shows not a hardware (device) unit configuration but a functional unit configuration. Therefore, the blocks shown in FIGS. 4 and 5 may be mounted in a single device, or may be mounted separately in a plurality of devices. Data can be exchanged between blocks via any means such as a data bus, a network, or a portable storage medium.

図4に示すように、集音装置2は、制御部21と、記憶部22と、集音部23とを有する。集音部23は、周囲の音声を取得するマイクロフォンを含む。集音部23は、複数のマイクロフォンを含んでもよい。集音部23は、取得した音声を示す信号を、制御部21に入力する。 As shown in FIG. 4, the sound collecting device 2 includes a control unit 21, a storage unit 22, and a sound collecting unit 23. The sound collecting unit 23 includes a microphone that acquires ambient sound. The sound collecting unit 23 may include a plurality of microphones. The sound collecting unit 23 inputs a signal indicating the acquired voice to the control unit 21.

記憶部22は、ROM(Read Only Memory)、RAM(Random Access Memory)、ハードディスクドライブ等を含む記憶媒体である。記憶部22は、制御部21が実行するプログラムを予め記憶している。 The storage unit 22 is a storage medium including a ROM (Read Only Memory), a RAM (Random Access Memory), a hard disk drive, and the like. The storage unit 22 stores in advance the program executed by the control unit 21.

制御部21は、例えばCPU(Central Processing Unit)等のプロセッサであり、記憶部22に記憶されたプログラムを実行することにより、音声送信部211として機能する。制御部21の機能の少なくとも一部は、電気回路によって実行されてもよい。また、制御部21の機能の少なくとも一部は、ネットワーク経由で実行されるプログラムによって実行されてもよい。 The control unit 21 is, for example, a processor such as a CPU (Central Processing Unit), and functions as a voice transmission unit 211 by executing a program stored in the storage unit 22. At least some of the functions of the control unit 21 may be performed by an electric circuit. Further, at least a part of the functions of the control unit 21 may be executed by a program executed via the network.

図4に示すように、情報処理装置1は、制御部11と、記憶部12と、集音部13と、表示部14とを有する。制御部11は、音声送信部111と、文字情報受信部112と、処理決定部113と、処理実行部114とを有する。記憶部12は、関連情報記憶部121と、映像記憶部122とを有する。 As shown in FIG. 4, the information processing device 1 includes a control unit 11, a storage unit 12, a sound collecting unit 13, and a display unit 14. The control unit 11 includes a voice transmission unit 111, a character information reception unit 112, a processing determination unit 113, and a processing execution unit 114. The storage unit 12 has a related information storage unit 121 and a video storage unit 122.

表示部14は、各種情報を表示するための、液晶ディスプレイ等の表示装置を含む。表示部14は、制御部11が出力した信号に従って情報を表示する。表示部14は、コネクタ等を介して情報処理装置1の外部に接続されてもよい。この場合に、表示部14は、テレビジョン受像機であってもよい。集音部13は、周囲の音声を取得するマイクロフォンを含む。集音部13は、複数のマイクロフォンを含んでもよい。集音部13は、取得した音声を示す信号を、制御部11に入力する。集音部13は、コネクタ等を介して情報処理装置1の外部に接続されてもよい。 The display unit 14 includes a display device such as a liquid crystal display for displaying various information. The display unit 14 displays information according to the signal output by the control unit 11. The display unit 14 may be connected to the outside of the information processing device 1 via a connector or the like. In this case, the display unit 14 may be a television receiver. The sound collecting unit 13 includes a microphone that acquires ambient sound. The sound collecting unit 13 may include a plurality of microphones. The sound collecting unit 13 inputs a signal indicating the acquired voice to the control unit 11. The sound collecting unit 13 may be connected to the outside of the information processing device 1 via a connector or the like.

記憶部12は、ROM、RAM、ハードディスクドライブ等を含む記憶媒体である。記憶部12は、制御部11が実行するプログラムを予め記憶している。関連情報記憶部121は、単語同士の関連性を示す関連情報(例えば類義語辞書)を予め記憶している。映像記憶部122は、録画した映像を記憶する。関連情報記憶部121及び映像記憶部122は、それぞれ記憶部12上の記憶領域であってもよく、あるいは記憶部12上で構成されたデータベースであってもよい。 The storage unit 12 is a storage medium including a ROM, a RAM, a hard disk drive, and the like. The storage unit 12 stores in advance the program executed by the control unit 11. The related information storage unit 121 stores in advance related information (for example, a synonym dictionary) indicating the relationship between words. The video storage unit 122 stores the recorded video. The related information storage unit 121 and the video storage unit 122 may be storage areas on the storage unit 12, respectively, or may be a database configured on the storage unit 12.

制御部11は、例えばCPU等のプロセッサであり、記憶部12に記憶されたプログラムを実行することにより、音声送信部111、文字情報受信部112、処理決定部113及び処理実行部114として機能する。制御部11の機能の少なくとも一部は、電気回路によって実行されてもよい。また、制御部11の機能の少なくとも一部は、ネットワーク経由で実行されるプログラムによって実行されてもよい。 The control unit 11 is, for example, a processor such as a CPU, and functions as a voice transmission unit 111, a character information reception unit 112, a processing determination unit 113, and a processing execution unit 114 by executing a program stored in the storage unit 12. .. At least a part of the function of the control unit 11 may be executed by an electric circuit. Further, at least a part of the functions of the control unit 11 may be executed by a program executed via the network.

情報処理装置1は、ユーザによる操作を受け付けるリモートコントローラ(リモコン)を備えてもよい。リモートコントローラは、赤外線や無線信号を用いて、ユーザによる操作を制御部11に入力する。この場合に、集音部13は、リモートコントローラ上に設けられてもよい。リモートコントローラ上の集音部13は、赤外線や無線信号を用いて、取得した音声を示す信号を制御部11に入力する。 The information processing device 1 may include a remote controller (remote controller) that accepts operations by the user. The remote controller inputs an operation by the user to the control unit 11 using infrared rays or wireless signals. In this case, the sound collecting unit 13 may be provided on the remote controller. The sound collecting unit 13 on the remote controller inputs a signal indicating the acquired voice to the control unit 11 using infrared rays or a wireless signal.

図5に示すように、音声認識装置3は、制御部31と、記憶部32とを有する。制御部31は、音声受信部311と、音声認識部312と、文字情報送信部313とを有する。記憶部32は、ROM、RAM、ハードディスクドライブ等を含む記憶媒体である。記憶部32は、制御部31が実行するプログラムを予め記憶している。 As shown in FIG. 5, the voice recognition device 3 has a control unit 31 and a storage unit 32. The control unit 31 includes a voice receiving unit 311, a voice recognition unit 312, and a character information transmitting unit 313. The storage unit 32 is a storage medium including a ROM, a RAM, a hard disk drive, and the like. The storage unit 32 stores in advance the program executed by the control unit 31.

制御部31は、例えばCPU等のプロセッサであり、記憶部32に記憶されたプログラムを実行することにより、音声受信部311、音声認識部312及び文字情報送信部313として機能する。制御部31の機能の少なくとも一部は、電気回路によって実行されてもよい。また、制御部31の機能の少なくとも一部は、ネットワーク経由で実行されるプログラムによって実行されてもよい。 The control unit 31 is, for example, a processor such as a CPU, and functions as a voice receiving unit 311, a voice recognition unit 312, and a character information transmitting unit 313 by executing a program stored in the storage unit 32. At least a part of the function of the control unit 31 may be executed by an electric circuit. Further, at least a part of the functions of the control unit 31 may be executed by a program executed via the network.

図5に示すように、文字情報出力装置4は、制御部41と、記憶部42とを有する。制御部41は、文字情報受信部411と、送信先特定部412と、文字情報送信部413とを有する。記憶部42は、ユーザ情報記憶部421を有する。 As shown in FIG. 5, the character information output device 4 has a control unit 41 and a storage unit 42. The control unit 41 includes a character information receiving unit 411, a transmission destination specifying unit 412, and a character information transmitting unit 413. The storage unit 42 has a user information storage unit 421.

記憶部42は、ROM、RAM、ハードディスクドライブ等を含む記憶媒体である。記憶部42は、制御部41が実行するプログラムを予め記憶している。ユーザ情報記憶部421は、ユーザが有する集音装置2及び情報処理装置1を関連付けたユーザ情報を予め記憶している。ユーザ情報記憶部421は、記憶部42上の記憶領域であってもよく、あるいは記憶部42上で構成されたデータベースであってもよい。 The storage unit 42 is a storage medium including a ROM, a RAM, a hard disk drive, and the like. The storage unit 42 stores in advance the program executed by the control unit 41. The user information storage unit 421 stores in advance user information associated with the sound collecting device 2 and the information processing device 1 owned by the user. The user information storage unit 421 may be a storage area on the storage unit 42, or may be a database configured on the storage unit 42.

制御部41は、例えばCPU等のプロセッサであり、記憶部42に記憶されたプログラムを実行することにより、文字情報受信部411、送信先特定部412及び文字情報送信部413として機能する。制御部41の機能の少なくとも一部は、電気回路によって実行されてもよい。また、制御部41の機能の少なくとも一部は、ネットワーク経由で実行されるプログラムによって実行されてもよい。 The control unit 41 is, for example, a processor such as a CPU, and functions as a character information receiving unit 411, a transmission destination specifying unit 412, and a character information transmitting unit 413 by executing a program stored in the storage unit 42. At least a part of the function of the control unit 41 may be performed by an electric circuit. Further, at least a part of the functions of the control unit 41 may be executed by a program executed via the network.

本実施形態に係る情報処理システムSは、図4、図5に示す具体的な構成に限定されない。例えば音声認識装置3及び文字情報出力装置4は、一体化されて1つの装置として構成されてもよい。 The information processing system S according to the present embodiment is not limited to the specific configuration shown in FIGS. 4 and 5. For example, the voice recognition device 3 and the character information output device 4 may be integrated into one device.

[情報処理方法の説明]
情報処理システムSが実行する情報処理方法を以下に説明する。まずユーザは、情報処理装置1に対する操作を示す音声を発する。操作を示す音声は、例えば「A田B子の出演番組を録画して」のような動作を示す単語を含む文章、又は「A田B子」のような動作を示さない単語である。
[Explanation of information processing method]
The information processing method executed by the information processing system S will be described below. First, the user emits a voice indicating an operation on the information processing device 1. The voice indicating the operation is, for example, a sentence including a word indicating an action such as "record a program in which A field B child appears" or a word not showing an action such as "A field B child".

情報処理装置1の集音部13又は集音装置2の集音部23は、ユーザが発した音声を取得する。情報処理装置1の音声送信部111は、集音部13が取得した音声を、ネットワークNを介して音声認識装置3へ送信する。このとき音声送信部111は、情報処理装置1の識別情報を、音声とともに音声認識装置3へ送信する。情報処理装置1の識別情報は、例えば情報処理装置1に割り振られたIDや、情報処理装置1のネットワークアドレス等、情報処理装置1を特定可能な情報である。 The sound collecting unit 13 of the information processing device 1 or the sound collecting unit 23 of the sound collecting device 2 acquires the sound emitted by the user. The voice transmission unit 111 of the information processing device 1 transmits the voice acquired by the sound collection unit 13 to the voice recognition device 3 via the network N. At this time, the voice transmission unit 111 transmits the identification information of the information processing device 1 to the voice recognition device 3 together with the voice. The identification information of the information processing device 1 is information that can identify the information processing device 1, such as an ID assigned to the information processing device 1 and a network address of the information processing device 1.

集音装置2の音声送信部211は、集音部23が取得した音声を、ネットワークNを介して音声認識装置3へ送信する。このとき音声送信部211は、集音装置2の識別情報を、音声とともに音声認識装置3へ送信する。集音装置2の識別情報は、例えば集音装置2に割り振られたIDや、集音装置2のネットワークアドレス等、集音装置2を特定可能な情報である。 The voice transmitting unit 211 of the sound collecting device 2 transmits the voice acquired by the sound collecting unit 23 to the voice recognition device 3 via the network N. At this time, the voice transmission unit 211 transmits the identification information of the sound collecting device 2 to the voice recognition device 3 together with the voice. The identification information of the sound collecting device 2 is information that can identify the sound collecting device 2, such as an ID assigned to the sound collecting device 2 and a network address of the sound collecting device 2.

音声認識装置3において、音声受信部311は、情報処理装置1又は集音装置2が送信した音声を受信する。このとき、音声受信部311は、音声の送信元である情報処理装置1又は集音装置2の識別情報を受信する。 In the voice recognition device 3, the voice receiving unit 311 receives the voice transmitted by the information processing device 1 or the sound collecting device 2. At this time, the voice receiving unit 311 receives the identification information of the information processing device 1 or the sound collecting device 2 which is the source of the voice.

音声認識部312は、音声受信部311が受信した音声を文字に変換する。音声認識部312は、音声を文字に変換するために、既知の音声認識技術を用いることができる。このとき音声認識部312は、音声を変換することにより得られた文字が示す単語と、単語の種類(品詞等)とを特定する。音声認識部312は、文字が示す単語及びその種類を特定するために、既知の形態素解析技術を用いることができる。 The voice recognition unit 312 converts the voice received by the voice reception unit 311 into characters. The voice recognition unit 312 can use known voice recognition technology to convert voice into characters. At this time, the voice recognition unit 312 specifies the word indicated by the character obtained by converting the voice and the type of the word (part of speech, etc.). The voice recognition unit 312 can use a known morphological analysis technique to identify the word indicated by the character and its type.

音声受信部311が情報処理装置1から音声を受信していた場合に、文字情報送信部313は、音声認識部312が音声を変換することによって得られた文字が示す単語と、単語の種類とを示す文字情報を、情報処理装置1の識別情報を用いて情報処理装置1へ送信する。このように、情報処理装置1が音声を取得した場合には、音声認識装置3は送信元の情報処理装置1へ直接文字情報を返すことができるため、文字情報出力装置4が行う処理は省略される。 When the voice receiving unit 311 receives the voice from the information processing device 1, the character information transmitting unit 313 describes the word indicated by the character obtained by the voice recognition unit 312 converting the voice, and the type of the word. The character information indicating the above is transmitted to the information processing device 1 using the identification information of the information processing device 1. In this way, when the information processing device 1 acquires the voice, the voice recognition device 3 can directly return the character information to the information processing device 1 of the transmission source, so that the processing performed by the character information output device 4 is omitted. Will be done.

音声受信部311が集音装置2から音声を受信していた場合に、文字情報送信部313は、音声認識部312が音声を変換することによって得られた文字が示す単語と、単語の種類とを示す文字情報を、音声を取得した集音装置2の識別情報とともに文字情報出力装置4へ送信する。このように、集音装置2が音声を取得した場合には、音声認識装置3は文字情報の送信先とする情報処理装置1を特定できないため、文字情報出力装置4を介して情報処理装置1へ文字情報を送信する。 When the voice receiving unit 311 receives the voice from the sound collecting device 2, the character information transmitting unit 313 determines the word indicated by the character obtained by the voice recognition unit 312 converting the voice, and the type of the word. The character information indicating the above is transmitted to the character information output device 4 together with the identification information of the sound collecting device 2 that has acquired the voice. In this way, when the sound collecting device 2 acquires the voice, the voice recognition device 3 cannot specify the information processing device 1 as the transmission destination of the character information. Therefore, the information processing device 1 is passed through the character information output device 4. Send textual information to.

文字情報出力装置4において、文字情報受信部411は、音声認識装置3が送信した文字情報と、音声を取得した集音装置2の識別情報とを受信する。送信先特定部412は、文字情報受信部411が受信した集音装置2の識別情報と、ユーザ情報記憶部421に予め記憶されたユーザ情報とに基づいて、文字情報の送信先とする情報処理装置1を特定する。 In the character information output device 4, the character information receiving unit 411 receives the character information transmitted by the voice recognition device 3 and the identification information of the sound collecting device 2 that has acquired the voice. The destination specifying unit 412 processes information as a destination of character information based on the identification information of the sound collecting device 2 received by the character information receiving unit 411 and the user information stored in advance in the user information storage unit 421. Identify device 1.

具体的には、ユーザ情報記憶部421は、ユーザごとに、集音装置2の識別情報と、情報処理装置1の識別情報とを関連付けたユーザ情報を予め記憶している。例えば文字情報出力装置4は、所定のWebサイトで、ユーザが所有している集音装置2の識別情報と、情報処理装置1の識別情報との入力を受け付けることによって、ユーザ情報記憶部421にユーザ情報を登録する。 Specifically, the user information storage unit 421 stores in advance user information in which the identification information of the sound collecting device 2 and the identification information of the information processing device 1 are associated with each user. For example, the character information output device 4 receives input of the identification information of the sound collecting device 2 owned by the user and the identification information of the information processing device 1 on a predetermined website, thereby causing the user information storage unit 421 to receive input. Register user information.

送信先特定部412は、文字情報受信部411が受信した集音装置2の識別情報に関連付けられたユーザ情報をユーザ情報記憶部421から取得し、取得したユーザ情報が示す情報処理装置1の識別情報を送付先として特定する。 The destination specifying unit 412 acquires the user information associated with the identification information of the sound collecting device 2 received by the character information receiving unit 411 from the user information storage unit 421, and identifies the information processing device 1 indicated by the acquired user information. Specify the information as the destination.

別の方法として、送信先特定部412は、文字情報出力装置4と通信可能なユーザ管理サーバから、ネットワークNを介してユーザ情報を取得してもよい。ユーザ管理サーバは、例えば通信事業者が運営するコンピュータであり、ユーザごとに、集音装置2の識別情報と、情報処理装置1の識別情報とを関連付けたユーザ情報を予め記憶している。送信先特定部412は、文字情報受信部411が受信した集音装置2の識別情報を示す問い合わせをユーザ管理サーバに送信し、問い合わせに応じたユーザ管理サーバから集音装置2の識別情報に関連付けられたユーザ情報を受信し、受信したユーザ情報が示す情報処理装置1の識別情報を送付先として特定する。また、文字情報出力装置4とユーザ管理サーバとは、一体化されて1つの装置として構成されてもよい。 As another method, the transmission destination specifying unit 412 may acquire the user information from the user management server capable of communicating with the character information output device 4 via the network N. The user management server is, for example, a computer operated by a telecommunications carrier, and stores in advance user information in which the identification information of the sound collecting device 2 and the identification information of the information processing device 1 are associated with each user. The destination identification unit 412 transmits an inquiry indicating the identification information of the sound collecting device 2 received by the character information receiving unit 411 to the user management server, and associates the user management server in response to the inquiry with the identification information of the sound collecting device 2. The received user information is received, and the identification information of the information processing device 1 indicated by the received user information is specified as a destination. Further, the character information output device 4 and the user management server may be integrated and configured as one device.

文字情報送信部413は、文字情報受信部411が受信した文字情報を、送信先特定部412が特定した情報処理装置1の識別情報を用いて情報処理装置1へ送信する。このように本実施形態に係る情報処理システムSでは、文字情報出力装置4が集音装置2と情報処理装置1とを関連付けたユーザ情報を管理しているため、音声認識装置3にユーザ情報を管理する機能を追加する必要がなく、既存の音声認識装置3を本実施形態に係る情報処理システムSに流用できる。 The character information transmission unit 413 transmits the character information received by the character information reception unit 411 to the information processing device 1 using the identification information of the information processing device 1 specified by the transmission destination identification unit 412. As described above, in the information processing system S according to the present embodiment, since the character information output device 4 manages the user information associated with the sound collecting device 2 and the information processing device 1, the user information is transmitted to the voice recognition device 3. It is not necessary to add a management function, and the existing voice recognition device 3 can be diverted to the information processing system S according to the present embodiment.

情報処理装置1において、文字情報受信部112は、音声認識装置3又は文字情報出力装置4が送信した文字情報を受信する。処理決定部113は、文字情報受信部112が受信した文字情報に基づいて、コンテンツに関する処理(例えば映像の再生、録画、検索、又は映像に関する情報の出力)を決定する。処理決定部113がコンテンツに関する処理を決定する方法を、図6を用いて説明する。 In the information processing device 1, the character information receiving unit 112 receives the character information transmitted by the voice recognition device 3 or the character information output device 4. The processing determination unit 113 determines processing related to the content (for example, reproduction, recording, search, or output of information related to the video) based on the character information received by the character information receiving unit 112. A method of determining the processing related to the content by the processing determination unit 113 will be described with reference to FIG.

図6は、処理決定部113がコンテンツに関する処理を決定する方法を示す模式図である。処理決定部113は、文字情報受信部112が受信した文字情報が示す、音声を変換することによって得られた文字が示す単語と、単語の種類とを取得する。文字情報が複数の単語を示す場合に、処理決定部113は、各単語の種類を取得する。 FIG. 6 is a schematic diagram showing a method in which the processing determination unit 113 determines the processing related to the content. The processing determination unit 113 acquires the word indicated by the character obtained by converting the voice, which is indicated by the character information received by the character information receiving unit 112, and the type of the word. When the character information indicates a plurality of words, the processing determination unit 113 acquires the type of each word.

処理決定部113は、取得したいずれかの単語の種類が動作を示す場合に、該単語に対応するように情報処理装置1を操作する処理を決定する。ここで動作を示す単語の種類は、「録画して」、「見たい」、「調べて」等の動詞と、「録画」、「再生」、「検索」等の動作を表す名詞とを含む。 When any of the acquired word types indicates an operation, the process determination unit 113 determines the process of operating the information processing device 1 so as to correspond to the word. The types of words that indicate actions here include verbs such as "record", "want to see", and "search", and nouns that represent actions such as "record", "play", and "search". ..

例えば「録画して」及び「録画」の単語は、情報処理装置1に映像を録画させる処理に対応する。例えば「見たい」及び「再生」の単語は、情報処理装置1に映像を再生させる処理に対応する。例えば「調べて」及び「検索」の単語は、情報処理装置1に映像又は映像に関する情報を検索させる処理に対応する。文字情報が示す単語と、情報処理装置1を操作する処理との間の関係は、予め情報処理装置1に設定される。 For example, the words "record" and "record" correspond to a process of causing the information processing device 1 to record a video. For example, the words "want to see" and "playback" correspond to a process of causing the information processing device 1 to play back an image. For example, the words "search" and "search" correspond to a process of causing the information processing device 1 to search for a video or information related to the video. The relationship between the word indicated by the character information and the process of operating the information processing device 1 is set in the information processing device 1 in advance.

図6の上の例では、処理決定部113は、文字情報が示す単語に合致する録画可能な複数のコンテンツを示す画面Aを表示部14に表示する処理を決定している。処理決定部113は、文字情報が示す単語に合致する録画可能なコンテンツが1つである場合に、画面Aを表示せずに該コンテンツを録画する処理を決定してもよい。 In the upper example of FIG. 6, the process determination unit 113 determines the process of displaying the screen A showing a plurality of recordable contents matching the word indicated by the character information on the display unit 14. When there is one recordable content that matches the word indicated by the character information, the process determination unit 113 may determine the process of recording the content without displaying the screen A.

さらに表示部14が画面Aを表示している状態でユーザが追加の音声を発した場合に、処理決定部113は、追加の音声について文字情報受信部112が受信した文字情報と、表示中の画面Aとに基づいて、コンテンツに関する処理を決定してもよい。例えば文字情報受信部112が受信した文字情報が「1番」を示す場合に、処理決定部113は、画面Aが含む複数のコンテンツのうち1番が割り振られたコンテンツを録画する処理を決定する。 Further, when the user emits an additional voice while the display unit 14 is displaying the screen A, the processing determination unit 113 displays the character information received by the character information receiving unit 112 for the additional voice and the character information being displayed. Processing related to the content may be determined based on the screen A. For example, when the character information received by the character information receiving unit 112 indicates "No. 1", the processing determination unit 113 determines the process of recording the content to which the first of the plurality of contents included in the screen A is assigned. ..

処理決定部113は、文字情報が示す単語に合致するコンテンツが、放送中であるか、又は放送予定であるかによって、異なる処理を決定してもよい。例えば処理決定部113は、文字情報が示す単語に合致するコンテンツが放送中である場合に、該コンテンツを再生(視聴)する処理を決定する。処理決定部113は、文字情報が示す単語に合致するコンテンツが放送予定である場合に、該コンテンツを録画又は再生を予約する処理を決定する。これにより処理決定部113は、コンテンツが放送中か放送予定かによって、適切な処理を自動的に決定できる。 The processing determination unit 113 may determine different processing depending on whether the content matching the word indicated by the character information is being broadcast or is scheduled to be broadcast. For example, the processing determination unit 113 determines a process for reproducing (viewing) the content when the content matching the word indicated by the character information is being broadcast. When the content matching the word indicated by the character information is scheduled to be broadcast, the process determination unit 113 determines the process of reserving the recording or reproduction of the content. As a result, the process determination unit 113 can automatically determine an appropriate process depending on whether the content is being broadcast or scheduled to be broadcast.

処理決定部113は、取得した単語の種類が動作を示さない場合に、インターネットのWebサイト、テレビジョン放送、映像配信サービス、映像記憶部122に記憶されている映像等、複数の情報提供者を横断してコンテンツを検索する処理を決定する。図6の下の例では、処理決定部113は、単語を用いて検索した検索結果を示す画面Bを表示部14に表示する処理を決定している。 When the acquired word type does not show any operation, the processing determination unit 113 may provide a plurality of information providers such as an Internet website, television broadcasting, a video distribution service, and a video stored in the video storage unit 122. Determines the process of searching content across. In the example below FIG. 6, the process determination unit 113 determines the process of displaying the screen B showing the search result searched by using the word on the display unit 14.

処理実行部114は、処理決定部113が決定した、コンテンツに関する処理を実行する。具体的には、処理実行部114は、処理決定部113が映像の再生を決定した場合に、テレビジョン放送、映像配信サービス又は映像記憶部122から取得した映像を表示部14上で再生する。 The process execution unit 114 executes the process related to the content determined by the process determination unit 113. Specifically, when the processing determination unit 113 decides to reproduce the video, the processing execution unit 114 reproduces the video acquired from the television broadcast, the video distribution service, or the video storage unit 122 on the display unit 14.

また、処理実行部114は、処理決定部113が映像の録画を決定した場合に、テレビジョン放送又は映像配信サービスから取得した映像を映像記憶部122に記憶させる。また、処理実行部114は、処理決定部113が映像に関連する情報の出力を決定した場合に、映像の出演者の情報や、映像に関連付けられたWebサイトに関する情報を、ネットワークNを介して取得し、表示部14上に表示する。 Further, the processing execution unit 114 stores the video acquired from the television broadcasting or the video distribution service in the video storage unit 122 when the processing determination unit 113 decides to record the video. Further, when the processing determination unit 113 determines to output information related to the video, the processing execution unit 114 transmits information on the performers of the video and information on the website associated with the video via the network N. It is acquired and displayed on the display unit 14.

また、処理実行部114は、処理決定部113がコンテンツの検索を決定した場合に、テレビジョン放送で放送中又は放送予定の映像、映像配信サービスで配信されている映像、及び映像記憶部122に記憶されている映像の中から、コンテンツを検索する。処理実行部114は、コンテンツを検索する処理を行う際に、ユーザが発した音声から変換された文字が示す単語に、該単語に関連する単語を追加して(これをクエリ拡張という)、検索をする。 Further, when the processing determination unit 113 determines the content search, the processing execution unit 114 informs the video being broadcast or scheduled to be broadcast on the television broadcast, the video distributed by the video distribution service, and the video storage unit 122. Search for content from the stored video. The process execution unit 114 adds a word related to the word to the word indicated by the character converted from the voice uttered by the user when performing the process of searching the content (this is called query extension), and searches. do.

図7(a)、図7(b)は、処理実行部114がコンテンツを検索する方法を示す模式図である。図7(a)では、処理実行部114は、類義語に基づいてクエリ拡張をする。情報処理装置1の関連情報記憶部121には、単語同士の関連性を示す関連情報として、類義語辞書が予め記憶されている。類義語辞書は、互いに類似した意味を有する単語同士を関連付けた情報である。 7 (a) and 7 (b) are schematic views showing a method in which the processing execution unit 114 searches for content. In FIG. 7A, the processing execution unit 114 extends the query based on synonyms. A synonym dictionary is stored in advance in the related information storage unit 121 of the information processing device 1 as related information indicating the relationship between words. A synonym dictionary is information that associates words having similar meanings with each other.

処理実行部114は、検索をする前に、関連情報記憶部121において、ユーザが発した音声から変換された文字が示す単語に関連付けられた類義語を取得する。そして処理実行部114は、ユーザが発した音声から変換された文字が示す単語と、該単語に関連付けられた類義語とを用いて、インターネットのWebサイト、テレビジョン放送、映像配信サービス、映像記憶部122に記憶されている映像等のコンテンツを検索する。 Before the search is performed, the processing execution unit 114 acquires a synonym associated with the word indicated by the character converted from the voice uttered by the user in the related information storage unit 121. Then, the processing execution unit 114 uses the word indicated by the character converted from the voice uttered by the user and the synonym associated with the word, and uses the Internet website, television broadcasting, video distribution service, and video storage unit. Search for contents such as video stored in 122.

図7(b)では、処理実行部114は、サービス名のバリエーションに基づいてクエリ拡張をする。テレビジョン放送や映像配信サービスのサービス名には、様々な別名や略称のバリエーションが存在する場合がある。情報処理装置1の関連情報記憶部121には、単語同士の関連性を示す関連情報として、サービス名のバリエーションを示す情報が予め記憶されている。 In FIG. 7B, the processing execution unit 114 extends the query based on the variation of the service name. There may be variations of various aliases and abbreviations in the service names of television broadcasting and video distribution services. In the related information storage unit 121 of the information processing device 1, information indicating variations of service names is stored in advance as related information indicating the relevance between words.

処理実行部114は、検索をする前に、まずユーザが発した音声から変換された文字が示す単語を、該単語に関連付けられた所定のサービス名に変換する(これを収束という)。単語をサービス名に変換する規則は、予め情報処理装置1に設定される。そして処理実行部114は、関連情報記憶部121において、収束によって得られたサービス名に関連付けられたサービス名のバリエーションを取得する。そして処理実行部114は、ユーザが発した音声から変換された文字が示す単語と、該単語に基づいて取得したサービス名のバリエーションとを用いて、インターネットのWebサイト、テレビジョン放送、映像配信サービス、映像記憶部122に記憶されている映像等のコンテンツを検索する。 Before performing a search, the processing execution unit 114 first converts a word indicated by a character converted from a voice uttered by a user into a predetermined service name associated with the word (this is called convergence). The rule for converting a word into a service name is set in advance in the information processing device 1. Then, the processing execution unit 114 acquires a variation of the service name associated with the service name obtained by convergence in the related information storage unit 121. Then, the processing execution unit 114 uses the word indicated by the character converted from the voice emitted by the user and the variation of the service name acquired based on the word, and uses the Internet website, television broadcasting, and video distribution service. , Search for contents such as video stored in the video storage unit 122.

処理実行部114は、図7(b)に示すサービス名に基づくクエリ拡張に加えて、図7(a)に示す類義語に基づくクエリ拡張を行ってもよい。 In addition to the query extension based on the service name shown in FIG. 7B, the processing execution unit 114 may perform the query extension based on the synonyms shown in FIG. 7A.

このように処理実行部114は、ユーザが発した音声から変換された文字が示す単語だけでなく該単語に対して所定の関係性を有する単語を用いて検索するため、ユーザに対して適切な検索結果を出力できる。 In this way, the processing execution unit 114 searches not only the word indicated by the character converted from the voice uttered by the user but also the word having a predetermined relationship with the word, which is appropriate for the user. Search results can be output.

[情報処理方法のシーケンス]
図8、図9は、本実施形態に係る情報処理方法のシーケンス図である。図8は集音装置2が音声を取得した場合のシーケンスを表しており、図9は情報処理装置1が音声を取得した場合のシーケンスを表している。
[Sequence of information processing method]
8 and 9 are sequence diagrams of the information processing method according to the present embodiment. FIG. 8 shows a sequence when the sound collecting device 2 acquires the sound, and FIG. 9 shows a sequence when the information processing device 1 acquires the sound.

図8のシーケンスを以下に説明する。まず集音装置2において、集音部23は、ユーザが発した音声を取得する。音声送信部211は、集音部23が取得した音声を、音声認識装置3へ送信する(S11)。このとき音声送信部211は、集音装置2の識別情報を、音声とともに音声認識装置3へ送信する。 The sequence of FIG. 8 will be described below. First, in the sound collecting device 2, the sound collecting unit 23 acquires the voice emitted by the user. The voice transmission unit 211 transmits the voice acquired by the sound collection unit 23 to the voice recognition device 3 (S11). At this time, the voice transmission unit 211 transmits the identification information of the sound collecting device 2 to the voice recognition device 3 together with the voice.

音声認識装置3において、音声受信部311は、集音装置2が送信した音声と、音声の送信元である集音装置2の識別情報とを受信する。音声認識部312は、音声受信部311が受信した音声を文字に変換する(S12)。このとき音声認識部312は、音声を変換することにより得られた文字が示す単語と、単語の種類とを特定する。 In the voice recognition device 3, the voice receiving unit 311 receives the voice transmitted by the sound collecting device 2 and the identification information of the sound collecting device 2 which is the source of the voice. The voice recognition unit 312 converts the voice received by the voice reception unit 311 into characters (S12). At this time, the voice recognition unit 312 specifies the word indicated by the character obtained by converting the voice and the type of the word.

文字情報送信部313は、音声認識部312が音声を変換することによって得られた文字が示す単語と、単語の種類とを示す文字情報を、音声を取得した集音装置2の識別情報とともに文字情報出力装置4へ送信する(S13)。 The character information transmitting unit 313 uses character information indicating the word indicated by the character obtained by the voice recognition unit 312 converting the voice and the type of the word together with the identification information of the sound collecting device 2 that has acquired the voice. It is transmitted to the information output device 4 (S13).

文字情報出力装置4において、文字情報受信部411は、音声認識装置3が送信した文字情報と、音声を取得した集音装置2の識別情報とを受信する。送信先特定部412は、文字情報受信部411が受信した集音装置2の識別情報と、ユーザ情報記憶部421に予め記憶されたユーザ情報とに基づいて、文字情報の送信先とする情報処理装置1を特定する(S14)。 In the character information output device 4, the character information receiving unit 411 receives the character information transmitted by the voice recognition device 3 and the identification information of the sound collecting device 2 that has acquired the voice. The destination specifying unit 412 processes information as a destination of character information based on the identification information of the sound collecting device 2 received by the character information receiving unit 411 and the user information stored in advance in the user information storage unit 421. Device 1 is specified (S14).

文字情報送信部413は、文字情報受信部411が受信した文字情報を、送信先特定部412が特定した情報処理装置1の識別情報を用いて情報処理装置1へ送信する(S15)。 The character information transmission unit 413 transmits the character information received by the character information reception unit 411 to the information processing device 1 using the identification information of the information processing device 1 specified by the transmission destination identification unit 412 (S15).

情報処理装置1において、文字情報受信部112は、文字情報出力装置4が送信した文字情報を受信する。処理決定部113は、文字情報受信部112が受信した文字情報に基づいて、コンテンツに関する処理(例えば映像の再生、録画、検索、又は映像に関する情報の出力)を決定する(S16)。処理実行部114は、処理決定部113が決定した、コンテンツに関する処理を実行する(S17)。 In the information processing device 1, the character information receiving unit 112 receives the character information transmitted by the character information output device 4. The processing determination unit 113 determines processing related to the content (for example, reproduction, recording, search, or output of information related to the video) based on the character information received by the character information receiving unit 112 (S16). The process execution unit 114 executes the process related to the content determined by the process determination unit 113 (S17).

図9のシーケンスを以下に説明する。まず情報処理装置1において、集音部13は、ユーザが発した音声を取得する。音声送信部111は、集音部13が取得した音声を、音声認識装置3へ送信する(S21)。このとき音声送信部211は、情報処理装置1の識別情報を、音声とともに音声認識装置3へ送信する。 The sequence of FIG. 9 will be described below. First, in the information processing device 1, the sound collecting unit 13 acquires the voice emitted by the user. The voice transmission unit 111 transmits the voice acquired by the sound collection unit 13 to the voice recognition device 3 (S21). At this time, the voice transmission unit 211 transmits the identification information of the information processing device 1 to the voice recognition device 3 together with the voice.

音声認識装置3において、音声受信部311は、情報処理装置1が送信した音声と、音声の送信元である情報処理装置1の識別情報とを受信する。音声認識部312は、音声受信部311が受信した音声を文字に変換する(S22)。このとき音声認識部312は、音声を変換することにより得られた文字が示す単語と、単語の種類とを特定する。 In the voice recognition device 3, the voice receiving unit 311 receives the voice transmitted by the information processing device 1 and the identification information of the information processing device 1 which is the source of the voice. The voice recognition unit 312 converts the voice received by the voice receiving unit 311 into characters (S22). At this time, the voice recognition unit 312 specifies the word indicated by the character obtained by converting the voice and the type of the word.

文字情報送信部313は、音声認識部312が音声を変換することによって得られた文字が示す単語と、単語の種類とを示す文字情報を、情報処理装置1の識別情報を用いて情報処理装置1へ送信する(S23)。 The character information transmission unit 313 uses the identification information of the information processing device 1 to process the character information indicating the word indicated by the character obtained by the voice recognition unit 312 converting the voice and the type of the word. It is transmitted to 1 (S23).

情報処理装置1において、文字情報受信部112は、音声認識装置3が送信した文字情報を受信する。処理決定部113は、文字情報受信部112が受信した文字情報に基づいて、コンテンツに関する処理(例えば映像の再生、録画、検索、又は映像に関する情報の出力)を決定する(S24)。処理実行部114は、処理決定部113が決定した、コンテンツに関する処理を実行する(S25)。 In the information processing device 1, the character information receiving unit 112 receives the character information transmitted by the voice recognition device 3. The process determination unit 113 determines the processing related to the content (for example, reproduction, recording, search, or output of information related to the video) based on the character information received by the character information receiving unit 112 (S24). The process execution unit 114 executes the process related to the content determined by the process determination unit 113 (S25).

[本実施形態の効果]
本実施形態に係る情報処理システムSは、集音装置2が音声を取得した場合に、集音装置2と情報処理装置1とが直接連携されていない場合であっても、文字情報出力装置4が送信先として特定した情報処理装置1へ文字情報を送信し、コンテンツに関する処理を行わせる。したがって、集音装置2に情報処理装置1と連携する機能を付与するために、集音装置2を置き換えたり、集音装置2の機能をアップデートしたりする必要がない。
[Effect of this embodiment]
The information processing system S according to the present embodiment is a character information output device 4 even when the sound collecting device 2 and the information processing device 1 are not directly linked when the sound collecting device 2 acquires the sound. Sends character information to the information processing device 1 specified as the transmission destination, and causes the information processing device 1 to perform processing related to the content. Therefore, in order to give the sound collecting device 2 a function of linking with the information processing device 1, it is not necessary to replace the sound collecting device 2 or update the function of the sound collecting device 2.

また、情報処理システムSは、情報処理装置1が音声を取得した場合に、音声認識装置3から音声の送信元である情報処理装置1へ文字情報を直接送信するため、ユーザが音声を発してから情報処理装置1がコンテンツに関する処理を行うまでの待ち時間を短縮できる。 Further, in the information processing system S, when the information processing device 1 acquires the voice, the voice recognition device 3 directly transmits the character information from the voice recognition device 3 to the information processing device 1 which is the transmission source of the voice, so that the user emits the voice. It is possible to shorten the waiting time until the information processing device 1 performs processing related to the content.

また、情報処理装置1は音声認識装置3又は文字情報出力装置4から受信した、音声から変換された文字に基づいて自身が行う処理を決定するため、音声認識装置3は音声に基づいて情報処理装置1を操作するコマンド(例えば再生コマンド、録画コマンド等)を生成する必要がない。すなわち、音声認識装置3は、音声を文字に変換すればよく、情報処理装置1固有のコマンドを生成する必要がない。そのため、新たな種類の情報処理装置1に対応する際に、新たなコマンドを生成できるように音声認識装置3の機能をアップデートする手間が掛からない。 Further, since the information processing device 1 determines the processing to be performed by itself based on the characters converted from the voice received from the voice recognition device 3 or the character information output device 4, the voice recognition device 3 processes information based on the voice. It is not necessary to generate a command (for example, a playback command, a recording command, etc.) for operating the device 1. That is, the voice recognition device 3 only needs to convert the voice into characters, and does not need to generate a command peculiar to the information processing device 1. Therefore, when supporting a new type of information processing device 1, it is not necessary to update the function of the voice recognition device 3 so that a new command can be generated.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の分散・統合の具体的な実施の形態は、以上の実施の形態に限られず、その全部又は一部について、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を合わせ持つ。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments, and various modifications and changes can be made within the scope of the gist thereof. be. For example, the specific embodiment of the distribution / integration of the device is not limited to the above embodiment, and all or a part thereof may be functionally or physically distributed / integrated in any unit. Can be done. Also included in the embodiments of the present invention are new embodiments resulting from any combination of the plurality of embodiments. The effect of the new embodiment produced by the combination has the effect of the original embodiment together.

情報処理装置1、集音装置2、音声認識装置3及び文字情報出力装置4のプロセッサは、図8、図9に示す方法に含まれる各ステップ(工程)の主体となる。すなわち、情報処理装置1、集音装置2、音声認識装置3及び文字情報出力装置4のプロセッサは、図8、図9に示す方法を実行するためのプログラムを記憶部から読み出し、該プログラムを実行して情報処理システムSの各部を制御することによって、図8、図9に示す方法を実行する。図8、図9に示す方法に含まれるステップは一部省略されてもよく、ステップ間の順番が変更されてもよく、複数のステップが並行して行われてもよい。 The processors of the information processing device 1, the sound collecting device 2, the voice recognition device 3, and the character information output device 4 are the main components of each step included in the methods shown in FIGS. 8 and 9. That is, the processors of the information processing device 1, the sound collecting device 2, the voice recognition device 3, and the character information output device 4 read a program for executing the methods shown in FIGS. 8 and 9 from the storage unit and execute the program. By controlling each part of the information processing system S, the methods shown in FIGS. 8 and 9 are executed. Some of the steps included in the methods shown in FIGS. 8 and 9 may be omitted, the order between the steps may be changed, and a plurality of steps may be performed in parallel.

S 情報処理システム
1 情報処理装置
11 制御部
111 音声送信部
112 文字情報受信部
113 処理決定部
114 処理実行部
12 記憶部
121 関連情報記憶部
2 集音装置
21 制御部
211 音声送信部
23 集音部
3 音声認識装置
4 文字情報出力装置
41 制御部
412 送信先特定部
413 文字情報送信部
42 記憶部
421 ユーザ情報記憶部
S Information processing system 1 Information processing device 11 Control unit 111 Voice transmission unit 112 Character information reception unit 113 Processing decision unit 114 Processing execution unit 12 Storage unit 121 Related information storage unit 2 Sound collector 21 Control unit 211 Voice transmission unit 23 Sound collection unit Part 3 Voice recognition device 4 Character information output device 41 Control unit 412 Destination identification unit 413 Character information transmission unit 42 Storage unit 421 User information storage unit

Claims (9)

集音装置と、文字情報出力装置と、情報処理装置と、前記集音装置、前記文字情報出力装置及び前記情報処理装置と通信可能な音声認識装置と、を備え、
前記集音装置は、
周囲からの音声を取得する集音部と、
前記集音部が取得した前記音声を音声認識装置へ送信する送信部と、
を有し、
前記情報処理装置は、
周囲からの音声を取得する集音部と、
前記集音部が取得した前記音声を前記音声認識装置へ送信する送信部と、
を有し、
前記文字情報出力装置は、
前記集音装置が送信した前記音声を前記音声認識装置が変換することによって得られた文字を示す文字情報の送信先とする前記情報処理装置を特定する特定部と、
前記特定部が特定した前記情報処理装置へ前記文字情報を送信する送信部と、
を有し、
前記音声認識装置は、
前記情報処理装置又は前記集音装置から、前記音声を受信する受信部と、
前記音声を変換することによって前記文字情報を生成する音声認識部と、
前記受信部が前記情報処理装置から前記音声を受信した場合に前記情報処理装置に前記文字情報を送信し、前記受信部が前記集音装置から前記音声を受信した場合に前記文字情報出力装置に前記文字情報を送信する送信部と、
を有し、
前記情報処理装置は、
前記情報処理装置が前記音声を取得した場合に前記文字情報出力装置を経由せずに前記音声認識装置から前記文字情報を受信し、前記集音装置が前記音声を取得した場合に前記文字情報出力装置から前記文字情報を受信する受信部と、
前記受信部が受信した前記文字情報に対応する、コンテンツに関する処理を決定する決定部と、
前記決定部が決定した前記処理を実行する実行部と、
をさらに有する、情報処理システム。
A sound collecting device, a character information output device, an information processing device, a sound collecting device, the character information output device, and a voice recognition device capable of communicating with the information processing device are provided.
The sound collector
A sound collector that acquires sound from the surroundings, and
A transmission unit that transmits the voice acquired by the sound collection unit to the voice recognition device, and a transmission unit.
Have,
The information processing device
A sound collector that acquires sound from the surroundings, and
A transmission unit that transmits the voice acquired by the sound collection unit to the voice recognition device, and a transmission unit.
Have,
The character information output device is
A specific unit that identifies the information processing device to which character information indicating characters obtained by converting the voice transmitted by the sound collecting device into the voice recognition device is transmitted.
A transmission unit that transmits the character information to the information processing device specified by the specific unit, and a transmission unit.
Have,
The voice recognition device is
A receiving unit that receives the sound from the information processing device or the sound collecting device, and
A voice recognition unit that generates the character information by converting the voice,
When the receiving unit receives the voice from the information processing device, the character information is transmitted to the information processing device, and when the receiving unit receives the voice from the sound collecting device, the character information output device receives the character information. A transmitter that transmits the text information and
Have,
The information processing device
When the information processing device acquires the voice, the character information is received from the voice recognition device without going through the character information output device, and when the sound collecting device acquires the voice, the character information output. A receiver that receives the character information from the device,
A determination unit that determines processing related to the content corresponding to the character information received by the reception unit, and a determination unit.
An execution unit that executes the process determined by the determination unit, and an execution unit
An information processing system that further has.
前記音声認識装置の前記受信部は、前記音声と、前記音声の送信元である前記情報処理装置又は前記集音装置を識別するための識別情報とを受信し、
前記音声認識装置の前記送信部は、前記受信部が前記情報処理装置から前記音声を受信した場合に前記識別情報に関連付けられた前記情報処理装置に前記文字情報を送信し、前記受信部が前記集音装置から前記音声を受信した場合に前記文字情報出力装置に前記文字情報及び前記識別情報を送信し、
前記文字情報出力装置の前記特定部は、前記音声認識装置が送信した前記識別情報に関連付けられた前記情報処理装置を前記文字情報の送信先として特定する、
請求項に記載の情報処理システム。
The receiving unit of the voice recognition device receives the voice and identification information for identifying the information processing device or the sound collecting device that is the source of the voice.
When the receiving unit receives the voice from the information processing device, the transmitting unit of the voice recognition device transmits the character information to the information processing device associated with the identification information, and the receiving unit receives the information. When the voice is received from the sound collecting device, the character information and the identification information are transmitted to the character information output device.
The specific unit of the character information output device specifies the information processing device associated with the identification information transmitted by the voice recognition device as a transmission destination of the character information.
The information processing system according to claim 1.
前記情報処理装置の前記決定部は、映像の再生、録画、検索、及び映像に関する情報の出力のうち少なくとも1つの処理を、コンテンツに関する処理として決定する、請求項1又は2に記載の情報処理システム。 The information processing system according to claim 1 or 2 , wherein the determination unit of the information processing device determines at least one process of video reproduction, recording, retrieval, and output of information related to the video as a process related to the content. .. 前記文字情報出力装置は、前記集音装置と前記情報処理装置とを関連付けた情報を記憶する記憶部をさらに有し、
前記文字情報出力装置の前記特定部は、前記記憶部において前記音声を取得した前記集音装置に関連付けられた前記情報処理装置を、前記文字情報の送信先として特定する、請求項1からのいずれか一項に記載の情報処理システム。
The character information output device further includes a storage unit that stores information associated with the sound collecting device and the information processing device.
The specific unit of the character information output device specifies the information processing device associated with the sound collecting device that has acquired the sound in the storage unit as a transmission destination of the character information, according to claims 1 to 3 . The information processing system according to any one of the items.
前記文字情報出力装置の前記送信部は、前記文字が示す単語と、前記単語の種類とを示す前記文字情報を送信する、請求項1からのいずれか一項に記載の情報処理システム。 The information processing system according to any one of claims 1 to 4 , wherein the transmission unit of the character information output device transmits the character information indicating the word indicated by the character and the type of the word. 前記情報処理装置の前記決定部は、前記種類が動作を示す場合に、前記単語に対応するように前記情報処理装置を操作する処理を決定し、前記種類が動作を示さない場合に、前記単語を用いてコンテンツを検索する処理を決定する、請求項に記載の情報処理システム。 The determination unit of the information processing device determines a process for operating the information processing device so as to correspond to the word when the type indicates an operation, and when the type does not indicate an operation, the word. The information processing system according to claim 5 , wherein the process of searching the content is determined by using the information processing system. 前記情報処理装置の前記決定部は、前記コンテンツが放送中であるか又は放送予定であるかによって、前記処理を変更する、請求項1からのいずれか一項に記載の情報処理システム。 The information processing system according to any one of claims 1 to 6 , wherein the determination unit of the information processing device changes the processing depending on whether the content is being broadcast or is scheduled to be broadcast. 前記情報処理装置は、単語同士の関連性を示す情報を記憶する記憶部をさらに有し、
前記実行部は、前記文字が示す単語と、前記記憶部において前記単語に関連付けられた単語とを用いて、前記コンテンツを検索する、請求項1からのいずれか一項に記載の情報処理システム。
The information processing device further has a storage unit that stores information indicating the relationship between words.
The information processing system according to any one of claims 1 to 7 , wherein the execution unit searches for the content using the word indicated by the character and the word associated with the word in the storage unit. ..
集音装置と、文字情報出力装置と、情報処理装置と、前記集音装置、前記文字情報出力装置及び前記情報処理装置と通信可能な音声認識装置と、を備えるシステムにおいて、
前記集音装置は、
周囲からの音声を取得するステップと、
前記取得するステップが取得した前記音声を音声認識装置へ送信するステップと、
を実行し、
前記情報処理装置は、
周囲からの音声を取得するステップと、
前記取得するステップが取得した前記音声を前記音声認識装置へ送信するステップと、
を有し、
前記文字情報出力装置は、
前記集音装置が送信した前記音声を前記音声認識装置が変換することによって得られた文字を示す文字情報の送信先とする前記情報処理装置を特定するステップと、
前記特定するステップが特定した前記情報処理装置へ前記文字情報を送信するステップと、
を実行し、
前記音声認識装置は、
前記情報処理装置又は前記集音装置から、前記音声を受信するステップと、
前記音声を変換することによって前記文字情報を生成するステップと、
前記音声を受信するステップが前記情報処理装置から前記音声を受信した場合に前記情報処理装置に前記文字情報を送信し、前記音声を受信するステップが前記集音装置から前記音声を受信した場合に前記文字情報出力装置に前記文字情報を送信するステップと、
を実行し、
前記情報処理装置は、
前記情報処理装置が前記音声を取得した場合に前記文字情報出力装置を経由せずに前記音声認識装置から前記文字情報を受信し、前記集音装置が前記音声を取得した場合に前記文字情報出力装置から前記文字情報を受信するステップと、
前記文字情報を受信するステップが受信した前記文字情報に対応する、コンテンツに関する処理を決定するステップと、
前記決定するステップが決定した前記処理を実行するステップと、
をさらに実行する情報処理方法。
In a system including a sound collecting device, a character information output device, an information processing device, the sound collecting device, the character information output device, and a voice recognition device capable of communicating with the information processing device .
The sound collector
Steps to get audio from the surroundings and
The step of transmitting the acquired voice to the voice recognition device by the acquisition step, and
And
The information processing device
Steps to get audio from the surroundings and
The step of transmitting the acquired voice to the voice recognition device by the acquisition step, and
Have,
The character information output device is
A step of specifying the information processing device as a transmission destination of character information indicating characters obtained by converting the voice transmitted by the sound collecting device by the voice recognition device, and
A step of transmitting the character information to the information processing device specified by the specific step, and a step of transmitting the character information to the information processing device.
And
The voice recognition device is
The step of receiving the voice from the information processing device or the sound collecting device, and
The step of generating the character information by converting the voice, and
When the step of receiving the voice receives the voice from the information processing device, the character information is transmitted to the information processing device, and when the step of receiving the voice receives the voice from the sound collecting device. The step of transmitting the character information to the character information output device, and
And
The information processing device
When the information processing device acquires the voice, the character information is received from the voice recognition device without going through the character information output device, and when the sound collecting device acquires the voice, the character information output. The step of receiving the character information from the device and
Corresponding to the character information receiving the text information received, and determining the processing about the content,
The step to execute the process determined by the determined step and the step to execute the determined process
Information processing method that further executes.
JP2018175182A 2018-09-19 2018-09-19 Information processing system and information processing method Active JP6959205B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018175182A JP6959205B2 (en) 2018-09-19 2018-09-19 Information processing system and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018175182A JP6959205B2 (en) 2018-09-19 2018-09-19 Information processing system and information processing method

Publications (2)

Publication Number Publication Date
JP2020046546A JP2020046546A (en) 2020-03-26
JP6959205B2 true JP6959205B2 (en) 2021-11-02

Family

ID=69899693

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018175182A Active JP6959205B2 (en) 2018-09-19 2018-09-19 Information processing system and information processing method

Country Status (1)

Country Link
JP (1) JP6959205B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7630283B2 (en) * 2021-01-15 2025-02-17 シャープ株式会社 OPERATION EXECUTION DEVICE AND OPERATION EXECUTION METHOD

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5178109B2 (en) * 2007-09-25 2013-04-10 株式会社東芝 Search device, method and program
JP5351855B2 (en) * 2010-08-10 2013-11-27 ヤフー株式会社 Information home appliance system, information acquisition method and program
JP6675078B2 (en) * 2016-03-15 2020-04-01 パナソニックIpマネジメント株式会社 Misrecognition and correction method, misrecognition and correction device, and misrecognition and correction program
WO2018056105A1 (en) * 2016-09-26 2018-03-29 ソニー株式会社 Information processing apparatus, information processing method, program, and information processing system

Also Published As

Publication number Publication date
JP2020046546A (en) 2020-03-26

Similar Documents

Publication Publication Date Title
US20140006022A1 (en) Display apparatus, method for controlling display apparatus, and interactive system
EP1422936B1 (en) Broadcast reception method
JP2010527088A (en) Method and system for providing appropriate information to users of devices in a local network
CN109036397B (en) Method and apparatus for presenting content
US20140324858A1 (en) Information processing apparatus, keyword registration method, and program
CN111295708A (en) Speech recognition apparatus and method of operating the same
JPWO2015146017A1 (en) Voice search device, voice search method, and display device
JP7606562B2 (en) Information processing device, information processing method, and program
WO2011155350A1 (en) Content reproduction device, control method for content reproduction device, control program, and recording medium
KR102775800B1 (en) The system and an appratus for providig contents based on a user utterance
KR20030059503A (en) User made music service system and method in accordance with degree of preference of user's
CN117809651A (en) Voice interaction device and voice interaction method
JP2003259316A (en) Stream processing system and stream processing program
US7627560B2 (en) Recording and reproducing apparatus, processing method in the apparatus, and program for causing computer to execute the method
JP2007164659A (en) Information distribution system and method using music information
JP6959205B2 (en) Information processing system and information processing method
JP2019008779A (en) Text extraction apparatus, comment posting apparatus, comment posting support apparatus, reproduction terminal, and context vector calculation apparatus
JP7009338B2 (en) Information processing equipment, information processing systems, and video equipment
CN119547448A (en) A display device and a media playback method
JPWO2019082606A1 (en) Content management device, content management system, and control method
KR101592512B1 (en) Method and system for providing information video contents
US11366489B2 (en) Electronic apparatus and control method thereof
US8196046B2 (en) Parallel visual radio station selection
KR20220007221A (en) Method for Processing Registration of Professional Counseling Media
KR20220038974A (en) Method for Providing Media Message

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200306

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201222

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210406

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210525

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211007

R150 Certificate of patent or registration of utility model

Ref document number: 6959205

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150