JP7707767B2 - Online conference system, online conference terminal, and chat control method for online conference system - Google Patents
Online conference system, online conference terminal, and chat control method for online conference systemInfo
- Publication number
- JP7707767B2 JP7707767B2 JP2021141511A JP2021141511A JP7707767B2 JP 7707767 B2 JP7707767 B2 JP 7707767B2 JP 2021141511 A JP2021141511 A JP 2021141511A JP 2021141511 A JP2021141511 A JP 2021141511A JP 7707767 B2 JP7707767 B2 JP 7707767B2
- Authority
- JP
- Japan
- Prior art keywords
- voice
- chat
- conference
- information signal
- character
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephone Function (AREA)
- Telephonic Communication Services (AREA)
Description
本発明は、チャット機能を有するオンライン会議システム、オンライン会議システムに用いられるオンライン会議端末、並びにオンライン会議システムのチャット制御方法に関する。 The present invention relates to an online conference system having a chat function, an online conference terminal used in the online conference system, and a chat control method for the online conference system.
近時、オンライン会議システムの利用が増加している。オンライン会議システムは、交換機やサーバに接続されたパソコン等の端末間で音声や画像を用いた会議を可能にするものであり、会議には１対１に限らず、多数の端末からの参加が可能となっている。このような会議システムでは、音声や画像を用いた会議以外に、パソコン等の端末の画面共有や各端末において動作するアプリケーションの共有、チャット機能等の付加機能の使用が可能であり、会議システムが多機能化している。 Recently, the use of online conference systems has been increasing. Online conference systems enable conferences using voice and images between terminals such as PCs connected to a switchboard or server, and conferences are not limited to one-to-one, but can be attended by multiple terminals. In addition to conferences using voice and images, such conference systems also enable screen sharing of terminals such as PCs, sharing of applications running on each terminal, and the use of additional functions such as a chat function, making the conference system multifunctional.
会議システムの多機能化、及び参加可能者数の拡大により、近年、会議以外の用途として、企業のセミナーや学校の講義等にも活用されている。これらの利用シーンとしては、司会者、講義者、説明者等の特定の参加者が発言を行い、他の参加者がそれを聴取する形式が多い。この場合には、通常、聴取者は自身の端末のマイクはミュート状態にして、他の参加者との会話は行うことはない。ところが、このような運用においても、特定の参加者間での情報伝達が必要となる場合がある。そこで、そのような特定の参加者間での情報伝達のために、例えば、特許文献１に示されたように特定の操作により端末間で秘話通話を行う技術が提案されている。 As conference systems have become more multifunctional and the number of participants has increased, in recent years they have also been used for purposes other than conferences, such as corporate seminars and school lectures. In many cases, these systems are used in a way that a specific participant, such as a moderator, lecturer, or explainer, speaks while the other participants listen. In such cases, the listeners usually mute the microphones on their own devices and do not converse with the other participants. However, even in such operations, there are cases where information needs to be transmitted between specific participants. Therefore, in order to transmit information between such specific participants, a technology has been proposed that allows for a private conversation between terminals by performing a specific operation, as shown in Patent Document 1, for example.
しかしながら、特許文献１に示されたような従来のオンライン会議システムでは、秘話通話先は特定の１名であり、１対１の通話しか出来なかった。そのため、セミナーや講義等の運用において、複数の会議参加者に通知をしたい場合には適用することができなかった。例えば、セミナーや講義中にマイクミュートし忘れた会議参加者に対して、マイクミュートするように促す際に、通知したい該当者が多数いるような場合である。また、このような場合の対処として、会議システムの機能であるチャットで通知する方法もあるが、セミナーや講義では、会議参加者は画面表示された説明資料を参照しているために、会議参加者の中にはチャットの通知が来ていることに気付かないことが多々ある。 However, in conventional online conference systems such as that shown in Patent Document 1, the recipient of a private call is a single specific person, and only one-to-one calls are possible. Therefore, this system cannot be applied when multiple conference participants need to be notified during seminars, lectures, etc. For example, when urging a conference participant who forgot to mute their microphone during a seminar or lecture to do so, there may be many people to notify. One way to deal with such cases is to notify via chat, which is a function of the conference system, but in seminars and lectures, participants are often referring to explanatory materials displayed on the screen, and some of them often do not notice that they have received a chat notification.
そこで、本発明の目的は、このような課題に着目し、特定の会議参加者に対してチャット内容を確実に通知することができるオンライン会議システム、オンライン会議端末及びオンライン会議システムのチャット制御方法を提供することである。 Therefore, in view of the above problems, an object of the present invention is to provide an online conference system, an online conference terminal , and a chat control method for an online conference system that can reliably notify chat contents to specific conference participants.
本発明のオンライン会議システムは、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムであって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、を含み、前記会議サーバは、前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信部によって送信された前記チャット情報信号を受信するチャット通信部と、前記チャット通信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、前記文字音声変換部によって出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信部と、を含むことを特徴としている。 The online conference system of the present invention is an online conference system including a conference server and a plurality of conference terminals connected to each other so that they can communicate with each other, each of the plurality of conference terminals includes a voice input unit that inputs voice and outputs voice data indicating the input voice, a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server, a voice playback unit that plays and outputs the voice data in the voice information signal received by the voice transmission/reception unit as voice, a character input unit that outputs character data indicating characters by operation input, and a chat transmission/reception unit that transmits and receives a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server, and the conference server includes a chat communication unit that receives the chat information signal transmitted by the chat transmission/reception unit of a source conference terminal among the plurality of conference terminals, a character-to-speech conversion unit that converts the character data in the chat information signal received by the chat communication unit into voice data and outputs it, and a voice communication unit that transmits the voice data output by the character-to-speech conversion unit as the voice information signal to the destination conference terminal of the received chat information signal.
本発明のオンライン会議システムは、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムであって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、前記チャット送受信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、を含み、前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 The online conference system of the present invention is an online conference system including a conference server and a plurality of conference terminals connected to each other so as to be able to communicate with each other, each of the plurality of conference terminals includes a voice input unit that inputs voice and outputs voice data indicating the input voice, a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server, a voice playback unit that plays and outputs the voice data in the voice information signal received by the voice transmission/reception unit as voice, a character input unit that outputs character data indicating characters by operation input, a chat transmission/reception unit that transmits and receives a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server, and a character-to-speech conversion unit that converts the character data in the chat information signal received by the chat transmission/reception unit into voice data and outputs the voice data, and the voice playback unit plays and outputs the voice data converted from the character data by the character-to-speech conversion unit as voice.
本発明のオンライン会議端末は、会議サーバと互いに通信可能に接続されるオンライン会議端末であって、音声を入力してその入力音声を示す音声データを出力する音声入力部と、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、操作入力によって文字を示す文字データを出力する文字入力部と、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報と、前記文字データの処理方法が通常処理及び音声変換処理のうちのいずれであるかを示す付加情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が前記音声変換処理を示すときに前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換部と、を含み、前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 The online conference terminal of the present invention is an online conference terminal that is communicatively connected to a conference server, and includes: a voice input unit that inputs voice and outputs voice data indicating the input voice; a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server; a voice playback unit that plays and outputs as voice the voice data in the voice information signal received by the voice transmission/reception unit; a character input unit that outputs character data indicating characters by operation input; a chat transmission/reception unit that transmits and receives via the conference server a chat information signal including the character data, information indicating a destination conference terminal among the multiple conference terminals, and additional information indicating whether a method of processing the character data is normal processing or voice conversion processing; and a character-to-speech conversion unit that converts the character data in the chat information signal to voice data when the additional information in the chat information signal received by the chat transmission/reception unit indicates the voice conversion processing, and the voice playback unit plays and outputs as voice the voice data converted from the character data by the character-to-speech conversion unit.
本発明のオンライン会議システムのチャット制御方法は、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムのチャット制御方法であって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、操作入力によって文字を示す文字データを出力する文字入力ステップと、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、を含み、前記会議サーバは、前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信ステップによって送信された前記チャット情報信号を受信するチャット通信ステップと、前記チャット通信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換ステップと、前記文字音声変換ステップにおいて出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信ステップと、を含むことを特徴としている。 The chat control method for an online conference system of the present invention is a chat control method for an online conference system including a conference server and a plurality of conference terminals connected to each other so as to be able to communicate with each other, wherein each of the plurality of conference terminals includes a voice input step of inputting voice and outputting voice data indicating the input voice, a voice transmission and reception step of transmitting and receiving a voice information signal including the voice data via the conference server, a voice playback step of playing and outputting the voice data in the voice information signal received in the voice transmission and reception step as voice, a character input step of outputting character data indicating characters by an operation input, and a chat transmission and reception step of transmitting and receiving a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server, wherein the conference server includes a chat communication step of receiving the chat information signal transmitted by the chat transmission and reception step of a source conference terminal among the plurality of conference terminals, a character-to-speech conversion step of converting the character data in the chat information signal received in the chat communication step into voice data and outputting it, and a voice communication step of transmitting the voice data output in the character-to-speech conversion step as the voice information signal to the destination conference terminal of the received chat information signal.
本発明のオンライン会議システムのチャット制御方法は、互いに通信可能に接続された会議サーバ及び複数の会議端末を含むオンライン会議システムのチャット制御方法であって、前記複数の会議端末の各々は、音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、操作入力によって文字を示す文字データを出力する文字入力ステップと、前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、前記チャット送受信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換ステップと、を含み、前記音声再生ステップは、前記文字音声変換ステップによって前記文字データから変換された前記音声データを音声として再生出力することを特徴としている。 The chat control method for an online conference system of the present invention is a chat control method for an online conference system including a conference server and a plurality of conference terminals connected to each other so as to be able to communicate with each other, wherein each of the plurality of conference terminals includes a voice input step of inputting voice and outputting voice data indicating the input voice, a voice transmission and reception step of transmitting and receiving a voice information signal including the voice data via the conference server, a voice playback step of playing and outputting as voice the voice data in the voice information signal received in the voice transmission and reception step, a character input step of outputting character data indicating characters by operation input, a chat transmission and reception step of transmitting and receiving, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals, and a character-to-speech conversion step of converting the character data in the chat information signal received in the chat transmission and reception step into voice data, wherein the voice playback step is characterized in that the voice data converted from the character data by the character-to-speech conversion step is played and output as voice.
本発明のオンライン会議システム、オンライン会議端末及びオンライン会議システムのチャット制御方法によれば、送信先の会議端末の会議参加者は、送信元の会議端末の会議参加者が入力したチャット内容を音声で確認することができるので、送信先の会議端末の会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 According to the online conference system, online conference terminal , and chat control method for the online conference system of the present invention, the conference participants at the destination conference terminal can confirm the chat content entered by the conference participants at the source conference terminal by voice, thereby avoiding a situation where the conference participants at the destination conference terminal are unaware of the chat displayed on the screen of their own conference terminal during an online conference.
以下、本発明の実施例を、図面を参照しつつ詳細に説明する。
（実施例１）
図１は本発明が適用されたオンライン会議システムの基本構成を示している。この会議システムは、オンライン会議サーバ１００と、クライアントであるオンライン会議端末２０１～２１０とから構成されている。会議サーバ１００及び会議端末２０１～２１０の各々は、例えば、パーソナルコンピュータによって構成することができる。本実施例では会議端末２０１～２１０の数は１０となっているが、特に限定されない。会議サーバ１００と会議端末２０１～２１０とはインターネット回線を含む通信回線５０によって通信可能に互いに接続されているとする。各会議端末２０１～２１０は会議サーバ１００で開催されるオンライン会議に参加が可能となっている。会議サーバ１００が提供するオンライン会議は音声を使用した会議の他に、チャットによる文字メッセージの送受信が可能となっている。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
Example 1
FIG. 1 shows the basic configuration of an online conference system to which the present invention is applied. This conference system is composed of an online conference server 100 and online conference terminals 201 to 210 as clients. The conference server 100 and each of the conference terminals 201 to 210 can be composed of, for example, a personal computer. In this embodiment, the number of the conference terminals 201 to 210 is 10, but is not particularly limited. It is assumed that the conference server 100 and the conference terminals 201 to 210 are connected to each other so as to be able to communicate with each other via a communication line 50 including an Internet line. Each of the conference terminals 201 to 210 can participate in an online conference held by the conference server 100. The online conference provided by the conference server 100 allows for sending and receiving text messages by chat in addition to a conference using voice.
図２に示すように、会議サーバ１００は、例えば、会議システム用のソフトウエアをサーバで処理することにより、チャット通信部１１１、チャット制御部１１２、音声通信部１２１、音声制御部１２２、文字音声変換部１３１、及び音声エンジン１３２を構成する。 As shown in FIG. 2, the conference server 100, for example, comprises a chat communication unit 111, a chat control unit 112, a voice communication unit 121, a voice control unit 122, a text-to-speech conversion unit 131, and a voice engine 132, by processing software for the conference system on the server.
チャット通信部１１１及び音声通信部１２１は通信回線５０に接続される。チャット通信部１１１とチャット制御部１１２とは接続され、チャット制御部１１２と文字音声変換部１３１とは接続されている。音声通信部１２１と音声制御部１２２とは接続され、音声制御部１２２と文字音声変換部１３１とは接続されている。文字音声変換部１３１は音声エンジン１３２に接続されている。 The chat communication unit 111 and the voice communication unit 121 are connected to the communication line 50. The chat communication unit 111 is connected to the chat control unit 112, and the chat control unit 112 is connected to the character-to-speech conversion unit 131. The voice communication unit 121 is connected to the voice control unit 122, and the voice control unit 122 is connected to the character-to-speech conversion unit 131. The character-to-speech conversion unit 131 is connected to the voice engine 132.
チャット通信部１１１は、会議端末２０１～２１０の各々から送信されるチャット情報信号を受信し、受信したチャット情報信号をチャット制御部１１２に供給する。また、チャット通信部１１１は、チャット制御部１１２による制御によってチャット情報信号を会議端末２０１～２１０のうちの送信先の会議端末に対して送信する。チャット制御部１１２はチャット通信部１１１によって受信されたチャット情報信号の解析を行い、送信先への振り分けを行い、チャット通信部１１１に対してチャット情報信号の送信先の指示等の制御を行う。 The chat communication unit 111 receives chat information signals transmitted from each of the conference terminals 201-210, and supplies the received chat information signals to the chat control unit 112. In addition, the chat communication unit 111 transmits the chat information signals to the destination conference terminal among the conference terminals 201-210 under the control of the chat control unit 112. The chat control unit 112 analyzes the chat information signals received by the chat communication unit 111, distributes them to the destinations, and controls the chat communication unit 111 to instruct the destination of the chat information signal, etc.
音声通信部１２１は、会議端末２０１～２１０の各々から送信される音声情報信号を受信し、受信した音声情報信号を音声制御部１２２に供給する。また、音声通信部１２１は、音声制御部１２２による制御によって音声情報信号を会議端末２０１～２１０のうちの送信先の会議端末に対して送信する。音声制御部１２２は音声通信部１２１によって受信された音声情報信号を解析し、音声通信部１２１に対して音声情報信号の送信先の会議端末への送信を指示する。 The audio communication unit 121 receives audio information signals transmitted from each of the conference terminals 201-210, and supplies the received audio information signals to the audio control unit 122. The audio communication unit 121 also transmits the audio information signals to a destination conference terminal among the conference terminals 201-210 under the control of the audio control unit 122. The audio control unit 122 analyzes the audio information signals received by the audio communication unit 121, and instructs the audio communication unit 121 to transmit the audio information signals to the destination conference terminal.
文字音声変換部１３１はチャット情報信号に含まれる文字データを文字毎に解析し、音声エンジン１３２を使用して音声データを生成する。音声エンジン１３２は文字毎の音声データを記憶しており、文字単位で文字データを音声データに変換する。すなわち、音声エンジン１３２は文字音声変換部１３１から文字単位で供給される文字データを音声データに順次変換し、その音声データに文字音声変換部１３１に供給する。文字音声変換部１３１は音声エンジン１３２から供給される音声データを受けて、チャット情報信号に含まれる文字データ全てに対する音声データを生成する。なお、音声エンジン１３２は文字毎ではなく単語単位で文字データを音声データに変換しても良い。 The character-to-speech conversion unit 131 analyzes the character data included in the chat information signal character by character, and generates voice data using the voice engine 132. The voice engine 132 stores voice data for each character, and converts the character data to voice data character by character. That is, the voice engine 132 sequentially converts the character data supplied character by character from the character-to-speech conversion unit 131 into voice data, and supplies the voice data to the character-to-speech conversion unit 131. The character-to-speech conversion unit 131 receives the voice data supplied from the voice engine 132, and generates voice data for all the character data included in the chat information signal. Note that the voice engine 132 may convert the character data to voice data word by word, rather than character by character.
一方、会議端末２０１～２１０の各々は、例えば、上述した会議システム用のソフトウエアをクライアントで処理することにより、図３に示すように、チャット送受信部２１１、チャット制御部２１２、表示部２１３、文字入力部２１４、音声送受信部２２１、音声制御部２２２、音声再生部２２３、及び音声入力部２２４を構成する。 On the other hand, each of the conference terminals 201 to 210, for example, processes the above-mentioned conference system software on a client, thereby configuring a chat transmission/reception unit 211, a chat control unit 212, a display unit 213, a character input unit 214, an audio transmission/reception unit 221, an audio control unit 222, an audio playback unit 223, and an audio input unit 224, as shown in FIG. 3.
チャット送受信部２１１及び音声送受信部２２１は通信回線５０に接続される。チャット送受信部２１１とチャット制御部２１２とは接続され、チャット制御部２１２と表示部２１３及び文字入力部２１４の各々とは接続されている。音声送受信部２２１と音声制御部２２２とは接続され、音声制御部２２２と音声再生部２２３とは接続されている。 The chat transmission/reception unit 211 and the voice transmission/reception unit 221 are connected to the communication line 50. The chat transmission/reception unit 211 is connected to the chat control unit 212, and the chat control unit 212 is connected to each of the display unit 213 and the character input unit 214. The voice transmission/reception unit 221 is connected to the voice control unit 222, and the voice control unit 222 is connected to the voice playback unit 223.
チャット送受信部２１１は、会議サーバ１００から送信されるチャット情報信号を受信し、受信したチャット情報信号をチャット制御部２１２に供給する。また、チャット送受信部２１１は、チャット制御部２１２による制御によってチャット情報信号を会議サーバ１００に対して送信する。チャット制御部２１２はチャット送受信部２１１によって受信されたチャット情報信号から文字データを抽出して表示部２１３に供給する。文字入力部２１４は会議参加者の操作によって入力された文字を示す文字データをチャット制御部２１２に出力する。チャット制御部２１２は、文字入力部２１４から出力された文字データを含むチャット情報信号を生成する。チャット通信部１１１に対してチャット情報信号の送信先の指示等の制御を行う。文字入力部２１４は例えば、キーボードやタッチペンからなる。 The chat transmission/reception unit 211 receives a chat information signal transmitted from the conference server 100, and supplies the received chat information signal to the chat control unit 212. The chat transmission/reception unit 211 also transmits the chat information signal to the conference server 100 under the control of the chat control unit 212. The chat control unit 212 extracts character data from the chat information signal received by the chat transmission/reception unit 211 and supplies it to the display unit 213. The character input unit 214 outputs character data indicating characters input by operation of the conference participant to the chat control unit 212. The chat control unit 212 generates a chat information signal including the character data output from the character input unit 214. It controls the chat communication unit 111 to instruct the destination of the chat information signal, etc. The character input unit 214 is, for example, a keyboard or a touch pen.
音声送受信部２２１は、会議サーバ１００から送信される音声情報信号を受信し、受信した音声情報信号を音声制御部２２２に供給する。また、音声送受信部２２１は、音声制御部２２２による制御によって音声情報信号を会議サーバ１００に送信する。音声制御部２２２は音声送受信部２２１によって受信された音声情報信号から音声データを抽出して音声再生部２２３に供給する。音声再生部２２３は音声制御部２２２から供給された音声データをアナログのオーディオ信号に変換し、そのオーディオ信号に応じた音声出力を内蔵スピーカ（図示せず）を介して生成する。また、音声制御部２２２は音声入力部２２４から供給された音声データに基づいて音声情報信号を作成し、音声送受信部２２１に対して音声情報信号の送信先の端末への送信を指示する。音声入力部２２４は例えば、マイクロホンからなる。 The audio transmission/reception unit 221 receives an audio information signal transmitted from the conference server 100, and supplies the received audio information signal to the audio control unit 222. The audio transmission/reception unit 221 also transmits the audio information signal to the conference server 100 under the control of the audio control unit 222. The audio control unit 222 extracts audio data from the audio information signal received by the audio transmission/reception unit 221 and supplies it to the audio reproduction unit 223. The audio reproduction unit 223 converts the audio data supplied from the audio control unit 222 into an analog audio signal, and generates audio output corresponding to the audio signal through a built-in speaker (not shown). The audio control unit 222 also creates an audio information signal based on the audio data supplied from the audio input unit 224, and instructs the audio transmission/reception unit 221 to transmit the audio information signal to the destination terminal. The audio input unit 224 is, for example, a microphone.
会議端末２０１～２１０の各々は上述したようにホスト設定された会議サーバ１００と通信回線５０を介して通信することができる。その通信状態では、会議端末２０１～２１０の各々と会議サーバ１００との間で、音声情報信号及びチャット情報信号の送受信が可能である。これにより、会議端末２０１～２１０のうちの少なくとも２つの端末間でチャットによる文字メッセージの送受信、及び音声による通話の送受信が可能となり、これらの送受信によりオンライン会議が実行される。ここで、会議端末２０１～２１０の各々は、会議サーバ１００に対して、チャット情報信号内に付加情報を付与することが可能である。付加情報の１つであるチャット種別は、チャット情報信号内の文字データの処理方法として通常チャットと音声変換チャットとのいずれか一方を示し、音声変換チャットの場合にはチャット情報信号を音声情報信号に変換することを指定する情報となる。通常チャットの場合にはチャット情報信号内の文字データを文字表示することを指定する情報となる。 Each of the conference terminals 201 to 210 can communicate with the conference server 100, which is set as the host as described above, via the communication line 50. In this communication state, voice information signals and chat information signals can be transmitted and received between each of the conference terminals 201 to 210 and the conference server 100. This enables transmission and reception of text messages by chat and transmission and reception of voice calls between at least two of the conference terminals 201 to 210, and an online conference is carried out by these transmissions and receptions. Here, each of the conference terminals 201 to 210 can add additional information to the chat information signal for the conference server 100. The chat type, which is one of the additional information, indicates either normal chat or voice conversion chat as a method of processing the text data in the chat information signal, and in the case of voice conversion chat, it is information that specifies that the chat information signal is converted into a voice information signal. In the case of normal chat, it is information that specifies that the text data in the chat information signal is displayed as text.
チャット情報信号には、例えば、情報の種別（チャット情報信号の場合には文字データであることを示す）、チャット本体の文字データ、付加情報としてのチャット種別の他に、送信元及び送信先の情報が含まれる。例えば、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合には、チャット先は会議端末２１０、送信元は会議端末２０１を示し、送信先は会議サーバ１００を示す。音声情報信号には、同様に、例えば、情報データの種別（音声情報信号の場合には音声データであること示す）、音声本体を表す音声データ、付加情報としての会議音声とチャット変換音声とを区別する音声種別、送信元及び送信先の情報が含まれる。チャット情報信号や音声情報信号は通信回線５０を例えば、パケット形式で伝送される。 A chat information signal includes, for example, the type of information (in the case of a chat information signal, this indicates that it is text data), the text data of the chat body, the chat type as additional information, as well as sender and destination information. For example, when the conference terminal 201 sends chat information to the conference terminal 210, the chat destination indicates the conference terminal 210, the sender indicates the conference terminal 201, and the destination indicates the conference server 100. Similarly, a voice information signal includes, for example, the type of information data (in the case of a voice information signal, this indicates that it is voice data), voice data representing the voice body, a voice type that distinguishes between conference voice and chat converted voice as additional information, and sender and destination information. The chat information signal and the voice information signal are transmitted over the communication line 50, for example, in packet format.
なお、会議サーバ１００の会議参加者は、全ての会議参加者の氏名と共に、会議参加者各々が使用する会議サーバ１００及び会議端末２０１～２１０を特定することができるアドレス、ＩＤ等の識別情報を文字データとして含む上記したチャット情報信号を会議サーバ１００から会議端末２０１～２１０に送信しており、各会議参加者は会議開始までに当該識別情報を会議端末２０１～２１０各々の表示部２１３を介して得ているとする。会議サーバ１００及び会議端末２０１～２１０各々では、チャット情報信号及び音声情報信号の各々の送信の際には上記した送信元及び送信先として識別情報が使用される。また、後述するように、会議端末２０１～２１０各々から送信されるチャット情報信号や音声情報信号は送信先に係わらず、一旦、会議サーバ１００に送られるので、チャット情報信号や音声情報信号には送信先とは別に会議サーバ１００の識別情報がホスト情報として含まれても良い。 The conference participants of the conference server 100 transmit the chat information signal described above, which includes, as text data, identification information such as addresses and IDs that can identify the conference server 100 and the conference terminals 201-210 used by each of the conference participants, along with the names of all the conference participants, from the conference server 100 to the conference terminals 201-210, and each conference participant obtains the identification information via the display unit 213 of each of the conference terminals 201-210 before the start of the conference. The conference server 100 and each of the conference terminals 201-210 use the identification information as the above-mentioned source and destination when transmitting the chat information signal and the voice information signal. As described later, the chat information signal and the voice information signal transmitted from each of the conference terminals 201-210 are once transmitted to the conference server 100, regardless of the transmission destination, so the chat information signal and the voice information signal may include the identification information of the conference server 100 as host information in addition to the transmission destination.
次に、かかる構成の会議システムの動作例を図４及び図５のシーケンス図を用いて説明する。この動作例は、会議が開始された状態（ステップＳ１０）において、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合である。 Next, an example of the operation of the conference system having such a configuration will be described with reference to the sequence diagrams in Figs. 4 and 5. This example of the operation is a case where the conference terminal 201 transmits chat information to the conference terminal 210 when the conference has started (step S10).
図４に示すように、会議開始後に、先ず、会議端末２０１の会議参加者が文字入力部２１４に対してチャットの文字入力を行うと、その文字入力を文字データとして受けて文字制御部２１２はチャット種別を通常チャットとしたチャット情報信号を生成する（ステップＳ１１）。このチャット情報信号に含まれる送信先には会議端末２１０が指定される。チャット送受信部２１１は文字制御部２１２によって生成されたチャット情報信号を会議サーバ１００に向けて送信する（ステップＳ１２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 As shown in FIG. 4, after the conference starts, first, when a conference participant of the conference terminal 201 inputs chat text into the text input unit 214, the text control unit 212 receives the text input as text data and generates a chat information signal with the chat type set to normal chat (step S11). The conference terminal 210 is specified as the destination included in this chat information signal. The chat transmission/reception unit 211 transmits the chat information signal generated by the text control unit 212 to the conference server 100 (step S12). The chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50.
会議サーバ１００では、チャット通信部１１１が会議端末２０１から送信されたチャット情報信号を受信し、チャット情報信号をチャット制御部１１２に供給する（ステップＳ１３）。チャット制御部１１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ１４）。この受信チャット情報信号のチャット種別は通常チャットであるので、チャット制御部１１２は、チャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ１５）。 In the conference server 100, the chat communication unit 111 receives the chat information signal transmitted from the conference terminal 201 and supplies the chat information signal to the chat control unit 112 (step S13). The chat control unit 112 determines the chat type contained in the chat information signal (step S14). Since the chat type of this received chat information signal is normal chat, the chat control unit 112 determines the destination of the chat information signal and transmits the chat information signal to the destination conference terminal 210 via the chat communication unit 111 (step S15).
会議端末２１０では、チャット送受信部２１１が会議サーバ１００からのチャット情報信号を受信し（ステップＳ１６）、チャット制御部２１２はチャット情報信号に含まれるチャット種別が通常チャットと音声変換チャットとのいずれであるかを判断し（ステップＳ１７）、通常チャットであるならば、チャット情報信号に含まれるチャット情報を表示部２１３に供給し、それにより表示部２１３がチャット情報の内容を文字によって表示する（ステップＳ１８）。 In the conference terminal 210, the chat transmission/reception unit 211 receives a chat information signal from the conference server 100 (step S16), and the chat control unit 212 determines whether the chat type included in the chat information signal is normal chat or voice-converted chat (step S17). If it is normal chat, the chat information included in the chat information signal is supplied to the display unit 213, which then displays the contents of the chat information in text (step S18).
この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が入力したチャット内容を表示部２１３に表示される文字で確認することができる。 As a result, the conference participants at the conference terminal 210 can check the chat content entered by the conference participants at the conference terminal 201 by the text displayed on the display unit 213.
次いで、図５に示すように、会議端末２０１において、会議参加者が文字入力部２１４を操作してチャットの文字入力を行い、また、音声変換指定を行うと、文字入力部２１４のチャットの文字データ及び音声変換指定を含む出力に応じてチャット制御部２１２がチャット種別を音声変換チャットとしたチャット情報信号を作成する（ステップＳ２１）。文字制御部２１２によって生成されたチャット情報信号は会議サーバ１００に向けて送信される（ステップＳ２２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 5, when a conference participant operates the character input unit 214 in the conference terminal 201 to input chat characters and specify voice conversion, the chat control unit 212 creates a chat information signal with the chat type set to voice conversion chat in response to the output of the character input unit 214 including the chat character data and voice conversion specification (step S21). The chat information signal created by the character control unit 212 is sent to the conference server 100 (step S22). The chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50.
会議サーバ１００では、チャット通信部１１１が会議端末２０１からチャット情報信号を受信し（ステップＳ２３）、チャット制御部１１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ２４）。この受信チャット情報信号のチャット種別は音声変換チャットであるので、チャット制御部１１２は文字音声変換部１３１にチャット情報信号中の文字データを供給する（ステップＳ２５）。文字データが供給された文字音声変換部１３１は、音声エンジン１３２を使用して文字データを音声データに変換し（ステップＳ２６）、その音声データを音声制御部１２２に供給する（ステップＳ２７）。音声制御部１２２は音声データが供給されると、その音声データを含む音声情報信号を生成してそれを音声通信部１２１に供給してその音声情報信号の送信を指示する（ステップＳ２８）。音声通信部１２１は音声情報信号を送信先に向けて送信する（ステップＳ２９）。よって、音声情報信号は会議サーバ１００から通信回線５０を介して会議端末２１０に伝送される。 In the conference server 100, the chat communication unit 111 receives a chat information signal from the conference terminal 201 (step S23), and the chat control unit 112 determines the chat type contained in the chat information signal (step S24). Since the chat type of the received chat information signal is a voice-converted chat, the chat control unit 112 supplies the character data in the chat information signal to the character-to-voice conversion unit 131 (step S25). The character-to-voice conversion unit 131 to which the character data is supplied converts the character data into voice data using the voice engine 132 (step S26), and supplies the voice data to the voice control unit 122 (step S27). When the voice data is supplied, the voice control unit 122 generates a voice information signal including the voice data and supplies it to the voice communication unit 121 to instruct the transmission of the voice information signal (step S28). The voice communication unit 121 transmits the voice information signal to the destination (step S29). Thus, the voice information signal is transmitted from the conference server 100 to the conference terminal 210 via the communication line 50.
なお、ステップＳ２８の音声制御部１２２における音声情報信号の生成には、音声データを示すデータ種別、チャット変換音声の有無を示す種別の他に、送信元及び送信先の情報が必要であるので、音声制御部１２２は送信元及び送信先の情報を、チャット制御部１１２に供給されたチャット情報信号から直接、又は文字音声変換部１３１を介して得ることになる。 In addition, in order to generate the voice information signal in the voice control unit 122 in step S28, information on the sender and destination is required in addition to the data type indicating the voice data and the type indicating whether or not chat conversion voice is present. Therefore, the voice control unit 122 obtains the information on the sender and destination directly from the chat information signal supplied to the chat control unit 112 or via the character-to-speech conversion unit 131.
会議端末２１０では、音声送受信部２２１が会議サーバ１００から送信された音声情報信号を受信し（ステップＳ３０）、受信した音声情報信号は音声制御部２２２に供給され、音声情報信号に含まれる音声データが音声制御部２２２から音声再生部２２３に供給され、音声再生部２２３によって音声出力される（ステップＳ３１）。 In the conference terminal 210, the audio transmission/reception unit 221 receives the audio information signal transmitted from the conference server 100 (step S30), the received audio information signal is supplied to the audio control unit 222, the audio data contained in the audio information signal is supplied from the audio control unit 222 to the audio playback unit 223, and the audio is output by the audio playback unit 223 (step S31).
この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が入力したチャット内容を音声再生部２２３から出力される音声で確認することができる。よって、会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 As a result, the conference participant at the conference terminal 210 can confirm the chat contents entered by the conference participant at the conference terminal 201 through the audio output from the audio playback unit 223. This makes it possible to avoid a situation in which a conference participant does not notice the chat displayed on the screen of his or her own conference terminal during an online conference.
なお、上記した実施例１では、チャット情報信号及び音声情報信号の各々に含まれる送信先は１つの端末に限らず、複数の端末でも良い。送信先が複数の会議端末であるならば、例えば、音声情報信号を受信した複数の会議端末の会議参加者がチャット内容を音声再生部から出力される音声で同時に確認することができる。また、送信先は会議端末２０１～２１０に限らず、会議サーバ１００でも良いことは勿論である。
（実施例２）
実施例２のオンライン会議システムは図１に示した構成を有し、オンライン会議サーバ１００は図２に示した通りである。オンライン会議端末２０１～２１０は図６に示すように、既に図３に示した構成の他に文字音声変換部２３１と、音声エンジン２３２とを有している。
In the above-described first embodiment, the destination included in each of the chat information signal and the voice information signal is not limited to one terminal, but may be multiple terminals. If the destination is multiple conference terminals, for example, the conference participants of the multiple conference terminals that receive the voice information signal can simultaneously check the chat contents by the voice output from the voice reproduction unit. In addition, the destination is not limited to the conference terminals 201 to 210, but may of course be the conference server 100.
Example 2
The online conference system of the second embodiment has the configuration shown in Fig. 1, and the online conference server 100 is as shown in Fig. 2. As shown in Fig. 6, the online conference terminals 201 to 210 each have a character-to-speech conversion unit 231 and a voice engine 232 in addition to the configuration already shown in Fig. 3.
文字音声変換部２３１及び音声エンジン２３２は図２に示した文字音声変換部１３１及び音声エンジン１３２と同一である。文字音声変換部２３１はチャット制御部２１２から供給される文字データを文字毎に解析し、音声エンジン２３２を使用して音声データを生成してその音声データを音声制御部２２２に供給する。音声エンジン２３２は文字毎の音声データを記憶しており、文字単位で文字データを音声データに変換する。 The text-to-speech conversion unit 231 and the voice engine 232 are the same as the text-to-speech conversion unit 131 and the voice engine 132 shown in FIG. 2. The text-to-speech conversion unit 231 analyzes the text data supplied from the chat control unit 212 for each character, generates voice data using the voice engine 232, and supplies the voice data to the voice control unit 222. The voice engine 232 stores voice data for each character, and converts the text data into voice data on a character-by-character basis.
その他の実施例２の会議システムの構成は実施例１の会議システムと同一であり、その同一部分には同一符号が付けられている。 The rest of the configuration of the conference system of Example 2 is the same as that of the conference system of Example 1, and the same parts are given the same reference numerals.
次に、かかる構成の実施例２の会議システムの動作例を図７及び図８のシーケンス図を用いて説明する。この動作例は、会議が開始された状態（ステップＳ４０）で、会議端末２０１が会議端末２１０に対してチャット情報を送信する場合である。 Next, an operation example of the conference system of the second embodiment having such a configuration will be described with reference to the sequence diagrams of Figs. 7 and 8. This operation example is a case where the conference terminal 201 transmits chat information to the conference terminal 210 when the conference has started (step S40).
図７に示すように、会議中において、先ず、会議端末２０１の会議参加者が文字入力部２１４に対してチャットの文字入力を行うと、その文字入力を受けて文字制御部２１２はチャット種別を通常チャットとしたチャット情報信号を生成する（ステップＳ４１）。このチャット情報信号に含まれる送信先には会議端末２１０が指定される。チャット送受信部２１１は文字制御部２１２によって生成されたチャット情報信号を会議サーバ１００に向けて送信する（ステップＳ４２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 As shown in FIG. 7, during a conference, first, when a conference participant of the conference terminal 201 inputs chat text into the text input unit 214, the text control unit 212 receives the text input and generates a chat information signal with the chat type set to normal chat (step S41). The conference terminal 210 is specified as the destination included in this chat information signal. The chat transmission/reception unit 211 transmits the chat information signal generated by the text control unit 212 to the conference server 100 (step S42). The chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50.
会議サーバ１００では、チャット通信部１１１が会議端末２０１から送信されたチャット情報信号を受信し（ステップＳ４３）、チャット情報信号をチャット制御部１１２に供給する。チャット制御部１１２はチャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ４４）。 In the conference server 100, the chat communication unit 111 receives the chat information signal transmitted from the conference terminal 201 (step S43) and supplies the chat information signal to the chat control unit 112. The chat control unit 112 determines the destination of the chat information signal and transmits the chat information signal to the destination conference terminal 210 via the chat communication unit 111 (step S44).
会議端末２１０では、チャット送受信部２１１が会議サーバ１００からのチャット情報信号を受信し（ステップＳ４５）、チャット制御部２１２はチャット情報信号に含まれるチャット種別が通常チャットと音声変換チャットとのいずれであるかを判断し（ステップＳ４６）、通常チャットであるならば、チャット情報信号に含まれるチャット情報を表示部２１３に供給し、それにより表示部２１３がチャット情報の内容を文字によって表示する（ステップＳ４７）。 In the conference terminal 210, the chat transmission/reception unit 211 receives a chat information signal from the conference server 100 (step S45), and the chat control unit 212 determines whether the chat type included in the chat information signal is normal chat or voice-converted chat (step S46). If it is normal chat, the chat information included in the chat information signal is supplied to the display unit 213, which then displays the contents of the chat information in text (step S47).
このようにチャット情報信号に含まれるチャット種別が通常チャットである場合のステップＳ４１～Ｓ４７は、図４に示したステップＳ１４の会議サーバ１００によるチャット種別の判断動作がない以外はステップＳ１１～Ｓ１８と同一である。 In this way, when the chat type included in the chat information signal is a normal chat, steps S41 to S47 are the same as steps S11 to S18, except that the conference server 100 does not perform the chat type determination operation of step S14 shown in FIG. 4.
この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が入力したチャット内容を表示部２１３に表示される文字で確認することができる。 As a result, the conference participants at the conference terminal 210 can check the chat content entered by the conference participants at the conference terminal 201 by the text displayed on the display unit 213.
次いで、図８に示すように、会議端末２０１において、会議参加者が文字入力部２１４を操作してチャットの文字入力を行い、また、音声変換指定を行うと、文字入力部２１４のチャットの文字データ及び音声変換指定を含む出力に応じてチャット制御部２１２がチャット種別を音声変換チャットとしたチャット情報信号を作成する（ステップＳ５１）。文字制御部２１２によって生成されたチャット情報信号は会議サーバ１００に向けて送信される（ステップＳ５２）。チャット情報信号は会議端末２０１から通信回線５０を介して会議サーバ１００に伝送される。 8, when a conference participant operates the character input unit 214 in the conference terminal 201 to input chat characters and specify voice conversion, the chat control unit 212 creates a chat information signal with the chat type set to voice conversion chat in response to the output of the character input unit 214 including the chat character data and voice conversion specification (step S51). The chat information signal created by the character control unit 212 is sent to the conference server 100 (step S52). The chat information signal is transmitted from the conference terminal 201 to the conference server 100 via the communication line 50.
会議サーバ１００では、チャット受信部１１１が会議端末２０１から送信されたチャット情報信号を受信し（ステップＳ５３）、チャット情報信号をチャット制御部１１２に供給する。チャット制御部１１２はチャット情報信号の送信先を判断し、チャット通信部１１１を介して送信先の会議端末２１０に向けてチャット情報信号を送信する（ステップＳ５４）。 In the conference server 100, the chat receiving unit 111 receives the chat information signal transmitted from the conference terminal 201 (step S53) and supplies the chat information signal to the chat control unit 112. The chat control unit 112 determines the destination of the chat information signal and transmits the chat information signal to the destination conference terminal 210 via the chat communication unit 111 (step S54).
会議端末２１０では、チャット送受信部２１１が会議サーバ１００からチャット情報信号を受信し（ステップＳ５５）、チャット制御部２１２はチャット情報信号内に含まれるチャット種別を判断する（ステップＳ５６）。この受信チャット情報信号のチャット種別は音声変換チャットであるので、チャット制御部２１２は文字音声変換部２３１にチャット情報信号中の文字データを供給する（ステップＳ５７）。文字データが供給された文字音声変換部２３１は、音声エンジン２３２を使用して文字データを音声データに変換し（ステップＳ５８）、その音声データを音声再生指示と共に音声制御部２２２に供給する（ステップＳ５９）。音声制御部２２２は音声再生指示と共に音声データが供給されると、その音声データを音声再生部２２３に供給し、これにより、音声再生部２２３は音声データが示す音声を出力する（ステップＳ６０）。 In the conference terminal 210, the chat transmission/reception unit 211 receives a chat information signal from the conference server 100 (step S55), and the chat control unit 212 determines the chat type contained in the chat information signal (step S56). Since the chat type of this received chat information signal is a voice-converted chat, the chat control unit 212 supplies the character data in the chat information signal to the character-to-speech conversion unit 231 (step S57). The character-to-speech conversion unit 231, to which the character data has been supplied, converts the character data into voice data using the voice engine 232 (step S58), and supplies the voice data together with a voice playback instruction to the voice control unit 222 (step S59). When the voice control unit 222 receives the voice data together with the voice playback instruction, it supplies the voice data to the voice playback unit 223, which causes the voice playback unit 223 to output the voice indicated by the voice data (step S60).
この結果、会議端末２１０の会議参加者は、会議端末２０１の会議参加者が文字入力したチャット内容を音声再生部２２３から出力される音声で確認することができる。よって、会議参加者がオンライン会議中に自身の会議端末の画面に表示されたチャットに気が付かずにいるというような状況を回避させることができる。 As a result, the conference participant at the conference terminal 210 can confirm the chat contents entered by the conference participant at the conference terminal 201 through the audio output from the audio playback unit 223. This makes it possible to avoid a situation where a conference participant does not notice the chat displayed on the screen of his/her own conference terminal during an online conference.
また、送信先は複数の会議端末２０１～２１０に対しても可能であり、同時に複数の会議参加者に対してチャット内容を音声で聞かせることが可能となる。更に、実施例２では実施例１と異なり、会議サーバ１００ではチャット情報信号中の文字データを音声データに変換することなく、会議端末２０１～２１０で文字データを音声データに変換して音声再生を行うので、会議サーバ１００の負荷を低減させることが可能である。 The destination can also be multiple conference terminals 201-210, making it possible to play the chat contents as audio to multiple conference participants at the same time. Furthermore, in Example 2, unlike Example 1, the conference server 100 does not convert the character data in the chat information signal into audio data, but the conference terminals 201-210 convert the character data into audio data and play the audio, making it possible to reduce the load on the conference server 100.
なお、実施例１及び２のオンライン会議システムでは音声及びチャットによるオンライン会議であるが、映像、音声及びチャットを会議端末間で送受信するオンライン会議システムにおいても本発明を適用することができる。 Note that, although the online conference systems of the first and second embodiments are based on audio and chat, the present invention can also be applied to online conference systems that transmit and receive video, audio, and chat between conference terminals.
５０ 通信回線
１００ 会議サーバ１００
１１１ チャット通信部
１１２、２１２ チャット制御部
１２１ 音声通信部
１２２、２２２ 音声制御部
１３１、２３１ 文字音声変換部
１３２、２３２ 音声エンジン
２０１～２１０ 会議端末
２１１ チャット送受信部
２１３ 表示部
２１４ 文字入力部
２２１ 音声送受信部
２２３ 音声再生部
２２４ 音声入力部
50 Communication line 100 Conference server 100
111 Chat communication unit 112, 212 Chat control unit 121 Voice communication unit 122, 222 Voice control unit 131, 231 Character-to-speech conversion unit 132, 232 Voice engine 201 to 210 Conference terminal 211 Chat transmission/reception unit 213 Display unit 214 Character input unit 221 Voice transmission/reception unit 223 Voice playback unit 224 Voice input unit
Claims (8)
前記複数の会議端末の各々は、
音声を入力してその入力音声を示す音声データを出力する音声入力部と、
前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、
前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、
操作入力によって文字を示す文字データを出力する文字入力部と、
前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、を含み、
前記会議サーバは、
前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信部によって送信された前記チャット情報信号を受信するチャット通信部と、
前記チャット通信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、
前記文字音声変換部によって出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信部と、を含むことを特徴とするオンライン会議システム。 An online conference system including a conference server and a plurality of conference terminals connected to each other in a communicable manner,
Each of the plurality of conference terminals
a voice input unit which receives voice and outputs voice data representing the input voice;
a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server;
a voice reproduction unit that reproduces and outputs the voice data in the voice information signal received by the voice transmission/reception unit as voice;
a character input unit that outputs character data indicating a character according to an operation input;
a chat transmission/reception unit that transmits and receives a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server,
The conference server,
a chat communication unit that receives the chat information signal transmitted by the chat transmission/reception unit of a source conference terminal among the plurality of conference terminals;
a character-to-speech conversion unit that converts the character data in the chat information signal received by the chat communication unit into voice data and outputs the voice data;
an audio communication unit that transmits the audio data output by the character-to-speech conversion unit as the audio information signal to the destination conference terminal of the received chat information signal.
前記会議サーバは、前記チャット通信部によって受信された前記チャット情報信号中の前記付加情報が前記通常処理及び前記音声変換処理のうちのいずれを示すかを判断するチャット制御部を含み、
前記チャット通信部は、前記チャット通信部によって受信された前記チャット情報信号中の前記付加情報が前記通常処理を示すときに当該受信された前記チャット情報信号を前記送信先の会議端末に送信し、
前記文字音声変換部は、前記チャット通信部によって受信された前記チャット情報信号中の前記付加情報が前記音声変換処理を示すときに前記チャット情報信号中の前記文字データを変換して前記音声データを出力することを特徴とする請求項１記載のオンライン会議システム。 the chat information signal transmitted and received by the chat transmission/reception unit includes additional information indicating whether the processing method of the character data is normal processing or voice conversion processing,
the conference server includes a chat control unit that determines whether the additional information in the chat information signal received by the chat communication unit indicates the normal process or the voice conversion process;
the chat communication unit transmits the received chat information signal to the destination conference terminal when the additional information in the chat information signal received by the chat communication unit indicates the normal process;
The online conference system according to claim 1, characterized in that the character-to-speech conversion unit converts the character data in the chat information signal and outputs the voice data when the additional information in the chat information signal received by the chat communication unit indicates the voice conversion process.
前記複数の会議端末の各々は、
音声を入力してその入力音声を示す音声データを出力する音声入力部と、
前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、
前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、
操作入力によって文字を示す文字データを出力する文字入力部と、
前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、
前記チャット送受信部によって受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換部と、を含み、
前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴とするオンライン会議システム。 An online conference system including a conference server and a plurality of conference terminals connected to each other in a communicable manner,
Each of the plurality of conference terminals
a voice input unit which receives voice and outputs voice data representing the input voice;
a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server;
a voice reproduction unit that reproduces and outputs the voice data in the voice information signal received by the voice transmission/reception unit as voice;
a character input unit that outputs character data indicating a character according to an operation input;
a chat transmission/reception unit that transmits and receives a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server;
a character-to-speech conversion unit that converts the character data in the chat information signal received by the chat transmission/reception unit into voice data and outputs the voice data,
The online conference system is characterized in that the voice playback unit plays back and outputs the voice data converted from the character data by the character-to-speech conversion unit as voice.
前記複数の会議端末の各々は、
前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が前記通常処理及び前記音声変換処理のうちのいずれを示すかを判断するチャット制御部と、
前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が前記通常処理を示すときに当該受信された前記チャット情報信号中の前記文字データに応じてチャット内容を文字で表示する表示部と、を含み、
前記文字音声変換部は、前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が前記音声変換処理を示すときに前記チャット情報信号中の前記文字データを変換して前記音声データを出力することを特徴とする請求項４記載のオンライン会議システム。 the chat information signal transmitted and received by the chat transmission/reception unit includes additional information indicating whether the processing method of the character data is normal processing or voice conversion processing,
Each of the plurality of conference terminals
a chat control unit that determines whether the additional information in the chat information signal received by the chat transmission/reception unit indicates the normal processing or the voice conversion processing;
a display unit that displays chat contents in characters according to the character data in the chat information signal received by the chat transmission/reception unit when the additional information in the chat information signal received by the chat transmission/reception unit indicates the normal process,
The online conference system according to claim 4, characterized in that the character- to -speech conversion unit converts the character data in the chat information signal and outputs the voice data when the additional information in the chat information signal received by the chat transmission/reception unit indicates the voice conversion process.
音声を入力してその入力音声を示す音声データを出力する音声入力部と、
前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信部と、
前記音声送受信部によって受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生部と、
操作入力によって文字を示す文字データを出力する文字入力部と、
前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報と、前記文字データの処理方法が通常処理及び音声変換処理のうちのいずれであるかを示す付加情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信部と、
前記チャット送受信部によって受信された前記チャット情報信号中の前記付加情報が前記音声変換処理を示すときに前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換部と、を含み、
前記音声再生部は、前記文字音声変換部によって前記文字データから変換された前記音声データを音声として再生出力することを特徴とするオンライン会議端末。 An online conference terminal connected to a conference server so as to be able to communicate with each other,
a voice input unit which receives voice and outputs voice data representing the input voice;
a voice transmission/reception unit that transmits and receives a voice information signal including the voice data via the conference server;
a voice reproduction unit that reproduces and outputs the voice data in the voice information signal received by the voice transmission/reception unit as voice;
a character input unit that outputs character data indicating a character according to an operation input;
a chat transmission/reception unit that transmits/receives, via the conference server, a chat information signal including the character data , information indicating a destination conference terminal among the plurality of conference terminals, and additional information indicating whether a method of processing the character data is normal processing or voice conversion processing;
a character- to -speech conversion unit that converts the character data in the chat information signal into the voice data when the additional information in the chat information signal received by the chat transmission/reception unit indicates the voice conversion process,
The online conference terminal is characterized in that the audio playback unit plays back and outputs the audio data converted from the character data by the character-to-speech conversion unit as audio.
前記複数の会議端末の各々は、
音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、
前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、
前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、
操作入力によって文字を示す文字データを出力する文字入力ステップと、
前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、を含み、
前記会議サーバは、
前記複数の会議端末のうちの送信元の会議端末の前記チャット送受信ステップによって送信された前記チャット情報信号を受信するチャット通信ステップと、
前記チャット通信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換してそれを出力する文字音声変換ステップと、
前記文字音声変換ステップにおいて出力された前記音声データを前記音声情報信号として当該受信された前記チャット情報信号の前記送信先の会議端末に送信する音声通信ステップと、を含むことを特徴とするチャット制御方法。 A chat control method for an online conference system including a conference server and a plurality of conference terminals connected to each other in a communicable manner,
Each of the plurality of conference terminals
a voice input step of inputting a voice and outputting voice data representing the input voice;
a voice transmission/reception step of transmitting and receiving a voice information signal including the voice data via the conference server;
a voice reproducing step of reproducing and outputting the voice data in the voice information signal received in the voice transmitting/receiving step as voice;
a character input step of outputting character data indicating a character according to an operation input;
a chat transmission/reception step of transmitting/receiving a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals via the conference server,
The conference server,
a chat communication step of receiving the chat information signal transmitted by the chat transmission/reception step of a source conference terminal among the plurality of conference terminals;
a character-to-speech conversion step of converting the character data in the chat information signal received in the chat communication step into voice data and outputting the voice data;
a voice communication step of transmitting the voice data output in the character-to-speech conversion step as the voice information signal to the conference terminal of the destination of the received chat information signal.
前記複数の会議端末の各々は、
音声を入力してその入力音声を示す音声データを出力する音声入力ステップと、
前記音声データを含む音声情報信号を前記会議サーバを介して送受信する音声送受信ステップと、
前記音声送受信ステップにおいて受信された前記音声情報信号中の前記音声データを音声として再生出力する音声再生ステップと、
操作入力によって文字を示す文字データを出力する文字入力ステップと、
前記文字データと、前記複数の会議端末のうちの送信先の会議端末を示す情報とを含むチャット情報信号を前記会議サーバを介して送受信するチャット送受信ステップと、
前記チャット送受信ステップにおいて受信された前記チャット情報信号中の前記文字データを前記音声データに変換する文字音声変換ステップと、を含み、
前記音声再生ステップは、前記文字音声変換ステップによって前記文字データから変換された前記音声データを音声として再生出力することを特徴とするチャット制御方法。 A chat control method for an online conference system including a conference server and a plurality of conference terminals connected to each other in a communicable manner,
Each of the plurality of conference terminals
a voice input step of inputting a voice and outputting voice data representing the input voice;
a voice transmission/reception step of transmitting and receiving a voice information signal including the voice data via the conference server;
a voice reproducing step of reproducing and outputting the voice data in the voice information signal received in the voice transmitting/receiving step as voice;
a character input step of outputting character data indicating a character according to an operation input;
a chat transmission/reception step of transmitting/receiving, via the conference server, a chat information signal including the character data and information indicating a destination conference terminal among the plurality of conference terminals;
a character-to-speech conversion step of converting the character data in the chat information signal received in the chat transmission/reception step into voice data,
A chat control method, wherein the voice reproducing step reproduces and outputs, as voice, the voice data converted from the character data in the character-to-speech converting step .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021141511A JP7707767B2 (en) | 2021-08-31 | 2021-08-31 | Online conference system, online conference terminal, and chat control method for online conference system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021141511A JP7707767B2 (en) | 2021-08-31 | 2021-08-31 | Online conference system, online conference terminal, and chat control method for online conference system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023034965A JP2023034965A (en) | 2023-03-13 |
| JP7707767B2 true JP7707767B2 (en) | 2025-07-15 |
Family
ID=85504602
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021141511A Active JP7707767B2 (en) | 2021-08-31 | 2021-08-31 | Online conference system, online conference terminal, and chat control method for online conference system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7707767B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000023132A (en) | 1998-07-06 | 2000-01-21 | Canon Inc | Data communication control device, control method therefor, and data communication system |
| US20090003576A1 (en) | 2007-06-29 | 2009-01-01 | Verizon Data Services Inc. | System and method for providing call and chat conferencing |
| JP2012257116A (en) | 2011-06-09 | 2012-12-27 | Hitachi Ltd | Text and telephone conference system and text and telephone conference method |
| JP2018515981A (en) | 2015-07-29 | 2018-06-14 | グーグル エルエルシー | System and method for automatic reconnection of communications |
-
2021
- 2021-08-31 JP JP2021141511A patent/JP7707767B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000023132A (en) | 1998-07-06 | 2000-01-21 | Canon Inc | Data communication control device, control method therefor, and data communication system |
| US20090003576A1 (en) | 2007-06-29 | 2009-01-01 | Verizon Data Services Inc. | System and method for providing call and chat conferencing |
| JP2012257116A (en) | 2011-06-09 | 2012-12-27 | Hitachi Ltd | Text and telephone conference system and text and telephone conference method |
| JP2018515981A (en) | 2015-07-29 | 2018-06-14 | グーグル エルエルシー | System and method for automatic reconnection of communications |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023034965A (en) | 2023-03-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3651508B2 (en) | Information processing apparatus and information processing method | |
| JP2008099330A (en) | Information processing device, mobile phone | |
| JP4738058B2 (en) | Efficient routing of real-time multimedia information | |
| US12406652B2 (en) | Electronic collaboration and communication method and system to facilitate communication with hearing or speech impaired participants | |
| US11764984B2 (en) | Teleconference method and teleconference system | |
| JP2009194661A (en) | Conference terminal | |
| JP7707767B2 (en) | Online conference system, online conference terminal, and chat control method for online conference system | |
| US20220308825A1 (en) | Automatic toggling of a mute setting during a communication session | |
| JP2007201916A (en) | PoC data transmission method, PoC call system and apparatus | |
| JP2006203548A (en) | Voice signal processor for processing voice signals of a plurality of speakers, and program | |
| JP2001224000A (en) | Multipoint video conference system | |
| JP2006229903A (en) | Conference supporting system, method and computer program | |
| JP6610076B2 (en) | Information processing apparatus, information processing system, program, and recording medium | |
| JP5136823B2 (en) | PoC system with fixed message function, communication method, communication program, terminal, PoC server | |
| JP2010093479A (en) | Conference system and conference terminal device | |
| JP2003008778A (en) | Internet multi-call system | |
| JP2003339034A (en) | Network conference system, network conference method, and network conference program | |
| JP4768578B2 (en) | Video conference system and control method in video conference system | |
| JP4531013B2 (en) | Audiovisual conference system and terminal device | |
| CN113079267B (en) | Audio conferencing in a room | |
| JP2004007482A (en) | Telephone conference server and system therefor | |
| WO2024161545A1 (en) | Information processing device, information processing method, and information processing program | |
| JP2003163906A (en) | Video conference system and video conference method | |
| JP2022179354A (en) | Information processing apparatus and program | |
| JP2006210973A (en) | Communication terminal device and session connection method thereof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240508 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250318 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250228 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250515 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250603 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250616 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7707767 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |