JP5614554B2

JP5614554B2 - Music playback system, music playback device, and program for music playback

Info

Publication number: JP5614554B2
Application number: JP2012212441A
Authority: JP
Inventors: 稲葉　道夫; 道夫稲葉
Original assignee: Brother Industries Ltd
Current assignee: Brother Industries Ltd
Priority date: 2012-09-26
Filing date: 2012-09-26
Publication date: 2014-10-29
Anticipated expiration: 2032-09-26
Also published as: JP2014066894A

Description

本発明は、サーバ装置にて生成された音楽波形データを音楽再生装置に対してストリーム配信する音楽再生システム、並びに、音楽再生装置、音楽再生装置にて実行可能な音楽再生用プログラムに関する。 The present invention relates to a music playback system that streams music waveform data generated by a server device to a music playback device, a music playback device, and a music playback program that can be executed by the music playback device.

従来、音楽再生装置は、自己が記憶する音楽情報に基づいて音楽を再生することが一般的であった。現在では、通信回線の発達に伴い、高品質の音声情報が送信可能となり、サーバ装置にてストリーミング配信された音楽を再生することも一般的となっている。 Conventionally, a music playback device generally plays music based on music information stored by itself. At present, along with the development of communication lines, high-quality audio information can be transmitted, and it is also common to play music that has been streamed by a server device.

特許文献１、２には、このような通信回線を使用してストリーミング配信を行う音楽再生装置が開示されている。特に、特許文献２にて開示される音楽再生装置（カラオケ装置）は、キー（音程）変更やガイドメロディ音量の変更を可能としている。ストリームを受信したカラオケ装置は、キーコンを使用することで、キーコン適応除外パートを除く、通常音楽データに対してキー変更を行う。一方、ガイドメロディの音量の変更は、カラオケ装置側にて受信したガイドメロディパートの音量を調整して再生することで行われている。 Patent Documents 1 and 2 disclose music playback apparatuses that perform streaming distribution using such a communication line. In particular, the music playback device (karaoke device) disclosed in Patent Document 2 enables a key (pitch) change and a guide melody volume change. The karaoke apparatus that has received the stream uses the keycon to change the key for the normal music data except for the keycon exclusion part. On the other hand, the volume of the guide melody is changed by adjusting the volume of the guide melody part received on the karaoke apparatus side and reproducing it.

特開２００６−２０１２７２号公報JP 2006-201272 A 特開２００２−２９７１６４号公報JP 2002-297164 A

現在、パーソナルコンピュータ、あるいは、スマートフォンなどの携帯情報端末などの情報処理装置は、インターネットに接続可能な通信手段を備えることで、前述したような各種ストリームを受信可能としたものが多く見られる。このような各種情報処理装置に対して、特許文献２に記載されるカラオケ装置の機能を持たせることが考えられる。 Currently, information processing apparatuses such as personal computers or portable information terminals such as smartphones are often provided with communication means that can be connected to the Internet so that various streams as described above can be received. It is conceivable that such various information processing apparatuses have the function of the karaoke apparatus described in Patent Document 2.

特許文献２に記載のカラオケ装置では、キー変更を行うための機能構成（キーコン機能）をカラオケ装置側に備えたものとなっている。特許文献２に記載の機能を情報処理装置に適用する場合、キーコン機能を搭載する必要があり、情報処理装置側での処理負担が増大することとなる。また、簡易なキーコンを使用した場合、音質が劣化する、あるいは、音響的な違和感が生ずるなどの問題が生じる。 In the karaoke apparatus described in Patent Document 2, the karaoke apparatus is provided with a functional configuration (keyboard function) for changing keys. When the function described in Patent Document 2 is applied to an information processing apparatus, it is necessary to mount a keycon function, which increases the processing load on the information processing apparatus side. In addition, when a simple keycon is used, problems such as deterioration in sound quality or a feeling of acoustic discomfort arise.

また、ガイドメロディの音量を調整する、あるいは、ガイドメロディをオン／オフする場合、特許文献２に記載の機能では、カラオケ装置側で受信したガイドメロディの音量を調整する、あるいは、ガイドメロディを再生、非再生に切り替えることとしており、カラオケ装置に対しては、ガイドメロディのデータをカラオケ装置に送信する必要が伴う。そのため、送信すべきデータ量は大きくなり、通信回線を圧迫するとともに、受信側での処理が増大することが考えられる。 When adjusting the volume of the guide melody or turning on / off the guide melody, the function described in Patent Document 2 adjusts the volume of the guide melody received on the karaoke device side or reproduces the guide melody. The karaoke device needs to transmit guide melody data to the karaoke device. For this reason, the amount of data to be transmitted increases, and it is conceivable that the communication line is compressed and the processing on the receiving side increases.

本発明は、このような課題を解決することを目的とするものであり、そのため、以下の構成を採用したことを特徴としている。 The present invention aims to solve such problems, and is characterized by employing the following configuration.

本発明に係る音楽再生システムは、
サーバ装置と、前記サーバ装置にネットワークを介して接続される音楽再生装置を備える音楽再生システムにおいて、
前記サーバ装置は、波形生成手段と、送信手段と、サーバ側制御手段と、を備え、
前記波形生成手段は、音符を示す情報で構成された音楽情報に基づいて音楽波形データを生成し、
前記送信手段は、前記音楽波形データを含むとともに、楽曲内の位置情報が付与されたパケットで構成されたストリームを送信可能とし、
前記サーバ側制御手段は、
前記音楽再生装置から要求された楽曲に対応する音楽情報に基づいて生成された第１ストリームを前記音楽再生装置に送信する第１ストリーム生成処理と、
前記音楽再生装置から設定要求情報を受信した際、前記音楽再生装置から要求された前記楽曲に対応する前記音楽情報と、受信した前記設定要求情報に基づいて生成された第２ストリームを前記音楽再生装置に送信する第２ストリーム生成処理を実行可能とし、
前記音楽再生装置は、受信バッファと、端末側制御手段と、を備え、
前記受信バッファは、前記サーバ装置から送信された前記ストリーム内の前記パケットを蓄積可能とし、
前記端末側制御手段は、
入力手段から入力された前記設定要求情報を前記サーバ装置に送信する設定要求処理と、
前記受信バッファに蓄積された前記第１ストリーム内の前記パケットに含まれる前記音楽波形データを再生するとともに、前記設定要求処理を実行した後、前記第１ストリームにおける現在の再生位置に対応する前記第２ストリームの前記パケットが前記受信バッファに蓄積されていることを条件として、前記第２ストリームに再生位置を変更する再生処理と、を実行可能とし、
前記設定要求情報は、設定要求を受け付けたときの再生位置に対応する再生位置情報を含み、
前記第２ストリーム生成処理は、前記音楽情報の区切り位置中、前記再生位置情報に対応する前記区切り位置から前記音楽波形データの生成を開始させることを特徴とする。
A music playback system according to the present invention includes:
In a music playback system comprising a server device and a music playback device connected to the server device via a network,
The server device includes waveform generation means, transmission means, and server-side control means,
The waveform generation means generates music waveform data based on music information composed of information indicating musical notes ,
The transmission means includes the music waveform data, and can transmit a stream composed of packets to which position information in the music is attached.
The server side control means includes:
A first stream generation process for transmitting a first stream generated based on music information corresponding to the music requested from the music playback device to the music playback device;
When setting request information is received from the music playback device, the music information corresponding to the music requested from the music playback device and the second stream generated based on the received setting request information are played back as music. The second stream generation process to be transmitted to the device can be executed,
The music playback device includes a reception buffer and terminal-side control means,
The reception buffer can store the packets in the stream transmitted from the server device,
The terminal side control means includes
A setting request process for transmitting the setting request information input from the input means to the server device;
The music waveform data included in the packet in the first stream accumulated in the reception buffer is reproduced, and after executing the setting request process, the first corresponding to the current reproduction position in the first stream. A reproduction process of changing a reproduction position to the second stream on condition that the packets of two streams are accumulated in the reception buffer ;
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
The second stream generation process is characterized in that generation of the music waveform data is started from the break position corresponding to the reproduction position information during the break position of the music information .

さらに本発明に係る音楽再生システムにおいて、
前記設定要求情報は、音程変更の指定を含み、
前記第２ストリーム生成処理は、受信した前記設定要求情報に基づいて、前記波形生成手段に音程を変更させることを特徴とする。 Furthermore, in the music playback system according to the present invention,
The setting request information includes a pitch change designation,
The second stream generation process is characterized in that the waveform generation means is changed in pitch based on the received setting request information.

さらに本発明に係る音楽再生システムにおいて、
設定要求情報は、速度変更の指定を含み、
前記第２ストリーム生成処理は、受信した前記設定要求情報に基づいて、前記波形生成手段に速度を変更させることを特徴とする。 Furthermore, in the music playback system according to the present invention,
The setting request information includes designation of speed change,
The second stream generation process is characterized in that the waveform generation means changes the speed based on the received setting request information.

さらに本発明に係る音楽再生システムにおいて、
前記設定要求情報は、ガイドメロディ変更の指定を含み、
前記第２ストリーム生成処理は、受信した前記設定要求情報に基づいて、前記波形生成手段に、ガイドメロディのオン／オフもしくは音量を変更させることを特徴とする。 Furthermore, in the music playback system according to the present invention,
The setting request information includes a guide melody change specification,
The second stream generation processing is characterized in that the waveform generation means is made to turn on / off the guide melody or change the volume based on the received setting request information.

さらに本発明に係る音楽再生システムにおいて、
前記音楽情報の位置から生成された前記第２ストリームは、前記第１ストリームの前記再生位置情報に対応する位置以降の前記音楽波形データを全て含む事を特徴とする。 Furthermore, in the music playback system according to the present invention,
The second stream generated from the position of the music information includes all the music waveform data after the position corresponding to the reproduction position information of the first stream.

また本発明に係る音楽再生用装置は、
サーバ装置にネットワークを介して接続される音楽再生装置において、
前記サーバ装置は、第１ストリームと、前記音楽再生装置から受信した設定要求情報に応じて生成された第２ストリームと、を前記音楽再生装置に送信し、
前記第１ストリーム、前記第２ストリームは、音符を示す情報で構成された音楽情報に基づいて生成された音楽波形データを含むとともに、楽曲内の位置情報が付与されたパケットにて構成され、
前記音楽再生装置は、受信バッファと、端末側制御手段と、を備え
前記受信バッファは、前記サーバ装置から送信された前記ストリーム内の前記パケットを蓄積可能とし、
前記端末側制御手段は、
入力手段から入力された前記設定要求情報を前記サーバ装置に送信する設定要求処理と、
前記受信バッファに蓄積された第１ストリーム内の前記パケットに含まれる前記音楽波形データを再生するとともに、前記設定要求処理を実行した後、前記第１ストリームにおける現在の再生位置に対応する前記第２ストリームの前記パケットが前記受信バッファに蓄積されていることを条件として、前記第２ストリームに再生位置を変更する再生処理を実行可能とし、
前記設定要求情報は、設定要求を受け付けたときの再生位置に対応する再生位置情報を含み、
前記サーバ装置で生成される前記第２ストリームは、前記音楽情報の区切り位置中、前記再生位置情報に対応する前記区切り位置から開始されていることを特徴とする。
Moreover, the device for music playback according to the present invention is:
In a music playback device connected to a server device via a network,
The server device transmits a first stream and a second stream generated according to the setting request information received from the music playback device to the music playback device,
The first stream and the second stream include music waveform data generated based on music information including information indicating musical notes, and are configured by packets to which position information in music is given.
The music playback device includes a reception buffer and terminal-side control means. The reception buffer is capable of storing the packets in the stream transmitted from the server device,
The terminal side control means includes
A setting request process for transmitting the setting request information input from the input means to the server device;
After reproducing the music waveform data included in the packet in the first stream accumulated in the reception buffer and executing the setting request process, the second corresponding to the current reproduction position in the first stream On the condition that the packet of the stream is accumulated in the reception buffer, it is possible to execute a reproduction process for changing the reproduction position to the second stream ,
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
The second stream generated by the server device is characterized by starting from the break position corresponding to the reproduction position information in the break position of the music information .

また本発明に係る音楽再生用プログラムは、
サーバ装置にネットワークを介して接続される音楽再生装置にて実行可能な音楽再生用プログラムにおいて、
前記サーバ装置は、第１ストリームと、前記音楽再生装置から受信した設定要求情報に応じて生成された第２ストリームと、を前記音楽再生装置に送信し、
前記第１ストリーム、前記第２ストリームは、音符を示す情報で構成された音楽情報に基づいて生成された音楽波形データを含むとともに、楽曲内の位置情報が付与されたパケットにて構成され、
前記音楽再生用プログラムは、
入力手段から入力された前記設定要求情報を前記サーバ装置に送信する設定要求処理と、
前記受信バッファに蓄積された前記第１ストリーム内の前記パケットに含まれる音楽波形データを再生するとともに、前記設定要求処理を実行した後、前記第１ストリームにおける現在の再生位置に対応する前記第２ストリームの前記パケットが前記受信バッファに蓄積されていることを条件として、前記第２ストリームに再生位置を変更する再生処理を実行可能としたことを特徴とし、
前記設定要求情報は、設定要求を受け付けたときの再生位置に対応する再生位置情報を含み、
前記サーバ装置で生成される前記第２ストリームは、前記音楽情報の区切り位置中、前記再生位置情報に対応する前記区切り位置から開始されていることを特徴とする。 Moreover, the music playback program according to the present invention includes:
In a music playback program executable by a music playback device connected to a server device via a network,
The server device transmits a first stream and a second stream generated according to the setting request information received from the music playback device to the music playback device,
The first stream and the second stream include music waveform data generated based on music information including information indicating musical notes, and are configured by packets to which position information in music is given.
The music playback program is:
A setting request process for transmitting the setting request information input from the input means to the server device;
After reproducing the music waveform data included in the packet in the first stream accumulated in the reception buffer and executing the setting request process, the second corresponding to the current reproduction position in the first stream The reproduction processing for changing the reproduction position to the second stream can be executed on condition that the packet of the stream is accumulated in the reception buffer ,
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
The second stream generated by the server device is characterized by starting from the break position corresponding to the reproduction position information in the break position of the music information .

本発明によれば、聴取する音楽情報の再生に関する設定変更を、サーバ装置側で実行するため、音楽再生装置側での構成の簡略化、並びに、処理負担を軽減することが可能となる。また、サーバ装置側から送信するデータ量も抑えることが可能となる。また、第１ストリームから第２ストリームに再生位置を変更する際、条件を設けたことで、音楽再生が不自然に中断されることを抑制し、音楽再生に関する設定変更を行うことが可能となる。 According to the present invention, since the setting change related to the reproduction of the music information to be listened to is executed on the server device side, the configuration on the music reproduction device side can be simplified and the processing load can be reduced. In addition, the amount of data transmitted from the server device side can be suppressed. In addition, by providing a condition when changing the playback position from the first stream to the second stream, it is possible to suppress the music playback from being interrupted unnaturally and to change the settings related to music playback. .

このような音楽再生に関する設定変更は、音程変更、速度変更、ガイドメロディのオン／オフもしくは音量変更を採用することが可能である。音楽再生装置をカラオケ用に使用する場合、好適な再生環境を提供することが可能となる。 Such a setting change relating to music reproduction can employ pitch change, speed change, guide melody on / off, or volume change. When the music playback device is used for karaoke, a suitable playback environment can be provided.

さらに、第２ストリームの生成に関し、再生位置情報に対応する音楽情報の位置から音楽波形データの生成を開始させることで、不必要な音楽波形データの生成を抑制し、サー
バ装置側の処理負担を軽減するともに、再生位置の第２ストリームへの変更に要する時間をも最小限に抑えることが可能となる。 Furthermore, regarding generation of the second stream, generation of music waveform data is started from the position of the music information corresponding to the reproduction position information, thereby suppressing generation of unnecessary music waveform data and reducing the processing burden on the server device side. In addition to the reduction, it is possible to minimize the time required for changing the playback position to the second stream.

さらに、再生位置情報に対応する音楽情報の位置を、音楽情報の区切り位置から行うことで、音楽の再生速度を変更した場合でも、確実に再生位置に対応する位置から再生速度が変更された音楽波形データを生成する事ができる。さらに、再生位置における全ての音を含む位置から第２ストリームを生成することで、音楽波形データ内において音の不足が生じることを抑制することが可能となる。 In addition, by changing the music information position corresponding to the playback position information from the music information break position, even if the music playback speed is changed, the music whose playback speed has been reliably changed from the position corresponding to the playback position. Waveform data can be generated. Furthermore, by generating the second stream from a position including all the sounds at the reproduction position, it is possible to suppress a shortage of sounds in the music waveform data.

本発明の実施形態に係る音楽再生システムの構成を示す図The figure which shows the structure of the music reproduction system which concerns on embodiment of this invention. 本発明の実施形態に係る音楽再生装置の構成を示す図The figure which shows the structure of the music reproducing apparatus which concerns on embodiment of this invention. 本発明の実施形態に係る音楽再生システムにおける情報の送受信を説明するための図The figure for demonstrating transmission / reception of the information in the music reproduction system which concerns on embodiment of this invention 本発明の実施形態に係る音楽再生装置におけるＵＩプログラムを示すフロー図The flowchart which shows UI program in the music reproduction apparatus which concerns on embodiment of this invention 本発明の実施形態に係る音楽再生装置バッファ制御プログラムを示すフロー図The flowchart which shows the music playback apparatus buffer control program which concerns on embodiment of this invention 本発明の実施形態に係る再生処理における受信バッファの様子を説明するための図The figure for demonstrating the mode of the reception buffer in the reproduction | regeneration processing which concerns on embodiment of this invention 本発明の実施形態に係るサーバ装置側制御プログラムを示すフロー図The flowchart which shows the server apparatus side control program which concerns on embodiment of this invention 本発明の実施形態に係る音楽情報の再生再開位置を説明するための図The figure for demonstrating the reproduction resumption position of the music information which concerns on embodiment of this invention

図１は、本発明の実施形態に係る音楽再生システムの構成を示す図である。本発明の音楽再生装置は、音楽情報に基づいて生成されたストリームをネットワーク（インターネット）に送信するサーバ装置１、サーバ装置１から送信されたストリームを受信して再生する音楽再生装置２を備えて構成される。音楽再生装置２としては、パーソナルコンピュータの他、スマートフォン２’のような携帯型情報端末、インターネットに接続可能なスマートテレビ、カーナビゲーションシステムなど、各種形態の情報処理装置を使用することが可能である。また、パーソナルコンピュータ、スマートフォンのようなプログラムにて機能追加することが可能な情報処理装置に対しては、音楽再生用プログラムとして提供することで機能追加させることも可能である。 FIG. 1 is a diagram showing a configuration of a music playback system according to an embodiment of the present invention. The music playback device of the present invention includes a server device 1 that transmits a stream generated based on music information to a network (Internet), and a music playback device 2 that receives and plays back the stream transmitted from the server device 1. Composed. As the music playback device 2, it is possible to use various types of information processing devices such as a personal computer, a portable information terminal such as a smartphone 2 ', a smart TV that can be connected to the Internet, and a car navigation system. . In addition, an information processing apparatus that can be added with a program such as a personal computer or a smartphone can be added with a function by providing it as a music playback program.

サーバ装置１は、記憶部１４に記憶している音楽情報に基づいてストリームＳを生成して、要求のあった音楽再生装置２に送信を行う。このサーバ装置１は、制御部１１、波形生成手段１２、送受信部１３、記憶部１４を備えて構成される。制御部１１は、ＣＰＵ、ＲＯＭ、ＲＡＭなどを含んで構成され、サーバ装置１を統括して制御する。波形生成手段１２は、記憶部１４が記憶している音楽情報を音楽波形データに変換する手段である。本実施形態では、この波形生成手段１２をＭＩＤＩ音源１２ａ、圧縮部１２ｂにて構成している。 The server device 1 generates a stream S based on the music information stored in the storage unit 14, and transmits the stream S to the requested music playback device 2. The server device 1 includes a control unit 11, a waveform generation unit 12, a transmission / reception unit 13, and a storage unit 14. The control unit 11 includes a CPU, a ROM, a RAM, and the like, and controls the server device 1 in an integrated manner. The waveform generation means 12 is means for converting the music information stored in the storage unit 14 into music waveform data. In this embodiment, the waveform generating means 12 is composed of a MIDI sound source 12a and a compression unit 12b.

ＭＩＤＩ音源１２ａは、ＭＩＤＩ規格に従って作成された音楽情報（ＭＩＤＩデータ）を演奏することで音楽波形データに変換する手段である。このように本実施形態では、ＭＩＤＩ音源１２ａを使用しているため、音楽情報を再生する音程（キー）や、速度（テンポ）、そして、各パート毎の音量を変更することが可能となっている。ＭＩＤＩ音源１２ａの演奏により生成された音楽波形データは圧縮部１２ｂにて圧縮処理が施される。この圧縮には、ＭＰＥＧ、Ｖｏｒｂｉｓなど各種圧縮方式を採用することが可能である。このように本実施形態では、音楽波形データに対して圧縮を施すことで、ネットワーク上での伝送量を削減することが可能となっている。 The MIDI sound source 12a is means for converting music information (MIDI data) created according to the MIDI standard into music waveform data by playing. As described above, since the MIDI sound source 12a is used in the present embodiment, it is possible to change the pitch (key), speed (tempo), and volume of each part for reproducing music information. Yes. The music waveform data generated by the performance of the MIDI sound source 12a is compressed by the compression unit 12b. Various compression methods such as MPEG and Vorbis can be adopted for this compression. Thus, in this embodiment, it is possible to reduce the transmission amount on the network by compressing the music waveform data.

送受信部１３は、インターネットに接続可能な通信手段であって、音楽再生装置２からの各種要求などを受信するとともに、波形生成手段１２で生成された音楽波形データのストリーミング送信を実行する。このストリーミング送信は、波形生成手段１２で生成、圧縮された音楽波形データを適宜分割してパケットＰに収め、ストリームＳとして送信することで実行される。パケットＰには、再生する順番が記述されており、パケットＰを受信した音楽再生装置２側では、このパケットに記述された順番を元に、音楽波形データの再生を行う。 The transmission / reception unit 13 is a communication unit that can be connected to the Internet. The transmission / reception unit 13 receives various requests from the music playback device 2 and performs streaming transmission of the music waveform data generated by the waveform generation unit 12. This streaming transmission is executed by dividing the music waveform data generated and compressed by the waveform generation means 12 into packets P and transmitting them as a stream S. In the packet P, the playback order is described. On the music playback device 2 side that receives the packet P, the music waveform data is played back based on the order described in the packet.

図２には、本発明の実施形態に係る音楽再生装置２の構成が示されている。本実施形態の音楽再生装置２は、パーソナルコンピュータを採用した場合の例となっている。この音楽再生装置２は、制御部２１、ＲＡＭ２２、記憶部２３、音処理部２４、通信部２６を備えて構成される。制御部２１、ＲＡＭ２２は、音楽再生装置２における制御手段として機能する。また、ＲＡＭ２２は、その一部領域を受信バッファとして使用することが可能となっており、サーバ装置１から送信されたストリームＳは、この受信場バッファに格納される。 FIG. 2 shows a configuration of the music playback device 2 according to the embodiment of the present invention. The music playback device 2 of this embodiment is an example when a personal computer is employed. The music playback device 2 includes a control unit 21, a RAM 22, a storage unit 23, a sound processing unit 24, and a communication unit 26. The control unit 21 and the RAM 22 function as control means in the music playback device 2. The RAM 22 can use a partial area as a reception buffer, and the stream S transmitted from the server device 1 is stored in the reception field buffer.

画像処理部２５は、表示装置３２に対して画像を表示し、ユーザに対して視覚的に各種情報を提供することが可能である。本実施形態では、サーバ装置１から送信されるストリームは音楽上の演奏に伴う聴覚情報のみとしているが、このような聴覚情報に加え、歌詞の表示、あるいは、背景映像の表示など視覚情報を提供する場合は、この画像処理部２５にて表示装置３２に画像表示が実行される。 The image processing unit 25 can display an image on the display device 32 and visually provide various information to the user. In the present embodiment, the stream transmitted from the server device 1 is only auditory information associated with musical performance, but in addition to such auditory information, visual information such as lyric display or background video display is provided. In the case of performing the image display, the image processing unit 25 displays an image on the display device 32.

音処理部２４は、制御手段の制御に基づきスピーカ３１から音を報知することが可能である。特に、本実施形態では、サーバ装置１から送信されたストリームＳのパケットＰに含まれる音楽波形データの圧縮を解除して、放音可能な音楽波形データに変換し、スピーカ３１から出力させることで再生を行うこととしている。 The sound processing unit 24 can notify the sound from the speaker 31 based on the control of the control means. In particular, in the present embodiment, the music waveform data included in the packet P of the stream S transmitted from the server device 1 is released, converted into music waveform data that can be emitted, and output from the speaker 31. I am going to play.

通信部２６は、有線もしくは無線でネットワーク（インターネット）に接続可能であり、ネットワーク上のサーバ装置１と各種情報の送受信を実行可能としている。本実施形態では、通信接続されたサーバ装置１に対して、楽曲の要求を行い、それに伴い送信されてきたストリームＳの受信を行う。また、再生する楽曲の各種条件（音程、速度、ガイドメロディ）の設定、変更要求を行うことも可能である。 The communication unit 26 can be connected to a network (Internet) by wire or wireless, and can transmit and receive various types of information to and from the server device 1 on the network. In the present embodiment, a music request is made to the server device 1 connected for communication, and the stream S transmitted along with the request is received. It is also possible to set and change various conditions (pitch, speed, guide melody) of the music to be played.

入力部３３は、キーボードやマウスなど、ユーザから各種入力を受付可能とする手段である。ユーザは、この入力部３３を介して、再生する楽曲の指定、楽曲に対する各種条件の設定、変更を行うことが可能である。 The input unit 33 is a means that can accept various inputs from the user, such as a keyboard and a mouse. The user can specify the music to be played and set or change various conditions for the music via the input unit 33.

では、本実施形態のカラオケシステムにおける音楽情報の再生について図を用いて説明する。図３は、本発明の実施形態に係る音楽再生システムにおける情報の送受信を説明するための図である。本実施形態では、サーバ装置１は、音楽情報を音楽波形データに変換してストリーミング送信する。音楽再生装置２側は、ユーザから楽曲の指定を受け付け（Ａ１）、サーバ装置１に対して楽曲識別情報を含む楽曲要求情報を送信する。 Now, reproduction of music information in the karaoke system of this embodiment will be described with reference to the drawings. FIG. 3 is a diagram for explaining transmission and reception of information in the music playback system according to the embodiment of the present invention. In the present embodiment, the server device 1 converts music information into music waveform data and transmits it in a streaming manner. The music playback device 2 side receives a music specification from the user (A 1), and transmits music request information including music identification information to the server device 1.

図４には、本発明の実施形態に係る音楽再生装置２におけるＵＩプログラムを示すフロー図が示されている。音楽再生装置２において、入力部３３にてユーザ操作を受け付けた場合（Ｓ１０１：Ｙｅｓ）、当該操作内容の判定が行われ、楽曲指定で有った場合（Ｓ１０２：Ｙｅｓ）、音楽再生装置２は、通信部２６を介して楽曲要求情報の送信を実行する（Ｓ１０３）。 FIG. 4 is a flowchart showing a UI program in the music playback device 2 according to the embodiment of the present invention. In the music playback device 2, when a user operation is received at the input unit 33 (S101: Yes), the content of the operation is determined, and when the music is specified (S102: Yes), the music playback device 2 Then, the music request information is transmitted via the communication unit 26 (S103).

ところで、楽曲は聴いて楽しむ他、歌唱して楽しむ（所謂、カラオケ）場合がある。本実施形態では、このように歌唱して楽しむ場合、自分の歌唱音域に合わせて、再生する楽曲の音程を変更することが可能となっている。この他、再生する楽曲の速度（テンポ）や、ガイドメロディ（歌唱すべき旋律）のオン／オフ、あるいはガイドメロディの音量調整を行うことで、自分の歌唱条件に設定することが可能である。指定した楽曲に対する自分の歌唱条件が分かっている場合、楽曲指定する際、各種設定を行うことで楽曲要求情報に、楽曲に対する設定を含めておくこととしてもよい。 By the way, in addition to listening to music, it may be enjoyed by singing (so-called karaoke). In this embodiment, when singing and enjoying in this way, it is possible to change the pitch of the music to be reproduced in accordance with the own singing range. In addition, the user can set his / her singing conditions by adjusting the speed (tempo) of the music to be played, turning on / off the guide melody (melody to be sung), or adjusting the volume of the guide melody. If the user's singing conditions for the specified music are known, the settings for the music may be included in the music request information by performing various settings when specifying the music.

サーバ装置１は、楽曲要求情報の受信に基づいて、楽曲要求情報で指定された楽曲のストリーミング送信を開始する（Ｂ１）。ここでは、当初、送信されるストリーミングを第１ストリームＳ１と呼称する。サーバ装置１の制御部１１は、楽曲要求情報で指定された音楽情報を記憶部１４から読み出し、ＭＩＤＩ音源１２ａにて演奏させ、音楽波形データを生成する。生成された音楽波形データは圧縮部１２ｂにて圧縮された後、送受信部１３にて分割されてパケットＰに収められ、第１ストリームＳ１として送信される。本実施形態では、先頭パケットに、第１ストリームＳ１の先頭を示すｂｏｓ（begin of stream）
を付帯させて送信している。 The server device 1 starts streaming transmission of the music designated by the music request information based on the reception of the music request information (B1). Here, the initially transmitted streaming is referred to as a first stream S1. The control unit 11 of the server device 1 reads out the music information specified by the music request information from the storage unit 14 and plays it on the MIDI sound source 12a to generate music waveform data. The generated music waveform data is compressed by the compression unit 12b, divided by the transmission / reception unit 13, stored in the packet P, and transmitted as the first stream S1. In the present embodiment, a bos (begin of stream) indicating the head of the first stream S1 is included in the head packet.
Is attached and transmitted.

第１ストリームＳ１を受信した音楽再生装置２は、ＲＡＭ２２内の受信バッファに、第１ストリームＳ１のパケットＰを格納し、パケットＰに含まれる音楽波形データを順次、音処理部２４にて再生させる再生処理が実行される。ところで、前述した音程、速度、ガイドメロディなどの楽曲に対する設定は、楽曲を指定したときのみならず、楽曲の再生中に行う場合が考えられる。楽曲の演奏に合わせて歌唱してみたところ、音程、速度（テンポ）、ガイドメロディのオン／オフ設定が、ユーザに合わない、または、好みの設定ではない場合、変更を行いたい場合がある。従来、音楽再生装置単体で音楽情報を再生する場合、このような設定変更を行うことは容易であった。 The music playback device 2 that has received the first stream S1 stores the packet P of the first stream S1 in the reception buffer in the RAM 22 and causes the sound processing unit 24 to sequentially play back the music waveform data included in the packet P. Playback processing is executed. By the way, the setting for the music such as the pitch, the speed, and the guide melody described above may be performed not only when the music is specified but also during the reproduction of the music. When singing along with the performance of the music, if the pitch, speed (tempo), and guide melody on / off settings do not suit the user or are not the preferred settings, there are cases where it is desired to change the settings. Conventionally, when music information is played back by a single music playback device, it is easy to make such setting changes.

しかしながら、サーバ装置１からストリーミング送信する再生形態においては、このような設定変更を行うことは検討されていない、もしくは、設定変更を行う場合には主にクライアント側で行うため、クライアント側に音楽波形データの音程や速度を変える信号処理のための大きな計算能力を必要とした。また、その場合に一律に音程変更を行うと、ドラムやベースの音など、音程が変更されては困る楽曲パートまで音程が変わってしまって、歌唱に好適な演奏ができないため、楽器の種類もクライアント側で特定する必要があった。 However, in the playback mode in which streaming transmission is performed from the server device 1, it is not considered to perform such setting changes, or when setting changes are performed mainly on the client side, the music waveform is transmitted to the client side. It required large computing power for signal processing to change the pitch and speed of data. Also, if you change the pitch uniformly in that case, the musical piece part, such as drums and bass sounds, that would be problematic if the pitch is changed, will not be suitable for singing. It was necessary to specify on the client side.

本実施形態では、ストリーミング送信を行う形態において、再生処理途中で設定変更を行うことを可能としている。この再生途中における設定変更（Ａ２）は、図４に示されるＵＩプログラムにて受け付け可能となっている。Ｓ１０１にて受け付けたユーザ操作が、再生途中における設定変更と判定された場合（Ｓ１０４）、音楽再生装置１は、音程の変更、速度の変更、ガイドメロディの変更など、設定変更に関する設定要求内容を、音楽再生装置１にて実行されるバッファ制御プログラムに通知する。 In the present embodiment, it is possible to change the setting during the playback process in the streaming transmission mode. This setting change (A2) during reproduction can be accepted by the UI program shown in FIG. When it is determined that the user operation accepted in S101 is a setting change in the middle of reproduction (S104), the music playback device 1 displays setting request contents related to the setting change such as a pitch change, a speed change, and a guide melody change. Then, the buffer control program executed by the music playback device 1 is notified.

図５には、本発明の実施形態に係る音楽再生装置バッファ制御プログラムを示すフロー図が示されている。ＵＩプログラムから設定要求内容を受け付けたとき（Ｓ２０１）、音楽再生装置２側の制御部２１は、現在の再生位置を変更指定位置Ｔ１として取得する。図６には、本発明の実施形態に係る再生処理における受信バッファの様子が示されている。図６では、設定要求を実行したときの現在の再生位置がＰａであり、このパケットＰａの位置を変更指定位置Ｔ１として取得する。取得された現在の再生位置は、設定要求内容とともに設定要求情報としてサーバ装置１に送信される。 FIG. 5 is a flowchart showing a music playback device buffer control program according to the embodiment of the present invention. When the setting request content is received from the UI program (S201), the control unit 21 on the music playback device 2 side acquires the current playback position as the change specified position T1. FIG. 6 shows a state of the reception buffer in the reproduction processing according to the embodiment of the present invention. In FIG. 6, the current reproduction position when the setting request is executed is Pa, and the position of this packet Pa is acquired as the change designated position T1. The acquired current reproduction position is transmitted to the server apparatus 1 as setting request information together with the setting request content.

設定要求情報を受信したサーバ装置１は、図７に示すサーバ装置側制御プログラムを実
行する。音楽再生装置２から設定要求情報を受信したとき（Ｓ３０１：Ｙｅｓ）に、第１ストリームの送信が継続している、すなわち、未だｅｏｓを設定して送信していない場合（Ｓ３０２：Ｎｏ）は、制御部１１は、ＭＩＤＩ音源１４に、第１ストリーミングＳ１用に生成していた音楽波形データの生成を停止させる（Ｓ３０３）。その際、制御部１１は、送受信部１３に対して、第１ストリームＳ１の最後のパケットＰをｅｏｓ（end of stream）に設定して送信する（Ｓ３０４）。また、サーバ装置１が音楽再生装置２から設定
要求情報を受信したとき（Ｓ３０１：Ｙｅｓ）に、既にｅｏｓ設定して送信済みの場合（Ｓ３０２：Ｙｅｓ）、すなわち、既に第１ストリームの送信を終了したているときは、後述する（Ｓ３０５）処理に移行する。 The server apparatus 1 that has received the setting request information executes the server apparatus side control program shown in FIG. When the setting request information is received from the music playback device 2 (S301: Yes), if the transmission of the first stream is continued, that is, if eos is not yet set (S302: No), The control unit 11 causes the MIDI sound source 14 to stop generating the music waveform data generated for the first streaming S1 (S303). At that time, the control unit 11 sets the last packet P of the first stream S1 to eos (end of stream) and transmits it to the transmission / reception unit 13 (S304). Further, when the server apparatus 1 receives the setting request information from the music playback apparatus 2 (S301: Yes), if the eos setting has already been set and transmitted (S302: Yes), that is, the transmission of the first stream has already been completed. If so, the process proceeds to later-described processing (S305).

次に、設定要求情報に含まれる設定要求内容に基づいて、ＭＩＤＩ音源１２ａに音楽波形データの生成を開始（再開）させる（Ｓ３０５）。例えば、設定要求内容が音程の変更であった場合、ＭＩＤＩ音源１２ａに対し、音楽情報を指定された音程分、音程変更して音楽波形データを生成させる。速度の変更、ガイドメロディのオン／オフ（もしくは音量変更）についても同様であって、その設定要求内容にしたがった音楽波形データを生成させる。本実施形態では、その際、設定要求内容に含まれている変更指定位置Ｔ１に対応する位置から、音楽情報を演奏させて音楽波形データを生成している。 Next, based on the setting request content included in the setting request information, the MIDI sound source 12a is started (restarted) to generate music waveform data (S305). For example, if the setting request content is a change in pitch, the MIDI sound source 12a is caused to change the pitch by the specified pitch and generate music waveform data. The same applies to speed change and guide melody on / off (or volume change), and music waveform data is generated according to the setting request contents. In this embodiment, music waveform data is generated by playing music information from a position corresponding to the change designation position T1 included in the setting request content.

このように設定要求を行った変更指定位置Ｔ１から、音楽波形データを生成することで、不必要な音楽波形データの生成を抑制し、サーバ装置１側の処理負担を軽減するとともに、ネットワークの伝送量の削減、及び、再生位置の第２ストリームへの変更に要する時間を最小限に抑えることが可能となっている。なお、が音楽情報の演奏再開は、変更指定位置Ｔ１に対応する位置のみならず、音楽情報の先頭から行うこととしてもよい。その場合、設定要求情報に変更指定位置Ｔ１を含める必要はなくなる。 By generating music waveform data from the change designated position T1 that has made the setting request in this way, generation of unnecessary music waveform data is suppressed, the processing load on the server device 1 side is reduced, and network transmission is performed. It is possible to minimize the amount of time and the time required for changing the playback position to the second stream. However, the resumption of performance of the music information may be performed not only from the position corresponding to the change designated position T1, but also from the beginning of the music information. In that case, it is not necessary to include the change designation position T1 in the setting request information.

本実施形態では、このように設定要求を行った時点である変更指定位置Ｔ１に対応する位置から音楽情報を演奏し、音楽波形データを生成することとしているが、音楽情報における変更指定位置Ｔ１に対応する位置は、楽曲上、変更指定位置Ｔ１と同じ位置ではなく、変更指定位置Ｔ１の前もしくは後にずれた音楽情報の区切りから行うこととしてもよい。この理由を以下に述べる。 In the present embodiment, music information is played from a position corresponding to the change designated position T1 that is the point when the setting request is made in this way, and music waveform data is generated. However, at the change designated position T1 in the music information. The corresponding position may not be the same position as the change designation position T1 on the music, but may be determined from a break of music information shifted before or after the change designation position T1. The reason for this will be described below.

図８は、本発明の実施形態に係る音楽情報の再生再開位置を説明するための図である。この図には、設定要求を行った変更指定位置Ｔ１近傍での音楽情報が音符にて示されている。音楽情報は、ト音記号とヘ音記号の音符にて構成されている。変更指定位置Ｔ１が、図に示す小節中の途中タイミング（音符Ｎ２の位置）であったとする。設定要求情報にて変更された演奏を再開させる場合、楽譜上、変更指定位置Ｔ１と同じ位置から行うことが考えられる。しかしながら、実際には、この現在位置Ｔ１に対応する位置では、ヘ音記号上の音符Ｎ７が鳴動している必要がある。すなわち、ＭＩＤＩ情報からなる音楽情報を演奏させた場合、変更指定位置Ｔ１と同じ位置から演奏を再開させると、音符Ｎ７が欠けた状態で演奏されることとなり、生成される音楽波形データについて、聴覚上の違和感が発生してしまう。 FIG. 8 is a diagram for explaining a reproduction restart position of music information according to the embodiment of the present invention. In this figure, music information in the vicinity of the change designation position T1 at which the setting request has been made is indicated by musical notes. The music information is composed of treble clef and treble clef notes. It is assumed that the change designation position T1 is the midway timing (position of the note N2) in the measure shown in the figure. When resuming the performance changed by the setting request information, it is considered that the performance is performed from the same position as the change designated position T1 on the score. However, in reality, the note N7 on the clef must be ringing at the position corresponding to the current position T1. In other words, when music information composed of MIDI information is played, if the performance is resumed from the same position as the change designated position T1, the music is played with the note N7 missing. The above feeling of strangeness will occur.

そのため、音楽情報中に区切り位置を設定しておく、あるいは、音楽情報から区切り位置を検出し、変更指定位置Ｔ１の前方に位置する区切り位置Ｔ１’から演奏を再開させることで、音符が欠けて演奏させることを防ぐことが可能となる。なお、区切り位置Ｔ１’は、曲の先頭から順に区切り位置を検出して、変更指定位置Ｔ１にまで音が残る最初の区切り位置を探索することなどで特定することが可能である。図８の下方には、音楽情報（楽譜）と送信するパケットの時間関係が模式的に示されている。演奏の再開位置は、区切り位置Ｔ１’とした場合において、パケットＰの送信は、変更指定位置Ｔ１に位置するパケットＰｍから行うこととしてもよい。 Therefore, by setting a break position in the music information, or by detecting the break position from the music information and restarting the performance from the break position T1 ′ located in front of the change designation position T1, a note is missing. It is possible to prevent the performance. The break position T1 'can be specified by detecting the break position in order from the beginning of the music and searching for the first break position where the sound remains at the change designation position T1. The time relationship between the music information (music score) and the packet to be transmitted is schematically shown in the lower part of FIG. In the case where the performance resuming position is the delimiter position T1 ', the transmission of the packet P may be performed from the packet Pm located at the change designated position T1.

また、演奏を再開させる区切り位置は、変更指定位置Ｔ１の後方に位置する区切り位置Ｔ１’’から行うこととしてもよい。音楽再生装置２において、設定要求を行ったタイミングから、瞬時に演奏再開されたパケットが受信されるのであれば、前方に位置するＴ１’から再開させた方が好ましい。しかしながら、実際には、ネットワークなどにてタイムラグが生じる、あるいは、入力操作にて許容されるタイムラグが設定されている場合がある。このような、タイムラグに対する許容範囲内であれば、変更指定位置Ｔ１の後方に位置する区切り位置Ｔ１’’から演奏を再開させることとしてもよい。 Further, the break position at which the performance is resumed may be performed from a break position T1 ″ located behind the change designation position T1. In the music playback device 2, if a packet whose performance has been resumed instantaneously is received from the timing when the setting request is made, it is preferable to resume it from T1 'located in the front. However, in practice, there may be a time lag in a network or the like, or a time lag that is allowed by an input operation may be set. If it is within such an allowable range for the time lag, the performance may be resumed from the separation position T1 ″ located behind the change designation position T1.

このように、設定要求情報を受信したサーバ装置１では、設定要求情報に基づいて音楽情報の演奏を再開させ、音楽波形データの生成を開始する（Ｓ３０５）。そして、新たに生成された音楽波形データを送受信部１３にてパケット化し、第２ストリームＳ２として音楽再生装置２に送信する（Ｓ３０６）。その際、第２ストリームＳ２の先頭パケットには、ｂｏｓ（begin of stream）を設定して送信する。この第２ストリームＳ２には、第
１ストリームの変更指定位置Ｔ１に対応する位置以降の音楽波形データが全て含まれることとなり、第２ストリームＳ２が、即座に、音楽再生装置２の受信バッファに蓄積された場合においても再生位置を第２ストリームＳ２に迅速に変更することが可能となる。 As described above, the server device 1 that has received the setting request information restarts the performance of the music information based on the setting request information, and starts generating the music waveform data (S305). Then, the newly generated music waveform data is packetized by the transmission / reception unit 13 and transmitted to the music playback device 2 as the second stream S2 (S306). At that time, the bos (begin of stream) is set in the first packet of the second stream S2, and transmitted. The second stream S2 includes all the music waveform data after the position corresponding to the change designation position T1 of the first stream, and the second stream S2 is immediately stored in the reception buffer of the music playback device 2. Even in such a case, the playback position can be quickly changed to the second stream S2.

では、図５のバッファ制御プログラムのフロー図に戻り、音楽再生装置２における再生処理について、図６に示すＲＡＭ１２内の受信バッファの様子とともに説明を行う。なお、図６中、音楽再生装置２では、再生処理は継続して行われており、設定要求を行ったタイミングから再生位置は時々刻々と変化している。サーバ装置１に設定要求情報を送信（Ｓ２０３）後、制御部２１は、受信バッファ１２中、第１ストリームＳ１の現時位置Ｔ１以降においてｅｏｓが設定されたパケットＰを探索する（Ｓ２０４）。ｅｏｓが設定されたパケットを発見した場合（Ｓ２０５：Ｙｅｓ）、ｅｏｓの後に受信したパケットＰ中、ｂｏｓが設定されたパケットＰを探索することで、第２ストリームＳ２の受信確認が行われる（Ｓ２０６）。 Now, returning to the flow chart of the buffer control program in FIG. 5, the playback process in the music playback device 2 will be described together with the state of the reception buffer in the RAM 12 shown in FIG. In FIG. 6, in the music playback device 2, playback processing is continuously performed, and the playback position changes from moment to moment from the timing when the setting request is made. After transmitting the setting request information to the server device 1 (S203), the control unit 21 searches the reception buffer 12 for a packet P in which eos is set after the current position T1 of the first stream S1 (S204). When a packet in which eos is set is found (S205: Yes), the reception of the second stream S2 is confirmed by searching for the packet P in which bos is set in the packet P received after eos (S206). ).

ｂｏｓが設定されたパケットＰを発見した、すなわち、第２ストリームＳ２の受信を確認した場合（Ｓ２０７：Ｙｅｓ）、第１ストリームＳ１において現在の再生位置に対応したパケットＰ（本実施形態では、次に再生するパケットＰ）の位置を変更候補位置Ｔ２として取得する（Ｓ２０８）。図６では、パケットＰｂがこれに相当している。次に、第２ストリームＳ２中、取得した変更候補位置Ｔ２に対応するパケットＰｂ’が受信バッファに蓄積されているか否かの探索が実行される（Ｓ２１０）。第２ストリームＳ２中にパケットＰｂ’が受信されていることが確認された場合（Ｓ２１０：Ｙｅｓ）、再生位置を第２ストリームＳ２のパケットＰｂ’に変更し、設定変更された音楽波形データの再生を実行する（Ｓ２１１）。一方、パケットＰｂ’が、まだ受信バッファ中に受信されていない場合（Ｓ２１１）。再生の進行に伴って変更候補位置Ｔ２を変更しつつ、パケットＰｂ’の探索を実行する。 When the packet P in which bos is set is found, that is, when reception of the second stream S2 is confirmed (S207: Yes), the packet P corresponding to the current reproduction position in the first stream S1 (in this embodiment, the next The position of the packet P) to be reproduced is acquired as the change candidate position T2 (S208). In FIG. 6, the packet Pb corresponds to this. Next, a search is performed as to whether or not the packet Pb 'corresponding to the obtained change candidate position T2 is accumulated in the reception buffer in the second stream S2 (S210). When it is confirmed that the packet Pb ′ is received in the second stream S2 (S210: Yes), the playback position is changed to the packet Pb ′ of the second stream S2, and the music waveform data whose setting has been changed is played back. Is executed (S211). On the other hand, when the packet Pb 'has not been received in the reception buffer (S211). The search for the packet Pb 'is executed while changing the change candidate position T2 as the reproduction proceeds.

このように本実施形態では、設定要求を行った後、第１ストリームＳ１中、次に再生するパケットＰの位置を変更候補位置Ｔ２として、第２ストリームＳ２中の探索を実行し、この変更候補位置Ｔ２に対応するパケットＰが受信バッファに蓄積されていることを条件として、第２ストリームＳ２に再生位置を変更することとしている。したがって、音程、速度、ガイドメロディなどを変更した後、再生が途切れることを極力抑えて、不自然に中断されることなく音楽再生を継続させることが可能となっている。 As described above, in the present embodiment, after the setting request is made, the search in the second stream S2 is executed by setting the position of the packet P to be reproduced next as the change candidate position T2 in the first stream S1, and this change candidate. The playback position is changed to the second stream S2 on condition that the packet P corresponding to the position T2 is accumulated in the reception buffer. Therefore, after changing the pitch, speed, guide melody, etc., it is possible to suppress the interruption of the reproduction as much as possible, and to continue the music reproduction without being interrupted unnaturally.

なお、音程、ガイドメロディを変更する場合、変更候補位置Ｔ２には、第１ストリーム内でのパケット番号、あるいは、演奏の経過時間といった楽曲の絶対的位置、あるいは、音楽情報の何小節目といった楽曲の相対的位置のどちらでも、楽曲上、同じ位置で第１ス
トリームから第２ストリームに再生位置を変更することが可能である。一方、速度を変更する場合、楽曲長が全体的に圧縮もしくは伸張されるため、楽曲上、同じ位置で第１ストリームから第２ストリームに再生位置を変更するには、楽曲の相対的位置を使用することが必要となる。 When changing the pitch and the guide melody, the change candidate position T2 includes the absolute position of the music such as the packet number in the first stream, the elapsed time of the performance, or the number of bars of the music information. It is possible to change the playback position from the first stream to the second stream at the same position on the music at any of the relative positions. On the other hand, when changing the speed, the music length is compressed or expanded as a whole, so to change the playback position from the first stream to the second stream at the same position on the music, use the relative position of the music It is necessary to do.

なお、本実施形態では、Ｓ２１０にて変更候補位置Ｔ２に対応するパケットＰｂ’が受信バッファに蓄積されていることを条件としているが、この条件は、パケットＰｂ’以降にある所定数のパケットが蓄積されていることを条件としてもよい。所定数のパケットを蓄積したことを条件することで、第２ストリームＳ２に演奏位置を変更した場合においても、パケット不足による再生の途切れを抑えることが可能となる。以上のことから、本実施形態では、少なくともパケットＰｂ’を蓄積することを条件として、再生位置の変更を行うものといえる。 In the present embodiment, the condition is that the packet Pb ′ corresponding to the change candidate position T2 is accumulated in the reception buffer in S210. This condition is that a predetermined number of packets after the packet Pb ′ are included. It may be conditional on being accumulated. By providing that a predetermined number of packets have been accumulated, even when the performance position is changed to the second stream S2, it is possible to suppress interruption of reproduction due to lack of packets. From the above, in the present embodiment, it can be said that the reproduction position is changed on condition that at least the packet Pb ′ is accumulated.

なお、本発明はこれらの実施形態のみに限られるものではなく、それぞれの実施形態の構成を適宜組み合わせて構成した実施形態も本発明の範疇となるものである。 Note that the present invention is not limited to these embodiments, and embodiments configured by appropriately combining the configurations of the respective embodiments also fall within the scope of the present invention.

１…サーバ装置、１１…制御部、１２…波形生成手段、１２ａ…ＭＩＤＩ音源、１２ｂ…圧縮部、１３…送受信部、１４…記憶部、２…音楽再生装置、２１…ＣＰＵ、２２…ＲＡＭ、２３…記憶部、２４…音処理部、２５画像処理部、２６…通信部、３１…スピーカ、３２…表示装置、３３…入力部 DESCRIPTION OF SYMBOLS 1 ... Server apparatus, 11 ... Control part, 12 ... Waveform production | generation means, 12a ... MIDI sound source, 12b ... Compression part, 13 ... Transmission / reception part, 14 ... Memory | storage part, 2 ... Music reproduction apparatus, 21 ... CPU, 22 ... RAM, DESCRIPTION OF SYMBOLS 23 ... Memory | storage part, 24 ... Sound processing part, 25 Image processing part, 26 ... Communication part, 31 ... Speaker, 32 ... Display apparatus, 33 ... Input part

Claims

In a music playback system comprising a server device and a music playback device connected to the server device via a network,
The server device includes waveform generation means, transmission means, and server-side control means,
The waveform generation means generates music waveform data based on music information composed of information indicating musical notes ,
The transmission means includes the music waveform data, and can transmit a stream composed of packets to which position information in the music is attached.
The server side control means includes:
A first stream generation process for transmitting a first stream generated based on music information corresponding to the music requested from the music playback device to the music playback device;
When setting request information is received from the music playback device, the music information corresponding to the music requested from the music playback device and the second stream generated based on the received setting request information are played back as music. The second stream generation process to be transmitted to the device can be executed,
The music playback device includes a reception buffer and terminal-side control means,
The reception buffer can store the packets in the stream transmitted from the server device,
The terminal side control means includes
A setting request process for transmitting the setting request information input from the input means to the server device;
The music waveform data included in the packet in the first stream accumulated in the reception buffer is reproduced, and after executing the setting request process, the first corresponding to the current reproduction position in the first stream. A reproduction process of changing a reproduction position to the second stream on condition that the packets of two streams are accumulated in the reception buffer ;
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
In the music reproduction system, the second stream generation processing starts generation of the music waveform data from the break position corresponding to the reproduction position information during the break position of the music information .

The setting request information includes a pitch change designation,
The music playback system according to claim 1, wherein the second stream generation process causes the waveform generation unit to change a pitch based on the received setting request information.

The setting request information includes designation of speed change,
3. The music playback system according to claim 1, wherein the second stream generation processing causes the waveform generation unit to change a speed based on the received setting request information.

The setting request information includes a guide melody change specification,
4. The second stream generation process according to claim 1, wherein, based on the received setting request information, the waveform generation unit is configured to turn on / off a guide melody or change a volume. 5. The music playback system according to item 1.

The said 2nd stream produced | generated from the position of the said music information contains all the said music waveform data after the position corresponding to the said reproduction | regeneration position information of the said 1st stream . The music playback system according to any one of the above.

In a music playback device connected to a server device via a network,
The server device transmits a first stream and a second stream generated according to the setting request information received from the music playback device to the music playback device,
The first stream and the second stream include music waveform data generated based on music information including information indicating musical notes, and are configured by packets to which position information in music is given.
The music playback device includes a reception buffer and terminal-side control means. The reception buffer is capable of storing the packets in the stream transmitted from the server device,
The terminal side control means includes
A setting request process for transmitting the setting request information input from the input means to the server device;
After reproducing the music waveform data included in the packet in the first stream accumulated in the reception buffer and executing the setting request process, the second corresponding to the current reproduction position in the first stream On the condition that the packet of the stream is accumulated in the reception buffer, it is possible to execute a reproduction process for changing the reproduction position to the second stream ,
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
The music playback device according to claim 1, wherein the second stream generated by the server device is started from the break position corresponding to the reproduction position information in the break position of the music information .

In a music playback program executable by a music playback device connected to a server device via a network,
The server device transmits a first stream and a second stream generated according to the setting request information received from the music playback device to the music playback device,
The first stream and the second stream include music waveform data generated based on music information including information indicating musical notes, and are configured by packets to which position information in music is given.
The music playback program is:
A setting request process for transmitting the setting request information input from the input means to the server device;
After reproducing the music waveform data included in the packet in the first stream accumulated in the reception buffer and executing the setting request process, the second corresponding to the current reproduction position in the first stream The reproduction processing for changing the reproduction position to the second stream can be executed on condition that the packet of the stream is accumulated in the reception buffer ,
The setting request information includes reproduction position information corresponding to the reproduction position when the setting request is received,
The program for music reproduction , wherein the second stream generated by the server device is started from the delimiter position corresponding to the reproduction position information in the delimiter position of the music information .