JPH0779397B2 - Multiple media I/O devices - Google Patents
Multiple media I/O devicesInfo
- Publication number
- JPH0779397B2 JPH0779397B2 JP60040629A JP4062985A JPH0779397B2 JP H0779397 B2 JPH0779397 B2 JP H0779397B2 JP 60040629 A JP60040629 A JP 60040629A JP 4062985 A JP4062985 A JP 4062985A JP H0779397 B2 JPH0779397 B2 JP H0779397B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- time
- voice
- handwritten character
- graphic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Image Input (AREA)
- Processing Or Creating Images (AREA)
- Facsimiles In General (AREA)
- Communication Control (AREA)
Description
【発明の詳細な説明】 〔発明の概要〕 本発明は、画像通信における複数メデイアを扱つた蓄
積、入出力装置において複数メデイアを同時並列出力す
ることを目的とし、複数のメデイアそれぞれに同期情報
を付加して蓄積し、出力の際には、その同期情報を参照
して同期並列出力することを特徴とするもので、文書画
像情報、音声情報、手書き文字図形情報、ポインテイン
グ情報等の複数メデイアそれぞれに同期情報として時刻
情報を付加して独立に蓄積し、その同期情報を参照しつ
つ独立に出力することにより、複数メデイアを同期並列
出力できるようなデータの蓄積が可能となり、また、手
書き文字図形情報、ポインテイング情報のペンアツプ時
のデータ、音声情報の無音時のデータを除去して蓄積す
るため、コストの主要因である蓄積データ量の軽減が図
れるといつた利点を持つ複数メディア入出力装置であ
る。[Detailed Description of the Invention] [Summary of the Invention] The object of the present invention is to simultaneously output multiple media in parallel in a storage/input/output device that handles multiple media in image communication, and is characterized in that synchronization information is added to each of the multiple media and stored, and at the time of output, the synchronization information is referenced and the synchronous parallel output is performed. By adding time information as synchronization information to each of the multiple media such as document image information, audio information, handwritten character and graphic information, pointing information, etc. and storing them independently, and outputting them independently while referencing the synchronization information, it becomes possible to store data that allows the synchronous parallel output of multiple media. In addition, handwritten character and graphic information and pointing information data at the time of pen up and audio information data at silent times are removed before storage, which has the advantage of reducing the amount of stored data, which is a major factor in cost.
本発明は、文書画像情報、音声情報、手書き文字図形情
報、ポインテイング情報等種類の異なる複数のメデイア
を同期並列出力するための複数メディア入出力装置に関
するものである。 The present invention relates to a multiple media input/output device for synchronously and parallelly outputting a plurality of different types of media, such as document image information, voice information, handwritten character and graphic information, and pointing information.
従来この種複数のメデイアを扱う複数メディア入出力装
置としては、ボイスメールを目的とした音声蓄積方式が
数多く提案されているが、例えば画像通信会議における
不在者による文書説明のような利用には不十分である。
上記のような利用の場合、文書、音声、メモ、ポインテ
イング等複数のメデイアを扱つた蓄積、入出力機能が必
要となる。 Many voice storage methods have been proposed for voice mail as multiple media input/output devices that handle multiple media, but these methods are insufficient for use in applications such as document explanations by absent participants in video teleconferences.
In the above-mentioned cases, storage and input/output functions that handle multiple media such as documents, voice, memos, and pointing are required.
画像通信における従来の複数メデイアを扱つた蓄積、入
出力方式には、複数メデイアを同期並列出力することが
困難であるという問題点があつた。 Conventional storage and input/output methods for handling multiple media in image communication have had the problem that it is difficult to output multiple media in parallel in a synchronized manner.
本発明は従来の問題点を解決するために、文書画像情報
と、音声情報、手書き文字図形情報、またはポインテイ
ング情報を入力して蓄積し、同期して出力する複数メデ
ィア入出力装置であって、入力された該文書画像情報に
対して、前ページのロード時から次ページのロード時ま
での時間間隔を前記文書画像情報の時刻情報とし、前記
文書画像情報に該時刻情報を付加して蓄積する第一の手
段を有し、入力された音声情報に対して、無音区間数を
前記音声情報の時刻情報とし、無音区間のデータは除去
し有音区間のデータに該時刻情報を付加したものを音声
情報として蓄積する第二の手段、入力された手書き文字
図形情報に対して、ストローク終了からストローク開始
までの時間間隔を前記手書き文字図形情報の時刻情報と
し、ペンアップ時のデータを除去し該時刻情報を付加し
たものを手書き文字図形情報として蓄積する第三の手
段、または、入力されたポインティング情報に対して、
ストローク終了からストローク開始までの時間間隔を前
記ポインティング情報の時刻情報とし、ペンアップ時の
データを除去し該時刻情報を付加したものをポインティ
ング情報として蓄積する第四の手段を有し、前記文書画
像情報を出力するとき、該文書画像情報の時刻情報と、
該音声情報、該手書き文字図形情報、または該ポインテ
ィング情報の各々の時刻情報を参照し、それらのスター
ト時刻のみをあわせて、前記文書画像情報と、前記音声
情報、前記手書き文字図形情報、または前記ポインテイ
ング情報をそれぞれ独立に出力する第五の手段を有する
ことを特徴とするものである。 In order to solve the problems of the prior art, the present invention provides a multiple media input/output device which inputs and stores document image information, voice information, handwritten character and graphic information, or pointing information, and outputs the information in synchronization, the device having a first means for, for the input document image information, setting the time interval from when the previous page is loaded to when the next page is loaded as time information of the document image information, and adding the time information to the document image information and storing the information; a second means for, for the input voice information, setting the number of silent intervals as time information of the voice information, removing data of silent intervals and adding the time information to data of voice intervals, and storing the information as voice information; a third means for, for the input handwritten character and graphic information, setting the time interval from the end of a stroke to the start of a stroke as time information of the handwritten character and graphic information, removing data at the time of pen-up, and adding the time information, and storing the information as handwritten character and graphic information; or for the input pointing information,
a fourth means for storing, as pointing information, a time interval between the end of a stroke and the start of a stroke, data at the time of pen-up being removed and the time information being added thereto, when the document image information is output,
The present invention is characterized in that it has a fifth means for referring to the time information of each of the voice information, the handwritten character and graphic information, or the pointing information, and matching only their start times to output the document image information and the voice information, the handwritten character and graphic information, or the pointing information independently.
本発明は文書画像情報、音声情報、手書き文字図形情
報、ポインテイング情報などの複数のメデイアにそれぞ
れ同期情報として時刻情報を付加して独立に蓄積し、そ
の同期情報を参照しつつそれぞれの情報を独立に同期並
列出力することができるものである。以下図面により詳
細に説明する。 The present invention adds time information as synchronization information to a plurality of media such as document image information, voice information, handwritten character and graphic information, and pointing information, and stores them independently, and can output each piece of information independently and synchronously in parallel while referring to the synchronization information. The present invention will be described in detail below with reference to the drawings.
本発明は、文書画像情報、音声情報、手書き文字図形情
報、ポインテイング情報それぞれに同期情報として時刻
情報を付加して独立に蓄積し、その同期情報を参照しつ
つ独立に出力する複数メディア入出力装置である。 The present invention is a multiple media input/output device which adds time information as synchronization information to each of document image information, voice information, handwritten character and graphic information, and pointing information, and stores them independently, and outputs them independently while referring to the synchronization information.
文書画像情報については、音声情報、手書き文字図形情
報、ポインテイング情報に先立つて出力できるような蓄
積構成をとる。また第２図に文書画像情報のデータ構造
を示すように、蓄積の際、前ページのロード時から次ペ
ージのロード時までの時間間隔を時刻情報（文書ページ
間の時間間隔11）として次ページのデータのヘツダに付
加し蓄積する。すなわち、この処理は、先に述べた第一
の手段に対応する。音声情報については、例えば従来よ
り音声蓄積サービス関連の文献（坂本他『音声蓄積サー
ビス装置構成』電電公社研究実用化報告昭和59年第３巻
第５号p933〜p943）等で提案されている構成を採用す
る。即ち、まず音声を数十ms単位のフレームに分け、有
音無音の判定の後、無音区間の圧縮を行い、無音区間は
その区間数を、また有音区間はデータを蓄積する。すな
わち、この処理は、先に述べた第二の手段に対応する手
書き文字図形情報については、第３図に示すような蓄積
構成をとる。即ち、ペンダウン時（ストローク開始コマ
ンド31）からペンアツプ時（ストローク終了コマンド3
2）までのデータを１ストロークとして蓄積する。21〜2
nは時刻１〜ｎにおける座標データ、33はストローク終
了から次ストローク開始までの時間間隔である。ストロ
ーク間の時間間隔を同期情報として手書き文字図形デー
タのヘツダに付加し、蓄積を行う。すなわち、この処理
は、先に述べた第三の手段に対応する。ポインティング
情報については、キー入力により手書き文字図形入力モ
ードとのモード切り換えを行い、手書き文字図形情報と
同様の蓄積構成をとる。すなわち、この処理は、先に述
べた第四の手段に対応する。The document image information is stored in such a way that it can be output prior to the voice information, the handwritten character and graphic information, and the pointing information. As shown in the data structure of the document image information in FIG. 2, when storing, the time interval from the loading of the previous page to the loading of the next page is added to the header of the data of the next page as time information (time interval between document pages 11) and stored. That is, this process corresponds to the first means described above. For the voice information, for example, a structure proposed in a document related to voice storage services (Sakamoto et al., "Voice Storage Service Device Configuration," NTT Public Corporation Research and Practical Application Report, 1984, Vol. 3, No. 5, pp. 933-943) is adopted. That is, the voice is first divided into frames of several tens of milliseconds, and after determining whether the voice is present or absent, the silent intervals are compressed, and the number of silent intervals is stored, and the data of the voice intervals is stored. That is, for the handwritten character and graphic information, which corresponds to the second means described above, the storage structure shown in FIG. 3 is used. That is, from pen down (stroke start command 31) to pen up (stroke end command 3
2) The data up to 2) is stored as one stroke.
n is the coordinate data from time 1 to time n, and 33 is the time interval from the end of a stroke to the start of the next stroke. The time interval between strokes is added to the header of the handwritten character and graphic data as synchronization information and stored. In other words, this process corresponds to the third means described above. As for pointing information, a mode change to the handwritten character and graphic input mode is performed by key input, and the data is stored in the same manner as the handwritten character and graphic information. In other words, this process corresponds to the fourth means described above.
出力の際には、まず文書をロードし、その後、スタート
時刻のみをあわせて、音声、手書き文字図形、ポインタ
をそれぞれの時刻情報を参照しながら独立に出力させ
る。すなわち、この処理は、先に述べた第五の手段に対
応する。本発明の複数メディア入出力装置全体の構成を
第１図に示す。第１図において、41は文書入力装置を示
す。43は描画タブレツト等の手書き文字図形入力装置
を、45は音声入力装置を示す。また、47はタイマを示
す。48の同期情報付加回路は、文書ページ開始、終了検
出回路と文書ページ間の時間間隔情報の付加回路と手書
き文字図形情報のペンダウン、ペンアツプの判定回路と
ペンアツプ時の手書き文字図形情報圧縮回路と音声の無
音区間検出回路と無音区間圧縮回路とよりなる。入力
時、文書画像については、文書入力装置41からの文書画
像情報を符号器42を介して同期情報付加回路48に入力
し、47のタイマでぺージ間隔を監視し、ページの時間間
隔を時刻情報として付加する（第一の手段）。手書き文
字図形情報については、手書き文字図形入力装置43から
の情報を符号器44を介して同期情報付加回路48に入力
し、同期情報付加回路48の回路中に含まれるペンアツ
プ、ペンダウン判定回路においてストローク検出を行
い、タイマ47によりストローク間の時間間隔を測定し、
この時間間隔を時刻情報として付加する（第三の手
段）。音声については、音声入力装置45からの情報を符
号器46を介して同期情報付加回路48に入力し、同期情報
付加回路48の回路中の無音区間検出回路にて無音区間を
検出し、その無音区間数を蓄積するものとし、その区間
のデータは除去する（第二の手段）。これらの処理を行
つた後、各データを49のフアイルメモリに蓄積する。出
力時には、フアイルメモリ49よりとりだしたデータを、
画像データについては画像データ用バツフアメモリ50を
介して復号器51にて復号化する際、画像データの情報に
付加された時刻情報を参照することにより、文書画像情
報、音声情報、手書き文字図形情報、ポインテイング情
報を独立に同期して出力する（第五の手段）。When outputting, the document is first loaded, and then, by adjusting only the start time, the voice, handwritten character and graphic, and pointer are output independently while referring to their respective time information. That is, this process corresponds to the fifth means described above. The overall configuration of the multiple media input/output device of the present invention is shown in FIG. 1. In FIG. 1, 41 indicates a document input device. 43 indicates a handwritten character and graphic input device such as a drawing tablet, and 45 indicates a voice input device. Also, 47 indicates a timer. The synchronization information adding circuit 48 comprises a document page start/end detection circuit, a time interval information adding circuit between document pages, a pen-down/pen-up judgment circuit for handwritten character and graphic information, a handwritten character and graphic information compression circuit at pen-up, a silent interval detection circuit for voice, and a silent interval compression circuit. When inputting, for a document image, the document image information from the document input device 41 is inputted to the synchronization information adding circuit 48 via the encoder 42, the page interval is monitored by the timer 47, and the page interval is added as time information (first means). Regarding the handwritten character and graphic information, information from the handwritten character and graphic input device 43 is input to the synchronization information adding circuit 48 via the encoder 44, strokes are detected in a pen-up/pen-down determining circuit included in the synchronization information adding circuit 48, and the time interval between strokes is measured by the timer 47.
This time interval is added as time information (third means). For audio, information from an audio input device 45 is input to a synchronization information adding circuit 48 via an encoder 46, and a silent interval is detected by a silent interval detection circuit in the synchronization information adding circuit 48, the number of silent intervals is stored, and the data for that interval is removed (second means). After these processes, each data is stored in a file memory 49. At the time of output, the data taken out of the file memory 49 is
When image data is decoded by the decoder 51 via the image data buffer memory 50, the document image information, voice information, handwritten character and graphic information, and pointing information are output independently and synchronously by referring to the time information added to the image data information (fifth means).
なお、52は画像表示装置、53は音声データ用バッファメ
モリ、54は復号器、55は音声出力装置である。Reference numeral 52 denotes an image display device, 53 denotes a buffer memory for audio data, 54 denotes a decoder, and 55 denotes an audio output device.
以上説明したように、本発明によれば文書画像情報、音
声情報、手書き文字図形情報、ポインテイング情報等複
数メデイアを同期並列出力できるようなデータの蓄積が
可能となる。また、手書き文字図形情報、ポインテイン
グ情報のペンアツプ時のデータ、音声情報の無音時のデ
ータを除去して蓄積するため、コストの主要因である蓄
積データ量の軽減が図れるといつた利点を持つ。 As explained above, according to the present invention, it is possible to store data that can be output in parallel in a synchronized manner for multiple media such as document image information, voice information, handwritten character and graphic information, pointing information, etc. Also, since handwritten character and graphic information and pointing information data at the time of pen-up and voice information data at the time of silence are removed before storage, it has the advantage of reducing the amount of stored data, which is the main factor of costs.
第１図は本発明の複数メディア入出力装置全体の構成
図、第２図は文書画像情報のデータ構造図、第３図は手
書き文字図形情報のデータ構造図である。 11…文書ページ間の時間間隔、21〜2n…時刻１〜ｎにお
ける座標データ、31…ストローク開始コマンド、32…ス
トローク終了コマンド、33…ストローク終了から次スト
ローク開始までの時間間隔、41…文書入力装置、42…符
号器、43…手書き文字図形入力装置、44…符号器、45…
音声入力装置、46…符号器、47…タイマ、48…同期情報
付加回路、49…フアイルメモリ、50…画像データ用バツ
フアメモリ、51…復号器、52…画像表示装置、53…音声
データ用バツフアメモリ、54…復号器、55…音声出力装
置 Fig. 1 is a diagram showing the overall configuration of the multiple media input/output device of the present invention, Fig. 2 is a diagram showing the data structure of document image information, and Fig. 3 is a diagram showing the data structure of handwritten character and graphic information. 11...time interval between document pages, 21 to 2n...coordinate data at times 1 to n, 31...stroke start command, 32...stroke end command, 33...time interval from the end of a stroke to the start of the next stroke, 41...document input device, 42...encoder, 43...handwritten character and graphic input device, 44...encoder, 45...
Audio input device, 46...encoder, 47...timer, 48...synchronization information adding circuit, 49...file memory, 50...image data buffer memory, 51...decoder, 52...image display device, 53...audio data buffer memory, 54...decoder, 55...audio output device
───────────────────────────────────────────────────── フロントページの続き (72)発明者 酒井 善則 神奈川県横須賀市武１丁目2356番地 日本 電信電話公社横須賀電気通信研究所内 (56)参考文献 特開 昭60−2236（ＪＰ，Ａ) 特開 昭60−35372（ＪＰ，Ａ)───────────────────────────────────────────────────────── Continued from the front page (72) Inventor: Yoshinori Sakai 2356 Take 1-chome, Yokosuka, Kanagawa Prefecture, Japan Telegraph and Telephone Public Corporation Yokosuka Electrical Communication Research Laboratory (56) References: JP 60-2236 (JP, A) JP 60-35372 (JP, A)
Claims (1)
形情報、またはポインティング情報を入力して蓄積し、
同期して出力する複数メディア入出力装置であって、入
力された該文書画像情報に対して、前ページのロード時
から次ページのロード時までの時間間隔を前記文書画像
情報の時刻情報とし、前記文書画像情報に該時刻情報を
付加して蓄積する第一の手段を有し、 入力された音声情報に対して、無音区間数を前記音声情
報の時刻情報とし、無音区間のデータは除去し有音区間
のデータに該時刻情報を付加したものを音声情報として
蓄積する第二の手段、 入力された手書き文字図形情報に対して、ストローク終
了からストローク開始までの時間間隔を前記手書き文字
図形情報の時刻情報とし、ペンアップ時のデータを除去
し該時刻情報を付加したものを手書き文字図形情報とし
て蓄積する第三の手段、または、 入力されたポインティング情報に対して、ストローク終
了からストローク開始までの時間間隔を前記ポインティ
ング情報の時刻情報とし、ペンアップ時のデータを除去
し該時刻情報を付加したものをポインティング情報とし
て蓄積する第四の手段を有し、 前記文書画像情報を出力するとき、該文書画像情報の時
刻情報と、該音声情報、該手書き文字図形情報、または
該ポインティング情報の各々の時刻情報を参照し、それ
らのスタート時刻のみをあわせて、前記文書画像情報
と、前記音声情報、前記手書き文字図形情報、または前
記ポインティング情報をそれぞれ独立に出力する第五の
手段を 有することを特徴とする複数メディア入出力装置。Claim 1: Input and store document image information, voice information, handwritten character and graphic information, or pointing information,
a multi-media input/output device for synchronously outputting data, the device having a first means for, for inputted document image information, taking a time interval from when a previous page is loaded to when a next page is loaded as time information for the document image information, and storing the time information added to the document image information; a second means for, for inputted voice information, taking a number of silent intervals as time information for the voice information, removing data for silent intervals and adding the time information to data for voice intervals, and storing the resulting information as voice information; a third means for, for inputted handwritten character and graphic information, taking a time interval from the end of a stroke to the start of a stroke as time information for the handwritten character and graphic information, removing data at the time of pen-up, and adding the time information, and storing the resulting information as handwritten character and graphic information; or a fourth means for, for inputted pointing information, taking a time interval from the end of a stroke to the start of a stroke as time information for the pointing information, removing data at the time of pen-up, and adding the time information, and storing the resulting information as pointing information; a fifth means for referring to time information of the document image information and time information of the voice information, the handwritten character and graphic information, or the pointing information when outputting the document image information, and adjusting only the start times of the document image information and the voice information, the handwritten character and graphic information, or the pointing information, independently outputting the document image information, the voice information, the handwritten character and graphic information, or the pointing information, respectively.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP60040629A JPH0779397B2 (en) | 1985-03-01 | 1985-03-01 | Multiple media I/O devices |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP60040629A JPH0779397B2 (en) | 1985-03-01 | 1985-03-01 | Multiple media I/O devices |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPS61200762A JPS61200762A (en) | 1986-09-05 |
| JPH0779397B2 true JPH0779397B2 (en) | 1995-08-23 |
Family
ID=12585833
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP60040629A Expired - Lifetime JPH0779397B2 (en) | 1985-03-01 | 1985-03-01 | Multiple media I/O devices |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0779397B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06105937B2 (en) * | 1989-04-07 | 1994-12-21 | 北岡音楽産業株式会社 | Music / video information transmission system |
| JP3375449B2 (en) * | 1995-02-27 | 2003-02-10 | シャープ株式会社 | Integrated recognition dialogue device |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS602236A (en) * | 1983-06-21 | 1985-01-08 | 株式会社東芝 | Ct apparatus with clinical training function |
| JPS6035372A (en) * | 1983-08-05 | 1985-02-23 | Tokyo Jiki Insatsu Kk | Recording and reproducing system for magnetic card |
-
1985
- 1985-03-01 JP JP60040629A patent/JPH0779397B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPS61200762A (en) | 1986-09-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108228843B (en) | Internet-based lecture note compression transmission and restoration method | |
| JPH0779397B2 (en) | Multiple media I/O devices | |
| CN116126834A (en) | Database migration method, device, computer equipment and storage medium | |
| JPH0243652A (en) | Data transfer system | |
| CN111177422B (en) | Group chat system capable of reproducing information based on keyword information | |
| JPH07162824A (en) | Communication system and terminal device | |
| CN106155608A (en) | A kind of former person's handwriting storage and display packing, system and equipment | |
| JPS61184974A (en) | Picture data converting device | |
| US6667931B2 (en) | Memory circuit designed for a parallel reading or writing access to data comprising various components | |
| CN115622978A (en) | A conference assistance method, system and host based on cloud server storing handwriting | |
| Watt | New aspects of InkML for pen-based computing | |
| JPS63299628A (en) | Multi-media mail system synthesizing control system | |
| JPS62140136A (en) | data storage device | |
| CN104125513B (en) | Data sharing method and device | |
| JPS61183730A (en) | Composite communication terminal equipment | |
| JPS61186075A (en) | Picture compression system | |
| JPH0476741A (en) | Recording system for error information | |
| JPS59165553A (en) | Telephone device | |
| JPH03284053A (en) | Drawn picture communication terminal equipment | |
| Hasui et al. | Handwritten message switching via an integrated EPBX | |
| JPH02131061A (en) | voice response device | |
| JPH01311657A (en) | Callee number resending system | |
| JPS63108580A (en) | Restoring method for file area | |
| JPS62212685A (en) | Reading aid | |
| JPS61219266A (en) | System for processing compressed picture data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| EXPY | Cancellation because of completion of term |