Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7563902B2 - Image selection and display system - Google Patents
[go: Go Back, main page]

JP7563902B2 - Image selection and display system - Google Patents

Image selection and display system Download PDF

Info

Publication number
JP7563902B2
JP7563902B2 JP2020097984A JP2020097984A JP7563902B2 JP 7563902 B2 JP7563902 B2 JP 7563902B2 JP 2020097984 A JP2020097984 A JP 2020097984A JP 2020097984 A JP2020097984 A JP 2020097984A JP 7563902 B2 JP7563902 B2 JP 7563902B2
Authority
JP
Japan
Prior art keywords
image data
image
selection
error
output means
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020097984A
Other languages
Japanese (ja)
Other versions
JP2021190969A (en
Inventor
大志 茆原
伸生 原
誠基 中山
Original Assignee
株式会社風神企画
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社風神企画 filed Critical 株式会社風神企画
Priority to JP2020097984A priority Critical patent/JP7563902B2/en
Publication of JP2021190969A publication Critical patent/JP2021190969A/en
Application granted granted Critical
Publication of JP7563902B2 publication Critical patent/JP7563902B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本発明は、縦横のアスペクト比が異なる表示画面に動画像または静止画像からなる画像データを表示するための画像選択再生システムに関し、特に、表示画面を縦向きまたは横向きに切り替えた際に、それぞれの画像が相互に関連する別の画像データを切り替えて表示画面に表示させることで視覚的効果を高めることを可能とするとともに、画像データ同士の表示/再生タイミングの同期を適確にとることでユーザの快適性を高めることを可能とした画像選択再生システムに関する。 The present invention relates to an image selection and playback system for displaying image data consisting of moving images or still images on a display screen with different vertical and horizontal aspect ratios, and in particular to an image selection and playback system that, when the display screen is switched between portrait and landscape orientation, enhances the visual effect by switching between different image data in which each image is related to the other images and displaying them on the display screen, and enhances user comfort by accurately synchronizing the display/playback timing of the image data.

従来より、スマートフォンやタブレット端末、携帯型ゲーム機のようなポータブルタイプの機器を用いて映像やゲームなどを楽しむために、動画・静止画等からなる画像の表示方法に趣向を凝らすための技術が開発されており、ゲームにストーリー性を持たせたり、映像の臨場感を高めることを可能とした、映像の表示手法に工夫を凝らすための様々な技術が開発され利用されている。特に、スマートフォンやタブレット端末、携帯型ゲーム機のような携帯可能な電子機器を用いて映像やゲームを楽しむ機会が多い昨今において、表示領域が小さい画面で最大限に興趣効果を高めることが要求されている。 Conventionally, in order to enjoy videos and games using portable devices such as smartphones, tablet terminals, and portable game consoles, technologies have been developed to improve the display method of images consisting of videos and still images, and various technologies have been developed and used to improve the video display method, making it possible to give games a story-like quality and increase the realism of the video. In particular, in these days when there are many opportunities to enjoy videos and games using portable electronic devices such as smartphones, tablet terminals, and portable game consoles, there is a demand for maximizing the entertainment effect on screens with small display areas.

通常、ストーリー性のある画像やゲーム等をユーザが楽しむ場合、ある特定の視点から見た映像が一方的に画面に表示され、それをユーザが見て楽しんでいる。しかしながら、ユーザは自分が見た設定された画像におけるストーリーしか見ることができず、その裏で進行する別のストーリーがあったとしてもそれを知ることはできない。ユーザが用意された同時進行する他のストーリーを任意のタイミングで見ることができれば、画像を見るたびに新たな発見があったり、別のストーリーを楽しむことができたり、楽しみの範囲が広がる。 Usually, when a user enjoys an image or game with a story, an image seen from a specific viewpoint is displayed on the screen one way, and the user enjoys watching it. However, the user can only see the story in the image that they have set and cannot know if there is another story unfolding in the background. If the user could view other stories that are being prepared and progressing simultaneously at any time, they would make new discoveries every time they look at an image and be able to enjoy a different story, expanding the scope of enjoyment.

また、同一の画像であったとしても、縦横のアスペクト比の異なる画面によると、表示されない領域が発生し、その部分をユーザは見ることができない。しかしながら、表示されない領域に隠されたメッセージが、そのストーリーを理解したりゲームを解く鍵となる領域が存在することがあり、そのポイントが見えるように画像を切り替えることができるような構成とすると、画像の楽しみ方が広がる。 Furthermore, even if the image is the same, screens with different aspect ratios will result in areas that are not displayed and the user cannot see them. However, there may be areas where hidden messages are found in the not-displayed areas that hold the key to understanding the story or solving the game, and if the image can be switched so that these points are visible, the ways in which images can be enjoyed will be expanded.

例えば、ゲーム中に表示される画像の切り替えに関する技術として、特開2019-51360号公報が存在する。ここでは、画面に表示する内容を制御する技術であって、傾きセンサの検出結果に応じて、仮想空間に配置される仮想カメラの視界のアスペクト比を、縦長の第1アスペクト比と横長の第2アスペクト比との間で切り替えるとともに、仮想カメラが第1アスペクト比で撮影する第1撮影画像と第2アスペクト比で撮影する第2撮影画像中、予め定められた条件を満たす位置に部品を重ね合わせた画像をディスプレイに表示するゲームプログラムに関する技術が開示されている。この構成により、表示態様が切り替わった場合でも、ユーザに違和感を抱かせないことが可能になる旨示唆されている。 For example, JP 2019-51360 A discloses a technology for switching images displayed during a game. This technology controls the content displayed on the screen, and discloses a technology for a game program that switches the aspect ratio of the field of view of a virtual camera placed in a virtual space between a first vertical aspect ratio and a second horizontal aspect ratio in accordance with the detection results of a tilt sensor, and displays on a display an image in which parts are superimposed in positions that satisfy predetermined conditions in a first captured image taken by the virtual camera in the first aspect ratio and a second captured image taken in the second aspect ratio. It is suggested that this configuration makes it possible to prevent the user from feeling uncomfortable even when the display mode is switched.

確かにこの技術によれば、縦横アスペクト比の異なる画像の表示態様を切り替えることが可能となるが、同一仮想空間内における撮影位置の制御を行うのみでは、例えば同一時間で異なる場所の画像を同時に再生等する場合に、時間的ズレが生じるとユーザが違和感を覚えてしまうという大きな問題点があった。 This technology does indeed make it possible to switch between display modes for images with different aspect ratios, but there is a major problem with only controlling the shooting position within the same virtual space: for example, when playing back images from different locations at the same time, the user feels uncomfortable if a time lag occurs.

また、特開2019-140568号公報では、パノラマ画像を取得し、パノラマ画像に基づいて動画を生成する画像処理装置に関する技術であって、動画生成手段が、パノラマ画像をトリミングする際のトリミング領域の位置を順次移動してトリミングしたうえで、複数のトリミング画像を順次再生する動画を生成するとともに、パノラマ画像のアスペクト比または所定方向のサイズに応じて、パノラマ画像を所定のアスペクト比でトリミングするか、パノラマ画像を所定のアスペクト比と異なるアスペクト比でトリミングするかを切り替える技術が開示されている。この技術により、状況に応じた動画の生成を行うことで見栄えのよい動画を生成することが可能となる旨が開示されている。 JP 2019-140568 A discloses a technology relating to an image processing device that acquires a panoramic image and generates a video based on the panoramic image, in which a video generating means sequentially moves the position of a cropping area when cropping the panoramic image, generates a video in which a plurality of cropped images are sequentially played back, and switches between cropping the panoramic image at a predetermined aspect ratio or cropping the panoramic image at an aspect ratio different from the predetermined aspect ratio depending on the aspect ratio of the panoramic image or the size in a predetermined direction. It is disclosed that this technology makes it possible to generate good-looking videos by generating videos according to the situation.

この技術によれば、確かに、任意のタイミングで画面に表示する画像を効率よく他の画像に切り替えることが可能となり、切替タイミングのズレに起因するユーザの違和感は解消されることとなるとも考えられるが、ベースとなる画像が異なる場合に、ズレを防止することが困難という問題点があった。さらに、画像の切替タイミングをユーザに委ねた場合にも、切替を繰り返すうちに画像間の表示タイミングのズレが生じかねないという大きな問題点があり、ユーザが好きなタイミングで画像を切り替えて楽しむことが難しい構成であった。 This technology certainly makes it possible to efficiently switch the image displayed on the screen to another image at any timing, and it is thought that this will eliminate the discomfort felt by the user due to a discrepancy in the timing of the switching. However, there is a problem in that it is difficult to prevent the discrepancy when the base images are different. Furthermore, even if the timing of the image switching is left up to the user, there is a major problem in that the display timing of the images can become discrepant as switching is repeated, making it difficult for users to enjoy switching images at their own timing.

画像の表示方法に趣向を凝らし、映像の臨場感を高めることは、特に、スマートフォンやタブレット端末、携帯型ゲーム機などを用いて映像やゲームを楽しむ機会が多い現在において強く要求されている。そこで、縦横のアスペクト比が異なる別個の画像データの表示を相互に切り替えることを可能して、一方の画面では認識し得なかった情報を画像を切り換えることにより可視化して、興趣効果を高めるとともに、画像間において同期をとって切替時の表示タイミングのズレを防止することを可能とした画像選択表示システムの開発が望まれていた。 There is a strong demand for creative image display methods and increased realism in images, especially in today's world where there are many opportunities to enjoy videos and games using smartphones, tablet devices, portable game consoles, etc. Therefore, there has been a demand for the development of an image selection and display system that allows the display of separate image data with different vertical and horizontal aspect ratios to be switched between, making information that could not be recognized on one screen visible by switching images, enhancing the entertainment effect, and synchronizing images to prevent discrepancies in the display timing when switching.

特開2019-51360号公報JP 2019-51360 A 特開2019-140568号公報JP 2019-140568 A

本発明は、上記問題を解決するために、縦横のアスペクト比が異なる表示画面に動画像または静止画像からなる画像データを表示するための画像選択再生システムであって、特に、表示画面を縦向きまたは横向きに切り替えた際に、それぞれ内容が相互に関連する別の画像データを切り替えて表示画面に表示させることで視覚的効果や興趣効果を高めるとともに、画像データ同士の表示/再生タイミングの同期を適確にとることでユーザの違和感を排除し、快適性を高めることを可能とした画像選択再生システムを提供することを目的とする。 In order to solve the above problems, the present invention aims to provide an image selection and playback system for displaying image data consisting of moving images or still images on a display screen with different vertical and horizontal aspect ratios, and in particular, to provide an image selection and playback system that enhances the visual effect and entertainment effect by switching between different image data whose contents are related to each other and displaying them on the display screen when the display screen is switched between portrait and landscape orientations, and eliminates any sense of discomfort felt by the user and increases comfort by accurately synchronizing the display/playback timing of the image data.

上記の目的を達成するために本発明に係る画像選択表示システムは、画像表示装置に縦横のアスペクト比が異なる動画または静止画からなる画像データを表示する画像選択表示システムが、横のアスペクト比が大きい左右方向に横長の第一画像データの出力を行う第一画像データ出力手段と、縦のアスペクト比の大きい上下方向に縦長の第二画像データの出力を行う第二画像データ出力手段と、前記第一画像データおよび\または第二画像データに付随する音声データを再生する音声再生手段と、前記第一画像データ出力手段または前記第二画像データ出力手段の何れかから送信された画像データを表示する表示画面と、前記第一画像データ出力手段および前記第二画像データ出力手段から送信される画像データの前記表示画面への表示の選択を行う画像データ選択手段と、前記第一画像データ出力手段および前記第二画像データ出力手段から出力された画像の同期をとる同期手段と、からなり、前記画像データ選択手段は、前記第一画像データ出力手段または前記第二画像データ出力手段から出力される何れかの画像データを選択して前記表示画面に送信することにより前記表示画面に表示するとともに、前記同期手段は、前記第一画像データと前記第二画像データとの出力タイミングの誤差を検出する誤差検出手段と、前記第一画像データと前記第二画像データの出力タイミングの誤差を測定する誤差測定手段と、検出し測定された前記第一画像データと前記第二画像データの出力タイミングの誤差を補正する補正手段と、からなる構成である。 In order to achieve the above object, the image selection display system according to the present invention displays image data consisting of moving images or still images with different aspect ratios on an image display device, comprising: a first image data output means for outputting first image data that is horizontally long in the left-right direction and has a large horizontal aspect ratio; a second image data output means for outputting second image data that is vertically long in the up-down direction and has a large vertical aspect ratio; an audio playback means for playing audio data associated with the first image data and/or the second image data; a display screen for displaying image data transmitted from either the first image data output means or the second image data output means; The image data selection means selects the image data to be displayed on the display screen, and a synchronization means synchronizes the images output from the first image data output means and the second image data output means. The image data selection means selects either the image data output from the first image data output means or the second image data output means and transmits it to the display screen to display it on the display screen. The synchronization means comprises an error detection means that detects an error in the output timing between the first image data and the second image data, an error measurement means that measures the error in the output timing between the first image data and the second image data, and a correction means that corrects the detected and measured error in the output timing between the first image data and the second image data.

また、前記誤差検出手段は、前記画像データ選択手段が前記第一画像データまたは前記第二画像データの何れかより選択したアクティブな画像データと、選択されなかった非アクティブな画像データとを対比して両者の間の出力タイミングの誤差を検出するとともに、前記誤差測定手段は、前記誤差の量を測定した上で一定量の誤差を測定した場合に誤差の発生の認定を行い、前記補正手段は、前記第一画像データ出力手段または前記第二画像データ出力手段に対して、発生した画像データの誤差に応じて前記選択されなかった非アクティブな画像データの出力タイミングを前記選択されたアクティブな画像データに合わせる補正をする構成である。 The error detection means detects an error in output timing between the active image data selected by the image data selection means from either the first image data or the second image data and the non-selected non-active image data, and the error measurement means measures the amount of the error and recognizes the occurrence of an error when a certain amount of error is measured, and the correction means corrects the output timing of the non-selected non-active image data to match the selected active image data, depending on the image data error that has occurred, for the first image data output means or the second image data output means.

また、前記補正手段は、画像データが動画像である場合には、非アクティブな画像データを、コマ送り、コマ戻し、コマ指定、一時停止のうちの何れか一または複数の処理をすることにより、非アクティブな画像データの出力タイミングを前記選択されたアクティブな画像データに合わせる補正をする構成である。 In addition, when the image data is a moving image, the correction means is configured to correct the output timing of the inactive image data to match that of the selected active image data by performing one or more of the following processes on the inactive image data: frame forward, frame rewind, frame selection, and pausing.

また、前記画像データ選択手段は、別の画像データを選択する画像データ選択信号を受信した際には、前記第一画像データ出力手段または前記第二画像データ出力手段から出力される新たに選択された画像データを、現在選択されている画像データに替えて前記表示画面に送信する構成である。
また、前記画像表示装置は、スマートフォンまたは携帯型ゲーム機またはタブレット型携帯端末からなる構成である。
In addition, when the image data selection means receives an image data selection signal selecting different image data, it transmits the newly selected image data output from the first image data output means or the second image data output means to the display screen in place of the currently selected image data.
The image display device is preferably a smartphone, a portable game machine, or a tablet-type portable terminal.

更に、前記画像データ選択手段は、スマートフォンまたは携帯型ゲーム機またはタブレット型携帯端末の角度を検知する角度計測センサーからなるとともに、前記画像データ選択信号は、前記角度計測センサーによるスマートフォン本体または携帯型ゲーム機本体またはタブレット型携帯端末本体の設置角度の変化を示す信号からなり、前記画像データ選択手段が、前記画像表示装置が横向きであること示す画像データ選択信号を検知した場合には、第一画像データ出力手段が出力する画像データを選択して前記表示画面に送信・表示するとともに、前記画像データ選択手段が、前記画像表示装置が縦向きであること示す画像データ選択信号を検知した場合には、第二画像データ出力手段が出力する画像データを選択して前記表示画面に送信・表示する構成でもある。 Furthermore, the image data selection means is composed of an angle measurement sensor that detects the angle of the smartphone, portable game machine, or tablet-type mobile terminal, and the image data selection signal is composed of a signal that indicates a change in the installation angle of the smartphone body, portable game machine body, or tablet-type mobile terminal body by the angle measurement sensor, and when the image data selection means detects an image data selection signal indicating that the image display device is oriented horizontally, it selects the image data output by the first image data output means and transmits and displays it on the display screen, and when the image data selection means detects an image data selection signal indicating that the image display device is oriented vertically, it selects the image data output by the second image data output means and transmits and displays it on the display screen.

本発明は、上記詳述した通りの構成であるので、以下のような効果がある。
1.第一画像データ出力手段と第二画像データ出力手段を設けたため、縦横アスペクト比の異なる画像を所定の条件で選択して表示することができる。また、画像データ選択手段が第一画像データ出力手段と第二画像データ出力手段の何れが出力される画像であるかを適宜に選択し、画像を素早く切り替えることが可能となる。また、同期手段を設けたため、第一画像データ出力手段と第二画像データ出力手段がそれぞれ出力する画像の同期をとることが可能となり、タスク実行の遅延等を起因とする画像表示のズレを防止し、補正することが可能となる。
2.同期手段として、誤差検出手段と誤差測定手段と補正手段とを設ける構成としたため、検出したズレの程度を正確に算出したうえで補正して同期をとることが可能となる。
The present invention has the configuration as described above in detail and thus has the following effects.
1. By providing the first image data output means and the second image data output means, images with different aspect ratios can be selected and displayed under predetermined conditions. In addition, the image data selection means appropriately selects which of the first image data output means and the second image data output means will output an image, making it possible to quickly switch between images. In addition, by providing the synchronization means, it becomes possible to synchronize the images output by the first image data output means and the second image data output means, and it becomes possible to prevent and correct deviations in image display caused by delays in task execution, etc.
2. Since the synchronization means is configured to include an error detection means, an error measurement means, and a correction means, it becomes possible to accurately calculate the degree of the detected deviation and then correct it to achieve synchronization.

3.補正手段が非アクティブな画像データをコマ送りまたはコマ戻しまたはコマ指定または一時停止によって補正して同期をとる構成としたため、ユーザがズレの発生を認識することがなくなり、快適に画像を切り替えて楽しむことが可能となる。
4.画像データ選択手段が画像データ選択信号を受信した際に画像を切り替える処理を行う構成としたため、ユーザが任意のタイミングで表示される画像を切り替えることが可能となる。
3. The correction means is configured to correct inactive image data by frame forwarding, frame rewinding, frame designation, or pausing to achieve synchronization, so the user will no longer be aware of the occurrence of a misalignment, and will be able to comfortably switch between images and enjoy them.
4. Since the image data selection means is configured to perform processing for switching images when it receives an image data selection signal, the user can switch the displayed image at any timing.

5.画像表示装置をスマートフォンまたは携帯型ゲーム機またはタブレット型携帯端末としたため、コンパクトかつ縦横のアスペクト比が異なる表示画面に画像を切り替えて表示させることが可能となる。 5. The image display device is a smartphone, a portable game machine, or a tablet-type portable terminal, so it is possible to switch and display images on compact display screens with different vertical and horizontal aspect ratios.

6.画像データ選択手段を、角度を検知する角度計測センサーとしたため、画像表示装置の設置角度が変更されることにより画像データ選択信号を自動的に発生させることができ、ユーザが任意のタイミングで画像表示装置を回転等させることで表示される画像を選択し切り替えて表示画面に送信・表示することが可能となる。 6. The image data selection means is an angle measurement sensor that detects an angle, so that an image data selection signal can be automatically generated when the installation angle of the image display device is changed. This allows the user to select and switch the image to be displayed by rotating the image display device at any time, and transmit and display the image on the display screen.

以下、本発明に係る画像選択表示システムを、図面に示す実施例に基づいて詳細に説明する。図1aは、本発明に係る画像選択表示システムの概略図であり、図1bは、記憶手段を外部に配置した画像選択表示システムの概略図である。図2aは、画像表示装置に画像選択表示システムを組み込んだ状態の概略図であり、図2bは、記憶手段を外部に配置した画像表示装置の概略図である。図3aは、同期手段の動作の例を示す図であり、図3bは、同期処理を示す図である。図4aは、横長画面時の画像選択表示システムの実施例を示す図であり、図4bは、縦長画面時の画像選択表示システムの実施例を示す図である。 The image selection and display system according to the present invention will be described in detail below with reference to the embodiment shown in the drawings. Fig. 1a is a schematic diagram of the image selection and display system according to the present invention, and Fig. 1b is a schematic diagram of an image selection and display system in which the storage means is arranged externally. Fig. 2a is a schematic diagram of an image display device in which the image selection and display system is incorporated, and Fig. 2b is a schematic diagram of an image display device in which the storage means is arranged externally. Fig. 3a is a diagram showing an example of the operation of the synchronization means, and Fig. 3b is a diagram showing the synchronization process. Fig. 4a is a diagram showing an embodiment of the image selection and display system in the landscape screen, and Fig. 4b is a diagram showing an embodiment of the image selection and display system in the portrait screen.

本発明に係る画像選択表示システム1は、スマートフォン、携帯型ゲーム機またはタブレット型携帯端末などのポータブル機器からなる画像表示装置100に組み込まれるシステムであって、図1aまたは図1bに示すように、第一画像データ出力手段10と、第二画像データ出力手段20と、音声再生手段30と、表示画面40と、画像データ選択手段50と、同期手段60と、からなり、表示画面40を装備する画像表示装置100の視聴時の縦横の角度変化に応じて、表示画面40に表示する画像データを選択して表示することで、視覚的効果、興趣効果を高めるとともに、同期手段60が画像データ同士の表示/再生タイミングの同期を適確にとることでユーザの違和感を排除し快適性を高めることを可能とした、画像を選択して表示するためのシステムである。 The image selection and display system 1 according to the present invention is a system incorporated in an image display device 100 consisting of a portable device such as a smartphone, a portable game machine, or a tablet-type portable terminal, and as shown in FIG. 1a or 1b, the system is made up of a first image data output means 10, a second image data output means 20, an audio playback means 30, a display screen 40, an image data selection means 50, and a synchronization means 60, and is a system for selecting and displaying images, which enhances the visual effect and the entertainment effect by selecting and displaying image data on the display screen 40 in response to changes in the vertical and horizontal angles when viewing the image display device 100 equipped with the display screen 40, and which makes it possible to eliminate discomfort to the user and increase comfort by the synchronization means 60 precisely synchronizing the display/playback timing of the image data.

なお、本発明に係る画像選択表示システム1が表示画面40に表示する画像データは、主に動画像からなるが静止画像も含むものもあり、縦横のアスペクト比の異なる動画像(または静止画像)を切り替えながら表示画面40に表示する構成である。同期手段60は、動画像(または静止画像)の表示タイミングの調整を行う構成である。表示切替の対象となる画像データは、何れもが動画像(または静止画像)であってもよいし、何れかが動画像で他が静止画のように動画像と静止画像とを混在させる構成としてもよい。また、画像の表示とは、本実施例では動画像の再生を含むことは勿論である。 The image data displayed on the display screen 40 by the image selection and display system 1 according to the present invention mainly consists of moving images but also includes still images, and is configured to display moving images (or still images) with different vertical and horizontal aspect ratios while switching between them on the display screen 40. The synchronization means 60 is configured to adjust the display timing of the moving images (or still images). The image data to be switched may all be moving images (or still images), or may be a mixture of moving images and still images, with some being moving images and the others being still images. Furthermore, displaying an image in this embodiment naturally includes playing back moving images.

また、本実施例において、アクティブな画像データとは、画像データ選択手段50によって選択され表示画面40に現在表示(再生)されている画像データを指し、非アクティブな画像データとは、逆に画像データ選択手段50によって選択されておらず、表示画面40に表示されずにバックグラウンドで表示(再生)処理が進む画像データのことを指す。 In addition, in this embodiment, active image data refers to image data that has been selected by the image data selection means 50 and is currently being displayed (played) on the display screen 40, while inactive image data refers to image data that has not been selected by the image data selection means 50, is not being displayed on the display screen 40, and is undergoing display (play) processing in the background.

画像選択表示システム1を搭載する画像表示装置100は表示画面40を有する構成である。本実施例では、表示画面40は縦横のアスペクト比が異なる構成であり、画像選択表示システム1は、図1aおよび図2aに示すように、画像表示装置100の表示画面40に動画像(または静止画像)からなる画像データを表示させる構成である。また、本実施例では、画像表示装置100は、記憶手段70を装備しており、演算装置(図示せず)が記憶手段70に記憶されている画像データや音声データ32などの各種データを読み出して演算処理する構成である。なお、この構成に限定されることはなく、例えば、図1bおよび図2bに示すように、記憶手段70を遠隔地に置き、無線通信または有線通信により、ネットワーク網や通信機器(中継機器を含む)を介して、記憶手段70に記憶されている画像データや音声データ32などの各種データを、画像表示装置100に送信して、画像表示装置100に設けた中継手段80を経由して、演算装置が演算処理し表示する構成や、複数の撮影装置(図示せず)によって撮影された動画像をネットワーク網を介して画像表示装置100に生配信する構成とすることも可能である。 The image display device 100 incorporating the image selection display system 1 has a display screen 40. In this embodiment, the display screen 40 has a different aspect ratio, and the image selection display system 1 is configured to display image data consisting of moving images (or still images) on the display screen 40 of the image display device 100, as shown in Figures 1a and 2a. In this embodiment, the image display device 100 is equipped with a storage means 70, and a calculation device (not shown) reads out various data such as image data and audio data 32 stored in the storage means 70 and performs calculation processing. However, this configuration is not limited to this, and for example, as shown in Figures 1b and 2b, the storage means 70 can be placed in a remote location, and various data such as image data and audio data 32 stored in the storage means 70 can be transmitted to the image display device 100 by wireless or wired communication via a network or communication device (including a relay device), and the data can be processed and displayed by a calculation device via a relay means 80 provided in the image display device 100. Alternatively, moving images captured by multiple imaging devices (not shown) can be live-streamed to the image display device 100 via a network.

画像表示装置100は、本実施例では、図2aまたは図2bに示すように、スマートフォン110aや携帯型ゲーム機110bやタブレット型携帯端末110cからなる構成となっているが、これに限定されることはなく、縦横のアスペクト比が異なる表示画面40を有するポータブル電子機器等を適宜選択して使用することが可能である。 In this embodiment, the image display device 100 is configured as a smartphone 110a, a portable game machine 110b, or a tablet-type portable terminal 110c, as shown in Figure 2a or Figure 2b, but is not limited to this, and it is possible to appropriately select and use portable electronic devices having display screens 40 with different vertical and horizontal aspect ratios.

第一画像データ出力手段10は、第一画像データ12の出力を行うための手段である。第一画像データ12は、図4aに示すように、横のアスペクト比が大きい左右方向に拡幅した横長の長方形からなる表示領域に対応した形の画像データであり、図1aまたは図1bに示すように、第一画像データ出力手段10が第一画像データ12を読み取って表示画面40に表示されるように出力する。 The first image data output means 10 is a means for outputting the first image data 12. As shown in FIG. 4a, the first image data 12 is image data in a form corresponding to a display area consisting of a horizontally elongated rectangle with a large horizontal aspect ratio and widened in the left-right direction, and as shown in FIG. 1a or 1b, the first image data output means 10 reads the first image data 12 and outputs it to be displayed on the display screen 40.

第一画像データ12は、横のアスペクト比が大きい画像データを用意し、そのまま第一画像データ出力手段10が出力して表示画面40に表示する構成としてもよいし、表示画面40が表示可能な表示サイズを超える大きめの元画像データを用意し、そこから表示画面40に表示可能な任意の個所を第一画像データ出力手段10が切り取って第一画像データ12として出力したうえで、表示画面40に表示する構成としてもよい。 The first image data 12 may be prepared as image data with a large horizontal aspect ratio, which is output as is by the first image data output means 10 and displayed on the display screen 40, or it may be prepared as original image data larger than the display size that the display screen 40 can display, and the first image data output means 10 may cut out any portion of the image data that can be displayed on the display screen 40 and output it as the first image data 12, which is then displayed on the display screen 40.

第二画像データ出力手段20は、第二画像データ22の出力を行うための手段である。第二画像データ22は、図4bに示すように、縦のアスペクト比の大きい上下方向に拡幅した縦長の長方形からなる表示領域に対応した形の画像データであり、図1aまたは図1bに示すように、第二画像データ出力手段20が第二画像データ22を読み取って表示画面40に表示されるように出力する。 The second image data output means 20 is a means for outputting the second image data 22. As shown in FIG. 4b, the second image data 22 is image data in a form corresponding to a display area consisting of a vertically elongated rectangle with a large vertical aspect ratio, and as shown in FIG. 1a or 1b, the second image data output means 20 reads the second image data 22 and outputs it to be displayed on the display screen 40.

第二画像データ22は、縦のアスペクト比が大きい画像データを用意し、そのまま第二画像データ出力手段20が出力して表示画面40に表示する構成としてもよいし、表示画面40が表示可能な表示サイズを超える大きめの元画像データを用意し、そこから表示画面40に表示可能な任意の個所を第二画像データ出力手段20が切り取って第二画像データ22として出力したうえで、表示画面40に表示する構成としてもよい。 The second image data 22 may be prepared as image data with a large vertical aspect ratio, which is output as is by the second image data output means 20 and displayed on the display screen 40, or it may be prepared as original image data larger than the display size that the display screen 40 can display, and the second image data output means 20 may cut out any part of the image data that can be displayed on the display screen 40 and output it as the second image data 22, which is then displayed on the display screen 40.

本実施例では、第一画像データ12および第二画像データ22はMPEG4やMotion Jpeg等の動画ファイル、あるいはJPEG等の画像ファイルからなり、第一画像データ出力手段10および第二画像データ出力手段20はMPEG4やMotion Jpeg等の動画ファイルを再生可能なソフトウェア(モジュール)によって構成され、あるいは画像ファイルを表示可能なソフトウェアによって構成されている。また、各ファイルは各々画像表示装置100内や遠隔地に配置された記憶手段70に保存されており、画像表示装置100の演算装置(図示せず)によって呼び出されて再生表示処理が行われる構成となっているが、この構成に限定されることはなく、第一画像データ12および第二画像データ22は他のデータ形式でもよいし、第一画像データ出力手段10および第二画像データ出力手段20による第一画像データ12および第二画像データ22の表示は独立したアプリケーションまたは独立した装置で行う構成としてもよい。また、複数の撮影装置(図示せず)によって撮影された動画像を、ネットワーク網を介して画像表示装置100に生配信する構成とすることも可能である。 In this embodiment, the first image data 12 and the second image data 22 are composed of video files such as MPEG4 and Motion Jpeg, or image files such as JPEG, and the first image data output means 10 and the second image data output means 20 are composed of software (modules) capable of playing video files such as MPEG4 and Motion Jpeg, or software capable of displaying image files. In addition, each file is stored in a storage means 70 disposed in the image display device 100 or in a remote location, and is called up by a calculation device (not shown) of the image display device 100 to perform playback display processing, but this configuration is not limited to this, and the first image data 12 and the second image data 22 may be in other data formats, and the display of the first image data 12 and the second image data 22 by the first image data output means 10 and the second image data output means 20 may be performed by an independent application or an independent device. In addition, it is also possible to configure the video images captured by multiple imaging devices (not shown) to be live-streamed to the image display device 100 via a network.

音声再生手段30は、第一画像データ12および/または第二画像データ22に付随する音声データ32を再生するための手段であり、本実施例では、図1aに示すように、記憶手段70に記憶された音声データ32を呼び出して再生する構成となっている。なお、音声データ32は、図1bに示すように、遠隔地に配置された記憶手段70に保存して呼び出す構成とすることも可能であり、また、複数の撮影装置(図示せず)によって撮影された動画像に付随する音声を、ネットワークを介して画像表示装置100に生配信する構成とすることも可能である。 The audio playback means 30 is a means for playing back audio data 32 associated with the first image data 12 and/or the second image data 22, and in this embodiment, as shown in FIG. 1a, is configured to call up and play back audio data 32 stored in storage means 70. Note that, as shown in FIG. 1b, the audio data 32 can also be stored in a storage means 70 located at a remote location and then called up, and audio associated with moving images captured by multiple image capture devices (not shown) can also be live-streamed to the image display device 100 via a network.

音声データ32は、本実施例では、第一画像データ12および第二画像データ22とは別ファイルとして管理されており、第一画像データ12および第二画像データ22が動画像である場合、第一画像データ12または第二画像データ22が表示再生される際に、同時に音声再生手段30が稼働し、動画像ファイルとは別に設けられる音声ファイルを再生する構成であり、第一画像データ12または第二画像データ22が静止画像である場合には、画像データが表示される際に静止画像ファイルとは別に設けられる音声ファイルを音声再生手段30が再生処理する構成である。なお、この構成に限らず、音声データ32は、第一画像データ12および第二画像データ22が動画像である場合、動画ファイルに含まれる音声データを音声再生手段30が再生処理する構成とすることも可能である。 In this embodiment, the audio data 32 is managed as a separate file from the first image data 12 and the second image data 22, and when the first image data 12 and the second image data 22 are moving images, the audio playback means 30 operates at the same time as the first image data 12 or the second image data 22 is displayed and played back, and plays an audio file provided separately from the moving image file. When the first image data 12 or the second image data 22 is a still image, the audio playback means 30 plays an audio file provided separately from the still image file when the image data is displayed. However, this configuration is not limited to the above, and the audio data 32 can also be configured such that when the first image data 12 and the second image data 22 are moving images, the audio playback means 30 plays the audio data included in the moving image file.

表示画面40は、第一画像データ出力手段10または第二画像データ出力手段20の何れかが出力して送信された画像データ(第一画像データ12または第二画像データ22)を表示するための出力装置であり、図2aまたは図2bに示すように、画面の縦横比が異なるスマートフォン等に装備される表示装置からなる構成である。表示画面40は、本実施例では、画像表示装置100に組み込まれた液晶画面からなるが、この構成に限定されることはなく、機器に追加接続した画像表示専用の機器であってもよい。 The display screen 40 is an output device for displaying image data (first image data 12 or second image data 22) output and transmitted by either the first image data output means 10 or the second image data output means 20, and is configured as a display device equipped on a smartphone or the like having a different aspect ratio of the screen, as shown in FIG. 2a or FIG. 2b. In this embodiment, the display screen 40 is configured as an LCD screen incorporated in the image display device 100, but is not limited to this configuration and may be a dedicated device for image display that is additionally connected to the device.

画像データ選択手段50は、第一画像データ出力手段10および第二画像データ出力手段20から表示画面40へ向けて出力された2つの画像データを受信し、一定の条件に合致した何れか一つの画像データを選択したうえで表示画面40に送信するための手段である。第一画像データ出力手段10および第二画像データ出力手段20は、図1aまたは図1bに示すように、それぞれ第一画像データ12および第二画像データ22を、画像表示装置100内や遠隔地に配置された記憶手段70から読み出して画像データ選択手段50に渡す。その後、画像データ選択手段50が何れの画像データを表示画面40に表示させるかを選択処理して、アクティブな画像データとして表示画面40に送信し、表示画面40が画像データを表示する。 The image data selection means 50 is a means for receiving two pieces of image data output from the first image data output means 10 and the second image data output means 20 to the display screen 40, selecting one of the pieces of image data that meets certain conditions, and transmitting it to the display screen 40. As shown in FIG. 1a or FIG. 1b, the first image data output means 10 and the second image data output means 20 read out the first image data 12 and the second image data 22, respectively, from the storage means 70 located within the image display device 100 or at a remote location, and pass them to the image data selection means 50. The image data selection means 50 then selects which image data to display on the display screen 40, transmits it to the display screen 40 as active image data, and the display screen 40 displays the image data.

同期手段60は、第一画像データ出力手段10および第二画像データ出力手段20から出力された画像データの出力の同期をとる手段である。ユーザが画像選択表示システム1を使用する際において、例えば長時間画像の切り替えを繰り返しながら画像を楽しんでいる際、各種タスクの遅延や実行エラーの発生により、第一画像データ出力手段10および第二画像データ出力手段20の出力タイミングにズレが生じることがある。この状態で、画像データの切替を繰り替えすと、画像間の出力タイミングのズレをユーザが認識し、違和感を覚え、快適性を失うこととなる。同期手段60によって、第一画像データ出力手段10および第二画像データ出力手段20の出力タイミングの同期をとることにより、画像データ同士の表示タイミングの同期を適確にとることができ、視聴するユーザの快適性を高めることが可能となった。 The synchronization means 60 is a means for synchronizing the output of image data output from the first image data output means 10 and the second image data output means 20. When a user uses the image selection display system 1, for example while repeatedly switching between images for a long time, a discrepancy may occur in the output timing of the first image data output means 10 and the second image data output means 20 due to delays in various tasks or the occurrence of execution errors. In this state, if the image data is repeatedly switched, the user will recognize the discrepancy in the output timing between the images, feel uncomfortable, and lose comfort. By synchronizing the output timing of the first image data output means 10 and the second image data output means 20 using the synchronization means 60, it is possible to accurately synchronize the display timing of the image data, thereby increasing the comfort of the user watching.

本発明に係る画像選択表示システム1の基本的な動作を説明すると、まず、第一画像データ出力手段10および第二画像データ出力手段20が、同時に夫々の画像データの出力を開始し、第一画像データ12および第二画像データ22をそれぞれ画像選択手段50に送信する。次に、各画像データを受信した画像データ選択手段50は、後述するユーザが決定する条件に従って、第一画像データ12および第二画像データ22を選択してアクティブな画像データとし、表示画面40に選択したアクティブな画像データを送信する。そして、アクティブな画像データを受け取った表示画面40は該画像データを画面に表示する構成である。上記条件が変化すると、画像データ選択手段50は、現在非アクティブな画像データをアクティブな画像データに切り替えて選択し、表示画面40に選択したアクティブな画像データを送信して表示させる。これにより、ユーザが決定する条件により、表示画面40に表示する画像を次々と切り替えることが可能となる。このユーザが決定する条件については、後述する。 The basic operation of the image selection display system 1 according to the present invention will be described below. First, the first image data output means 10 and the second image data output means 20 simultaneously start outputting their respective image data, and transmit the first image data 12 and the second image data 22 to the image selection means 50, respectively. Next, the image data selection means 50, which has received each image data, selects the first image data 12 and the second image data 22 as active image data according to conditions determined by the user, which will be described later, and transmits the selected active image data to the display screen 40. Then, the display screen 40, which has received the active image data, is configured to display the image data on the screen. When the above conditions change, the image data selection means 50 switches the currently inactive image data to active image data and selects it, and transmits the selected active image data to the display screen 40 for display. This makes it possible to switch images displayed on the display screen 40 one after another according to conditions determined by the user. The conditions determined by the user will be described later.

同期手段60は、図1aまたは図1bに示すように、誤差検出手段62と、誤差測定手段64と、補正手段66とからなる。誤差検出手段62は、第一画像データ12と第二画像データ22との間の出力タイミングの誤差を検出する手段である。 As shown in FIG. 1a or 1b, the synchronization means 60 comprises an error detection means 62, an error measurement means 64, and a correction means 66. The error detection means 62 is a means for detecting an error in the output timing between the first image data 12 and the second image data 22.

誤差検出手段62は、本実施例では、図3aに示すように、画像データ選択手段50が第一画像データ12または第二画像データ22の何れかより選択したアクティブな画像データと、選択されなかった非アクティブな画像データとを対比して両者の間の出力タイミングの誤差を検出する。 In this embodiment, as shown in FIG. 3a, the error detection means 62 detects an error in the output timing between the active image data selected by the image data selection means 50 from either the first image data 12 or the second image data 22 and the inactive image data that was not selected.

出力タイミングは、例えば、動画像であれば、アクティブな動画(画像データ)と非アクティブな動画(画像データ)のフレームナンバーの相違を検出することで、出力タイミングの誤差の発生を検知することができる。なお、この場合、フレームレートが同じであることが望ましく、フレームレートが異なる動画像同士の場合、動画同士の同期がとれているフレーム間のフレームナンバーの対応を予め取得しておき、該フレームナンバーの対応に誤差(ズレ)が生じた場合に、出力タイミングの誤差が発生したと判断する構成とすることが可能である。 For example, in the case of moving images, the occurrence of an error in the output timing can be detected by detecting the difference in frame numbers between active moving images (image data) and inactive moving images (image data). In this case, it is preferable that the frame rates are the same, and in the case of moving images with different frame rates, it is possible to obtain in advance the correspondence of frame numbers between frames in which the moving images are synchronized, and determine that an error in the output timing has occurred if an error (deviation) occurs in the correspondence of the frame numbers.

誤差測定手段64は、第一画像データ12と第二画像データ22の出力タイミングの誤差を測定する手段である。本実施例では、誤差測定手段64は、アクティブな画像データと非アクティブな画像データとの出力タイミングの誤差の量を測定した上で、一定量の誤差を測定した場合に誤差の発生の認定を行う構成である。 The error measurement means 64 is a means for measuring the error in the output timing of the first image data 12 and the second image data 22. In this embodiment, the error measurement means 64 is configured to measure the amount of error in the output timing of active image data and inactive image data, and then certify the occurrence of an error when a certain amount of error is measured.

本実施例では、図3aに示すように、誤差検出手段62が画像データ間の出力タイミングの誤差を検出した際に、誤差測定手段64は、第一画像データ12と第二画像データ22の現在表示されているフレームのナンバーを対比して、何れの画像データがどれ位進んでいるか(遅れているか)を算出し、誤差の度合いを数値的に取得する。 In this embodiment, as shown in FIG. 3a, when the error detection means 62 detects an error in the output timing between image data, the error measurement means 64 compares the currently displayed frame numbers of the first image data 12 and the second image data 22 to calculate how far each image data is ahead (behind), and obtains the degree of error numerically.

補正手段66は、誤差検出手段62が検出し、誤差測定手段64によって測定された第一画像データ12と第二画像データ22の出力タイミングの誤差を補正する手段である。 The correction means 66 is a means for correcting the error in the output timing of the first image data 12 and the second image data 22 detected by the error detection means 62 and measured by the error measurement means 64.

本実施例では、補正手段66は、図3aおよび図3bに示すように、第一画像データ出力手段10または第二画像データ出力手段20に対して、発生が認定された画像データの誤差に応じて、選択されなかった非アクティブな画像データの出力タイミングを、選択されたアクティブな画像データに合わせる補正を行う事で、画像間の同期をとる構成である。この構成とすることにより、検出された誤差の程度を正確に算出して数値的に取得したうえで、出力タイミングを的確に補正し、画像データ同士の同期をとることが可能となる。 In this embodiment, as shown in Figures 3a and 3b, the correction means 66 is configured to synchronize images by correcting the output timing of the non-selected, inactive image data to match the selected, active image data in accordance with the error in the image data whose occurrence has been confirmed for the first image data output means 10 or the second image data output means 20. With this configuration, it is possible to accurately calculate and numerically obtain the degree of the detected error, and then accurately correct the output timing to synchronize the image data.

補正手段66は、本実施例では、図3bに示すように、表示画面40に表示される画像データが動画像である場合には、非アクティブな画像データを、コマ送り、コマ戻し、コマ指定、或いは一時停止することにより、非アクティブな画像データの出力タイミングを選択されたアクティブな画像データに合わせる補正をする構成である(図3aは、コマ送りによる補正処理の例を示している)。すなわち、ユーザが視聴していない方の画像データの出力タイミングを、ユーザが視聴する画像データの方に合わせる補正を行う。ここでは、コマ送りとは、画像データのフレームを誤差分進める処理であり、コマ戻しとは、画像データのフレームを誤差分戻す処理であり、コマ指定とは、画像データの開始フレームを指定する処理であり、一時停止とは、画像データの再生を一旦停止して再開まで一定時間おく処理である。本実施例では、これらの何れかの処理を選択し、或いは組み合わせて処理を行う構成としている。これにより、視聴中の画像データの表示(再生)はそのままに、発生した画像データ間の誤差を補正することが可能となり、ユーザはズレの発生を認識せずに、快適に画像を切り替えて楽しむことが可能となる。 In this embodiment, as shown in FIG. 3b, when the image data displayed on the display screen 40 is a moving image, the correction means 66 is configured to correct the output timing of the inactive image data to match the selected active image data by frame-by-frame forwarding, frame-by-frame rewinding, frame-by-frame designation, or pausing the inactive image data (FIG. 3a shows an example of a correction process using frame-by-frame forwarding). That is, the output timing of the image data that is not being viewed by the user is corrected to match the image data that is being viewed by the user. Here, frame-by-frame forwarding is a process of advancing the frames of the image data by an error amount, frame-by-frame rewinding is a process of reversing the frames of the image data by an error amount, frame designation is a process of designating the start frame of the image data, and pausing is a process of temporarily stopping the playback of the image data and waiting a certain period of time until it is resumed. In this embodiment, any of these processes is selected or a combination of processes is performed. This makes it possible to correct the error between the image data that has occurred while the display (playback) of the image data being viewed remains unchanged, and the user can comfortably enjoy switching between images without being aware of the occurrence of a discrepancy.

ユーザが決定する画像データを切り替えるための条件は、本実施例では、画像データ選択手段50が受信する画像データ選択信号120の内容からなる。すなわち、画像データ選択手段50は、画像データ選択信号120を受信することにより、第一画像データ12および第二画像データ22の何れをアクティブな画像データとして表示画面40に送信するかを選択する。画像データ選択信号120は、ユーザによる特定の操作に起因して発信される信号データであり、図2に示すように、画像データ選択手段50が画像データ選択信号120を受信すると、画像データ選択信号120に内容に応じて、第一画像データ出力手段10または第二画像データ出力手段20から出力される画像データのうちの何れかを選択してアクティブな画像データとし、表示画面40に表示されている画像データに替えて(表示画面40に表示されていない場合には、新規に)、画像データ選択信号120の種別(第一画像データ12または第二画像データ22の何れを選択したか)に従って、表示画面40に送信することによって、表示画面40にアクティブな画像データを表示する構成である。 In this embodiment, the conditions for switching the image data determined by the user are based on the contents of the image data selection signal 120 received by the image data selection means 50. That is, by receiving the image data selection signal 120, the image data selection means 50 selects which of the first image data 12 and the second image data 22 to send to the display screen 40 as active image data. The image data selection signal 120 is signal data that is sent due to a specific operation by the user, and as shown in FIG. 2, when the image data selection means 50 receives the image data selection signal 120, it selects one of the image data output from the first image data output means 10 or the second image data output means 20 according to the contents of the image data selection signal 120, sets it as active image data, and sends it to the display screen 40 in place of the image data displayed on the display screen 40 (or newly if it is not displayed on the display screen 40) according to the type of the image data selection signal 120 (whether the first image data 12 or the second image data 22 was selected), thereby displaying the active image data on the display screen 40.

より具体的には、画像データ選択手段50は、本実施例では、スマートフォン110aまたは携帯型ゲーム機110bまたはタブレット型携帯端末110c等からなる画像表示装置100に搭載される、自機の角度の変化を検知する角度計測センサー52から発せられる信号を画像データ選択信号120として取得し、何れの画像データをアクティブにするか選択する。 More specifically, in this embodiment, the image data selection means 50 acquires a signal emitted from an angle measurement sensor 52 that detects changes in the angle of the device itself, which is mounted on the image display device 100, such as a smartphone 110a, a portable game device 110b, or a tablet-type portable terminal 110c, as an image data selection signal 120, and selects which image data to activate.

角度計測センサー52は、本実施例では、画像表示装置100に搭載される加速度センサーからなり、加速度センサーから発せられる信号を画像データ選択信号120として利用する構成であるが、これに限定されるものではなく、画像表示装置100の設置角度を検出可能なセンサーであれば任意に選択して使用することが可能である。 In this embodiment, the angle measurement sensor 52 is an acceleration sensor mounted on the image display device 100, and the signal emitted from the acceleration sensor is used as the image data selection signal 120, but this is not limited to this, and any sensor that can detect the installation angle of the image display device 100 can be selected and used.

具体的には、図4aに示すように、スマートフォン110aまたは携帯型ゲーム機110bまたはタブレット型携帯端末110c等の画像表示装置100が横向きの角度で配置されていること示す画像データ選択信号120を取得した場合には、画像データ選択手段50は、第一画像データ12が表示画面40に表示されるように、第一画像データ出力手段10が出力する第一画像データ12をアクティブな画像データとして選択して表示画面40に送信する。これにより、第二画像データ22は、非アクティブとなる。また、図4bに示すように、スマートフォン110aまたは携帯型ゲーム機110bまたはタブレット型携帯端末110c等の画像表示装置100が縦向きであること示す画像データ選択信号120を取得した場合には、画像データ選択手段50は、第二画像データ22が表示されるように、第二画像データ出力手段20が出力する第二画像データ22をアクティブな画像データとして選択して表示画面40に送信する構成となっている。このときは、第一画像データ12が、非アクティブとなる。 Specifically, as shown in FIG. 4a, when an image data selection signal 120 indicating that the image display device 100, such as the smartphone 110a, the portable game machine 110b, or the tablet-type mobile terminal 110c, is positioned at a landscape angle is acquired, the image data selection means 50 selects the first image data 12 output by the first image data output means 10 as active image data and transmits it to the display screen 40 so that the first image data 12 is displayed on the display screen 40. As a result, the second image data 22 becomes inactive. Also, as shown in FIG. 4b, when an image data selection signal 120 indicating that the image display device 100, such as the smartphone 110a, the portable game machine 110b, or the tablet-type mobile terminal 110c, is positioned vertically, the image data selection means 50 is configured to select the second image data 22 output by the second image data output means 20 as active image data and transmit it to the display screen 40 so that the second image data 22 is displayed. At this time, the first image data 12 becomes inactive.

以上の構成とすることにより、加速度センサー等からなる角度計測センサー52を装備するスマートフォン110aまたは携帯型ゲーム機110bまたはタブレット型携帯端末110c等の画像表示装置100に画像選択表示システム1を搭載することが可能となるとともに、これらの画像表示装置100上で動画などを楽しむ際に、画像表示装置100の角度を縦横に変化させることにより、角度に応じた画像に切り換えて表示画面40に表示させることが可能となり、ユーザが看取する視覚的効果を高めることが可能となった。また、画像データ同士の表示/再生タイミングの同期を適確にとることが可能となり、画像を楽しむユーザの快適性を更に高めることが可能となった。 The above configuration makes it possible to mount the image selection display system 1 on an image display device 100 such as a smartphone 110a, a portable game machine 110b, or a tablet-type portable terminal 110c equipped with an angle measurement sensor 52 consisting of an acceleration sensor or the like, and when enjoying videos or the like on such an image display device 100, it becomes possible to change the angle of the image display device 100 vertically and horizontally, and to display an image on the display screen 40 according to the angle, thereby improving the visual effect seen by the user. It also becomes possible to accurately synchronize the display/playback timing of image data, further improving the comfort of the user enjoying the images.

本発明に係る画像選択表示システムの概略図Schematic diagram of an image selection and display system according to the present invention. 記憶手段を外部に配置した画像選択表示システムの概略図Schematic diagram of an image selection and display system in which the storage means is arranged externally. 画像表示装置に画像選択表示システムを組み込んだ状態の概略図Schematic diagram of an image display device incorporating an image selection display system 記憶手段を外部に配置した画像表示装置の概略図Schematic diagram of an image display device in which a storage unit is arranged externally. 同期手段の動作を示す図FIG. 2 shows the operation of the synchronization means 同期処理を示す図Diagram showing the synchronization process 横長画面の時の画像選択表示システムの実施例を示す図FIG. 1 shows an embodiment of an image selection and display system for a landscape screen. 縦長画面の時の画像選択表示システムの実施例を示す図FIG. 1 shows an embodiment of an image selection and display system for a vertically long screen.

1 画像選択表示システム
10 第一画像データ出力手段
12 第一画像データ
20 第二画像データ出力手段
22 第二画像データ
30 音声再生手段
32 音声データ
40 表示画面
50 画像データ選択手段
52 角度計測センサー
60 同期手段
62 誤差検出手段
64 誤差測定手段
66 補正手段
70 記憶手段
80 中継手段
100 画像表示装置
110a スマートフォン
110b 携帯型ゲーム機
110c タブレット型携帯端末
120 画像選択信号
REFERENCE SIGNS LIST 1 Image selection and display system 10 First image data output means 12 First image data 20 Second image data output means 22 Second image data 30 Audio playback means 32 Audio data 40 Display screen 50 Image data selection means 52 Angle measurement sensor 60 Synchronization means 62 Error detection means 64 Error measurement means 66 Correction means 70 Storage means 80 Relay means 100 Image display device 110a Smartphone 110b Portable game device 110c Tablet-type portable terminal 120 Image selection signal

Claims (5)

画像表示装置(100)に縦横のアスペクト比が異なる動画または静止画からなる画像データを表示する画像選択表示システム(1)が、
横のアスペクト比が大きい左右方向に横長の第一画像データ(12)の出力を行う第一画像データ出力手段(10)と、縦のアスペクト比の大きい上下方向に縦長の第二画像データ(22)の出力を行う第二画像データ出力手段(20)と、前記第一画像データおよび\または第二画像データに付随する音声データ(32)を再生する音声再生手段(30)と、前記第一画像データ出力手段または前記第二画像データ出力手段の何れかから送信された画像データ(12,22)を表示する表示画面(40)と、前記第一画像データ出力手段および前記第二画像データ出力手段から送信される画像データの前記表示画面への表示の選択を行う画像データ選択手段(50)と、前記第一画像データ出力手段および前記第二画像データ出力手段から出力された画像の同期をとる同期手段(60)と、からなり、
前記画像データ選択手段(50)は、前記第一画像データ出力手段または前記第二画像データ出力手段から出力される何れかの画像データ(12,22)を選択して前記表示画面(40)に送信することにより前記表示画面に表示するとともに、
前記同期手段(60)は、前記第一画像データと前記第二画像データとの出力タイミングの誤差を検出する誤差検出手段(62)と、前記第一画像データと前記第二画像データの出力タイミングの誤差を測定する誤差測定手段(64)と、検出し測定された前記第一画像データと前記第二画像データの出力タイミングの誤差を補正する補正手段(66)と、からなり、
前記誤差検出手段(62)は、前記画像データ選択手段(50)が前記第一画像データ(12)または前記第二画像データ(22)の何れかより選択したアクティブな画像データと、選択されなかった非アクティブな画像データとを対比して両者の間の出力タイミングの誤差を検出するとともに、前記誤差測定手段(64)は、前記誤差の量を測定した上で一定量の誤差を測定した場合に誤差の発生の認定を行い、前記補正手段(66)は、前記第一画像データ出力手段(10)または前記第二画像データ出力手段(20)に対して、発生した画像データの誤差に応じて前記選択されなかった非アクティブな画像データの出力タイミングを前記選択されたアクティブな画像データに合わせる補正をすることを特徴とする画像選択表示システム。
An image selection and display system (1) for displaying image data consisting of moving images or still images having different vertical and horizontal aspect ratios on an image display device (100),
the first image data output means (10) for outputting first image data (12) that is horizontally long in the left-right direction and has a large horizontal aspect ratio; the second image data output means (20) for outputting second image data (22) that is vertically long in the top-bottom direction and has a large vertical aspect ratio; audio playback means (30) for playing audio data (32) accompanying the first image data and/or the second image data; a display screen (40) for displaying image data (12, 22) transmitted from either the first image data output means or the second image data output means; an image data selection means (50) for selecting image data transmitted from the first image data output means and the second image data output means to be displayed on the display screen; and a synchronization means (60) for synchronizing images output from the first image data output means and the second image data output means,
the image data selection means (50) selects either the image data (12, 22) output from the first image data output means or the second image data output means, transmits the selected image data to the display screen (40), and displays the selected image data on the display screen;
The synchronization means (60) comprises an error detection means (62) for detecting an error in output timing between the first image data and the second image data, an error measurement means (64) for measuring an error in output timing between the first image data and the second image data, and a correction means (66) for correcting the detected and measured error in output timing between the first image data and the second image data,
The error detection means (62) compares active image data selected by the image data selection means (50) from either the first image data (12) or the second image data (22) with non-selected inactive image data to detect an error in output timing between the two, and the error measurement means (64) measures the amount of the error and determines the occurrence of an error when a certain amount of error is measured, and the correction means (66) corrects the first image data output means (10) or the second image data output means (20) to match the output timing of the non-selected inactive image data with the selected active image data in accordance with the image data error that has occurred.
前記補正手段(66)は、画像データが動画像である場合には、非アクティブな画像データを、コマ送り、コマ戻し、コマ指定、一時停止のうちの何れか一または複数の処理をすることにより、非アクティブな画像データの出力タイミングを前記選択されたアクティブな画像データに合わせる補正をすることを特徴とする請求項1に記載の画像選択表示システム。 The image selection and display system according to claim 1, characterized in that, when the image data is a moving image, the correction means (66) performs one or more of the following processes on the inactive image data: frame forward, frame rewind, frame selection, and pause, thereby correcting the output timing of the inactive image data to match that of the selected active image data. 前記画像データ選択手段(50)は、別の画像データを選択する画像データ選択信号(120)を受信した際には、前記第一画像データ出力手段(10)または前記第二画像データ出力手段(20)から出力される新たに選択された画像データを、現在選択されている画像データに替えて前記表示画面(40)に送信することを特徴とする請求項1または請求項2に記載の画像選択表示システム。 The image selection display system according to claim 1 or 2, characterized in that when the image data selection means (50) receives an image data selection signal (120) for selecting different image data, the image data selection means (50) transmits the newly selected image data output from the first image data output means (10) or the second image data output means (20) to the display screen (40) in place of the currently selected image data. 前記画像表示装置(100)は、スマートフォンまたは携帯型ゲーム機またはタブレット型携帯端末からなることを特徴とする請求項1乃至請求項3の何れかに記載の画像選択表示システム。 The image selection and display system according to any one of claims 1 to 3, characterized in that the image display device (100) is a smartphone, a portable game machine, or a tablet-type portable terminal. 前記画像データ選択手段(50)は、スマートフォンまたは携帯型ゲーム機またはタブレット型携帯端末の角度を検知する角度計測センサー(52)からなるとともに、
前記画像データ選択信号(120)は、前記角度計測センサー(52)によるスマートフォン本体または携帯型ゲーム機本体またはタブレット型携帯端末本体の設置角度の変化を示す信号からなり、
前記画像データ選択手段(50)が、前記画像表示装置(100)が横向きであること示す画像データ選択信号(120)を検知した場合には、第一画像データ出力手段(10)が出力する画像データを選択して前記表示画面(40)に送信・表示するとともに、前記画像データ選択手段(50)が、前記画像表示装置(100)が縦向きであること示す画像データ選択信号(120)を検知した場合には、第二画像データ出力手段(20)が出力する画像データを選択して前記表示画面(40)に送信・表示することを特徴とする請求項3に記載の画像選択表示システム。


The image data selection means (50) comprises an angle measurement sensor (52) that detects the angle of the smartphone, the portable game machine, or the tablet-type portable terminal,
The image data selection signal (120) is a signal indicating a change in the installation angle of the smartphone body, the portable game machine body, or the tablet type portable terminal body measured by the angle measurement sensor (52),
4. The image selection and display system according to claim 3, wherein, when the image data selection means (50) detects an image data selection signal (120) indicating that the image display device (100) is oriented horizontally, the image data output by the first image data output means (10) is selected, and transmitted to and displayed on the display screen (40); and, when the image data selection means (50) detects an image data selection signal ( 120 ) indicating that the image display device (100) is oriented vertically, the image data output by the second image data output means (20) is selected, and transmitted to and displayed on the display screen (40).


JP2020097984A 2020-06-04 2020-06-04 Image selection and display system Active JP7563902B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020097984A JP7563902B2 (en) 2020-06-04 2020-06-04 Image selection and display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020097984A JP7563902B2 (en) 2020-06-04 2020-06-04 Image selection and display system

Publications (2)

Publication Number Publication Date
JP2021190969A JP2021190969A (en) 2021-12-13
JP7563902B2 true JP7563902B2 (en) 2024-10-08

Family

ID=78847728

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020097984A Active JP7563902B2 (en) 2020-06-04 2020-06-04 Image selection and display system

Country Status (1)

Country Link
JP (1) JP7563902B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009272945A (en) 2008-05-08 2009-11-19 Victor Co Of Japan Ltd Synchronous reproduction apparatus
JP2012257051A (en) 2011-06-08 2012-12-27 Sony Corp Information processing device, information processing method, and program
JP2017011446A (en) 2015-06-19 2017-01-12 サイレックス・テクノロジー株式会社 Playback system and playback method
JP2019051360A (en) 2018-11-26 2019-04-04 株式会社コロプラ GAME PROGRAM, GAME PROVIDING METHOD, AND INFORMATION PROCESSING DEVICE
JP2019057845A (en) 2017-09-21 2019-04-11 株式会社風神企画 Selective playback system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009272945A (en) 2008-05-08 2009-11-19 Victor Co Of Japan Ltd Synchronous reproduction apparatus
JP2012257051A (en) 2011-06-08 2012-12-27 Sony Corp Information processing device, information processing method, and program
JP2017011446A (en) 2015-06-19 2017-01-12 サイレックス・テクノロジー株式会社 Playback system and playback method
JP2019057845A (en) 2017-09-21 2019-04-11 株式会社風神企画 Selective playback system
JP2019051360A (en) 2018-11-26 2019-04-04 株式会社コロプラ GAME PROGRAM, GAME PROVIDING METHOD, AND INFORMATION PROCESSING DEVICE

Also Published As

Publication number Publication date
JP2021190969A (en) 2021-12-13

Similar Documents

Publication Publication Date Title
US9955147B2 (en) Zoom related methods and apparatus
US20020075286A1 (en) Image generating system and method and storage medium
JP6268174B2 (en) Output data providing server and output data providing method
JP6450064B2 (en) Information processing apparatus, data structure of moving image data, information processing system, moving image reproducing program, and moving image reproducing method
JP2018507650A (en) Method and apparatus for supporting content generation, transmission, and / or playback
CN110537208B (en) Head mounted displays and methods
WO2008013352A1 (en) 3d image editing apparatus and method thereof
WO2017213131A1 (en) Game device, game device control method, and computer-readable recording medium
JP2021136683A (en) Reality simulation panoramic system and method to use the same
JP2025018896A (en) Image processing device, image processing method, and program
JP2017091423A (en) Program and device regarding head-mounted display device
JP7563902B2 (en) Image selection and display system
WO2019086893A1 (en) Content generation apparatus and method
JP2000107453A (en) Game system, game device, game data distribution device, image synchronization system, and information recording medium
WO2017076225A1 (en) Display control method and system for use in virtual reality display
WO2017076234A1 (en) Display mode switching method and display control system for virtual reality display
JP6828205B1 (en) Remote work equipment and its programs
US20240066394A1 (en) Information processing apparatus and image generation method
JP6990545B2 (en) Selective playback system
JP6499805B2 (en) Video display device and video display method
US20250303290A1 (en) Information processing apparatus and image generation method
KR20160082368A (en) Contents Synchronization Method and System in Network-based Multi Display
KR102260503B1 (en) Control System for display 360-degree image
JP6097339B2 (en) Video selective playback system
KR101919428B1 (en) Method and apparatus for providing virtual reality broadcast video

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230605

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240521

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240827

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240926

R150 Certificate of patent or registration of utility model

Ref document number: 7563902

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150