JP7547967B2

JP7547967B2 - Image output device and program

Info

Publication number: JP7547967B2
Application number: JP2020203403A
Authority: JP
Inventors: 由愛田中; 和生磯田; 美和松田; 美恵子三好; 優子市川
Original assignee: Dai Nippon Printing Co Ltd
Current assignee: Dai Nippon Printing Co Ltd
Priority date: 2020-12-08
Filing date: 2020-12-08
Publication date: 2024-09-10
Anticipated expiration: 2040-12-08
Also published as: JP2022090848A

Description

本発明は、画像出力装置及びプログラムに関する。 The present invention relates to an image output device and a program.

従来、不特定多数の顧客を対象としてＷｅｂ３Ｄにより美術館データベースに格納する絵画等の美術品画像を配信するシステムが開示されている（例えば、特許文献１）。 A system has been disclosed that distributes images of artworks, such as paintings, stored in a museum database via Web3D to an unspecified number of customers (for example, Patent Document 1).

特開２００３－２９６５８７号公報JP 2003-296587 A

特許文献１に記載のシステムでは、「バーチャル美術館のメーンメニュー画面から、展示品リストを選択すると、ギャラリーに展示されている全作品のサムネイル・パノラマ画像が表示される。その中から所望の絵か彫刻を選ぶと、その彫刻が展示してある中庭へウォークスルー画面で案内してくれる。」ものであった。
美術品に限らず、様々な作品群を、ユーザに一見して分かりやすいものする見せ方の工夫が求められている。 In the system described in Patent Document 1, "when you select Exhibit List from the main menu screen of the virtual museum, thumbnail and panoramic images of all the works on display in the gallery are displayed. When you select the desired painting or sculpture from these, a walk-through screen will guide you to the courtyard where the sculpture is on display."
There is a demand for creative ways to display not only artworks but also a wide range of other artworks in a way that makes them easy for users to understand at a glance.

そこで、本発明は、作品等である対象物をユーザに分かりやすく表現した画像出力装置及びプログラムを提供することを目的とする。 The present invention aims to provide an image output device and program that presents an object, such as a work of art, in a way that is easy for users to understand.

本発明は、以下のような解決手段により、前記課題を解決する。
第１の発明は、テキストが関連付けられた画像を記憶する記憶部と、前記テキストの関連性に基づき、前記画像を三次元空間上に配置する画像配置手段と、前記三次元空間の表示方向毎にテーマを有し、前記記憶部を参照して前記画像配置手段により配置された前記画像のうち前記テーマに関連する画像を出力する画像可視化手段と、を備える画像出力装置である。
第２の発明は、第１の発明の画像出力装置において、前記画像可視化手段は、前記テーマに関連する前記画像を、前記テーマに関連する前記画像を除く他の画像とは異なる態様で出力する、画像出力装置である。
第３の発明は、第１の発明又は第２の発明の画像出力装置において、前記画像可視化手段は、前記画像配置手段により配置された前記画像のうち、前記記憶部の前記テキストが前記テーマに関連する画像を出力する、画像出力装置である。
第４の発明は、第１の発明又は第２の発明の画像出力装置において、前記画像可視化手段は、前記画像配置手段により配置された前記画像のうち、前記記憶部の前記画像を画像解析することで得られた前記画像に関するキーワードが前記テーマに関連する画像を出力する、画像出力装置である。
第５の発明は、第１の発明から第４の発明までのいずれかの画像出力装置において、前記テーマを多角柱の側面に配置するテーマ配置手段と、前記テーマ配置手段によって配置した前記テーマを出力するテーマ可視化手段と、を備える、画像出力装置である。
第６の発明は、第５の発明の画像出力装置において、前記テーマ可視化手段により出力した前記テーマに対する回転操作を受け付ける回転操作受付手段と、前記回転操作受付手段により前記回転操作を受け付けた場合に、操作方向に前記テーマと前記画像とを回転させる画像回転手段と、を備える、画像出力装置である。
第７の発明は、第５の発明の画像出力装置において、前記テーマ可視化手段により出力した前記テーマに対する回転操作を受け付ける回転操作受付手段と、前記回転操作受付手段により前記回転操作を受け付けた場合に、操作方向に前記テーマを回転させる画像回転手段と、を備える、画像出力装置である。
第８の発明は、第５の発明から第７の発明までのいずれかの画像出力装置において、前記テーマは、透過性を有する画像であり、前記テーマ配置手段は、前記画像配置手段によって配置された前記画像を囲むように前記テーマを配置する、画像出力装置である。
第９の発明は、第１の発明から第８の発明までのいずれかの画像出力装置において、前記テーマは、階層構造を有し、前記テーマに関する選択操作を受け付けるテーマ受付手段を備え、前記画像可視化手段は、前記記憶部を参照して前記画像配置手段により配置された前記画像のうち前記テーマ受付手段により受け付けた前記テーマの下位に位置するサブテーマに関連する画像を出力する、画像出力装置である。
第１０の発明は、第１の発明から第９の発明までのいずれかの画像出力装置としてコンピュータを機能させるためのプログラムである。 The present invention solves the above problems by the following solving means.
A first invention is an image output device comprising: a memory unit that stores images associated with text; an image arrangement means that arranges the images in a three-dimensional space based on the relevance of the text; and an image visualization means that has a theme for each display direction in the three-dimensional space and that outputs images related to the theme from among the images arranged by the image arrangement means by referring to the memory unit.
A second invention is an image output device according to the first invention, wherein the image visualization means outputs the images related to the theme in a manner different from other images other than the images related to the theme.
A third invention is an image output device according to the first or second invention, wherein the image visualization means outputs an image, among the images arranged by the image arrangement means, in which the text in the memory unit is related to the theme.
A fourth invention is an image output device according to the first or second invention, wherein the image visualization means outputs an image, among the images arranged by the image arrangement means, where keywords related to the image obtained by image analysis of the images in the memory unit are related to the theme.
A fifth invention is an image output device, which is any of the image output devices of the first to fourth inventions, and which is equipped with a theme placement means for placing the theme on a side of a polygonal prism, and a theme visualization means for outputting the theme placed by the theme placement means.
A sixth invention is an image output device of the fifth invention, comprising a rotation operation receiving means for receiving a rotation operation on the theme output by the theme visualization means, and an image rotation means for rotating the theme and the image in the direction of the operation when the rotation operation is received by the rotation operation receiving means.
A seventh invention is an image output device according to the fifth invention, comprising a rotation operation receiving means for receiving a rotation operation on the theme output by the theme visualization means, and an image rotation means for rotating the theme in the direction of the operation when the rotation operation is received by the rotation operation receiving means.
An eighth invention is an image output device in which, in any of the fifth to seventh inventions, the theme is an image having transparency, and the theme placement means places the theme so as to surround the image placed by the image placement means.
A ninth invention is an image output device according to any one of the first to eighth inventions, wherein the theme has a hierarchical structure, and the image output device is provided with a theme receiving means for receiving a selection operation related to the theme, and the image visualization means refers to the memory unit and outputs an image related to a sub-theme that is located below the theme accepted by the theme accepting means among the images arranged by the image arrangement means.
A tenth aspect of the present invention is a program for causing a computer to function as any one of the image output devices according to the first to ninth aspects of the present invention.

本発明によれば、作品等である対象物をユーザに分かりやすく表現した画像出力装置及びプログラムを提供することができる。 The present invention provides an image output device and program that presents an object, such as a work of art, in a way that is easy for the user to understand.

本実施形態に係る画像処理システムの全体概要図である。1 is an overall schematic diagram of an image processing system according to an embodiment of the present invention. 本実施形態に係る画像処理サーバの機能ブロック図である。FIG. 2 is a functional block diagram of an image processing server according to the present embodiment. 本実施形態に係る画像処理サーバの記憶部の例を示す図である。FIG. 4 is a diagram illustrating an example of a storage unit of the image processing server according to the embodiment. 本実施形態に係る画像処理サーバの記憶部の例を示す図である。FIG. 4 is a diagram illustrating an example of a storage unit of the image processing server according to the embodiment. 本実施形態に係る画像処理サーバの可視化画像生成処理を示すフローチャートである。10 is a flowchart showing a visualized image generating process of the image processing server according to the present embodiment. 本実施形態に係る画像処理サーバのテーマ画像生成処理を示すフローチャートである。10 is a flowchart showing a theme image generating process of the image processing server according to the embodiment. 本実施形態に係るユーザ端末に表示された作品群可視化画像画面の例を示す図である。FIG. 13 is a diagram showing an example of a work group visualization image screen displayed on a user terminal according to the present embodiment. 本実施形態に係るテーマ画像の例を示す図である。FIG. 11 is a diagram showing an example of a theme image according to the embodiment. 本実施形態に係る画像処理サーバの可視化画像操作処理を示すフローチャートである。13 is a flowchart showing a visualized image operation process of the image processing server according to the present embodiment. 図９の続きである。This is a continuation of Figure 9. 本実施形態に係る操作ＵＩ部の例を示す図である。FIG. 4 is a diagram illustrating an example of an operation UI unit according to the embodiment. 本実施形態に係る作品群可視化画像を正面に移動させた際の表示例を示す図である。13 is a diagram showing a display example when the work group visualization image according to the present embodiment is moved to the front. FIG. 本実施形態に係る作品群可視化画像を小テーマと共に出力した表示例を示す図である。FIG. 13 is a diagram showing a display example in which a work group visualization image according to the present embodiment is output together with a sub-theme. 本実施形態に係る作品群可視化画像の回転移動を説明するための図である。11A and 11B are diagrams for explaining the rotational movement of the work group visualization image according to the present embodiment. 本実施形態に係るテーマ画像の他の例を示す図である。FIG. 11 is a diagram showing another example of a theme image according to the embodiment.

以下、本発明を実施するための形態について、図を参照しながら説明する。なお、これは、あくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
（実施形態）
＜画像処理システム１００＞
図１は、本実施形態に係る画像処理システム１００の全体概要図である。
図２は、本実施形態に係る画像処理サーバ１の機能ブロック図である。
図３及び図４は、本実施形態に係る画像処理サーバ１の記憶部３０の例を示す図である。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings. Note that this is merely an example, and the technical scope of the present invention is not limited to this example.
(Embodiment)
<Image Processing System 100>
FIG. 1 is a schematic diagram showing an entire image processing system 100 according to the present embodiment.
FIG. 2 is a functional block diagram of the image processing server 1 according to this embodiment.
3 and 4 are diagrams showing an example of the storage unit 30 of the image processing server 1 according to the present embodiment.

図１に示す画像処理システム１００は、画像処理サーバ１（画像出力装置）と、ユーザ端末５とを備えたシステムである。
画像処理サーバ１は、図示しない入力装置によって入力された作品（対象物）に関する説明情報を、予め記憶しておく。そして、画像処理サーバ１は、例えば、ユーザ端末５から受信した信号に対応して、各作品の画像（画像）を配置した配置画像と、各作品のテーマを示す大テーマ画像（テーマ）とを含む、作品群を可視化した作品群可視化画像を、ユーザ端末５に対して送信する。そうすることで、画像処理サーバ１は、一見して分かりやすく作品群を表現した作品群の閲覧画面を、ユーザに提供する。 The image processing system 100 shown in FIG. 1 is a system including an image processing server 1 (image output device) and a user terminal 5 .
The image processing server 1 prestores explanatory information about the works (objects) input by an input device (not shown). Then, in response to a signal received from the user terminal 5, for example, the image processing server 1 transmits to the user terminal 5 a work group visualization image that visualizes the work group, including an arrangement image in which images (images) of each work are arranged and a main theme image (theme) that indicates the theme of each work. In this way, the image processing server 1 provides the user with a work group viewing screen that expresses the work group in an easily understandable manner at a glance.

以下において、作品を、博物館等で所蔵している土偶や土器等を例にして、作品群の閲覧画面について説明する。しかし、これは一例であり、例えば、彫刻や絵画等の他の作品であってもよい。 Below, the viewing screen for artworks will be explained using examples of clay figurines and earthenware in the collections of museums, etc. However, this is just one example, and other artworks such as sculptures and paintings may also be used.

画像処理サーバ１と、ユーザ端末５とは、通信ネットワークＮを介して通信可能に接続されている。通信ネットワークＮは、例えば、インターネット回線等であり、有線であるか無線であるかを問わない。また、図１では、ユーザ端末５を１つのみ図示しているが、画像処理サーバ１は、複数のユーザ端末５の各々に対して通信可能に接続されている。 The image processing server 1 and the user terminal 5 are communicatively connected via a communication network N. The communication network N is, for example, an Internet line, and may be wired or wireless. Also, although only one user terminal 5 is illustrated in FIG. 1, the image processing server 1 is communicatively connected to each of a plurality of user terminals 5.

＜画像処理サーバ１＞
画像処理サーバ１は、ユーザ端末５からの操作に応じて、作品群可視化画像を生成して、ユーザ端末５に送信する。
画像処理サーバ１は、例えば、Ｗｅｂサーバである。画像処理サーバ１は、その他、パーソナルコンピュータ（ＰＣ）等であってもよい。
図２に示すように、画像処理サーバ１は、制御部１０と、記憶部３０と、通信インタフェース部３９とを備える。
制御部１０は、画像処理サーバ１の全体を制御する中央処理装置（ＣＰＵ）である。制御部１０は、記憶部３０に記憶されているオペレーティングシステム（ＯＳ）やアプリケーションプログラムを適宜読み出して実行することにより、上述したハードウェアと協働し、各種機能を実行する。 <Image Processing Server 1>
The image processing server 1 generates a work group visualization image in response to an operation from the user terminal 5 and transmits it to the user terminal 5 .
The image processing server 1 is, for example, a Web server, or may be a personal computer (PC) or the like.
As shown in FIG. 2, the image processing server 1 includes a control unit 10 , a storage unit 30 , and a communication interface unit 39 .
The control unit 10 is a central processing unit (CPU) that controls the entire image processing server 1. The control unit 10 appropriately reads and executes an operating system (OS) and application programs stored in the storage unit 30, thereby cooperating with the above-mentioned hardware and executing various functions.

制御部１０は、可視化要求受付部１１と、配置画像生成部１２（画像配置手段）と、大テーマ画像生成部１３（テーマ配置手段）と、可視化画像出力部１４（画像可視化手段、テーマ可視化手段）と、回転操作受付部１５（回転操作受付手段）と、回転処理部１６（画像回転手段）と、テーマ受付部１８（テーマ受付手段）と、小テーマ画像生成部１９と、切替操作受付部２０と、切替テーマ画像生成部２１とを備える。 The control unit 10 includes a visualization request receiving unit 11, a layout image generating unit 12 (image layout means), a major theme image generating unit 13 (theme layout means), a visualized image output unit 14 (image visualization means, theme visualization means), a rotation operation receiving unit 15 (rotation operation receiving means), a rotation processing unit 16 (image rotation means), a theme receiving unit 18 (theme receiving means), a minor theme image generating unit 19, a switching operation receiving unit 20, and a switching theme image generating unit 21.

可視化要求受付部１１は、ユーザ端末５から作品群の可視化要求を受け付ける。画像処理サーバ１は、例えば、作品を有する博物館を指定したり、作品のカテゴリを指定したりするための指定画面（図示せず）をユーザ端末５に出力して、ユーザが選択操作をすることで、可視化要求受付部１１は、ユーザ端末５から作品群の可視化要求を受け付けてもよい。 The visualization request receiving unit 11 receives a visualization request for a group of artworks from the user terminal 5. The image processing server 1 may output to the user terminal 5 a specification screen (not shown) for specifying, for example, the museum that has the artworks or the category of the artworks, and the user may perform a selection operation, causing the visualization request receiving unit 11 to receive a visualization request for a group of artworks from the user terminal 5.

配置画像生成部１２は、例えば、所定の項目を各軸として表したキューブ状（立方体形状）の三次元空間を生成する。ここで、所定の項目は、作品情報記憶部３２（記憶部）にある項目であり、例えば、年代、緯度、経度である。
そして、配置画像生成部１２は、生成した三次元空間に、作品情報記憶部３２に記憶された作品の画像を配置した配置画像を生成する。より具体的には、配置画像生成部１２は、作品の画像を、テキストの関連性に基づいて、各軸に対応する項目のテキスト（値）が示す位置に配置する。
また、配置画像生成部１２は、緯度及び経度を含む地図画像をさらに配置してもよい。 The layout image generating unit 12 generates a three-dimensional space in the shape of a cube, for example, with predetermined items represented as each axis. Here, the predetermined items are items in the work information storage unit 32 (storage unit), such as era, latitude, and longitude.
Then, the layout image generating unit 12 generates a layout image in which the images of the works stored in the work information storage unit 32 are arranged in the generated three-dimensional space. More specifically, the layout image generating unit 12 arranges the images of the works at positions indicated by the text (values) of the items corresponding to each axis, based on the relevance of the text.
The layout image generating unit 12 may further layout a map image including latitude and longitude.

ここで、作品の画像は、例えば、当該作品を撮影した撮影画像である。なお、作品の画像は、当該作品のイラスト画像等の他の画像であってもよいが、当該作品が分かりやすく表現されているものが望ましい。また、作品の画像は、二次元の画像データであっても、三次元モデリングデータであってもよい。 Here, the image of the work is, for example, a photographed image of the work. Note that the image of the work may be another image such as an illustration image of the work, but it is preferable that the image expresses the work in an easily understandable manner. The image of the work may be two-dimensional image data or three-dimensional modeling data.

大テーマ画像生成部１３は、配置画像に含まれる作品の画像に対応する、作品情報記憶部３２に記憶された大テーマ（テーマ）を、テーマ記憶部３３を参照して抽出して、四角柱（多角柱）の側面に大テーマ領域を配置した大テーマ画像を生成する。大テーマ領域は、大テーマの内容を記載したものである。
ここで、大テーマ画像生成部１３は、抽出した大テーマの数が４であれば、４つの側面に各大テーマ領域を配置すればよい。また、大テーマ画像生成部１３は、抽出した大テーマの数が３以下であれば、大テーマの数分の側面に大テーマ領域を配置し、大テーマ領域が配置されていない側面があってもよい。他方、大テーマ画像生成部１３は、抽出した大テーマの数が５以上であれば、４つの側面に任意の４つの大テーマ領域を配置し、大テーマを切り替えるための切替ボタン（後述する）を用意する。
そして、大テーマ画像生成部１３は、透過性を有する大テーマ画像を生成してもよい。 The large theme image generator 13 extracts a large theme (theme) stored in the work information memory 32, which corresponds to the image of the work included in the layout image, by referring to the theme memory 33, and generates a large theme image in which a large theme area is arranged on the side of a quadrangular prism (polygonal prism). The large theme area describes the content of the large theme.
Here, if the number of extracted major themes is four, the major theme image generating unit 13 may arrange each major theme region on four sides. If the number of extracted major themes is three or less, the major theme image generating unit 13 arranges major theme regions on the same number of sides as the number of major themes, and there may be a side on which no major theme region is arranged. On the other hand, if the number of extracted major themes is five or more, the major theme image generating unit 13 arranges any four major theme regions on the four sides and provides a switching button (described later) for switching between major themes.
The main theme image generating unit 13 may generate a main theme image having transparency.

可視化画像出力部１４は、配置画像生成部１２で生成した配置画像と、大テーマ画像生成部１３で生成した大テーマ画像とを配置した作品群可視化画像を、ユーザ端末５に対して出力する。作品群可視化画像は、例えば、配置画像を囲うように大テーマ画像を配置したものである。可視化画像出力部１４は、作品情報記憶部３２を参照して、配置画像のうち、表示方向が正面方向である大テーマに関連する画像を、例えば、強調表示したり、他の画像とは異なる態様で表示したり、他の画像を表示させないようにしたりする。ここで、強調表示とは、例えば、作品の画像の周りを明るく照らすような演出（ハイライト表示）をして、当該画像を強調させるものをいう。 The visualized image output unit 14 outputs to the user terminal 5 a work group visualized image in which the layout image generated by the layout image generation unit 12 and the large theme image generated by the large theme image generation unit 13 are arranged. The work group visualized image is, for example, an arrangement in which the large theme image is arranged to surround the layout image. The visualized image output unit 14 refers to the work information storage unit 32, and, for example, highlights images related to the large theme whose display direction is the front direction among the layout images, displays them in a different manner from other images, or does not display other images. Here, highlighting refers to, for example, highlighting the image by brightly lighting up the area around the image of the work.

また、可視化画像出力部１４は、配置画像生成部１２で生成した配置画像と、後述する小テーマ画像生成部１９で生成した小テーマ画像（サブテーマ）とを配置した作品群可視化画像を、ユーザ端末５に対して出力する。 The visualized image output unit 14 also outputs to the user terminal 5 a work group visualized image in which the layout image generated by the layout image generation unit 12 and the minor theme image (sub-theme) generated by the minor theme image generation unit 19 described below are arranged.

さらに、可視化画像出力部１４は、切替ボタンを用意した場合には、切替ボタンをユーザ端末５に対して出力する。
さらにまた、可視化画像出力部１４は、表示中のテーマ画像に代えて、切替テーマ画像生成部２１で生成した切替テーマ画像を配置した作品群可視化画像を、ユーザ端末５に対して出力する。
ここで、可視化画像出力部１４は、作品群可視化画像を、例えば、四角柱のうち上面と、２つの側面との３つの面が視認可能な角度で出力する。 Furthermore, if a switching button is provided, the visualized image output unit 14 outputs the switching button to the user terminal 5 .
Furthermore, the visualized image output unit 14 outputs to the user terminal 5 a work group visualized image in which the switching theme image generated by the switching theme image generating unit 21 is arranged in place of the theme image being displayed.
Here, the visualized image output unit 14 outputs the work group visualized image at an angle at which three faces of a rectangular prism, the top face and two side faces, can be viewed, for example.

回転操作受付部１５は、作品群可視化画像に対する回転操作を受け付ける。ここで、回転操作受付部１５は、側面を回転させる方向の回転操作を受け付ける。
回転処理部１６は、回転操作受付部１５により受け付けた回転操作の操作方向に、作品群可視化画像を回転させる。 The rotation operation receiving unit 15 receives a rotation operation for the work group visualization image. Here, the rotation operation receiving unit 15 receives a rotation operation in a direction for rotating a side surface.
The rotation processing unit 16 rotates the work group visualization image in the direction of the rotation operation received by the rotation operation receiving unit 15 .

テーマ受付部１８は、大テーマ領域の選択操作に対応した操作信号を、ユーザ端末５から受け付ける。制御部１０は、例えば、作品群可視化画像の大テーマ画像の１つの側面が正面方向に配置されている場合に、大テーマ領域を選択可能にしておく。そして、ユーザにより大テーマ領域を選択する操作を受け付けることで、ユーザ端末５は、操作信号を送信する。 The theme receiving unit 18 receives an operation signal corresponding to the selection operation of the large theme area from the user terminal 5. For example, the control unit 10 makes the large theme area selectable when one side of the large theme image of the work group visualization image is positioned in the forward direction. Then, by receiving an operation to select the large theme area by the user, the user terminal 5 transmits an operation signal.

小テーマ画像生成部１９は、テーマ受付部１８により受け付けた大テーマの下位の階層に位置する小テーマ（サブテーマ）を、作品情報記憶部３２及びテーマ記憶部３３を参照して抽出し、四角柱の側面に小テーマ領域を配置した小テーマ画像を生成する。ここで、小テーマ領域は、小テーマの内容を記載したものである。 The small theme image generating unit 19 extracts small themes (sub-themes) located at a lower level of the large theme received by the theme receiving unit 18 by referring to the work information storage unit 32 and the theme storage unit 33, and generates a small theme image in which a small theme area is arranged on the side of a rectangular prism. Here, the small theme area describes the contents of the small theme.

切替操作受付部２０は、切替ボタンの選択操作に対応した操作信号を、ユーザ端末５から受け付ける。上記したように、大テーマの数が５以上である場合、制御部１０は、切替ボタンを用意して、作品群可視化画像と共にユーザ端末５に出力している。そのため、ユーザは、他の大テーマを見たい場合には、切替ボタンを選択する操作をすることで、ユーザ端末５は、操作信号を送信する。
切替テーマ画像生成部２１は、切替操作受付部２０による選択操作を受け付けた場合に、作品群可視化画像に表示されていないテーマを作品情報記憶部３２及びテーマ記憶部３３を参照して抽出し、四角柱の側面に未表示のテーマ領域を配置した切替テーマ画像を生成する。 The switching operation receiving unit 20 receives an operation signal corresponding to the selection operation of the switching button from the user terminal 5. As described above, when the number of major themes is five or more, the control unit 10 prepares a switching button and outputs it together with the work group visualization image to the user terminal 5. Therefore, when the user wants to view another major theme, the user performs an operation to select the switching button, and the user terminal 5 transmits an operation signal.
When the switching theme image generation unit 21 receives a selection operation by the switching operation receiving unit 20, it extracts themes that are not displayed in the work group visualization image by referring to the work information storage unit 32 and the theme storage unit 33, and generates a switching theme image in which the undisplayed theme areas are arranged on the sides of a rectangular prism.

記憶部３０は、制御部１０が各種の処理を実行するために必要なプログラム、データ等を記憶するためのハードディスク、半導体メモリ素子等の記憶領域である。
記憶部３０は、プログラム記憶部３１と、作品情報記憶部３２と、テーマ記憶部３３とを備える。
プログラム記憶部３１は、各種のプログラムを記憶する記憶領域である。プログラム記憶部３１は、画像処理サーバ１の制御部１０が実行する各種機能を行うためのプログラム３１ａを記憶している。 The storage unit 30 is a storage area such as a hard disk, a semiconductor memory device, etc. for storing programs, data, etc. required for the control unit 10 to execute various processes.
The storage unit 30 includes a program storage unit 31 , a work information storage unit 32 , and a theme storage unit 33 .
The program storage unit 31 is a storage area for storing various programs. The program storage unit 31 stores a program 31a for carrying out various functions executed by the control unit 10 of the image processing server 1.

作品情報記憶部３２は、作品の画像の項目を含む、作品に関する複数の項目と、複数の項目の各々に対応した作品の内容（テキスト）とを記憶する記憶領域である。
図３は、作品情報記憶部３２の一例を示す。作品情報記憶部３２は、作品ＩＤ（ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）、画像ファイル、タイトル（名称）、緯度、経度、年代、解説文、大テーマＩＤ、小テーマＩＤ、関連キーワード、関連作品ＩＤ、といった各項目に対して、作品の内容を記憶している。 The work information storage unit 32 is a storage area that stores a plurality of items related to the work, including an item for the image of the work, and the content (text) of the work corresponding to each of the plurality of items.
3 shows an example of the work information storage unit 32. The work information storage unit 32 stores the contents of the work for each item such as a work ID (IDentification), an image file, a title (name), latitude, longitude, era, explanatory text, major theme ID, minor theme ID, related keywords, and related work ID.

作品ＩＤは、作品を識別するための識別情報であり、この画像処理システム１００で任意に決めたものであってよい。
画像ファイルは、作品の画像のファイルである。上記したが、画像ファイルは、作品を撮影した写真画像であってもよいし、他のものであってもよい。
タイトルは、作品名である。タイトルは、例えば、データ登録者が付けたものであってもよい。
緯度及び経度は、作品が発掘された位置情報を示す。
年代は、作品が制作された時期を示す。作品によっては、年代は、おおよその時期を示すものであってもよい。
解説文は、作品を把握するための解説である。
大テーマＩＤは、大テーマを識別する識別情報である。
小テーマＩＤは、小テーマを識別する識別情報である。
関連キーワードは、当該作品に関連する作品との間のワードである。
関連作品ＩＤは、当該作品に関連する関連作品を識別する識別情報である。
関連キーワードと、関連作品ＩＤとは対応するものである。また、１つの作品に対して複数の関連キーワードと関連作品ＩＤとがあってもよい。さらに、関連キーワードは、作品を基準にし、関連作品との間の関係を示すワードである。 The work ID is identification information for identifying the work, and may be arbitrarily determined by the image processing system 100 .
The image file is a file of an image of the work. As described above, the image file may be a photographic image of the work, or may be something else.
The title is the name of the work. The title may be given by the data registrant, for example.
The latitude and longitude indicate the location where the work was discovered.
The date indicates when the work was created. For some works, the date may be an approximate date.
The explanatory text is provided to help understand the work.
The major theme ID is identification information for identifying a major theme.
The minor theme ID is identification information for identifying a minor theme.
Related keywords are words between the work in question and works related to the work in question.
The related work ID is identification information for identifying a related work that is related to the work in question.
The related keywords correspond to the related work IDs. Also, one work may have multiple related keywords and related work IDs. Furthermore, the related keywords are words that indicate the relationship between the work and the related works.

作品情報記憶部３２へのデータ登録は、画像処理サーバ１に通信可能に接続した入出力装置（図示せず）から、例えば、登録画面（図示せず）を使用して行ってもよい。また、作品情報記憶部３２へのデータ登録は、例えば、一括登録画面（図示せず）を用意しておき、作品内容を記憶したテキストファイルと、画像データを記憶したフォルダとを指定することで、テキストファイル及びフォルダに記憶された画像データに基づいて、作品情報記憶部３２にデータを追加するようにしてもよい。
さらに、作品情報記憶部３２へのデータ登録は、画像処理サーバ１が提供するサービス開始前後やサービス実施中であっても行うことができる。 The data may be registered in the work information storage unit 32 by using, for example, a registration screen (not shown) from an input/output device (not shown) communicatively connected to the image processing server 1. Alternatively, the data may be registered in the work information storage unit 32 by, for example, preparing a batch registration screen (not shown) and specifying a text file that stores the contents of the work and a folder that stores image data, so that data is added to the work information storage unit 32 based on the image data stored in the text file and the folder.
Furthermore, data can be registered in the work information storage section 32 before or after the start of the service provided by the image processing server 1 or even while the service is being provided.

テーマ記憶部３３は、作品情報記憶部３２に記憶されている各作品の大テーマと、小テーマとを対応付けて記憶する記憶領域である。
図４は、テーマ記憶部３３の一例を示す。テーマ記憶部３３は、大テーマＩＤ、大テーマ名、大テーマ解説、小テーマＩＤ、小テーマ名、小テーマ解説といった各項目を有する。
大テーマＩＤは、大テーマを識別する識別情報である。
大テーマ名は、大テーマの名称である。
大テーマ解説は、大テーマの解説文である。
小テーマＩＤは、小テーマを識別する識別情報である。
小テーマ名は、小テーマの名称である。
小テーマ解説は、小テーマの解説文である。
通信インタフェース部３９は、通信ネットワークＮを介して、ユーザ端末５等との間の通信を行うためのインタフェースである。 The theme storage unit 33 is a storage area that stores the major theme and minor theme of each work stored in the work information storage unit 32 in association with each other.
4 shows an example of the theme storage unit 33. The theme storage unit 33 has items such as major theme ID, major theme name, major theme explanation, minor theme ID, minor theme name, and minor theme explanation.
The major theme ID is identification information for identifying a major theme.
The major theme name is the name of the major theme.
A major theme commentary is an explanatory text about a major theme.
The minor theme ID is identification information for identifying a minor theme.
The minor theme name is the name of the minor theme.
A sub-theme explanation is an explanatory text about a sub-theme.
The communication interface unit 39 is an interface for communicating with the user terminal 5 and the like via the communication network N.

＜ユーザ端末５＞
ユーザ端末５は、例えば、図１に示すようなタブレットに代表されるコンピュータの機能を併せ持った携帯型の端末である。ユーザ端末５は、その他、スマートフォンや携帯電話機等の携帯型の端末でもよいし、ＰＣ等の据置型の端末であってもよい。
ユーザ端末５は、図示しないが、少なくとも制御部と、記憶部と、タッチパネルディスプレイ（又は、入出力部）と、通信インタフェース部とを備える。 <User Terminal 5>
The user terminal 5 is, for example, a portable terminal having a computer function, such as a tablet as shown in Fig. 1. The user terminal 5 may also be a portable terminal such as a smartphone or a mobile phone, or a stationary terminal such as a PC.
Although not shown, the user terminal 5 includes at least a control unit, a storage unit, a touch panel display (or an input/output unit), and a communication interface unit.

ここで、コンピュータとは、制御部、記憶装置等を備えた情報処理装置をいい、画像処理サーバ１及びユーザ端末５は、各々制御部、記憶部等を備えた情報処理装置であり、コンピュータの概念に含まれる。 Here, a computer refers to an information processing device equipped with a control unit, a storage device, etc., and the image processing server 1 and the user terminal 5 are each information processing devices equipped with a control unit, a storage device, etc., and are included in the concept of a computer.

＜画像処理システム１００の処理＞
次に、画像処理サーバ１と、ユーザ端末５との間で行う処理について、フローチャートに即して説明する。
まず、ユーザ端末５に作品群可視化画像を出力する処理を説明する。
図５は、本実施形態に係る画像処理サーバ１の可視化画像生成処理を示すフローチャートである。
図６は、本実施形態に係る画像処理サーバ１のテーマ画像生成処理を示すフローチャートである。
図７は、本実施形態に係るユーザ端末に表示された作品群可視化画像画面６０の例を示す図である。
図８は、本実施形態に係るテーマ画像の例を示す図である。 <Processing of Image Processing System 100>
Next, the process performed between the image processing server 1 and the user terminal 5 will be described with reference to a flowchart.
First, the process of outputting a work group visualization image to the user terminal 5 will be described.
FIG. 5 is a flowchart showing the visualized image generating process of the image processing server 1 according to this embodiment.
FIG. 6 is a flowchart showing the theme image generating process of the image processing server 1 according to this embodiment.
FIG. 7 is a diagram showing an example of a work group visualization image screen 60 displayed on a user terminal according to this embodiment.
FIG. 8 is a diagram showing an example of a theme image according to the present embodiment.

本処理の前提として、画像処理サーバ１が提供するサービス（以降、このサービスを、「作品閲覧サービス」ともいう。）の提供を受けるユーザ端末５は、まず、画像処理サーバ１にアクセスする。そして、ユーザ端末５の制御部は、上記したような、例えば、図示しない指定画面からの入力にしたがって、可視化画像要求を送信する。
すると、図５のステップＳ（以下、単に「Ｓ」という。）１１において、画像処理サーバ１の制御部１０（可視化要求受付部１１）は、ユーザ端末５から可視化画像要求を受け付ける。 As a premise of this process, a user terminal 5 that receives a service provided by the image processing server 1 (hereinafter, this service is also referred to as a "work viewing service") first accesses the image processing server 1. Then, a control unit of the user terminal 5 transmits a visualized image request in accordance with an input from, for example, a designation screen (not shown) as described above.
Then, in step S (hereinafter simply referred to as “S”) 11 of FIG. 5, the control unit 10 (visualization request receiving unit 11 ) of the image processing server 1 receives a visualized image request from the user terminal 5 .

Ｓ１２において、制御部１０は、所定の項目を各軸（Ｘ軸、Ｙ軸及びＺ軸）として表した三次元空間を生成する。
Ｓ１３において、制御部１０（配置画像生成部１２）は、作品情報記憶部３２に記憶された作品毎に、三次元空間での作品の位置を、各軸に対応した項目の内容に基づいて特定する。
Ｓ１４において、制御部１０（配置画像生成部１２）は、特定した位置に、作品の画像を配置した配置画像を生成する。 In S12, the control unit 10 generates a three-dimensional space in which predetermined items are represented as axes (X-axis, Y-axis, and Z-axis).
In S13, the control unit 10 (layout image generating unit 12) specifies the position of each work stored in the work information storage unit 32 in three-dimensional space based on the contents of the items corresponding to each axis.
In S14, the control unit 10 (layout image generating unit 12) generates a layout image in which the image of the work is laid out at the specified position.

Ｓ１５において、制御部１０（大テーマ画像生成部１３）は、配置画像に含まれる各作品の画像に対応する、作品情報記憶部３２に記憶された大テーマを、テーマ記憶部３３を参照して抽出する。
Ｓ１６において、制御部１０（大テーマ画像生成部１３）は、テーマ画像生成処理を行う。 In S15, the control unit 10 (main theme image generation unit 13) refers to the theme storage unit 33 to extract a main theme stored in the work information storage unit 32 that corresponds to the image of each work included in the layout image.
In S16, the control unit 10 (large theme image generating unit 13) performs a theme image generating process.

ここで、テーマ画像生成処理について、図６に基づき説明する。
図６のＳ２１において、制御部１０（大テーマ画像生成部１３）は、抽出した大テーマの数が５以上であるか否かを判断する。５以上である場合（Ｓ２１：ＹＥＳ）には、制御部１０は、処理をＳ２２に移す。他方、５以上ではない場合（Ｓ２１：ＮＯ）には、制御部１０は、処理をＳ２３に移す。
Ｓ２２において、制御部１０（可視化画像出力部１４）は、切替ボタンを配置する。切替ボタンの配置位置は、例えば、作品群可視化画像を出力する画面の一部領域である。
Ｓ２３において、制御部１０（大テーマ画像生成部１３）は、四角柱の側面に、大テーマの各々を配置した大テーマ画像を生成する。その後、制御部１０は、処理を図５のＳ１７に移す。 The theme image generating process will now be described with reference to FIG.
6, the control unit 10 (major theme image generating unit 13) determines whether the number of extracted major themes is 5 or more. If it is 5 or more (S21: YES), the control unit 10 proceeds to S22. On the other hand, if it is not 5 or more (S21: NO), the control unit 10 proceeds to S23.
In S22, the control unit 10 (visualized image output unit 14) arranges a switching button. The arrangement position of the switching button is, for example, a partial area of the screen on which the work group visualized image is output.
In S23, the control unit 10 (large theme image generating unit 13) generates a large theme image in which each of the large themes is arranged on a side surface of a rectangular prism. After that, the control unit 10 shifts the process to S17 in FIG.

図５のＳ１７において、制御部１０（可視化画像出力部１４）は、配置画像と大テーマ画像とを含む作品群可視化画像を、ユーザ端末５に出力する。
これにより、ユーザ端末５では、図７に例示する作品群可視化画像画面６０を表示することができる。 In S17 of FIG. 5, the control unit 10 (visualized image output unit 14) outputs a work group visualized image including the layout image and the main theme image to the user terminal 5.
As a result, the user terminal 5 can display a work group visualization image screen 60 as shown in FIG.

図７に示す作品群可視化画像画面６０は、作品情報記憶部３２に記憶された複数の作品の各々に対応する複数の作品画像６４（作品の画像）により構成された配置画像６３が、三次元空間６２に配置され、大テーマ画像６５が配置された作品群可視化画像６１を含む。
作品群可視化画像画面６０は、作品群可視化画像６１と、作品群名６６と、操作ＵＩ部６７と、切替ボタン６８とを含む。
作品群可視化画像６１は、三次元空間６２と、配置画像６３と、大テーマ画像６５とを含む画像である。 The work group visualization image screen 60 shown in Figure 7 includes a work group visualization image 61 in which an arrangement image 63 composed of a plurality of work images 64 (images of works) corresponding to each of a plurality of works stored in the work information storage unit 32 is arranged in a three-dimensional space 62, and a main theme image 65 is arranged.
The work group visualization image screen 60 includes a work group visualization image 61 , a work group name 66 , an operation UI section 67 , and a switching button 68 .
The artwork visualization image 61 is an image including a three-dimensional space 62 , a layout image 63 , and a main theme image 65 .

三次元空間６２は、所定の項目を各軸にし、キューブ状に表した空間である。図７の例には、年代についてのメモリと値とが示されている。実際には、年代の軸には、例えば、年代の名称が示され、他の軸についても軸の名称やメモリが示されたりする。
配置画像６３は、複数の作品画像６４により構成された画像である。作品画像６４は、作品の画像そのものであり、例えば、画像のサイズを小さくしたものである。
大テーマ画像６５は、複数の作品画像６４に関連付けられた大テーマ名を、四角柱の各側面に有する大テーマ領域に配置した画像である。 The three-dimensional space 62 is a space represented in a cube shape with each axis representing a specific item. In the example of Fig. 7, scales and values for eras are shown. In reality, for example, the era name is shown on the era axis, and axis names and scales are shown for the other axes.
The layout image 63 is an image made up of a plurality of work images 64. The work images 64 are the images of the works themselves, and are, for example, reduced in size.
The main theme image 65 is an image in which the main theme names associated with the multiple work images 64 are arranged in a main theme area on each side of a rectangular prism.

作品群名６６は、例えば、可視化画像要求に基づいて設定され、又は、予め指定されたものである。この例では、作品群名６６は、「縄文時代の作品コレクション」である。
操作ＵＩ部６７は、作品群可視化画像６１についての回転操作等を行う場合に用いるものである。
切替ボタン６８は、大テーマが５以上ある場合に設けられ、大テーマ画像６５を未表示の大テーマ名を含む切替テーマ画像に切り替えるための切替部材（ボタン）である。 The artwork group name 66 is set based on a visualized image request, or is specified in advance, for example. In this example, the artwork group name 66 is a "Collection of artworks from the Jomon period."
The operation UI section 67 is used when performing operations such as rotation on the work group visualization image 61 .
The switching button 68 is provided when there are five or more major themes, and is a switching member (button) for switching the major theme image 65 to a switching theme image including an undisplayed major theme name.

図８（Ａ）は、大テーマが４以上の場合の大テーマ画像６５Ａの例を示す。大テーマ画像６５Ａは、四角柱の４つの側面にそれぞれ、大テーマ領域６５ａから６５ｄを配置している。
他方、図８（Ｂ）は、大テーマが２つの場合の大テーマ画像６５Ｂの例を示す。大テーマ画像６５Ｂは、四角柱の４つの側面のうち、任意の２つの側面に、大テーマ領域６５ａと６５ｂとを配置している。
いずれの場合であっても、三次元空間の表示方面毎にテーマを有するものになっている。
また、四角柱の側面は４つあるため、大テーマの数が４つであれば、全ての側面を大テーマ領域に設定して、大テーマ名を表示させることができる。他方、大テーマの数が４つ未満であれば、大テーマの数に応じた側面を大テーマ領域に設定して大テーマ名を表示させるため、大テーマ領域が設定されない側面が存在する。 8A shows an example of a large theme image 65A when the number of large themes is four or more. The large theme image 65A has large theme areas 65a to 65d arranged on each of the four sides of a rectangular prism.
8B shows an example of a large theme image 65B in which there are two large themes. In the large theme image 65B, large theme areas 65a and 65b are arranged on any two of the four sides of a rectangular prism.
In either case, each display aspect of the three-dimensional space has a theme.
In addition, since a rectangular prism has four sides, if the number of major themes is four, all sides can be set as major theme areas and the major theme names can be displayed. On the other hand, if the number of major themes is less than four, sides according to the number of major themes are set as major theme areas and the major theme names are displayed, so there are sides for which no major theme area is set.

次に、作品群可視化画像画面６０に対する操作処理について説明する。
図９は及び図１０、本実施形態に係る画像処理サーバ１の可視化画像操作処理を示すフローチャートである。
図１１は、本実施形態に係る操作ＵＩ部６７の例を示す図である。
図１２は、本実施形態に係る作品群可視化画像を正面に移動させた際の表示例を示す図である。
図１３は、本実施形態に係る作品群可視化画像を小テーマと共に出力した表示例を示す図である。 Next, the operation process for the work group visualization image screen 60 will be described.
9 and 10 are flowcharts showing a visualized image operation process of the image processing server 1 according to this embodiment.
FIG. 11 is a diagram showing an example of the operation UI unit 67 according to this embodiment.
FIG. 12 is a diagram showing a display example when the work group visualization image according to this embodiment is moved to the front.
FIG. 13 is a diagram showing a display example in which a work group visualization image according to this embodiment is output together with a sub-theme.

ユーザ端末５に表示された作品群可視化画像画面６０（図７参照）に対して、ユーザがタッチパネルディスプレイ等を介して操作をすることで、ユーザ端末５には、操作に対応した様々な画像を表示させることができる。
図９の可視化画像操作処理は、ユーザ端末５から操作信号を受信したことに応じて、処理を開始する。 When a user operates the work group visualization image screen 60 (see Figure 7) displayed on the user terminal 5 via a touch panel display or the like, various images corresponding to the operation can be displayed on the user terminal 5.
The visualized image operation process in FIG. 9 starts in response to receiving an operation signal from the user terminal 5.

Ｓ３１において、制御部１０（回転操作受付部１５）は、ユーザ端末５から受信した操作信号が、作品群可視化画像画面６０の操作ＵＩ部６７（操作領域）における回転操作であるか否かを判断する。
例えば、図１１に示す操作ＵＩ部６７に対する操作のように、ユーザの指Ｐを左側から右方向にスライドする操作を行う。この操作により、制御部１０は、作品群可視化画像を、上面から下方向に見たときに反時計回りに回転させる操作であると認識する。
操作領域における回転操作である場合（Ｓ３１：ＹＥＳ）には、制御部１０は、処理をＳ３２に移す。他方、操作領域における回転操作ではない場合（Ｓ３１：ＮＯ）には、制御部１０は、処理を図１０のＳ４１に移す。 In S31, the control unit 10 (rotation operation receiving unit 15) determines whether the operation signal received from the user terminal 5 is a rotation operation in the operation UI unit 67 (operation area) of the work group visualization image screen 60.
For example, the user slides his/her finger P from the left side to the right side as in the operation on the operation UI unit 67 shown in Fig. 11. This operation causes the control unit 10 to recognize that the operation is an operation to rotate the artwork group visualization image counterclockwise when viewed from above downward.
If the operation is a rotation operation in the operation area (S31: YES), the control unit 10 proceeds to S32. On the other hand, if the operation is not a rotation operation in the operation area (S31: NO), the control unit 10 proceeds to S41 in FIG.

Ｓ３２において、制御部１０（回転処理部１６）は、作品群可視化画像画面６０の作品群可視化画像６１を、回転操作方向に回転させる。この処理により、ユーザは、自身が行った回転操作にしたがって回転する作品群可視化画像６１を見ることができ、例えば、奥側に配置された作品の画像を手前側に動かすことができる。また、奥側に配置された大テーマ領域を、手前側に動かすことができる。その結果、回転移動により手前側に移動した作品の画像や大テーマをよく見ることができるので、便利である。 In S32, the control unit 10 (rotation processing unit 16) rotates the group of works visualization image 61 on the group of works visualization image screen 60 in the direction of the rotation operation. This process allows the user to view the group of works visualization image 61 rotating in accordance with the rotation operation performed by the user, and for example, allows the image of a work positioned at the back to be moved to the front. Also, the large theme area positioned at the back to be moved to the front. As a result, it is convenient because the image of the work or the large theme that has been moved to the front by the rotation movement can be clearly seen.

Ｓ３３において、制御部１０（回転処理部１６）は、大テーマ画像の側面が正面方向を向いた状態で回転が停止したか否かを判断する。大テーマ画像の側面が正面方向を向いて停止した場合（Ｓ３３：ＹＥＳ）には、制御部１０は、処理をＳ３４に移す。他方、大テーマ画像の側面が正面方向を向いて停止していない場合（Ｓ３３：ＮＯ）には、制御部１０は、処理を図１０のＳ４１に移す。
Ｓ３４において、制御部１０は、正面方向に配置された大テーマ画像の大テーマ領域に、大テーマ名と説明文とを配置して出力する。
Ｓ３５において、制御部１０（可視化画像出力部１４）は、大テーマ領域の内容に対応した作品の画像をハイライト表示させる。 In S33, the control unit 10 (rotation processing unit 16) judges whether the rotation of the large theme image has stopped with the side surface facing forward. If the large theme image has stopped with the side surface facing forward (S33: YES), the control unit 10 proceeds to S34. On the other hand, if the large theme image has not stopped with the side surface facing forward (S33: NO), the control unit 10 proceeds to S41 in FIG. 10.
In S34, the control unit 10 outputs the main theme name and explanatory text arranged in the main theme area of the main theme image arranged in the front direction.
In S35, the control unit 10 (visualized image output unit 14) highlights the image of the work corresponding to the content of the large theme area.

図１２は、大テーマ画像の側面が正面方向に向いた作品群可視化画像７１の例を示す。作品群可視化画像７１の大テーマ領域７５ａには、大テーマ名である「土偶」と、大テーマの説明文とを表示する。また、配置画像に含まれる各作品の画像のうち、大テーマ名が示す土偶の作品画像７４には、画像を囲うように強調画像７４ａが表示されている。
これらの処理で、正面方向に向いた作品群可視化画像の大テーマ名とその内容とを、ユーザに見せることができ、また、その内容に該当する作品の画像がハイライト表示されるので、ユーザに大テーマに対応する作品を知らせることができる。 12 shows an example of a group of artworks visualization image 71 in which the side of the main theme image faces forward. The main theme name "Clay Figurine" and an explanation of the main theme are displayed in the main theme area 75a of the group of artworks visualization image 71. Among the images of each artwork included in the layout image, an emphasis image 74a is displayed surrounding the clay figurine artwork image 74 indicated by the main theme name.
Through these processes, the main theme name and its contents of the work group visualization image facing forward can be shown to the user, and the images of the works corresponding to the contents are highlighted, so that the user can be informed of the works corresponding to the main theme.

図１０のＳ４１において、制御部１０（テーマ受付部１８）は、ユーザ端末５から受信した操作信号が、大テーマ領域の選択操作であるか否かを判断する。大テーマ領域の選択操作である場合（Ｓ４１：ＹＥＳ）には、制御部１０は、処理をＳ４２に移す。他方、大テーマ領域の選択操作ではない場合（Ｓ４１：ＮＯ）には、制御部１０は、処理をＳ４５に移す。
Ｓ４２において、制御部１０（小テーマ画像生成部１９）は、受け付けた大テーマ領域の下位の階層に位置する小テーマを、作品情報記憶部３２及びテーマ記憶部３３を参照して抽出する。 10, the control unit 10 (theme receiving unit 18) judges whether or not the operation signal received from the user terminal 5 is a selection operation of the large theme area. If it is a selection operation of the large theme area (S41: YES), the control unit 10 proceeds to S42. On the other hand, if it is not a selection operation of the large theme area (S41: NO), the control unit 10 proceeds to S45.
In S42, the control unit 10 (small theme image generating unit 19) refers to the work information storage unit 32 and the theme storage unit 33 to extract small themes located in a lower hierarchy than the received large theme area.

Ｓ４３において、制御部１０（小テーマ画像生成部１９）は、テーマ画像生成処理を行う。テーマ画像生成処理は、図６に示すものであり、大テーマとして説明したものを、小テーマに代えて処理を行う。
Ｓ４４において、制御部１０（可視化画像出力部１４）は、配置画像と、小テーマ画像とを含む作品群可視化画像を、ユーザ端末５に出力する。より具体的には、制御部１０は、表示中の大テーマ画像を小テーマ画像に切り替えて、作品群可視化画像を、ユーザ端末５に出力する。 In S43, the control unit 10 (small theme image generating unit 19) performs a theme image generating process as shown in Fig. 6, in which the main theme described above is replaced with a small theme.
In S44, the control unit 10 (visualized image output unit 14) outputs a work group visualization image including the arrangement image and the small theme image to the user terminal 5. More specifically, the control unit 10 switches the displayed large theme image to the small theme image, and outputs the work group visualization image to the user terminal 5.

これにより、ユーザ端末５では、図１３に例示する作品群可視化画像８１を表示することができる。
図１３に示す作品群可視化画像８１は、大テーマ画像に代えて、小テーマ画像８５が表示されている。小テーマ画像８５は、小テーマ領域８５ａ及び８５ｂを含む。また、作品群名８６は、大テーマ名を追加した内容に変更される。
このように、ユーザが大テーマを選択することで、次に小テーマを含む小テーマ画像を生成して配置画像と共に表示することができ、テーマを深く掘り下げて、作品群可視化画像を見せることができる。 This makes it possible to display a work group visualization image 81, as shown in FIG. 13, on the user terminal 5.
13, a work group visualization image 81 is displayed with a sub-theme image 85 instead of the main theme image. The sub-theme image 85 includes sub-theme areas 85a and 85b. The work group name 86 is changed to include the main theme name.
In this way, by the user selecting a major theme, a sub-theme image including the sub-themes can be generated and displayed together with the layout image, allowing the user to delve deeper into the theme and present a visualization image of the group of works.

図１０のＳ４５において、制御部１０（切替操作受付部２０）は、ユーザ端末５から受信した操作信号が、切替ボタンの選択操作であるか否かを判断する。切替ボタンの選択操作である場合（Ｓ４５：ＹＥＳ）には、制御部１０は、処理をＳ４６に移す。他方、切替ボタンの選択操作ではない場合（Ｓ４５：ＮＯ）には、制御部１０は、本処理を終了する。 In S45 of FIG. 10, the control unit 10 (switching operation receiving unit 20) determines whether the operation signal received from the user terminal 5 is a switching button selection operation. If it is a switching button selection operation (S45: YES), the control unit 10 moves the process to S46. On the other hand, if it is not a switching button selection operation (S45: NO), the control unit 10 ends this process.

Ｓ４６において、制御部１０（切替テーマ画像生成部２１）は、作品群可視化画像に表示されていないテーマを作品情報記憶部３２及びテーマ記憶部３３を参照して抽出し、四角柱の側面に未表示のテーマ領域を配置した切替テーマ画像を生成する。ここで、制御部１０は、大テーマ画像が表示されている場合には、大テーマ画像に対して処理を行い、小テーマ画像が表示されている場合には、小テーマ画像に対して処理を行う。 In S46, the control unit 10 (switching theme image generating unit 21) extracts themes not displayed in the work group visualization image by referring to the work information storage unit 32 and the theme storage unit 33, and generates a switching theme image in which undisplayed theme areas are arranged on the sides of a rectangular prism. Here, if a large theme image is displayed, the control unit 10 processes the large theme image, and if a small theme image is displayed, the control unit 10 processes the small theme image.

Ｓ４７において、制御部１０（可視化画像出力部１４）は、表示中のテーマ画像を生成した切替テーマ画像に切り替えて配置した作品群可視化画像を、ユーザ端末５に出力する。
このように、大テーマや小テーマが５つ以上ある場合にも、大テーマ画像や小テーマ画像を切り替えて表示することで、全てのテーマを見せることができる。 In S47, the control unit 10 (visualized image output unit 14) outputs to the user terminal 5 the work group visualized image in which the currently displayed theme image is switched to the generated switching theme image and arranged.
In this way, even if there are five or more major themes or minor themes, all the themes can be displayed by switching between the major theme images and minor theme images.

上記では、作品群可視化画像について、例を用いて説明した。しかし、上記で説明した例のものに限定されない。
（変形例１）
図１４は、本実施形態に係る作品群可視化画像の回転移動を説明するための図である。
図１４（Ａ）は、作品群可視化画像９０の全体を回転移動する場合の例である。
作品群可視化画像９０は、反時計回りに回転する際に、図中の側面９１と底面９２とは一体になって回転するものである。そのため、正面方向の側面９１は、回転後には左側面に移動し、底面９２の矢印は、奥向きから右向きに変わっている。ここで、側面９１は、テーマ画像に対応し、底面９２は、配置画像に対応する。 Although the work group visualization image has been described above using an example, the work group visualization image is not limited to the example described above.
(Variation 1)
FIG. 14 is a diagram for explaining the rotational movement of the work group visualization image according to this embodiment.
FIG. 14A shows an example of a case where the entire work group visualization image 90 is rotated and moved.
When the artwork group visualization image 90 rotates counterclockwise, the side surface 91 and bottom surface 92 in the figure rotate together. Therefore, the side surface 91 facing the front moves to the left side after rotation, and the arrow on the bottom surface 92 changes from pointing back to pointing right. Here, the side surface 91 corresponds to the theme image, and the bottom surface 92 corresponds to the layout image.

他方、図１４（Ｂ）は、作品群可視化画像９０のうち、テーマ画像のみを回転移動する場合の例である。
作品群可視化画像９５は、反時計回りに回転する際に、図中の側面９６のみ回転するものであり、底面９７は回転しない。そのため、正面方向の側面９６は、回転後には左側面に移動し、その後奥側の面に移動するのに対し、底面９７の矢印は、奥向きの方向のままである。ここで、側面９６は、テーマ画像に対応し、底面９７は、配置画像に対応する。よって、図１４（Ｂ）の場合は、配置画像は回転せず、テーマ画像のみが回転するものである。 On the other hand, FIG. 14B shows an example in which only the theme image in the work group visualization image 90 is rotated and moved.
When the artwork group visualization image 95 rotates counterclockwise, only the side surface 96 in the figure rotates, and the bottom surface 97 does not rotate. Therefore, the side surface 96 facing the front moves to the left side after rotation and then moves to the surface toward the back, while the arrow on the bottom surface 97 remains pointing toward the back. Here, the side surface 96 corresponds to the theme image, and the bottom surface 97 corresponds to the arrangement image. Therefore, in the case of FIG. 14(B), the arrangement image does not rotate, and only the theme image rotates.

本実施形態に係る作品群可視化画像の回転移動では、図１４（Ａ）に示すように、作品群可視化画像の全体が一体として回転するものに限定されず、図１４（Ｂ）に示すように、作品群可視化画像のうちテーマ画像のみが回転するものであってもよい。 The rotational movement of the work group visualization image according to this embodiment is not limited to the rotation of the entire work group visualization image as a unit, as shown in FIG. 14(A), but may be such that only the theme image of the work group visualization image rotates, as shown in FIG. 14(B).

（変形例２）
図１５は、本実施形態に係るテーマ画像の他の例を示す図である。
図１５（Ａ）は、底面が正方形形状の四角柱の側面を構成するテーマ画像９８の例である。側面は、正方形形状に限定されることなく、長方形形状であってもよい。
図１５（Ｂ）は、底面が正六面体形状の多面体の側面を構成するテーマ画像９９の例である。この場合、制御部１０（大テーマ画像生成部１３）は、テーマの数に応じた多面体の側面を構成するように、テーマ画像９９を生成する。そうすることで、例えば、テーマの数が５以上ある場合には、切替ボタンを設けることなく、全てのテーマが回転操作によって見えるものになる。 (Variation 2)
FIG. 15 is a diagram showing another example of a theme image according to the present embodiment.
15A is an example of a theme image 98 that forms the side surface of a quadrangular prism having a square base. The side surface is not limited to a square shape, and may be rectangular.
15B is an example of a theme image 99 that forms the side of a polyhedron whose bottom is a regular hexahedron. In this case, the control unit 10 (large theme image generating unit 13) generates theme images 99 so as to form the side of a polyhedron according to the number of themes. By doing so, for example, when there are five or more themes, all the themes can be seen by a rotation operation without providing a switching button.

本実施形態に係る作品群可視化画像のテーマ画像は、図１５（Ａ）に示すように、四角柱の側面を構成するものに限定されず、図１５（Ｂ）に示すように、多角柱の側面を構成するものであってもよい。 The theme image of the artwork group visualization image according to this embodiment is not limited to forming the side of a rectangular prism as shown in FIG. 15(A), but may also form the side of a polygonal prism as shown in FIG. 15(B).

このように、本実施形態の画像処理サーバ１によれば、以下のような効果がある。
（１）三次元空間に、作品情報記憶部３２に記憶された作品の画像を配置した配置画像と、作品の大テーマを四角柱の側面に配置した大テーマ画像とを含む作品群可視化画像を生成して、ユーザ端末５に出力する。
よって、作品情報記憶部３２に記憶された作品について、作品の画像と共に大テーマを表示させることで、ユーザに対してより作品を分かりやすく提示できる。また、大テーマに対応する作品の画像を、例えば、強調表示させるため、大テーマの作品の画像が一見して分かるように表示できる。 As described above, the image processing server 1 of this embodiment has the following advantages.
(1) A work group visualization image is generated in three-dimensional space, including an arrangement image in which images of works stored in the work information storage unit 32 are arranged, and a main theme image in which the main theme of the works is arranged on the side of a rectangular prism, and the image is output to the user terminal 5.
Therefore, for works stored in the work information storage unit 32, the main theme can be displayed together with the image of the work, so that the work can be presented to the user in a more easily understandable manner. In addition, the image of the work corresponding to the main theme can be displayed, for example, in an emphasized manner, so that the image of the work with the main theme can be displayed so as to be easily recognized at a glance.

（２）作品群可視化画像に対する回転操作を受け付けた場合に、作品群可視化画像の全体を回転移動させるので、回転移動にしたがって、様々な位置の配置画像と大テーマ画像とを、正面方向から見ることができる。
（３）大テーマ画像の１つの側面が正面方向に配置されている場合に、正面方向の大テーマ画像の側面が示す大テーマに対応する作品の画像を強調表示させる。そのため、大テーマの作品の画像が一見して分かるように表示でき、確認しやすいものにできる。
（４）大テーマ画像は、透過性を有する画像であり、配置画像を囲むように大テーマ画像を配置するので、大テーマ画像により配置画像が見えづらくなるのを防ぐことができる。 (2) When a rotation operation is received on the group of works visualization image, the entire group of works visualization image is rotated, so that the layout images and the large theme image in various positions can be viewed from the front as the image is rotated.
(3) When one side of the main theme image is positioned in the front direction, the image of the work corresponding to the main theme indicated by the side of the main theme image in the front direction is highlighted. This allows the image of the work of the main theme to be displayed in a way that is easy to see at a glance, making it easy to confirm.
(4) The large theme image is a transparent image and is arranged so as to surround the arranged image, so that it is possible to prevent the arranged image from being difficult to see due to the large theme image.

（５）大テーマ名を含む領域の選択操作を受け付けた場合に、受け付けた大テーマの下位の階層に位置する小テーマの小テーマ画像を生成して、配置画像と小テーマ画像とを含む作品群可視化画像をユーザ端末５に出力する。よって、テーマを深掘りして作品の画像を見せることができる。
（６）大テーマの数が５以上である場合に、切替ボタンを表示し、切替ボタンの選択操作を受け付けた場合に、大テーマ画像を切り替えるので、大テーマの数によらずに、全ての大テーマを、ユーザに見せることができる。 (5) When a selection operation of an area including a major theme name is accepted, a minor theme image of a minor theme located in a lower hierarchy of the accepted major theme is generated, and a work group visualization image including the layout image and the minor theme image is output to the user terminal 5. This makes it possible to dig deeper into the theme and show images of the works.
(6) When the number of major themes is five or more, a switching button is displayed, and when a selection operation of the switching button is received, the major theme image is switched. Therefore, all major themes can be shown to the user regardless of the number of major themes.

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。 Although the embodiments of the present invention have been described above, the present invention is not limited to the above-mentioned embodiments. Furthermore, the effects described in the embodiments are merely a list of the most favorable effects resulting from the present invention, and the effects of the present invention are not limited to those described in the embodiments. Note that the above-mentioned embodiments and the modified forms described below can be used in appropriate combinations, but detailed explanations will be omitted.

（変形形態）
（１）本実施形態では、ユーザ端末に表示するものを例に説明したが、これに限定されない。例えば、画像処理サーバとユーザ端末との機能を有する画像処理装置であってもよい。
（２）本実施形態では、ユーザ端末を、タブレットを例に説明したが、これに限定されない。例えば、ＨＭＤ（ＨｅａｄＭｏｕｎｔｅｄＤｉｓｐｌａｙ）や、展示機器シアター等であってもよい。 (Modifications)
(1) In the present embodiment, the display on the user terminal has been described as an example, but the present invention is not limited to this. For example, the present invention may be an image processing device having the functions of an image processing server and a user terminal.
(2) In the present embodiment, the user terminal is described as a tablet, but is not limited to this. For example, the user terminal may be a head mounted display (HMD), an exhibition device theater, or the like.

（３）本実施形態では、作品情報記憶部の画像に、大テーマや小テーマが対応付いているものを例に説明したが、これに限定されない。大テーマや小テーマが対応付けられていない場合においても、同様に行うことができる。その場合、画像処理サーバは、例えば、作品情報記憶部にある画像のうち、各項目の少なくとも１つがテーマに関連する画像を抽出して、出力するようにしてもよい。また、画像処理サーバは、例えば、作品情報記憶部にある画像に対して画像認識処理を行うことによって画像解析することで、画像に関連するキーワードを得て、キーワードがテーマに関連する画像を抽出して、出力するようにしてもよい。 (3) In this embodiment, the example has been described in which major and minor themes are associated with the images in the work information storage unit, but this is not limiting. The same can be done even when no major or minor theme is associated. In this case, the image processing server may, for example, extract and output images in which at least one of the items in the work information storage unit is related to a theme. In addition, the image processing server may, for example, perform image analysis by performing image recognition processing on the images in the work information storage unit to obtain keywords related to the images, and extract and output images in which the keywords are related to the theme.

（４）本実施形態では、大テーマと小テーマとを有するものを例として説明したが、これに限定されない。３つ以上の階層構造を有するものであっても同様である。その際、テーマ領域の選択操作を受け付けた場合には、１つ下位の階層のテーマを配置したテーマ画像を用いて作品群可視化画像を出力すればよい。
（５）本実施形態では、テーマ記憶部のテーマが、それぞれ４つのテーマにより構成されているものを例に説明したが、これに限定されない。テーマの数は、任意である。 (4) In the present embodiment, an example having a major theme and a minor theme has been described, but the present invention is not limited to this. The same applies to a hierarchical structure having three or more hierarchical layers. In this case, when a selection operation of a theme area is received, a work group visualization image may be output using a theme image in which the theme of the next lower layer is arranged.
(5) In the present embodiment, the theme storage unit is configured with four themes, but the present invention is not limited to this. The number of themes is arbitrary.

（６）本実施形態では、回転操作を受け付けた場合に、作品群可視化画像を回転移動するものを例に説明したが、これに限定されない。作品群可視化画像を表示する際に、例えば、左右に４５度程度回転させてもよい。
（７）本実施形態では、多面体の側面にテーマを有するものを例に説明したが、これに限定されない。多面体の上面と底面とにテーマを有してもよい。 (6) In the present embodiment, when a rotation operation is received, the work group visualization image is rotated, but the present invention is not limited to this. When the work group visualization image is displayed, the work group visualization image may be rotated by about 45 degrees to the left or right, for example.
(7) In the present embodiment, the side surface of a polyhedron has a theme, but the present invention is not limited to this. The top and bottom surfaces of a polyhedron may have a theme.

（８）本実施形態では、１つ下位の階層のテーマを配置したテーマ画像を用いて作品群可視化画像を出力する際、配置画像は同じものを用いるものを例に説明したが、これに限定されない。テーマ領域の選択操作を受け付けた場合に、画像処理サーバの制御部は、テーマ領域のテーマを有する作品の画像のみの配置画像を生成して、１つ下位の階層のテーマを配置したテーマ画像を含む作品群可視化画像を出力してもよい。例えば、「土偶」が選択操作された場合には、作品の画像を「土偶」のみにし、「土偶」と同じ階層の「火焔型土器」等を含まない配置画像を生成してもよい。そのようにすれば、作品の画像が作品群名と同じ状態になるため、より分かりやすいものにできる。 (8) In this embodiment, when a work group visualization image is output using a theme image in which a theme from one level lower is arranged, the same arrangement image is used as an example, but this is not limited to this. When a theme area selection operation is received, the control unit of the image processing server may generate an arrangement image of only images of works having the theme of the theme area, and output a work group visualization image including a theme image in which a theme from one level lower is arranged. For example, when a "Clay Figurine" is selected, an arrangement image may be generated in which the image of the work is only "Clay Figurine" and does not include "Flame-shaped Pottery" from the same level as "Clay Figurine". In this way, the image of the work will be the same as the work group name, making it easier to understand.

（９）本実施形態では、作品情報記憶部に全ての作品情報を記憶するものを例に説明したが、これに限定されない。作品情報記憶部に記憶されている作品情報のうちの一部を、画像処理サーバに対して通信可能に接続されたデータベース等に記憶させてもよい。例えば、作品画像を、別のデータベースに記憶させておき、作品情報記憶部には、作品データベースの当該作品の画像を格納する位置情報（例えば、ＵＲＬ、アドレス等）を記憶するようにしてもよい。 (9) In this embodiment, an example has been described in which all work information is stored in the work information storage unit, but this is not limiting. A portion of the work information stored in the work information storage unit may be stored in a database or the like that is communicatively connected to the image processing server. For example, work images may be stored in a separate database, and the work information storage unit may store location information (e.g., a URL, address, etc.) for storing the image of the work in the work database.

（１０）本実施形態では、美術館や博物館で保有する土偶や土器等に関するものを対象とした例を説明したが、これに限定されない。複数の項目について多面的に見せることが有用なものであればよく、他の美術品や絵画等であってもよい。また、美術品等に限らず、例えば、複数の企業を比較した参照を可能にした、企業ポートフォリオ等にも活用できる。その場合、画像は、例えば、企業ロゴにすればよい。 (10) In this embodiment, examples have been described that target objects related to clay figurines and earthenware held in art galleries and museums, but the present invention is not limited to this. Anything that is useful for showing multiple items from multiple perspectives may be used, such as other works of art or paintings. Furthermore, the present invention is not limited to works of art, and may be used, for example, in corporate portfolios that enable comparison and reference of multiple companies. In such cases, the image may be, for example, a corporate logo.

１画像処理サーバ
５ユーザ端末
１０制御部
１１可視化要求受付部
１２配置画像生成部
１３大テーマ画像生成部
１４可視化画像出力部
１５回転操作受付部
１６回転処理部
１７画像強調処理部
１８テーマ受付部
１９小テーマ画像生成部
２０切替操作受付部
２１切替テーマ画像生成部
３０記憶部
３１ａプログラム
３２作品情報記憶部
３３テーマ記憶部
６０作品群可視化画像画面
６１、７１，８１，９０作品群可視化画像
６３配置画像
６４，７４作品画像
６５，６５Ａ，６５Ｂ大テーマ画像
６５ａ，６５ｂ，６５ｃ，６５ｄ，７５ａ大テーマ領域
６７操作ＵＩ部
６８切替ボタン
７４ａ強調画像
８５小テーマ画像
８５ａ，８５ｂ小テーマ領域
９８，９９テーマ画像
１００画像処理システム LIST OF SYMBOLS 1 Image processing server 5 User terminal 10 Control unit 11 Visualization request reception unit 12 Arrangement image generation unit 13 Main theme image generation unit 14 Visualized image output unit 15 Rotation operation reception unit 16 Rotation processing unit 17 Image emphasis processing unit 18 Theme reception unit 19 Small theme image generation unit 20 Switching operation reception unit 21 Switching theme image generation unit 30 Memory unit 31a Program 32 Work information memory unit 33 Theme memory unit 60 Work group visualization image screen 61, 71, 81, 90 Work group visualization image 63 Arrangement image 64, 74 Work image 65, 65A, 65B Main theme image 65a, 65b, 65c, 65d, 75a Main theme area 67 Operation UI unit 68 Switching button 74a Emphasis image 85 Small theme image 85a, 85b Small theme area 98, 99 Theme image 100 Image processing system

Claims

a storage unit for storing images associated with text;
an image arrangement means for arranging the images in a three-dimensional space based on the relevance of the text;
a theme arrangement means for arranging themes based on the text corresponding to the images arranged by the image arrangement means for each display direction in the three-dimensional space;
an image visualization means for outputting, for each of the display directions in the three-dimensional space , an image related to the theme corresponding to the display direction among the images arranged by the image arrangement means, with reference to the storage unit;
Equipped with
The image visualization means outputs the images related to the theme in a manner different from other images other than the images related to the theme.

2. The image output device according to claim 1,
The image visualization means outputs only the images related to the theme without displaying any other images except the images related to the theme.

3. The image output device according to claim 1,
The image visualization means outputs an image, of the images arranged by the image arrangement means, in which the text in the storage unit is related to the theme.

3. The image output device according to claim 1,
The image visualization means is an image output device that outputs images, among the images arranged by the image arrangement means, in which keywords related to the images obtained by image analysis of the images in the memory unit are related to the theme.

5. The image output device according to claim 1,
The theme arrangement means arranges the theme on a side surface of a polygonal prism.

6. The image output device according to claim 1,
an image output device comprising: a theme visualization unit that outputs, of the themes arranged by the theme arrangement unit, at least the theme that corresponds to the display direction;

7. The image output device according to claim 6 ,
a rotation operation receiving means for receiving a rotation operation for the theme output by the theme visualization means;
an image rotation means for rotating the theme and the image in a direction of the rotation operation when the rotation operation reception means receives the rotation operation;
An image output device comprising:

7. The image output device according to claim 6 ,
a rotation operation receiving means for receiving a rotation operation for the theme output by the theme visualization means;
an image rotation means for rotating the theme in a direction of the rotation operation when the rotation operation reception means receives the rotation operation;
An image output device comprising:

9. The image output device according to claim 1 ,
The theme is an image having transparency,
The theme arrangement means arranges the theme so as to surround the image arranged by the image arrangement means.

10. The image output device according to claim 1,
The theme has a hierarchical structure,
a theme receiving means for receiving a selection operation related to the theme,
The image visualization means refers to the memory unit and outputs an image related to a sub-theme that is located below the theme accepted by the theme accepting means, among the images arranged by the image arrangement means.

A program for causing a computer to function as the image output device according to any one of claims 1 to 10 .