JP5661000B2 - Multi-function information terminal and operation method thereof - Google Patents
Multi-function information terminal and operation method thereof Download PDFInfo
- Publication number
- JP5661000B2 JP5661000B2 JP2011181045A JP2011181045A JP5661000B2 JP 5661000 B2 JP5661000 B2 JP 5661000B2 JP 2011181045 A JP2011181045 A JP 2011181045A JP 2011181045 A JP2011181045 A JP 2011181045A JP 5661000 B2 JP5661000 B2 JP 5661000B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- context
- information terminal
- information
- action
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Navigation (AREA)
- Digital Computer Display Output (AREA)
Description
本発明は、多機能情報端末に関し、特に、タッチパネル型ディスプレイ上に配置したアイコンを操作して、その機能を実行する形態の多機能情報端末およびその操作方法に関する。 The present invention relates to a multi-function information terminal, and more particularly, to a multi-function information terminal and a method for operating the multi-function information terminal in which an icon placed on a touch panel display is operated to execute the function.
コンピュータの小型化・高性能化に伴って、スマートフォンなどに代表される携帯型の多機能情報端末や、乗用車に搭載されるナビゲーション機能を持った多機能情報端末の普及が加速している。この種の情報端末においては、比較的大型のタッチパネル方式のディスプレイを備え、ここに端末が備える多数の機能を実行するためのアイコン、すなわち特定の機能にリンクされた方形ボタン型の描画領域を多数配列し、そのアイコンに対するタッチ操作によって、ユーザが目的の機能を手早く実行できるようになっている。 With the downsizing and high performance of computers, the spread of portable multi-function information terminals represented by smartphones and multi-function information terminals with navigation functions mounted on passenger cars is accelerating. In this type of information terminal, a relatively large touch panel display is provided, and icons for executing a number of functions provided in the terminal, that is, a large number of rectangular button-type drawing areas linked to specific functions are provided. The user can quickly execute the target function by arranging and touching the icon.
これら多機能情報端末を含む現代のコンピュータにおいては、機能を実現するプログラム(例えば、音楽再生プログラム)やデータ(例えば、1つの音楽データ)などのリソースは、ファイルシステムにおけるファイルに有形化される。ディスプレイ上の個々のアイコンは、それぞれが特定のファイルに結び付けられていて、ユーザが特定のアイコンをタッチ操作すると、対応するファイルがメモリ上に読み出されてCPUで実行されることになる。アイコンに結び付けられたリソースが特定のデータである場合には、そのファイルの拡張子やヘッダー情報に基づいて、そのデータを読み出すプログラムを起動する。このように従来のアイコンを使った機能の実行システムにおいては、一つのアイコンが一つの機能に結び付けられており、従って、ディスプレイ上のアイコンの数で、それを通してユーザが利用できる端末上の機能の数が決まる。 In modern computers including these multi-function information terminals, resources such as programs (for example, music playback programs) and data (for example, one piece of music data) that realize functions are tangible into files in the file system. Each icon on the display is associated with a specific file, and when the user touches the specific icon, the corresponding file is read onto the memory and executed by the CPU. If the resource associated with the icon is specific data, a program for reading the data is started based on the extension and header information of the file. As described above, in the function execution system using conventional icons, one icon is linked to one function. Therefore, the number of icons on the display indicates the number of functions on the terminal that can be used by the user. The number is determined.
一方、情報端末の多機能化が進む中で、一台の端末が備えるアプリケーションすなわち端末機能の数が飛躍的に増加してきている。これに伴ってディスプレイ上に置かれるアイコンの数も増加し、場合によってはそれが複数ページにも渡るものとなって、その使い勝手が悪くなる問題が生じている。 On the other hand, the number of applications, that is, the number of terminal functions included in one terminal has been dramatically increased as the number of functions of information terminals has increased. Along with this, the number of icons placed on the display also increases, and in some cases, it extends over a plurality of pages, causing a problem that the usability is deteriorated.
このような問題に対処する方法としては、例えば、(1)アイコンをグループ化するアイコンを用意し、このグループアイコンが選択されたときに、それに属するアイコンを表示する方法、(2)オペレーティングシステムで実現される切り替え可能な複数の仮想デスクトップに、カテゴリ別にアイコンを配置して、該デスクトップを切り替えて使用する方法などが知られている。 As a method of dealing with such a problem, for example, (1) a method of preparing an icon for grouping icons and displaying the icon belonging to this group icon when the group icon is selected, (2) in the operating system A method is known in which icons are arranged by category on a plurality of switchable virtual desktops to be realized and the desktops are switched.
また本件に関連して特許文献1には、ディスプレイ上のアイコンを選択したときに、それに関連する情報を表示し、ユーザが確認できるようにする技術が開示されている。また、特許文献2には、ディスプレイ上のアイコンの表示位置を調整する技術が開示されている。 In connection with this case, Patent Document 1 discloses a technique for displaying information related to an icon on a display so that the user can check it. Patent Document 2 discloses a technique for adjusting the display position of an icon on a display.
しかしながらこれらの技術では、結局、目的の機能に結び付けられたアイコンに辿り着くまでの階層、すなわちユーザの操作ステップを増やすことになってしまう。また、アイコンは依然として特定の一つの機能に結び付けられているため、そのアイコンが表している情報に対する多様な操作を実現する、といったことができない。 However, in these techniques, the hierarchy until reaching the icon linked to the target function, that is, the operation step of the user is eventually increased. In addition, since the icon is still associated with a specific function, various operations on the information represented by the icon cannot be realized.
本発明は、上記問題点に鑑みてなされたものであり、単一のアイコンに対して端末の機能に係る複数のアクションを結びつけることによって、ユーザが一のアイコンに対する多様な操作を選択できるようにして、その利便性を向上する多機能情報端末およびその操作方法を提供することを目的としている。 The present invention has been made in view of the above problems, and allows a user to select various operations for one icon by associating a plurality of actions related to the function of the terminal with a single icon. Thus, an object of the present invention is to provide a multi-function information terminal that improves its convenience and an operation method thereof.
本発明の多機能情報端末は、情報表示のためのディスプレイと、ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成できるようにする画像標記作成手段と、ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示手段と、ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御手段とを有する。 The multi-function information terminal of the present invention creates a display for displaying information and an image mark on the display for the user to execute a function related to arbitrary information in the context of a specific function in the multi-function information terminal. An image title creating means for enabling the user to extract a plurality of actions for the context of the image title based on an operation on the image title by the user, and displaying a choice of the actions on the display; Control means for executing the selected action based on an operation on the displayed action option.
また本発明は、前記画像標記作成手段により作成される画像標記の前記情報およびコンテキストを記憶するデータテーブルを更に有し、前記表示手段が、ユーザによる前記画像標記に対する操作に基づいて、前記データテーブルから該画像標記の情報およびコンテキストを抽出し、それらの情報に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させるものである。 The present invention further includes a data table for storing the information and context of the image title created by the image title creation means, and the display means is configured to store the data table based on an operation on the image title by a user. The information and context of the image title are extracted from the information, and a plurality of actions for the context of the image title are extracted based on the information, and the options of the actions are displayed on the display.
また本発明は、前記多機能情報端末に含まれる機能のコンテキスト毎に、該コンテキストにおいてユーザが所望するであろう複数のアクションを記憶するデータテーブルを更に有し、前記表示手段が、ユーザによる前記画像標記に対する操作に基づいて、前記データテーブルから該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させるものである。 The present invention further includes, for each function context included in the multi-function information terminal, a data table that stores a plurality of actions that the user would desire in the context, and the display means includes the user by the user Based on the operation for the image title, a plurality of actions for the context of the image title are extracted from the data table, and options for these actions are displayed on the display.
この場合において、前記画像標記作成手段により生成される画像標記が、その機能のコンテキストを表す指標を画像標記内に含むものであることが好ましい。 In this case, it is preferable that the image title generated by the image title creating means includes an index representing the context of the function in the image title.
また、前記表示手段で表示されるアクションの選択肢には、複数のアクションを備えた任意の情報の選択肢が含まれ、前記表示手段は、該選択肢の選択により、ディスプレイ上にそれらアクションの選択肢を表示するものであることが好ましく、更に、前記表示手段は、好適には、前記複数のアクションを備えた任意の情報の選択肢が選択されたときに、その画像標記の表示を該情報に係るものに変更する手段を更に有する。 In addition, the action options displayed on the display means include optional information options having a plurality of actions, and the display means displays the action options on the display by the selection of the options. Further, the display means preferably displays the display of the image mark related to the information when an option of any information having the plurality of actions is selected. It further has a means to change.
本発明はまた、前記多機能情報端末において、前記画像標記に対するユーザの操作履歴を記録する操作履歴記録手段を更に有し、前記表示手段は、前記記録された操作履歴に基づいて、抽出する複数のアクションを決定するものである。 The present invention further includes operation history recording means for recording a user's operation history with respect to the image title in the multi-function information terminal, and the display means extracts a plurality of information based on the recorded operation history. The action is determined.
これら多機能情報端末において、前記機能のコンテキストは、該端末に内蔵されているアプリケーションプログラムの実行、例えば、多機能情報端末における移動体の走行支援ナビゲーションおよびその施設登録または施設検索、音楽再生、映像再生、住所録検索などを含む。また、前記画像標記に係る任意の情報が、任意の文字列で構成されることが好ましい。 In these multi-function information terminals, the context of the function is execution of an application program built in the terminal, for example, travel support navigation of a moving body in the multi-function information terminal and its facility registration or facility search, music playback, video Includes playback, address book search, etc. Moreover, it is preferable that arbitrary information related to the image title is composed of an arbitrary character string.
また、好適には、前記表示手段は、前記アクションの選択肢を、その画像標記の周囲に円周状に表示させるものである。 Preferably, the display means displays the action options in a circle around the image title.
また、好適には、前記多機能情報端末は、前記ディスプレイ上に配置されたタッチパネルを更に有し、前記表示手段が、ユーザによる前記画像標記に対するタッチ操作に基づいて、前記アクションの選択肢を、その周囲に円周状に表示させるものであり、前記制御手段が、ユーザによる前記アクションの選択肢の一つに対するタッチ操作に基づいて、該選択されたアクションを実行させるものである。 Preferably, the multi-function information terminal further includes a touch panel arranged on the display, and the display means selects the action options based on a touch operation on the image mark by a user. It is displayed around the periphery, and the control means causes the selected action to be executed based on a touch operation on one of the action options by the user.
また、本発明は情報表示のためのディスプレイを有する多機能情報端末における操作方法であって、ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成する画像標記作成ステップと、ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示ステップと、ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御ステップとを有する。 In addition, the present invention is an operation method in a multi-function information terminal having a display for displaying information, in which a user executes a function related to arbitrary information in the context of a specific function in the multi-function information terminal. An image mark creating step for creating an image mark on the display, and a display step for extracting a plurality of actions for the context of the image mark based on a user's operation on the image mark and displaying options for those actions on the display And a control step for executing the selected action based on an operation on the displayed action option by the user.
更に、本発明は情報表示のためのディスプレイを有する多機能情報端末における操作プログラムであって、ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成する画像標記作成ステップと、ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示ステップと、ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御ステップとを有する。 Furthermore, the present invention is an operation program in a multi-function information terminal having a display for displaying information, for a user to execute a function related to arbitrary information in the context of a specific function in the multi-function information terminal. An image mark creating step for creating an image mark on the display, and a display step for extracting a plurality of actions for the context of the image mark based on a user's operation on the image mark and displaying options for those actions on the display And a control step for executing the selected action based on an operation on the displayed action option by the user.
本発明によれば、個々の画像標記は特定の機能のコンテキストで作成され、複数のアクションに結び付けられているので、ユーザは一つの画像標記に対して多様なアクションを実現できるようになり、その操作性が格段に向上する。 According to the present invention, each image mark is created in the context of a specific function and is linked to a plurality of actions, so that the user can realize various actions for one image mark. The operability is greatly improved.
次に、本発明の実施の形態について図面を参照して詳細に説明する。以下では、タッチパネル式ディスプレイを備えた携帯型多機能情報端末を例にとって、本発明を詳細に説明する。また、本発明における任意の情報に係る機能を実行するための画像標記とは、いわゆるアイコンやショートカットキー等を含む標記であり、実施例では、主としてアイコンを例示する。 Next, embodiments of the present invention will be described in detail with reference to the drawings. Hereinafter, the present invention will be described in detail by taking a portable multi-function information terminal provided with a touch panel display as an example. In addition, the image mark for executing a function relating to arbitrary information in the present invention is a mark including a so-called icon, a shortcut key, and the like. In the embodiment, an icon is mainly exemplified.
図1は、本発明の実施例に係る多機能情報端末の構成例を示すブロック図である。図において、多機能情報端末100は、その表面にタッチパネルモジュールを配置した液晶ディスプレイなどで構成されるタッチパネル式ディスプレイ101、多機能情報端末の機能を実現するためのアプリケーションプログラム群102、ディスプレイ101上にショートカットキーなどを含む画像標記であるアイコンを形成し、その機能を実現するためのアイコン操作制御部103、およびアイコンの実行にかかる各種情報を格納するデータストア104を含んで構成される。
FIG. 1 is a block diagram illustrating a configuration example of a multifunction information terminal according to an embodiment of the present invention. In the figure, a multi-function information terminal 100 is provided on a
アプリケーションプログラム群102には、移動体の走行支援を行うためのナビゲーションプログラム106、内蔵メモリ、外付けメモリおよび/または広域ネットワーク上のサーバに格納された音楽データまたは映像データを再生するための音楽再生プログラム107と映像再生プログラム108、電子メールアドレス、住所、電話番号その他の属人情報を管理するためのアドレス帳プログラム109、WWW(World Wide Web)にアクセスして指定ワードに対する検索を実行するためのWeb検索プログラム110が含まれる。後に説明するが多機能情報端末100は、インターネットに接続するための無線ネットワークインタフェースや、母艦と呼ばれるデスクトップコンピュータなどに接続するためのI/Oインタフェースを備えており、これらのインタフェースを介して、ユーザが後から各種のアプリケーションプログラムをインストールして、その機能を追加することが可能であり、ここに掲げたアプリケーションプログラムはそれらのほんの一例に過ぎない。また、多機能情報端末100は、各アプリケーションプログラムを機能させるための各種のハードウェア構成を備えるか、そのようなハードウェアを備えた機器に接続して使用される。例えば、ナビゲーションプログラム106に関し、多機能情報端末100は、自車位置情報を取得するためのGPS受信機、道路交通情報を取得するためのVICS受信機などのハードウェア構成を備えてもよいし、車両に搭載され、そのような機能を備えたナビゲーション装置に接続して使用されるものであってもよい。
The application program group 102 includes a music program for reproducing music data or video data stored in a
アイコン操作制御部103は、主として、メモリ上に読み出されCPUで実行されるプログラムによって実現され、その実現機能として、アイコン作成部111、アクション表示部112、アクション実行制御部113、および操作履歴記録部114を含む。アイコン操作制御部103は、その実行の過程においてデータストア104にアクセスし、そのデータテーブル、すなわちアイコン情報テーブル115、アクションデータテーブル116、および操作履歴テーブル117から必要なデータを取得し、また、生成したデータを格納する。
The icon operation control unit 103 is mainly realized by a program that is read out on a memory and executed by a CPU. As an implementation function thereof, an
ここでアイコン作成部111は、ユーザの指示に基づいて、タッチパネル式ディスプレイ101上にアイコンを生成するための機能を提供する。アイコンの作成は、ユーザが多機能情報端末100の特定のアプリケーションをアクティブにしている状態で、ディスプレイ101上に表示されるアイコン作成ボタンをユーザがタッチすることで開始される。すなわちアイコン作成部111は、特定の機能のコンテキストで表示されるアイコン作成ボタンを含んでいる。アイコン作成の具体的な処理については後述するが、ユーザの指示に基づき作成されるアイコンは、任意の文字情報とその作成時のコンテキストに係る情報を有しており、これらの情報は、アイコン情報テーブル115に格納される。アイコン作成部111で作成されるアイコンは、その表示態様として、少なくとも前記文字情報とコンテキストに係る情報を含んでいる。本実施例における具体的な表示例については、後述する。
Here, the
前記任意の文字情報は、その作成時のコンテキストに応じてシステム側がデフォルト値を用意し、それをユーザが必要に応じで編集することで決定される。ここで言う機能のコンテキストとは、アイコン作成時における多機能情報端末100の動作状態ほどの意味であり、例えばユーザがナビゲーションプログラムを実行しているときに、アイコンの作成指示がなされた場合には、当該ナビゲーションプログラムがコンテキストとなり、音楽再生時にアイコン作成指示がなされた場合には、当該音楽再生プログラムがそのコンテキストとなる。また、ナビゲーションプログラムにおいて、周辺施設検索が実行されている状況で、アイコンが作成される場合には、当該ナビゲーションプログラムにおける周辺施設検索をそのコンテキストとして記録することができる。 The arbitrary character information is determined by the system preparing a default value according to the context at the time of creation and editing the user as necessary. The function context referred to here has the same meaning as the operation state of the multi-function information terminal 100 at the time of icon creation. For example, when the user is instructing to create an icon while executing the navigation program, When the navigation program is a context and an icon creation instruction is given during music playback, the music playback program is the context. Further, when an icon is created in a situation where a peripheral facility search is being executed in the navigation program, the peripheral facility search in the navigation program can be recorded as the context.
アクション表示部112は、ユーザがディスプレイ上のアイコンをタッチ操作することに反応して起動し、その対応する複数のアクションの選択肢をディスプレイ上に描画、表示させる。表示するアクションの選択肢は、データストア104のアクションデータテーブル116および操作履歴テーブル117に格納した情報に基づいて決定される。アクションデータテーブル116には、事前に、各機能のコンテキスト毎に、既定の複数のアクションに係る選択肢が決定、格納されており、アクション表示部112は、タッチされたアイコンのコンテキストをキーとして、対応する複数のアクションを抽出する。このときアクション表示部112は、データストア104のアイコン情報テーブル115にアクセスして、対応アイコンのコンテキストおよび情報を取得する。アクション表示部112は、また、操作履歴テーブル117に格納された操作履歴情報に基づいて、最終的に表示するアクションを決定する。その詳細については後述する。
The
表示の一実施態様においてそれらの選択肢は、対象のアイコンの周囲に円周状に配置される、略方形状のボタンである。しかしながら、その配置、形状、数、サイズなどの表示態様は限定的なものではなく、多機能情報端末側の要求仕様などに応じて種々のものが考えられる。本実施例における具体的な表示態様については、後述する。 In one embodiment of the display, the options are substantially square buttons that are arranged circumferentially around the icon of interest. However, the display modes such as the arrangement, shape, number, size, etc. are not limited, and various types can be considered according to the required specifications on the multifunction information terminal side. A specific display mode in the present embodiment will be described later.
アクション実行制御部113は、ユーザが前記表示された複数のアクションの選択肢の中からその一つを選択する操作に応じて、対応のアクションを実行させる。例えば、ユーザが選択したアクションが、そのアイコンの情報で特定されるアーティストの楽曲再生である場合、アクション実行制御部113は、音楽再生プログラム107を起動して、当該アーティストの楽曲を再生させる。また、ユーザが選択したアクションが、そのアイコンの情報で特定される施設に対する周辺検索である場合、アクション実行制御部113は、ナビゲーションプログラム106を起動して、当該施設に対する周辺検索を実行させる。
The action
操作履歴記録部114は、前記アイコンに対するユーザの操作履歴を、データストア104の操作履歴テーブル117に記録する。具体的には、操作履歴記録部114は、対象のアイコンに対しユーザが選択したアクションおよびその選択日時を、操作履歴テーブル117に記録する。操作履歴テーブル117に記録されたこれらの情報は、アクション表示部112において選択されるアクションを決定するために用いられる。すなわちアクション表示部112は、操作履歴テーブル117の情報を集計し、統計的手法を用いて、アクションデータテーブル116から抽出したアクションの中から、最終的にディスプレイに表示するアクションの選択肢を決定する。一実施例において、アクション表示部112は、そのアイコンに係るアクションの中から、ユーザによる選択の頻度が高いアクション、および/またはユーザが最も最近選択したアクションを優先的に選ぶ。また、ユーザによる選択頻度の高いアクションに関連性の高いアクションを、該選択頻度の高いアクションと共に表示することができる。それらの具体例については後述する。
The operation
次に、前記データストア104内の各テーブル115〜117のデータ構造について説明する。図2は、アイコン情報テーブル115のデータ構造の一例を示している。図において、アイコン情報テーブル115は、そのフィールドとして、少なくとも、個々のアイコンに割り当てられる固有のアイコンID、アイコンに割り当てられた文字列、そのアイコンの作成コンテキスト名、およびその他の属性情報を有する。属性情報としては、例えば、そのディスプレイ上の座標情報、イメージデータのパス、作成日時などが含まれる。これらアイコン情報テーブル115のデータは、専ら、アクション表示部112により読み出されて、ユーザにより操作されているアイコンのコンテキストを決定するために用いられると共に、その文字列情報は、アクション実行制御部113で呼び出されるプログラムに渡される。
Next, the data structure of each table 115 to 117 in the data store 104 will be described. FIG. 2 shows an example of the data structure of the icon information table 115. In the figure, the icon information table 115 has at least a unique icon ID assigned to each icon, a character string assigned to the icon, a creation context name of the icon, and other attribute information as its fields. The attribute information includes, for example, coordinate information on the display, image data path, creation date and time, and the like. The data of the icon information table 115 is exclusively read out by the
図3は、アクションデータテーブル116のデータ構造の一例を示している。図において、アクションデータテーブル116は、少なくともコンテキスト名を格納するフィールドを持ったコンテキストテーブル301と、少なくともアクション名を格納するフィールドを持ったアクションテーブル302を含み、これらは一対多の関係で関連付けられている。特定のコンテキストが決定されると、これらテーブルにより、そのコンテキストに対する複数のアクションが抽出できる。 FIG. 3 shows an example of the data structure of the action data table 116. In the figure, an action data table 116 includes a context table 301 having a field for storing at least a context name and an action table 302 having a field for storing at least an action name, which are associated in a one-to-many relationship. . Once a particular context is determined, these tables can extract multiple actions for that context.
図4〜図7は、アクションデータテーブル116に格納される具体的なアクションの例を、そのコンテキスト毎に示したものであり、それぞれ、ナビゲーションプログラム、音楽再生プログラム、映像再生プログラム、およびアドレス帳プログラム、の各コンテキストに係る。図4において、ナビゲーションプログラムのコンテキストに対するアクションとして、「Web情報検索」、複数の方法による「周辺施設検索」、「登録施設表示」、「電話をかける」、「店舗情報の閲覧」、「経由地設定」が例示されている。図5において、音楽再生プログラムのコンテキストに対するアクションとして、「楽曲の再生」、「Web情報検索」、「Webラジオ放送再生」、「Web動画検索」が例示されている。図6において、映像再生プログラムのコンテキストに対するアクションとして、「録画コンテンツ再生」、「Web情報検索」、「関連音楽再生」、「周辺施設検索」が例示されている。図7において、アドレス帳プログラムのコンテキストに対するアクションとして、「電話をかける」、「メッセージの送信」、「目的地設定」、「Web情報検索」が例示されている。これらのアクションは、好適には、多機能情報端末が備える機能に鑑みて、ユーザが必要とするであろうアクションを、端末の機能から選出したものであり、そのコンテキストに対する限定的なものではない。 4 to 7 show examples of specific actions stored in the action data table 116 for each context, and a navigation program, a music playback program, a video playback program, and an address book program, respectively. , Each context. In FIG. 4, as actions for the context of the navigation program, “Web information search”, “peripheral facility search” by multiple methods, “registered facility display”, “call”, “browsing store information”, “via location” “Setting” is exemplified. In FIG. 5, “playback of music”, “Web information search”, “Web radio broadcast playback”, and “Web video search” are illustrated as actions for the context of the music playback program. In FIG. 6, “recorded content playback”, “Web information search”, “related music playback”, and “surrounding facility search” are illustrated as actions for the context of the video playback program. In FIG. 7, “call”, “send message”, “destination setting”, and “Web information search” are illustrated as actions for the context of the address book program. These actions are preferably selected from the functions of the terminal in view of the functions of the multi-function information terminal, and are not limited to the context. .
図8は、操作履歴テーブル117のデータ構造の一例を示している。図において、操作履歴テーブル7は、そのフィールドとして、少なくとも、個々のアイコンに割り当てられる固有のアイコンID、選択されたアクション名、およびその選択日時を有する。操作履歴テーブル117のこれらの情報は、前述のとおりアクション表示部112において、集計され、統計的手法で解析されて利用される。
FIG. 8 shows an example of the data structure of the operation history table 117. In the figure, the operation history table 7 has at least a unique icon ID assigned to each icon, a selected action name, and a selection date and time as its fields. As described above, these pieces of information in the operation history table 117 are aggregated in the
次に、前記アイコン作成部111によるアイコン作成プロセスについて説明する。図9は、アイコン作成時の処理手順に係るフローチャートを示している。図において、アイコン作成部111の処理は、ユーザが任意のコンテキスト、例えば、ナビゲーションプログラムを使用している状況で、ディスプレイ上に表示されるアイコン作成ボタンをタッチすることで開始される(ステップS901)。ユーザのこの操作に応じて、システムは最初に、作成するアイコンに係る文字列情報を入力するためのダイアログボックスを、ディスプレイ101上に表示する(ステップS902)。ダイアログボックスにおける文字列入力エリアには、システムによってそのデフォルト値として、予め任意の文字列を設定しておくことができる。このデフォルト値は、ユーザが直前に行っていた操作およびそのコンテキストに基づいて、決定することができる。例えば、ユーザが直前に、ナビゲーションプログラムにおいて、特定の施設に対する周辺施設検索を実行していた場合には、その施設名をデフォルト値とすることができる。また、ユーザが音楽再生プログラムによって特定のアーティストの楽曲を再生していた場合には、そのアーティスト名をデフォルト値とすることができる。
Next, an icon creation process by the
この表示されたダイアログボックスに対する、ユーザの文字列入力が完了すると(ステップS903)、システムは、その文字列とコンテキストに基づいて、アイコン画像を生成する(ステップS904)。一実施例として、各コンテキスト毎に異なる背景画像を持った画像データ群から、対応するコンテキストの画像データを抽出し、ユーザが指定した文字列をここに重ねて描画する、という手法でアイコンを作成することができる。次いで、このアイコンに係る文字列とコンテキストの各情報を、アイコン情報テーブル115に記録した後(ステップS905)、ディスプレイ101上に当該アイコンの画像を描画して処理を終える(ステップS906)。
When the user's character string input to the displayed dialog box is completed (step S903), the system generates an icon image based on the character string and context (step S904). As an example, an icon is created by extracting image data of a corresponding context from an image data group having a different background image for each context, and drawing a character string specified by the user on top of it. can do. Next, after the character string and context information relating to the icon are recorded in the icon information table 115 (step S905), the image of the icon is drawn on the
次に、前記作成されたアイコンに対してユーザがタッチ操作を行った場合の処理について説明する。図10は、アイコンに対する操作時における処理のフローチャートを示している。図において、ユーザがディスプレイ101上の特定のアイコンをタッチすることで、本処理が開始される(ステップS1001)。最初の処理で、システムは、タッチされたアイコンのID情報に基づいて、アイコン情報テーブル115にアクセスして、その文字列とコンテキストの情報を取得する(ステップS1002)。次いで、アクションデータテーブル116にアクセスして、そのアイコンのコンテキストに係る複数のアクションを読み出すと共に(ステップS1003)、操作履歴テーブル117にアクセスして、そのアイコンに対するユーザの操作履歴を取得する(ステップS1004)。そして、この履歴情報を勘案して、最終的にディスプレイ上に表示する複数のアクション(後に示す例では、4つのアクション)を決定し(ステップS1005)、その決定されたアクションに係る選択肢を描画生成して、ディスプレイ101上における当該アイコンの周囲に表示する(ステップS1006)。 Next, processing when the user performs a touch operation on the created icon will be described. FIG. 10 shows a flowchart of processing when an icon is operated. In the figure, the process starts when the user touches a specific icon on the display 101 (step S1001). In the first process, the system accesses the icon information table 115 based on the ID information of the touched icon, and acquires the character string and context information (step S1002). Next, the action data table 116 is accessed to read a plurality of actions related to the context of the icon (step S1003), and the operation history table 117 is accessed to acquire the user operation history for the icon (step S1004). ). Then, in consideration of the history information, a plurality of actions (four actions in the example described later) to be finally displayed on the display are determined (step S1005), and options related to the determined actions are drawn and generated. Then, it is displayed around the icon on the display 101 (step S1006).
表示されたアクションの選択肢に対して、ユーザが特定のアクションを選択すると(ステップS1007)、そのアクションがさらなるアクションの選択肢を表示させるものであるか判断される(ステップS1008)。選択されたアクションが、そのようなアクションである場合には、処理をステップ1003に戻し、当該アクションに係る新たな文字列について、前記処理1003〜1006を繰り返す。選択されたアクションが、これ以外のアクションである場合には、そのアクションを実現するための、対応するアプリケーションプログラムが呼び出され、そのプログラムにアイコンに係る文字列の情報が渡されて、当該アクションが実行される(ステップS1009)。以上により、ディスプレイ101上の表示は、そのプログラムによるアクションの実行結果を表示するものに遷移され、本処理は終了する。
When the user selects a specific action for the displayed action option (step S1007), it is determined whether the action is to display a further action option (step S1008). If the selected action is such an action, the process returns to step 1003, and the processes 1003 to 1006 are repeated for a new character string related to the action. When the selected action is an action other than this, the corresponding application program for realizing the action is called, and the character string information related to the icon is passed to the program, and the action is It is executed (step S1009). As described above, the display on the
図11は、多機能情報端末のディスプレイ101における、本実施例に係るアイコンの表示態様を示している。同図(A)は、多機能情報端末においてナビゲーションプログラムを起動して、その誘導ルート上の登録地点Aの詳細情報を表示している状態であり、その詳細情報の表示ダイアログ1101上に、前記アイコンを作成するためのボタン1102が描画されている様子が示されている。ユーがこのボタン1102をタッチすると、図9で説明したアイコン作成のための処理が開始され、そのコンテキストとして、ナビゲーションプログラムが、その文字列情報のデフォルト値として、当該施設の名称が、それぞれ設定される。
FIG. 11 shows a display mode of icons according to the present embodiment on the
同図(B)には、アイコン作成部111において作成されたアイコンが、ディスプレイ101上に整列して描画された状態が示されている。各アイコン1103は、その表示態様として、その背景に前記コンテキストを表す画像と、文字列を表すテキストを備えている。同図(C)は、ユーザがアイコンにタッチしたことにより、その周囲に、対応するアクションに係る選択肢1104が表示された状態を示している。ユーザはアイコンをタッチ、すなわちその指先をアイコンに接触させた状態から、指先を上下左右の何れかにずらす、いわゆるフリックすることによって、その希望するアクションを選択することができる。または、指先をフリックせずにそのまま離すことによって、最も優先度の高いアクション(例えば、音楽再生プログラムのコンテキストにおける音楽再生など)を行わせることができる。もっとも、アイコン並びにそのアクションの表示態様によって、本発明が限定されることはなく、既存の技術を用いた種々の表示方法を採択できる。
FIG. 5B shows a state in which icons created by the
図12には、各コンテキスト毎に表示されるアクションの選択肢の例を示している。同図(A)は、音楽再生プログラムのコンテキストで登録された、「レディ・ガガ」の文字列に係るアイコンに対するアクションの選択肢を例示している。フリック操作により、ユーザは、「レディ・ガガ」について、「Webで検索する」、「放送から探す」、「映像を探す」、または「消去する」の各アクションを選択でき、また、フリックせずに指を離すことで、音楽再生プログラムを起動して「レディ・ガガ」の楽曲を再生させることができる。ここで、「Webで検索する」のアクションは、設定されたWeb検索エンジンを利用して「レディ・ガガ」についての情報検索を行わせ、「放送から探す」のアクションは、インターネットラジオなどの放送局からそのアーティストに係る楽曲を見つけ出し再生し、「映像を探す」のアクションは、設定された一または複数の動画再生サイトにアクセスして、「レディ・ガガ」に係る動画を見つけ出し再生し、「消去する」のアクションは、当該アイコンをディスプレイ101上から削除する。
FIG. 12 shows an example of action options displayed for each context. FIG. 6A illustrates action options for an icon related to the character string “Lady Gaga” registered in the context of the music playback program. By the flick operation, the user can select each action of “Search on the Web”, “Search from broadcast”, “Search for video”, or “Delete” for “Lady Gaga”, and without flicking. By releasing your finger, you can start the music playback program and play the song “Lady Gaga”. Here, the “search on the Web” action searches information about “Lady Gaga” using the set Web search engine, and the “search from broadcast” action is a broadcast such as Internet radio. The music related to the artist is found and played from the station, and the action of “Find Video” is to access one or more set video playback sites to find and play the video related to “Lady Gaga”. The “delete” action deletes the icon from the
同図(B)は、映像再生プログラムのコンテキストで登録された、「旅ザル」の文字列に係るアイコンに対するアクションの選択肢を例示している。フリック操作により、ユーザは、「旅ザル」について、「関連する地点を探す」、「関連するコンテンツを探す」、「音楽を探す」、または「消去する」の各アクションを選択でき、また、フリックせずに指を離すことで、映像再生プログラムを起動して「旅ザル」に係る録画済みまたは放送中のコンテンツを再生させることができる。ここで、「関連する地点を探す」のアクションは、ナビゲーションプログラムを起動して、その番組内で取り上げられた場所やお店を検索し、地点登録し、「関連するコンテンツを探す」のアクションは、Web検索エンジンを利用してその番組に関連する映像、テキスト情報その他のコンテンツの情報検索を行わせ、「音楽を探す」のアクションは、その番組の挿入歌を音楽再生プログラムやインターネットラジオなどの放送局から見つけ出し再生する。 FIG. 5B illustrates action options for the icon relating to the character string “travel monkey” registered in the context of the video playback program. By flicking, the user can select the action “Find related points”, “Find related content”, “Find music”, or “Delete” for “Travel monkey”. By releasing the finger without starting, it is possible to start the video playback program and play back the recorded or broadcast content related to the “Trip”. Here, the action of “Find related point” starts the navigation program, searches for the place or shop featured in the program, registers the point, and the action of “Find related content” The search for video, text information and other contents related to the program is performed using a Web search engine, and the action of “Find Music” is used to select the inserted song of the program as a music playback program, Internet radio, etc. Find from the broadcasting station and play it.
同図(C)は、ナビゲーションプログラムのコンテキストで登録された、「麺屋武蔵」の文字列に係るアイコンに対するアクションの選択肢を例示している。フリック操作により、ユーザは、「麺屋武蔵」について、「メニュー/開店時間を検索する」、「近くのオススメを探す」、「電話をかける」、または「消去する」の各アクションを選択でき、また、フリックせずに指を離すことで、ナビゲーションプログラムにおいて既に登録してある「麺屋武蔵」に係る店舗を、その目的地として設定することができる。ここで、「メニュー/開店時間を検索する」のアクションは、設定されたWeb検索エンジンを利用して「麺屋武蔵」についての情報検索を行わせ、「近くのオススメを探す」のアクションは、端末に搭載された飲食店の比較評価プログラムを利用して、この飲食店以上の評価を有する店舗を探し、「電話をかける」のアクションは、ナビゲーションプログラムに登録された「麺屋武蔵」に係る店舗情報を利用して、その店舗に電話を掛ける。 FIG. 5C illustrates action options for the icon relating to the character string “Noodle shop Musashi” registered in the context of the navigation program. By flicking, the user can select “Search Menu / Opening Time”, “Find Nearby Recommendations”, “Make a Call”, or “Delete” action for “Menya Musashi” Further, by releasing the finger without flicking, a store related to “Noodle shop Musashi” that has already been registered in the navigation program can be set as the destination. Here, the action of “search for menu / opening time” is to search information about “noodle shop Musashi” using the set web search engine, and the action of “search for nearby recommendations” Use the restaurant comparison evaluation program installed on the terminal to find a store with a rating higher than this restaurant, and the “call” action is related to “Menya Musashi” registered in the navigation program. Use the store information to call the store.
同図(D)は、アドレス帳プログラムのコンテキストで登録された、「福島太郎」の文字列に係るアイコンに対するアクションの選択肢を例示している。フリック操作により、ユーザは、「福島太郎」について、「SNSを確認」、「メッセージを送る」、「自宅を訪ねる」、または「消去する」の各アクションを選択でき、また、フリックせずに指を離すことで、アドレス帳プログラムを起動して、そこに登録された「福島太郎」に係るエントリーに電話を掛けることができる。ここで、「SNSを確認」のアクションは、登録されているWeb上のSNS(Social Networking Service:個人による情報発信コミュニティ型サービス)サイトに対しそのユーザ「福島太郎」の情報を取得し、「メッセージを送る」のアクションは、メールやSMS(Short Message Service)など登録されたメッセージサービスを利用して、そこに登録されている「福島太郎」宛にメッセージを送信し、「自宅を訪ねる」のアクションは、ナビゲーションプログラムを起動してその誘導目的地を、「福島太郎」で特定される住所に設定する。 FIG. 4D illustrates action options for the icon relating to the character string “Taro Fukushima” registered in the context of the address book program. By the flick operation, the user can select the actions “Check SNS”, “Send a message”, “Visit home”, or “Delete” for “Taro Fukushima”. By releasing, you can start the address book program and call the entry related to “Taro Fukushima” registered there. Here, the “confirm SNS” action obtains the information of the user “Taro Fukushima” from a registered SNS (Social Networking Service) service site on the Web, and “Message The “Send” action uses a registered message service such as email or SMS (Short Message Service), sends a message to “Taro Fukushima” registered there, and the “Visit home” action Activates the navigation program and sets its guidance destination to the address specified by “Taro Fukushima”.
同図(E)は、ナビゲーションプログラムのコンテキストで登録された、「7ー11」の文字列に係るアイコンに対するアクションの選択肢を例示している。この例では、特定のアクションの選択が、新たなアクションの選択肢を生じさせるものが表されている。Eー1に示すように、フリック操作により、ユーザは、「7ー11」について、「サイト接続」、「駐車可能で絞り込み」、「地域で絞り込み」、または「四倉店」の各アクションを選択でき、また、フリックせずに指を離すことで、ナビゲーションプログラムを起動して、「7ー11」に係る施設についての周辺検索を開始させることができる。ここで、「サイト接続」のアクションは、「7ー11」のWebサイトにアクセスしてその情報を表示させ、「駐車可能で絞り込み」のアクションは、ナビゲーションプログラムにより、駐車設備を備えた「7ー11」の店舗を対象にした周辺検索をさせ、「地域で絞り込み」のアクションは、ナビゲーションプログラムにより、対象地域を選択した上での周辺検索をさせる。 FIG. 5E illustrates action options for the icon relating to the character string “7-11” registered in the context of the navigation program. In this example, the selection of a specific action is represented that gives rise to a new action option. As shown in E-1, by flicking the user, for “7-11”, the user selects an action of “Site connection”, “Narrow down by parking”, “Narrow down by region”, or “Shiokura store” It is also possible to start the navigation program by releasing the finger without flicking, and to start the peripheral search for the facility related to “7-11”. Here, the “site connection” action accesses the website “7-11” to display the information, and the “parking is possible and narrowing down” action is performed by the navigation program “7” provided with parking facilities. -11 ”is a search for the neighborhood of the store, and the action“ narrow down by region ”causes the navigation program to perform a neighborhood search after selecting the target region.
また「四倉店」のアクションは、「7ー11四倉店」に対する新たなアクションの選択肢をそのアイコンの周囲に表示させる(Eー2)。このとき好適には、アイコン上のテキスト表記も「7ー11四倉店」に切り替えられる。ユーザは、フリック操作により、「7ー11四倉店」について、「電話をかける」、「情報を見る」、「経由地設定」、「戻る」の各アクションを選択でき、また、フリックせずに指を離すことで、「7ー11四倉店」を目的地としてナビゲーションプログラムによる経路案内を開始させることができる。 In addition, the action of “Shiokura” displays a new action option for “7-11 Yotsukura” around the icon (E-2). At this time, the text notation on the icon is also preferably switched to “7-11 Yotsukura store”. The user can select “call”, “view information”, “route place setting”, and “return” actions for “7-11 Yotsukura store” by flicking, or without flicking. By releasing the finger, route guidance by the navigation program can be started with “7-11 Yotsukura branch” as the destination.
次に、ユーザの操作履歴が勘案された場合の表示態様について説明する。前述のとおり、アクション表示部112は、コンテキストに対するアクションの選択肢を決定するに際し、操作履歴テーブル117に記憶したユーザの操作履歴を参照する。図13に、操作履歴が勘案されていない場合のアクションの表示例(同図(A))と、操作履歴が勘案された場合のアクションの表示例(同図(B)および(C))とを比較して示した。
Next, a display mode when the user's operation history is taken into account will be described. As described above, the
同図(A)に示すように、操作履歴が勘案されていない場合(例えば、履歴情報が十分収集できていない、または履歴機能をオフにしているなど)、音楽再生プログラムのコンテキストで生成された「レディ・ガガ」に対して、アクションデータテーブル116内の順位に従い、「Webで検索する」、「放送から探す」、「映像を探す」、「消去する」の各アクションが表示される。これに対し、ユーザが過去の履歴から見て「放送から探す」のアクションに対する選択頻度が低い場合、その選択肢に代えて、他の選択肢である「関連情報を表示」を表示させる(同図(B))。一方、過去の履歴から、「放送から探す」のアクションに対する選択頻度が極めて高い場合には、選択頻度の低い選択肢に代えて、「放送から探す」を補強するアクションである「Pandoraから探す」(ここでPandoraはインターネットラジオ放送局の一つである)を表示する(同図(C))。なお、ユーザの操作履歴を用いた統計的手法による代替選択肢の決定は、ここで示したものに限定されないことを理解されたい。 As shown in FIG. 6A, when the operation history is not taken into account (for example, the history information is not collected enough or the history function is turned off), the history is generated in the context of the music playback program. For “Lady Gaga”, actions “Search by Web”, “Search from Broadcast”, “Search for Video”, and “Delete” are displayed according to the order in the action data table 116. On the other hand, when the frequency of selection for the action “search from broadcast” is low as seen from the past history, the user displays “display related information” as another option instead of the option (see FIG. B)). On the other hand, if the selection frequency for the “search from broadcast” action is extremely high from the past history, “search from Pandora”, which is an action that reinforces the “search from broadcast” instead of the option with low selection frequency ( Here, Pandora is one of Internet radio broadcasting stations) ((C) in the figure). It should be understood that determination of alternative options by a statistical method using a user's operation history is not limited to the one shown here.
次に、本実施例に係る多機能情報端末のハードウェア構成について説明する。図14は、多機能情報端末の代表的ハードウェア構成を示すブロック図である。図に示すように、多機能情報端末1400は、CPU1401、主記憶装置であるRAM1402およびROM1403、タッチパネルおよび物理的操作ボタンを含む入力装置1404、ディスプレイおよびスピーカを含む出力装置1405、ハードディスクや半導体メモリによる補助記憶装置1406、コンピュータその他の周辺デバイスと接続するためのI/Oインタフェース1407、インターネットに接続するための無線ネットワークインタフェース1408、GPS衛星と通信するためのGPS受信機1409などを含んで構成される。補助記憶装置1406には、基本ソフトウェアとしてのオペレーティングシステム、実施例に係るアイコン操作制御プログラム、前述した各種のアプリケーションプログラム、および各種のデータが格納される。タッチパネルや操作ボタンを介したユーザの指示に従って、これらプログラムやデータは、RAM1402に読み出され、CPU1401による制御に従って実行される。アイコン操作制御プログラムで実現されるアイコンは、オペレーティングシステムにより生成される仮想デスクトップ上に配置され、そのアイコンに対する操作は、オペレーティングシステムを介して、他のアプリケーションプログラムやハードウェア構成に橋渡しされ、処理される。
Next, a hardware configuration of the multifunction information terminal according to the present embodiment will be described. FIG. 14 is a block diagram illustrating a typical hardware configuration of the multifunction information terminal. As shown in the figure, the multi-function information terminal 1400 includes a
以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に
限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々
の変形・変更が可能である。
The preferred embodiments of the present invention have been described in detail above. However, the present invention is not limited to the specific embodiments, and various modifications and changes can be made within the scope of the gist of the invention described in the claims. It can be changed.
100:多機能情報端末 101:タッチパネル式ディスプレイ
102:アプリケーションプログラム群 103:アイコン操作制御部
104:データストア 106:ナビゲーションプログラム
107:音楽再生プログラム 108:映像再生プログラム
109:アドレス帳プログラム 110:Web検索プログラム
111:アイコン作成部 112:アクション表示部
113:アクション実行制御部 114:操作履歴記録部
115:アイコン情報テーブル 116:アクションデータテーブル
117:操作履歴テーブル
100: Multi-function information terminal 101: Touch panel display 102: Application program group 103: Icon operation control unit 104: Data store 106: Navigation program 107: Music playback program 108: Video playback program 109: Address book program 110: Web search program 111: Icon creation unit 112: Action display unit 113: Action execution control unit 114: Operation history recording unit 115: Icon information table 116: Action data table 117: Operation history table
Claims (22)
ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成できるようにする画像標記作成手段と、
ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示手段と、
ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御手段とを有し、
前記画像標記作成手段により生成される画像標記が、コンテキストを表す指標を画像標記内に含む、多機能情報端末。 A display for displaying information;
Image mark creation means for enabling a user to create an image mark for executing a function related to arbitrary information in the context of a specific function in a multi-function information terminal;
Display means for extracting a plurality of actions for the context of the image title based on an operation on the image title by the user, and displaying options for those actions on the display;
Control means for executing the selected action based on an operation on the displayed action option by the user ;
The multi-function information terminal , wherein the image title generated by the image title creation means includes an index representing the context in the image title .
前記表示手段が、ユーザによる前記画像標記に対する操作に基づいて、前記データテーブルから該画像標記の情報およびコンテキストを抽出し、それらの情報に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させるものである、請求項1に記載の多機能情報端末。 A data table for storing the information and context of the image mark created by the image mark creating means;
The display means extracts information and context of the image mark from the data table based on an operation on the image mark by a user, and extracts a plurality of actions for the context of the image mark based on the information. The multi-function information terminal according to claim 1, wherein the action options are displayed on a display.
前記表示手段が、ユーザによる前記画像標記に対する操作に基づいて、前記データテーブルから該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させるものである、請求項1または2に記載の多機能情報端末。 For each function context included in the multi-function information terminal, further comprising a data table storing a plurality of actions that the user would desire in the context;
The display means extracts a plurality of actions for the context of the image title from the data table based on an operation on the image title by a user, and displays options for the actions on a display. Or the multifunctional information terminal of 2.
前記表示手段は、前記記録された操作履歴に基づいて、抽出する複数のアクションを決定するものである、請求項1に記載の多機能情報端末。 An operation history recording means for recording a user's operation history for the image title;
The multifunction information terminal according to claim 1, wherein the display unit determines a plurality of actions to be extracted based on the recorded operation history.
該コンテキストに対する複数のアクションが、その画像標記に係る情報の示す施設に対する、前記ナビゲーションでの検索条件の設定、情報検索を含むものである、請求項1に記載の多機能情報端末。 The context of the function includes facility registration or facility search in the travel support navigation of the moving body in the multi-function information terminal,
The multi-function information terminal according to claim 1, wherein the plurality of actions with respect to the context include setting of a search condition in the navigation and information search for a facility indicated by information related to the image mark.
該コンテキストに対するアクションが、その画像標記に係る情報に対する、音楽再生、情報検索を含むものである、請求項1に記載の多機能情報端末。 The context of the function includes music playback in a multifunction information terminal;
The multi-function information terminal according to claim 1, wherein the action for the context includes music reproduction and information retrieval for information related to the image title.
該コンテキストに対するアクションが、その画像標記に係る情報に対する、映像再生、情報検索を含むものである、請求項1に記載の多機能情報端末。 The context of the function includes video playback in a multifunction information terminal;
The multi-function information terminal according to claim 1, wherein the action for the context includes video reproduction and information search for information relating to the image title.
該コンテキストに対するアクションが、その画像標記に係る情報に対する、情報表示、通話発信を含むものである、請求項1に記載の多機能情報端末。 The context of the function includes an address book search in a multi-function information terminal,
The multi-function information terminal according to claim 1, wherein the action for the context includes information display and call transmission for information relating to the image mark.
前記表示手段が、ユーザによる前記画像標記に対するタッチ操作に基づいて、前記アクションの選択肢を、その周囲に円周状に表示させるものであり、
前記制御手段が、ユーザによる前記アクションの選択肢の一つに対するタッチ操作に基づいて、該選択されたアクションを実行させるものである、請求項1に記載の多機能情報端末。 Further comprising a touch panel disposed on the display;
The display means is configured to display the action options based on a touch operation with respect to the image mark by a user, around the periphery of the action.
The multi-function information terminal according to claim 1, wherein the control means causes the selected action to be executed based on a touch operation on one of the action options by the user.
ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成する画像標記作成ステップと、
ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示ステップと、
ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御ステップとを有し、
前記画像標記作成ステップにより生成される画像標記が、コンテキストを表す指標を画像標記内に含む、多機能情報端末における操作方法。 An operation method in a multifunction information terminal having a display for displaying information,
An image mark creating step in which a user creates an image mark on the display for executing a function related to arbitrary information in the context of a specific function in the multi-function information terminal;
Based on an operation performed on the image title by the user, a plurality of actions for the context of the image title are extracted, and a display step for displaying options of these actions on a display;
A control step for executing the selected action based on an operation on the displayed action option by the user ,
An operation method in a multi-function information terminal , wherein the image title generated by the image title creation step includes an index representing a context in the image title .
前記表示ステップは、前記記録された操作履歴に基づいて、抽出する複数のアクション
を決定するものである、請求項15に記載の多機能情報端末における操作方法。 An operation history recording step of recording an operation history of the user with respect to the image title;
The operation method in the multi-function information terminal according to claim 15 , wherein the displaying step determines a plurality of actions to be extracted based on the recorded operation history.
ユーザが、多機能情報端末における特定の機能のコンテキストで、任意の情報に係る機能を実行するための画像標記をディスプレイ上に作成する画像標記作成ステップと、
ユーザによる前記画像標記に対する操作に基づいて、該画像標記のコンテキストに対する複数のアクションを抽出し、ディスプレイ上にそれらアクションの選択肢を表示させる表示ステップと、
ユーザによる前記表示されたアクションの選択肢に対する操作に基づいて、該選択されたアクションを実行させる制御ステップとを有し、
前記画像標記作成ステップにより生成される画像標記が、コンテキストを表す指標を画像標記内に含む、多機能情報端末における操作プログラム。 An operation program in a multifunction information terminal having a display for displaying information,
An image mark creating step in which a user creates an image mark on the display for executing a function related to arbitrary information in the context of a specific function in the multi-function information terminal;
Based on an operation performed on the image title by the user, a plurality of actions for the context of the image title are extracted, and a display step for displaying options of these actions on a display;
A control step for executing the selected action based on an operation on the displayed action option by the user ,
An operation program in a multi-function information terminal , wherein the image title generated by the image title creation step includes an index representing a context in the image title .
前記表示ステップは、前記記録された操作履歴に基づいて、抽出する複数のアクションを決定するものである、請求項19に記載の多機能情報端末における操作プログラム。 An operation history recording step of recording an operation history of the user with respect to the image title;
The operation program in the multifunction information terminal according to claim 19 , wherein the display step determines a plurality of actions to be extracted based on the recorded operation history.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011181045A JP5661000B2 (en) | 2011-08-23 | 2011-08-23 | Multi-function information terminal and operation method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011181045A JP5661000B2 (en) | 2011-08-23 | 2011-08-23 | Multi-function information terminal and operation method thereof |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013045190A JP2013045190A (en) | 2013-03-04 |
| JP5661000B2 true JP5661000B2 (en) | 2015-01-28 |
Family
ID=48009072
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011181045A Expired - Fee Related JP5661000B2 (en) | 2011-08-23 | 2011-08-23 | Multi-function information terminal and operation method thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5661000B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6861509B2 (en) * | 2016-12-09 | 2021-04-21 | 株式会社ケイティーエス | Application controller |
| KR20200040752A (en) | 2017-07-05 | 2020-04-20 | 팜 벤처스 그룹, 인코포레이티드 | Improved user interface for surfing context actions on mobile computing devices |
| US12377349B2 (en) | 2019-02-22 | 2025-08-05 | Sony Group Corporation | Information processing apparatus and information processing method |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104007931A (en) * | 2007-01-30 | 2014-08-27 | 三星电子株式会社 | Apparatus and method for inputing characters in terminal |
| JP2011118605A (en) * | 2009-12-02 | 2011-06-16 | Clarion Co Ltd | Information processing apparatus and program |
-
2011
- 2011-08-23 JP JP2011181045A patent/JP5661000B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2013045190A (en) | 2013-03-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2621622C2 (en) | Facilitating of interaction with user search interface at system level | |
| US8244757B2 (en) | Facet-based interface for mobile search | |
| US9280278B2 (en) | Electronic apparatus and method to organize and manipulate information on a graphical user interface via multi-touch gestures | |
| US9219812B2 (en) | Mobile terminal | |
| US9395890B2 (en) | Automatic discovery of system behavior | |
| US9772755B2 (en) | Remote control for displaying application data on dissimilar screens | |
| WO2010049580A1 (en) | Method, apparatus and computer program product for providing synchronized navigation | |
| BRPI0915601B1 (en) | user interface method for managing application for a mobile device | |
| KR101798697B1 (en) | File access with different file hosts | |
| JP2013507882A (en) | Method and apparatus for routing user data entry to application | |
| US20130054229A1 (en) | Portable device and method for multiple recording of data | |
| JP2015526810A (en) | Electronic device and method for interacting with an application on an electronic device | |
| EP2912571A1 (en) | Search-as-you-type on a relational database | |
| JP5980173B2 (en) | Information processing apparatus and information processing method | |
| JP5661000B2 (en) | Multi-function information terminal and operation method thereof | |
| JP5518585B2 (en) | Information processing apparatus and program | |
| KR102077158B1 (en) | Apparatus and method for operating message function which is associated memo function | |
| US20160286036A1 (en) | Method for quick access to application functionalities | |
| KR20130050705A (en) | Keyword search method and apparatus | |
| JP2013542542A (en) | Application file system access | |
| CN109597540A (en) | Server and terminal | |
| US9710444B2 (en) | Organizing unstructured research within a document | |
| JP2014093029A (en) | Electronic equipment, information management method, and information management program | |
| US20090063466A1 (en) | Resource selector, including for use in handheld devices | |
| KR101300474B1 (en) | Method of managing browser history using web-page tags and location of mobile terminals, and computer-readable recording medium with browser management program for the same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140207 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140917 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140924 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141110 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141202 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141202 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5661000 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |