JP7046326B2 - Display device, display program, display system and control method of display device - Google Patents
Display device, display program, display system and control method of display device Download PDFInfo
- Publication number
- JP7046326B2 JP7046326B2 JP2020102165A JP2020102165A JP7046326B2 JP 7046326 B2 JP7046326 B2 JP 7046326B2 JP 2020102165 A JP2020102165 A JP 2020102165A JP 2020102165 A JP2020102165 A JP 2020102165A JP 7046326 B2 JP7046326 B2 JP 7046326B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- slide
- keyword
- storage unit
- explanatory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、例えば、プレゼンテーション用にスライド等を表示する表示装置、表示プログラム、表示システム及び表示装置の制御方法に関するものである。 The present invention relates to, for example, a display device for displaying slides or the like for a presentation, a display program, a display system, and a control method for the display device.
近年、営業担当者等が自社製品の説明をする際に、携帯可能で比較的大きな表示装置を有する端末を使用する場合が多い。このような端末には、予め、説明順に沿ったスライド等が記憶されている場合が多いが、顧客等との話の内容によっては、説明順と異なるスライドや予め表示するように準備していなかったスライドを表示装置に提示する必要も生じる。
そこで、かかる場合に、必要なスライドを検索等する提案がなされている(例えば、特許文献1)。
In recent years, when a sales person or the like explains his / her product, he / she often uses a terminal having a portable and relatively large display device. In many cases, slides and the like in the order of explanation are stored in such terminals in advance, but depending on the content of the conversation with the customer and the like, slides that are different from the order of explanation and are not prepared to be displayed in advance. It will also be necessary to present the slide to the display device.
Therefore, in such a case, a proposal has been made to search for a necessary slide (for example, Patent Document 1).
しかし、顧客等との面談中にスライド検索等を行うと、話が中断等し、円滑な商品の説明等のプレゼンテーション等が妨げられるという問題があった。 However, if a slide search or the like is performed during an interview with a customer or the like, there is a problem that the talk is interrupted and the presentation such as a smooth explanation of the product is hindered.
そこで、本発明は、会話が中断等することなく、会話に関連するスライド等を自動的に選択表示させることができる表示装置、表示プログラム、表示システム及び表示装置の制御方法を提供することを目的とする。 Therefore, an object of the present invention is to provide a display device, a display program, a display system, and a control method of a display device capable of automatically selecting and displaying slides and the like related to a conversation without interrupting the conversation. And.
前記課題は、本発明によれば、対象者への説明が中断等することなく、説明に関連するスライド情報を自動的に選択表示させることができる表示装置であって、対象者の発声を音節情報に変換する音声認識部と、前記音声認識部で変換された前記音節情報を記憶する音節情報記憶部と、説明用情報が含まれるスライド情報と、前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報を記憶するスライド及びキーワード情報記憶部と、を有し、前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワード情報として記憶し、前記発声キーワード情報を含む前記スライド情報を推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示され、前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、前記テーマ関連スライドは、前記推奨スライドと重複していないときにのみ表示される構成となっていることを特徴とする表示装置により達成される。 According to the present invention, the subject is a display device capable of automatically selecting and displaying slide information related to an explanation without interrupting the explanation to the subject, and singing the voice of the subject. A voice recognition unit that converts information, a tune information storage unit that stores the tune information converted by the voice recognition unit, slide information that includes explanatory information, and the explanation that is associated with the slide information. The explanation keyword information is a combination of the explanation keyword information, a slide for storing the keyword information corresponding to the explanation keyword information, and a keyword information storage unit, and the tune information included in the tune information storage unit. When the above corresponds to, the corresponding keyword information is stored as vocal keyword information, and the slide information including the vocal keyword information is output as recommended slide information at any time during the explanation to the target person, and the selection signal is input. By doing so, the selected recommended slide is immediately selected and displayed , the slide information includes a theme-related slide having the same theme as the content of the conversation of the subject, and the theme-related slide is the theme-related slide. Achieved by a display device characterized in that it is configured to be displayed only when it does not overlap with the recommended slides .
前記構成によれば、音声判断部等の音声認識部で変換された音節情報の組み合わせが、説明キーワード情報に該当するときに、当該説明キーワード情報を含むスライド情報を推奨スライド情報として出力する表示装置となっている。
このため、例えば、営業担当者等が顧客等に、スライド情報を表示して、商品等の説明をしているとき、営業担当者や顧客等の対象者の発声を音節情報として取得することができる。
According to the above configuration, when the combination of syllable information converted by the voice recognition unit such as the voice judgment unit corresponds to the explanatory keyword information, the display device outputs the slide information including the explanatory keyword information as the recommended slide information. It has become.
For this reason, for example, when a sales person or the like displays slide information to a customer or the like to explain a product or the like, the utterance of the target person such as the sales person or the customer may be acquired as syllable information. can.
一方、前記構成によれば、スライド内容等を説明キーワード情報と関連付けて記憶されるスライド情報を有している。
そして、これら音節情報の組み合わせが、説明キーワード情報に該当するときに、当該説明キーワード情報を含むスライド情報を推奨スライド情報として自動的に出力(選択表示等)することができる構成となっている。
このため、顧客等との会話の流れに沿った適切な内容のスライド情報を表示装置に出力することができる。
また、顧客等との面談中にスライド検索等を行う必要がなく、会話が中断等し、円滑な商品等の説明等のプレゼンテーション等が妨げられるという事態の発生を未然に防ぐこともできる。
On the other hand, according to the above configuration, it has slide information stored in association with explanatory keyword information such as slide contents.
Then, when the combination of these syllable information corresponds to the explanatory keyword information, the slide information including the explanatory keyword information can be automatically output (selection display, etc.) as the recommended slide information.
Therefore, it is possible to output slide information having appropriate contents along the flow of conversation with the customer or the like to the display device.
In addition, it is not necessary to perform a slide search or the like during an interview with a customer or the like, and it is possible to prevent the occurrence of a situation in which a conversation is interrupted and a presentation such as a smooth explanation of a product or the like is hindered.
好ましくは、前記表示装置の複数の前記推奨スライド情報は、各前記推奨スライド情報が含む前記発声キーワード情報の数に基づいて、スライドの表示順に関する推奨表示順位情報が付される構成となっていることを特徴とする。 Preferably, the plurality of recommended slide information of the display device is configured to include recommended display order information regarding the display order of slides based on the number of vocalized keyword information included in each recommended slide information. It is characterized by that.
前記構成によれば、複数の推奨スライド情報が存在する場合、推奨スライド情報が含む説明キーワード情報の数に基づいて、スライドの表示順に関する優先順位情報等である推奨表示順位情報が付される。このため、例えば、複数の推奨スライド情報を、会話との関連性が高い順に表示等することができる。
したがって、使用者は、より会話との関連性が高い推奨スライド情報を容易に選択でき、会話の流れが中断等することなく、より円滑な商品等の説明等のプレゼンテーション等を行うことができる。
According to the above configuration, when a plurality of recommended slide information exists, recommended display order information such as priority information regarding the display order of slides is added based on the number of explanatory keyword information included in the recommended slide information. Therefore, for example, a plurality of recommended slide information can be displayed in descending order of relevance to the conversation.
Therefore, the user can easily select the recommended slide information that is more relevant to the conversation, and can give a smoother presentation such as explanation of the product without interrupting the flow of the conversation.
好ましくは、説明対象者の固有情報と一致する前記説明キーワード情報を含む前記推奨スライド情報に優先表示情報が付される構成となっていることを特徴とする。 It is preferable that the recommended slide information including the explanatory keyword information that matches the unique information of the explanatory subject is provided with priority display information.
前記構成によれば、説明対象者である顧客等の例えば、診療科や処方薬等の仕事内容等の情報である固有情報と一致する説明キーワード情報を含む推奨スライド情報は、特に、説明対象者が興味等を抱く内容であることが多い。
このため、かかる推奨スライド情報は優先的に表示する優先表示情報が付され、実際の表示では、優先的に表示され、使用者が選択し易い構成となる。
According to the above configuration, the recommended slide information including the explanation keyword information that matches the unique information such as the information such as the work contents of the clinical department and the prescription drug of the customer who is the explanation target is particularly the explanation target person. Is often the content that interests you.
Therefore, the recommended slide information is given priority display information to be displayed preferentially, and is displayed preferentially in the actual display, so that the user can easily select the recommended slide information.
好ましくは、複数の前記推奨スライド情報の表示順が、過去における前記推奨スライド情報の表示実績情報に基づいて決定されることを特徴とする。 Preferably, the display order of the plurality of recommended slide information is determined based on the past display record information of the recommended slide information.
前記構成によれば、複数の推奨スライド情報の表示順が、過去における推奨スライド情報の表示実績情報に基づいて決定されるので、説明対象者にとって、より好ましい順序で推奨スライド情報を示すことができる。 According to the above configuration, the display order of the plurality of recommended slide information is determined based on the past display record information of the recommended slide information, so that the recommended slide information can be shown in a more preferable order for the person to be explained. ..
好ましくは、前記表示装置の複数の前記説明キーワード情報は、相互に関連する異なる前記説明キーワード情報を含み、前記音節情報の組み合わせが、これらうち一の前記説明キーワード情報に該当するときは、前記説明キーワード情報に対応する前記キーワード情報を前記発声キーワード情報として記憶し、前記発声キーワード情報を含む前記スライド情報も推奨スライド情報として出力することを特徴とする。 Preferably, the plurality of explanatory keyword information of the display device includes different explanatory keyword information related to each other, and when the combination of the syllable information corresponds to the explanatory keyword information of one of them, the explanatory note. The keyword information corresponding to the keyword information is stored as the vocalized keyword information, and the slide information including the vocalized keyword information is also output as recommended slide information.
前記構成によれば、複数の説明キーワード情報は、相互に関連する説明キーワード情報(例えば、「高血圧」と「降圧剤」等)を含み、音節情報の組み合わせが、これらのうち一の説明キーワード情報(例えば、「高血圧」)に該当するときは、相互に関連する他の説明キーワード情報(例えば、「降圧剤」)を含む前記スライド情報も推奨スライド情報として出力する。
したがって、一つ音節情報の組み合わせである単語等から、より多くの説明キーワード情報をカバーすることができるので、会話等の内容に適した内容を有する推奨スライド情報を操作者に提供することができる。
According to the above configuration, the plurality of explanatory keyword information includes interrelated explanatory keyword information (for example, "hypertension" and "antihypertensive agent"), and the combination of syllable information is one of these explanatory keyword information. (For example, when it corresponds to “hypertension”), the slide information including other interrelated explanatory keyword information (for example, “antihypertensive agent”) is also output as recommended slide information.
Therefore, since it is possible to cover more explanatory keyword information from a word or the like that is a combination of one syllable information, it is possible to provide the operator with recommended slide information having content suitable for the content of conversation or the like. ..
好ましくは、前記表示装置の前記音節情報の組み合わせが前記説明キーワード情報に該当しないときで、前記説明キーワード情報と関連するキーワード関連言語情報に該当するときは、当該キーワード関連言語情報に対応する前記キーワード情報を前記発声キーワードとして記憶し、前記発声キーワード情報を含む前記スライド情報も推奨スライド情報として出力することを特徴とする。 Preferably, when the combination of the phonation information of the display device does not correspond to the explanatory keyword information and corresponds to the keyword-related language information related to the explanatory keyword information, the keyword corresponding to the keyword-related language information is preferable. The information is stored as the vocalized keyword, and the slide information including the vocalized keyword information is also output as recommended slide information.
前記構成によれば、音節情報の組み合わせが説明キーワード情報(例えば、「高血圧」)に該当しないときでも、説明キーワード情報(例えば、「高血圧」)と関連するキーワード関連言語情報(例えば、「頭」と「痛い」)に該当するときは、当該キーワード関連言語情報と関連ある説明キーワード情報(例えば、「高血圧」)を含む前記スライド情報も推奨スライド情報として出力される。
このため、説明対象者の発声が、説明キーワード情報に該当しないときでも、関連ある言語情報であれば、適切な推奨スライド情報を出力させることができる。
According to the above configuration, even when the combination of syllable information does not correspond to the explanatory keyword information (eg, “hypertension”), the keyword-related language information (eg, “head”) associated with the explanatory keyword information (eg, “hypertension”). And "painful"), the slide information including the explanatory keyword information (for example, "hypertension") related to the keyword-related language information is also output as recommended slide information.
Therefore, even when the utterance of the explanation target person does not correspond to the explanation keyword information, if it is relevant language information, appropriate recommended slide information can be output.
好ましくは、前記音声認識部を有する端末装置を備えることを特徴とする表示装置を有する表示システムである。 Preferably, it is a display system having a display device including a terminal device having the voice recognition unit.
前記構成によれば、説明対象者の発声を音節情報に変換する音声認識部が表示装置ではなく、別個の携帯電話等の端末装置が有し、この端末装置が音声認識処理をおこない、表示装置のCPU等は、音声認識の処理を行わないので、表示装置のCPU等の負荷が小さくなり、表示装置の情報処理を迅速に行うことができる。 According to the above configuration, the voice recognition unit that converts the voice of the person to be explained into syllable information is not a display device but a separate terminal device such as a mobile phone, and this terminal device performs voice recognition processing and is a display device. Since the CPU or the like does not perform the voice recognition process, the load on the CPU or the like of the display device is reduced, and the information processing of the display device can be performed quickly.
好ましくは、前記推奨スライド情報には分類情報が関連付けられ、前記分類情報は、特定の前記説明キーワード情報と関連付けられ、前記音節情報の組み合わせが、特定の前記説明キーワード情報に該当するときに、特定の当該説明キーワード情報に関連付けられている前記分類情報と対応付けられている前記推奨スライド情報を関連分類推奨スライド情報として出力することを特徴とする。 Preferably, the recommended slide information is associated with classification information, the classification information is associated with the particular explanatory keyword information, and specific when the combination of the syllable information corresponds to the particular explanatory keyword information. It is characterized in that the recommended slide information associated with the classification information associated with the explanation keyword information is output as the related classification recommended slide information.
前記構成によれば、音節情報の組み合わせが、特定の説明キーワード情報に該当するときに、特定の当該説明キーワード情報に関連付けられている分類情報と対応付けられている推奨スライド情報を関連分類推奨スライド情報(例えば、「表示用テーマ関連スライド情報」等)として出力する。
このため、使用者は、説明対象者である顧客等との会話で話題となったテーマ等の分類情報に関連するスライド情報を表示装置に出力できるので、顧客等の面談中により円滑且つ適切な商品等の説明等のプレゼンテーション等を行うことができる。
According to the above configuration, when the combination of syllable information corresponds to a specific explanatory keyword information, the recommended slide information associated with the classification information associated with the specific explanatory keyword information is associated with the related classification recommended slide. Output as information (for example, "display theme-related slide information", etc.).
Therefore, the user can output slide information related to the classification information such as the theme that became a topic in the conversation with the customer who is the subject of the explanation to the display device, so that it is smoother and more appropriate during the interview with the customer. It is possible to give presentations such as explanations of products.
前記課題は、対象者への説明が中断等することなく、説明に関連するスライド情報を自動的に選択表示させることができる表示装置の表示プログラムであって、対象者の発声を音節情報に変換する音声認識部の機能、前記音声認識部で変換された音節情報を音節情報記憶部に記憶する機能、説明用情報が含まれるスライド情報と、前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報をスライド及びキーワード情報記憶部に記憶する機能、前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワード情報として記憶し、前記発声キーワード情報を含む前記スライド情報が推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示される機能、前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、前記テーマ関連スライドが、前記推奨スライドと重複していないときにのみ表示される機能、を実現させるための表示プログラムにより達成される。 The subject is a display program of a display device capable of automatically selecting and displaying slide information related to the explanation without interrupting the explanation to the target person, and converts the voice of the target person into syllable information. The function of the voice recognition unit, the function of storing the syllable information converted by the voice recognition unit in the syllable information storage unit, the slide information including the explanatory information, and the explanatory information associated with the slide information. When the combination of the explanation keyword information, the function of storing the keyword information corresponding to the explanation keyword information in the slide and the keyword information storage unit, and the tune information included in the tune information storage unit corresponds to the explanation keyword information. , The corresponding keyword information is stored as vocal keyword information, and the slide information including the vocal keyword information is output as recommended slide information at any time during explanation to the target person, and a selection signal is input. The function of immediately selecting and displaying the selected recommended slide, the slide information includes a theme-related slide having the same theme as the content of the conversation of the subject, and the theme-related slide is the recommended slide. Achieved by a display program to realize a function that is displayed only when there is no duplication .
前記課題は、対象者への説明が中断等することなく、説明に関連するスライド情報を自動的に選択表示させることができる表示装置の制御方法であって、
音声認識部が対象者の発声を音節情報に変換し、
前記音声認識部で変換された前記音節情報を音節情報記憶部に記憶し、
説明用情報が含まれるスライド情報と、前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報をスライド及びキーワード情報記憶部に記憶し、
前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワードとして記憶し、前記発声キーワード情報を含む前記スライド情報を推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示され、前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、前記テーマ関連スライドは、前記推奨スライドと重複していないときにのみ表示されることを特徴とする表示装置の制御方法により達成される。
The subject is a control method of a display device capable of automatically selecting and displaying slide information related to an explanation without interrupting the explanation to the target person.
The voice recognition unit converts the subject's utterance into syllable information,
The syllable information converted by the voice recognition unit is stored in the syllable information storage unit, and the syllable information is stored in the syllable information storage unit.
The slide information including the explanatory information, the explanatory keyword information related to the explanatory information associated with the slide information, and the keyword information corresponding to the explanatory keyword information are stored in the slide and the keyword information storage unit.
When the combination of the syllable information included in the syllable information storage unit corresponds to the explanatory keyword information, the corresponding keyword information is stored as a vocal keyword, and the slide information including the vocal keyword information is recommended slide information. By outputting and inputting a selection signal at any time during the explanation to the target person, the selected recommended slide is immediately selected and displayed, and the slide information includes the content of the conversation of the target person. The theme-related slides include theme-related slides having a common theme, and the theme-related slides are achieved by a method of controlling a display device, characterized in that they are displayed only when they do not overlap with the recommended slides .
本発明は、会話が中断等することなく、会話に関連するスライド等を自動的に選択表示させることができる表示装置、表示プログラム、表示システム及び表示装置の制御方法を提供することができるという利点がある。 The present invention has an advantage that it is possible to provide a display device, a display program, a display system, and a control method for the display device, which can automatically select and display slides and the like related to the conversation without interrupting the conversation. There is.
以下、この発明の好適な実施の形態を添付図面等を参照しながら、詳細に説明する。
尚、以下に述べる実施の形態は、本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの態様に限られるものではない。
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings and the like.
Since the embodiments described below are suitable specific examples of the present invention, various technically preferable limitations are attached, but the scope of the present invention is particularly limited to the present invention in the following description. Unless otherwise stated, the present invention is not limited to these aspects.
図1は、本発明の表示システムである例えば、プレゼンテーション支援システム1の主な構成を示す概略図である。
図1に示すように、本システム1は、例えば、X製薬会社が、その従業員であり、本システム1の使用者である例えば、医薬情報提供者(MR(Medical Representive))が対象者である例えば、顧客である病院等の医師や薬剤師等の医療従事者に、自社の製品の情報を提供する際に使用されるスライド情報、例えば、スライドを多数、準備し、図1のX製薬医薬情報サーバ10に記憶する構成となっている。
FIG. 1 is a schematic diagram showing a main configuration of, for example, a
As shown in FIG. 1, in the
このスライドは、例えば、MRが面談する医師、看護師及び薬剤師等に自社の製品(例えば、A降圧剤等)の医薬情報を提供するためのスライドであり、自社製品である薬剤の適応症、有効性、副作用等の情報が示されている。
また、本システム1は、各MRが、当該スライドを面談対象者である医師等に表示するための表示装置である例えば、タブレット型端末30や端末装置である例えば、携帯電話70を有し、これらタブレット型端末30及び携帯電話70は、図1に示すように、インターネット網2及び基地局3等を介して、X製薬医薬情報サーバ10と通信可能な構成となっている。
This slide is, for example, a slide for providing medical information of the company's product (for example, A antihypertensive drug, etc.) to doctors, nurses, pharmacists, etc. with whom the MR interviews, and the indication of the drug, which is the company's product. Information such as efficacy and side effects is shown.
Further, in this
このため、タブレット型端末30は、X製薬医薬情報サーバ10から各種スライドを取得することができる構成となっている。
Therefore, the tablet-
携帯電話70は、図1に示すように、その中央に、各種情報を入力すると共に表示する表示部である例えば、「携帯側タッチパネル71」が配置されている。
携帯側タッチパネル71は「位置入力装置付き表示装置」であって、液晶パネル等の表示装置とタッチパッド等の位置入力装置を組み合わせた電子部品である。
したがって、画面上の表示を押すことで各種情報を入力することができると共に、各種情報を表示することができる構成となっている。
As shown in FIG. 1, the
The mobile
Therefore, various information can be input by pressing the display on the screen, and various information can be displayed.
また、携帯電話70は、図1に示すように、各種情報を入力するための「携帯側入力ボタン72」を備えていると共に、顧客等の音声情報を取得するマイクロホン73を有している
Further, as shown in FIG. 1, the
また、図1のタブレット型端末30も携帯電話70と同様に、「端末側タッチパネル31」や「端末側入力ボタン32」等を有している。
Further, the tablet-
携帯電話70、タブレット型端末30及びX製薬医薬情報サーバ10は、コンピュータを有し、コンピュータは、図示しないCPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)等を有し、これらは、バス等を介して接続されている。
The
図2は、図1の携帯電話70の主な構成を示す概略ブロック図である。
図2に示すように、携帯電話70は、「携帯制御部74」を有し、携帯制御部74は、X製薬医薬情報サーバ10等と通信等するための「携帯側通信装置75」、図1に示す「携帯側タッチパネル71」や「携帯側入力ボタン72」を制御する他、図2に示す「携帯電話装置本体76」も制御する。
また、携帯制御部74は、図2に示す「50音節記憶部77」、「音節判断部(プログラム)78」及び「携帯側発声音節記憶部79」を制御する。これら「50音節記憶部77」等については後述する。
さらに、携帯制御部74は、図2に示す、各種情報を記憶する「端末側各種情報記憶部80」も制御する。
FIG. 2 is a schematic block diagram showing a main configuration of the
As shown in FIG. 2, the
Further, the
Further, the
図3は、図1のX製薬医薬情報サーバ10の主な構成を示す概略ブロック図である。
図3に示すように、X製薬医薬情報サーバ10は、「サーバ制御部11」を有し、サーバ制御部11は、図1のタブレット型端末30と通信等するための「サーバ側通信装置12」、各種情報を表示する「サーバ側ディスプレイ13」及び各種情報を入力するための「サーバ側各種情報入力装置14」等を制御する。
FIG. 3 is a schematic block diagram showing a main configuration of the X pharmaceutical
As shown in FIG. 3, the
また、サーバ制御部11は、図3に示すように「サーバ側スライドデータ記憶部15」、「サーバ側キーワード関連データ記憶部16」、「サーバ側テーマ関連キーワード記憶部17」、「サーバ側病院データ記憶部18」及び「サーバ側スライド提供順履歴データ記憶部19」も制御する。なお、これら記憶部の内容については後述する。
Further, as shown in FIG. 3, the
図4は、図1のタブレット型端末30の主な構成を示す概略ブロック図である。
図4に示すように、タブレット型端末30は、「端末制御部33」を有し、端末制御部33は、X製薬医薬情報サーバ10等と通信等するための「端末側通信装置34」、図1に示す「端末側タッチパネル31」や「端末側入力ボタン32」を制御する他、図4に示す「第1の端末側各種情報記憶部110」、「第2の端末側各種情報記憶部120」、「第3の端末側各種情報記憶部130」、「第4の端末側各種情報記憶部140」、「第5の端末側各種情報記憶部150」、「第6の端末側各種情報記憶部160」及び「第7の端末側各種情報記憶部170」も制御する。
FIG. 4 is a schematic block diagram showing a main configuration of the
As shown in FIG. 4, the tablet-
図5乃至図11は、それぞれ「第1の端末側各種情報記憶部110」、「第2の端末側各種情報記憶部120」、「第3の端末側各種情報記憶部130」、「第4の端末側各種情報記憶部140」、「第5の端末側各種情報記憶部150」、「第6の端末側各種情報記憶部160」及び「第7の端末側各種情報記憶部170」の主な内容を示す概略ブロック図である。これらの内容については後述する。
5 to 11 show "first terminal-side various
図12乃至図17は、本システム1の主な動作例を示す概略フローチャートである。
本実施の形態では、X製薬会社の従業員である医薬情報提供者(MR)が、図1の携帯電話70及びタブレット型端末30を持参し、このタブレット型端末30の端末側タッチパネル31にスライドを表示し、担当病院の顧客である例えば、医師にX製薬会社の製品の情報の提供をすることを例に以下、説明する。
12 to 17 are schematic flowcharts showing main operation examples of the
In the present embodiment, a medical representative (MR) who is an employee of the X pharmaceutical company brings the
先ず、MRは、図1に示す自己のタブレット型端末30を起動させ、図1のX製薬会社のX製薬医薬情報サーバ10と通信する。
そして、ステップ(以下「ST」とする。)1へ進む。ST1では、MRが、図1のX製薬医薬情報サーバ10から図3に示す「サーバ側スライドデータ記憶部15」、「サーバ側キーワード関連データ記憶部16」、「サーバ側テーマ関連キーワード記憶部17」、「サーバ側病院データ記憶部18」、「サーバ側スライド提供順履歴データ記憶部19」の各データを取得する。
First, the MR activates its own tablet-
Then, the process proceeds to step 1 (hereinafter referred to as “ST”) 1. In ST1, the MR performs the “server-side slide
そして、MRのタブレット型端末30に記憶する。具体的には、図5の「端末側スライドデータ記憶部111」、図6の「端末側キーワード関連データ記憶部121」、「端末側キーワード関連データ記憶部122」、「端末側病院データ記憶部123」、図7の「端末側スライド提供順履歴データ記憶部131」に記憶される。
Then, it is stored in the
すなわち、MRがタブレット型端末30で、医師等に示すスライド等のデータは、全てX製薬医薬情報サーバ10に記憶されているので、本工程では、これらのデータを全てタブレット端末型端末30にダウンロードし、記憶させる工程となる。
また、既にタブレット型端末30に、これらのデータが記憶されているときは、本工程、最新のデータに更新する工程となる。
なお、本工程でタブレット型端末30に記憶された各データの内容については、後述する。
That is, since the MR is the
Further, when these data are already stored in the
The contents of each data stored in the
次いで、ST2へ進む。ST2では、MRは、今回の訪問予定の訪問病院及び訪問診療科のデータ、例えば、D病院の内科等を自己のタブレット型端末30に入力し、図7の「訪問Dr情報記憶部132」に記憶させる
Then, proceed to ST2. In ST2, the MR inputs the data of the visiting hospital and the visiting clinical department to be visited this time, for example, the internal medicine of the D hospital, into its
その後、MRは、図1の携帯電話70とタブレット型端末30を持参して、D病院へ訪問し、内科の医師と面談を開始する。このとき、タブレット型端末30の端末側タッチパネル31に、スライドを表示し、自社の製品の医薬情報等を医師に提供し始める。また、MRは持参した携帯電話70も起動させる。
After that, the MR brings the
次いで、ST3へ進む。ST3では、携帯電話70の図2の音声認識部である例えば、「音節判断部(プログラム)78」が動作し、携帯電話70のマイクロホン73が検知した「音」と、図2の「50音節記憶部77」のデータを比較する。
この「50音節記憶部77」には、音節情報である例えば、日本語の「あ」乃至「ん」の50音節の音節データが記憶されている。
したがって、本工程では、マイクロホン73が検知した「音」が50音節に該当するか否かを判断する。
Then, proceed to ST3. In ST3, for example, the voice recognition unit of FIG. 2 of the
The "50
Therefore, in this step, it is determined whether or not the "sound" detected by the
次いで、ST4で、マイクロホン73が検知した「音」が50音節に該当すると判断されたときは、ST5へ進む。ST5では、50音節に該当すると判断された「音」を各音節として図2の「携帯側発声音節記憶部79」に記憶させる。
Next, when it is determined in ST4 that the "sound" detected by the
次いで、ST6では、携帯電話70が「携帯側発声音節記憶部79」の音節データを図1のタブレット型端末30に送信する。
次いで、ST7では、タブレット型端末30が、受信した「音節データ」を、図7の音節情報記憶部である例えば、「端末側発声音節記憶部133」に記憶させる。
Next, in ST6, the
Next, in ST7, the tablet-
次いで、ST8へ進む。ST8では、図7の「キーワード検出部(プログラム)134」が動作し、「端末側発声音節記憶部133」に記憶された音節の組み合わせが、図5の「端末側スライドデータ記憶部111」の「関連キーワード」に該当するか否かを判断する。
Then, the process proceeds to ST8. In ST8, the "keyword detection unit (program) 134" of FIG. 7 operates, and the combination of syllables stored in the "terminal-side vocalized
この「端末側スライドデータ記憶部111」には、図5に示すように、説明用情報である医師等への説明内容(X製薬会社のA降圧剤の副作用の説明等)を含むスライドデータが記憶されている。
また、このスライドデータと関連付けて、スライド番号情報、例えば、スライドP-1等の情報が記憶されている。
As shown in FIG. 5, the "terminal-side slide
Further, slide number information, for example, information such as slide P-1 is stored in association with the slide data.
さらに、このスライドデータと関連付けて説明キーワード情報である例えば、「関連キーワード」データも記憶されている。
この関連キーワードは、スライドデータの説明内容に関するキーワードとなっている。例えば、図5の「スライドP-1」の場合は「降圧剤、高血圧、家族性高血圧、副作用」等の「関連キーワード」が記憶されている。
Further, for example, "related keyword" data which is explanatory keyword information in association with this slide data is also stored.
This related keyword is a keyword related to the explanation content of the slide data. For example, in the case of "slide P-1" in FIG. 5, "related keywords" such as "antihypertensive agent, hypertension, familial hypertension, side effects" are stored.
また、このスライドデータには、分類情報である例えば、「テーマ」情報が関連付けられている。スライドP-1の場合は、図5に示すように「降圧剤の副作用」がテーマとして記憶されている。 Further, the slide data is associated with, for example, "theme" information which is classification information. In the case of slide P-1, "side effects of antihypertensive agents" are stored as the theme as shown in FIG.
このようなデータが「端末側スライドデータ記憶部111」に記憶され、「端末側スライドデータ記憶部111」には「関連キーワード」のデータが記憶されているので、本工程では、「端末側発声音節記憶部133」に記憶された音節の組み合わせが、図5の「端末側スライドデータ記憶部111」の「関連キーワード」に該当するかを判断する。
なお、端末側スライドデータ記憶部111が「スライド及びキーワード情報記憶部」の一例となっている。
Since such data is stored in the "terminal side slide
The terminal-side slide
次いで、ST9で、「端末側発声音節記憶部133」に記憶された音節の組み合わせが、図5の「端末側スライドデータ記憶部111」の「関連キーワード」に該当すると判断されたときは、ST10で、該当するキーワード、例えば、「高血圧」を図7の「発声キーワード記憶部135」に記憶させる。
Next, when it is determined in ST9 that the combination of syllables stored in the "terminal-side vocalized
このように、本実施の形態では、MRが面談している相手の医師等が発声した言葉から、スライドと関連キーワードを自動的に取得することができる。 As described above, in the present embodiment, the slide and the related keyword can be automatically acquired from the words uttered by the doctor or the like of the other party with whom the MR is interviewing.
このとき、音声から特徴を抽出し、モデル化し、それを使って個人の声の認識を行う「話者認識」で、MRではなく、医師等の音声のみを認識させることもできる。
具体的には、予めMRの音声特徴をモデル化してタブレット型端末30が記憶する。また、携帯電話70から取得した「音節データ」には、周波数情報等を含める構成となっている。
したがって、この場合、タブレット型端末30は、周波数情報を含む「音節データ」からMRの音声と、その他の音声を区別でき、MRの音声を選択することができる。
そして、この場合、顧客である医師等が発声した「関連キーワード」のみを記憶することできるので、当該医師等の興味のある分野等をより正確に把握できることになる。
At this time, it is also possible to recognize only the voice of a doctor or the like, not the MR, by "speaker recognition" in which features are extracted from the voice, modeled, and the voice of an individual is recognized using the feature.
Specifically, the voice characteristics of the MR are modeled in advance and stored in the
Therefore, in this case, the
Then, in this case, since only the "related keywords" uttered by the doctor or the like who is the customer can be memorized, the field of interest of the doctor or the like can be grasped more accurately.
次いで、ST11へ進む。ST11では、図7の「関連キーワード検出部(プログラム)136」が動作し、図6の「端末側キーワード関連データ記憶部121」を参照する。そして、図7の「発声キーワード記憶部135」に記憶された「関連キーワード」が「端末側キーワード関連データ記憶部121」の「関連キーワード」に該当するか否かを判断する。
Then, the process proceeds to ST11. In ST11, the “related keyword detection unit (program) 136” of FIG. 7 operates, and the “terminal-side keyword-related
次いで、ST12で「関連キーワード」があると判断されたとき、ST13へ進む。ST13では、「端末側キーワード関連データ記憶部121」における当該対応するキーワードを「発声キーワード」として、図7の「発声キーワード記憶部135」に記憶する。
例えば、関連キーワードである「高血圧」は、「端末側キーワード関連データ記憶部121」の「関連キーワード」に該当するため、この「高血圧」に対応するキーワードである「降圧剤」を「発声キーワード」として「発声キーワード記憶部135」に登録する。
また、ここで、「端末側キーワード関連データ記憶部121」の「関連キーワード」と「キーワード」の対応情報が、「相互に関連する説明キーワード情報」の一例となっている。
Then, when it is determined in ST12 that there is a "related keyword", the process proceeds to ST13. In ST13, the corresponding keyword in the "terminal-side keyword-related
For example, since the related keyword "hypertension" corresponds to the "related keyword" of the "terminal-side keyword-related
Further, here, the correspondence information between the "related keyword" and the "keyword" of the "terminal-side keyword-related
したがって、本実施の形態では、一つ音節情報の組み合わせである単語等から、より多くのキーワードをカバーすることができる。 Therefore, in the present embodiment, more keywords can be covered from a word or the like which is a combination of one syllable information.
次いで、ST14へ進む。ST14では、図7の「関連単語基準キーワード検出部(プログラム)137」が動作し、図7の「端末側発声音節記憶部133」を参照し、図6の「端末側キーワード関連データ記憶部121」の「関連単語」に該当する単語があるか否かを判断する。
Then, the process proceeds to ST14. In ST14, the “related word reference keyword detection unit (program) 137” of FIG. 7 operates, and with reference to the “terminal-side vocal
次いで、ST15で、「関連単語」に該当すると判断されたときは、ST16で、「関連単語」対応するキーワードを「発声キーワード」として図7の「発声キーワード記憶部135」に記憶させる。
例えば、「端末側発声音節記憶部133」に「頭」「痛い」の単語が連続又は極めて近接した単語として、記憶されたときは、「端末側キーワード関連データ記憶部121」の当該関連単語に対応する「キーワード」である「高血圧」が発声キーワードとして記憶される。
Next, when it is determined in ST15 that the word corresponds to the "related word", the keyword corresponding to the "related word" is stored in the "spoken
For example, when the words "head" and "painful" are stored as continuous or extremely close words in the "terminal-side vocal
また、「端末側発声音節記憶部133」に「血圧低」と「吐き気」の単語が連続又は極めて近接した単語として、記憶されたときは、「端末側キーワード関連データ記憶部121」の当該関連単語に対応する「キーワード」である「副作用」が発声キーワードとして記憶される。
また、ここで、「端末側キーワード関連データ記憶部121」の「関連単語」と「キーワード」の対応情報が、「キーワード関連言語情報」の一例となっている。
Further, when the words "low blood pressure" and "nausea" are continuously or extremely close to each other in the "terminal-side vocal
Further, here, the correspondence information between the "related word" and the "keyword" of the "terminal-side keyword-related
このように本実施の形態では、例え、関連キーワードに該当する「音節データ」が「端末側発声音節記憶部133」になくても、関連する単語である「関連単語」に相当する「音節データ」があれば、関連する「キーワード」を発声キーワードとして、記憶する。
したがって、医師との面談中の会話からより幅の広い「キーワード」を「発声キーワード」として記憶することができる。
As described above, in the present embodiment, even if the "syllable data" corresponding to the related keyword is not in the "terminal-side vocalized
Therefore, a wider range of "keywords" can be memorized as "vocalized keywords" from the conversation during the interview with the doctor.
以上で、面談中の医師の言葉等から「関連キーワード」や「キーワード」を取得し、「発声キーワード記憶部135」に「発声キーワード」として記憶する工程が一応終了する。
本実施の形態では、上述のように、発声キーワードとして「高血圧」「降圧剤」及び「副作用」が先ず、登録されることになる。
さらに、本実施の形態では、例えば、医師から「高脂血症」に相当する言語が発声されたので、「高脂血症」が「発声キーワード」として記憶される。
このため、本実施の形態では、発声キーワードは「高血圧」、「降圧剤」、「副作用」及び「高脂血症」となる。
This completes the process of acquiring "related keywords" and "keywords" from the words of the doctor during the interview and storing them as "voiced keywords" in the "voiced
In the present embodiment, as described above, "hypertension", "antihypertensive agent" and "side effect" are first registered as vocalization keywords.
Further, in the present embodiment, for example, since a doctor utters a language corresponding to "hyperlipidemia", "hyperlipidemia" is memorized as a "vocal keyword".
Therefore, in the present embodiment, the vocal keywords are "hypertension", "antihypertensive agent", "side effect", and "hyperlipidemia".
そこで、以下では、これらの「発声キーワード」から当該面談中の医師の話の内容に適合したスライドを選択する工程が実施される。 Therefore, in the following, a step of selecting a slide suitable for the content of the doctor's talk during the interview from these "vocalized keywords" is carried out.
先ず、ST17で、図8の「基本スライド選択処理部(プログラム)141」が動作し、図7の「発声キーワード記憶部135」の「発声キーワード」を含む図5の「端末側スライドデータ記憶部111」のスライドの有無を判断する。
具体的には、例えば、「高血圧」、「降圧剤」、「副作用」及び「高脂血症」という「発声キーワード」を「関連キーワード」に含むスライドの有無を判断する。
First, in ST17, the "basic slide selection processing unit (program) 141" of FIG. 8 operates, and the "terminal side slide data storage unit" of FIG. 5 including the "vocalization keyword" of the "vocalization
Specifically, for example, it is determined whether or not there is a slide including "vocal keywords" such as "hypertension", "antihypertensive agent", "side effect" and "hyperlipidemia" in "related keywords".
次いで、ST18で「発声キーワード」を「関連キーワード」に含むスライドが存在すると判断されたときは、ST19で、「発声キーワード」が含まれるスライドのスライド番号を図8の「基本スライド記憶部142」に記憶させる。
例えば、図5の「端末側スライドデータ記憶部111」に示すように、「高血圧」、「降圧剤」、「副作用」及び「高脂血症」という「発声キーワード」のいずれかを含むスライドは、「スライドP-1」「スライドP-2」「スライドP-3」及び「スライドP-4」なので、これらのスライド番号を図8の「基本スライド記憶部142」に記憶させる。
Next, when it is determined in ST18 that there is a slide containing the "spoken keyword" in the "related keyword", in ST19, the slide number of the slide containing the "spoken keyword" is set to the "basic
For example, as shown in the “terminal-side slide
これにより、面談中の医師の言葉等と関連のあるスライドの一覧を抽出することができたが,次いで、これらのスライドのうち、より関連性が深いスライドを特定する工程を以下のように実行する。 This made it possible to extract a list of slides related to the words of the doctor during the interview, but then the process of identifying the slides that are more relevant among these slides was executed as follows. do.
ST20では、図8の「スライド優先情報付与部(プログラム)143」が動作し、図8の「基本スライド記憶部142」のスライド番号(スライドP-1、P-2、P-3、P-4)に対応するスライドのうち、「発声キーワード(「高血圧」、「降圧剤」、「副作用」及び「高脂血症」等)を最も多く含んでいるスライドから順番に「優先順位情報」を関連付けて、図8の「優先順位情報記憶部144」に記憶する。
In ST20, the “slide priority information giving unit (program) 143” in FIG. 8 operates, and the slide numbers (slides P-1, P-2, P-3, P-) of the “basic
例えば、スライド番号P-1とP-2は、3つの発声キーワード「高血圧」「降圧剤」「副作用」を含み、最も「発声キーワード」の数が多いので「第1優先順位」と関連付けて、「優先順位情報記憶部144」に記憶される。
また、スライド番号P-3とP-4は共に2つの発声キーワード「高脂血症」と「副作用」を含むので「第2優先順位」と関連付けて「優先順位情報記憶部144」に記憶される。
なお、この「優先順位情報」が、「推奨表示順位情報」の一例となっている。
For example, slide numbers P-1 and P-2 include three vocal keywords "hypertension", "antihypertensive agent", and "side effect", and since the number of "vocal keywords" is the largest, they are associated with "first priority". It is stored in the "priority information storage unit 144".
Further, since slide numbers P-3 and P-4 both include two vocal keywords "hyperlipidemia" and "side effect", they are stored in the "priority information storage unit 144" in association with the "second priority". To.
This "priority information" is an example of "recommended display order information".
したがって、医師との面談中の会話において、より合致し、より適切なスライドに優先順位を付けて準備することができる。 Therefore, it is possible to prioritize and prepare slides that are more consistent and more appropriate in the conversation during the interview with the doctor.
次いで、ST21では、図8の「病院固有情報付与部(プログラム)145」が動作し、図7の「訪問Dr情報記憶部132」の情報、例えば、D病院、内科に基づいて、図6の「端末側病院データ記憶部123」を参照する。
この「端末側病院データ記憶部123」には、病院名、納入医薬品名、診療科別関連医薬品名、薬剤毎の競合情報等が記憶されている。
例えば、D病院には、A降圧剤、B降圧剤、C高脂血症剤、D高脂血症剤等が納入され、内科では、降圧剤、高脂血症剤等を使用していることが記憶されている。また、内科の降圧剤では、A降圧剤とB降圧剤が競合し、高脂血症剤では、C高脂血症剤とD高脂血症剤が競合していることも記憶されている。
Next, in ST21, the “hospital-specific information giving unit (program) 145” of FIG. 8 operates, and based on the information of the “visit Dr
The "terminal-side hospital
For example, A antihypertensive agent, B antihypertensive agent, C hyperlipidemia agent, D hyperlipidemia agent, etc. are delivered to Hospital D, and antihypertensive agents, hyperlipidemia agents, etc. are used in internal medicine. Is remembered. It is also remembered that the A antihypertensive agent and the B antihypertensive agent compete with each other in the internal medicine antihypertensive agent, and the C hyperlipidemia agent and the D hyperlipidemia agent compete with each other in the hyperlipidemia agent. ..
したがって、「訪問Dr情報記憶部132」のD病院、内科に基づいて、当該病院(D病院)の内科の薬剤情報(例えば、「降圧剤」「高脂血症剤」等)と競合情報(例えば、「A降圧剤」と「B降圧剤」、「C高脂血症薬」と「D高脂血症薬」等)を取得して、当該薬剤情報(「降圧剤」「高脂血症剤」等)と当該競合情報(「A降圧剤」と「B降圧剤」、「C高脂血症薬」と「D高脂血症薬」)を含む「基本スライド記憶部142」のスライド番号に「病院固有情報」を関連付けて「病院固有情報記憶部151」に記憶する。
Therefore, based on the D hospital and internal department of the "visit Dr
例えば、スライド番号P-1は「降圧剤」を含み、P-2は「降圧剤」、「A降圧剤」と「B降圧剤」を含み、P-3は、「高脂血症剤」を含み、P-4は、「高脂血症剤」、「C高脂血症薬」と「D高脂血症薬」を含んでいるので、スライド番号であるP-1乃至P-4に「病院固有情報」を関連つけて図9の「病院固有情報記憶部151」に記憶させる。 For example, slide number P-1 contains an "antihypertensive agent", P-2 contains an "antihypertensive agent", "A antihypertensive agent" and "B antihypertensive agent", and P-3 is a "hyperlipidemic agent". , And P-4 contains "hyperlipidemic agent", "C hyperlipidemia agent" and "D hyperlipidemia agent", and thus are slide numbers P-1 to P-4. Is associated with "hospital-specific information" and stored in the "hospital-specific information storage unit 151" in FIG.
なお、図6の「端末側病院データ記憶部123」のD病院やA降圧剤等のデータが「固有情報」の一例であって、病院固有情報が「優先表示情報」の一例となっている。
The data of the hospital D and the antihypertensive agent A of the "terminal side hospital
したがって、予め記憶されている面談の相手方である対象者である医師等が興味等を抱く事項に該当する関連キーワード等が含まれているスライドがあるとき、これらのスライドに優先表示である「病院固有情報」を付する構成となっている。 Therefore, when there are slides that include related keywords, etc. that correspond to matters that the doctor, etc., who is the target person of the interview, which is memorized in advance, is interested in, these slides are displayed with priority, "Hospital." It is configured to add "unique information".
次いで、ST22へ進む。ST22では、図9の「表示順スライドデータ抽出部(プログラム)152」が動作し、「基本スライド記憶部142」のスライド番号が図7の「端末側スライド提供順履歴データ記憶部131」のスライド番号と一致するか否かを判断する。
この「端末側スライド提供順履歴データ記憶部131」には、複数のスライド番号が過去に他のMRによって、どのような順番で表示されていたかの「スライド表示順」のデータが記憶されていると共に、当該スライド表示順の表示回数データも記憶されている。
したがって、本工程では、先ず、「基本スライド記憶部142」のスライド番号が図7の「端末側スライド提供順履歴データ記憶部131」のスライド番号と一致するか否かを判断する。
Then, the process proceeds to ST22. In ST22, the "display order slide data extraction unit (program) 152" in FIG. 9 operates, and the slide number of the "basic
In this "terminal side slide provision order history
Therefore, in this step, first, it is determined whether or not the slide number of the "basic
次いで、ST23で、スライド番号と一致する場合は、ST24へ進む。本実施の形態では、「端末側スライド提供順履歴データ記憶部131」のスライド番号は、P-1、P-2、P-3、P-4であるので、「端末側スライド提供順履歴データ記憶部131」のスライド番号と一致する。
そこで,ST24へ進む。ST24では、「端末側スライド提供順履歴データ記憶部131」の表示回数の多い「スライド表示順」情報を選択し、図9の「表示順スライド順データ記憶部153」に記憶する。
Then, in ST23, if it matches the slide number, the process proceeds to ST24. In the present embodiment, the slide numbers of the "terminal side slide provision order history
Therefore, proceed to ST24. In ST24, the "slide display order" information that is frequently displayed in the "terminal side slide provision order history
すなわち、同じスライドの組み合わせで、他のMRが最も多く表示した「スライド表示順」を「表示順スライド順データ記憶部153」に記憶する。
本実施の形態では、例えば、図7の「端末側スライド提供順履歴データ記憶部131」では、「P-1」→「P-2」→「P-3」→「P-4」が表示回数20回で最多となっているので、この表示順を記憶する。
なお、この「端末側スライド提供順履歴データ記憶部131」に記憶されているデータが、「表示実績情報」の一例となっている。
That is, with the same combination of slides, the "slide display order" displayed most by other MRs is stored in the "display order slide order
In the present embodiment, for example, in the "terminal side slide provision order history
The data stored in the "terminal-side slide provision order history
次いで、ST25へ進む。ST25では、図9の「第1のスライド表示順決定処理部(プログラム)154」が動作し、図8の「優先順位情報記憶部144」で、同じ優先順位に複数のスライド番号が存在するか否かを判断する。
本実施の形態では、上述のように「優先順位情報記憶部144」には、「第1優先順位」として、スライドP-1とP-2が記憶され、「第2優先順位」として、スライドP-3、P-4が記憶されている。
したがって、ST26では、同じ優先順位に複数のスライド番号が存在すると判断されるが、この工程で、同じ優先順位に複数のスライド番号が存在しないときは、ST27へ進む。
Then, the process proceeds to ST25. In ST25, the "first slide display order determination processing unit (program) 154" in FIG. 9 operates, and in the "priority information storage unit 144" in FIG. 8, whether a plurality of slide numbers exist in the same priority. Judge whether or not.
In the present embodiment, as described above, slides P-1 and P-2 are stored as "first priority" in the "priority information storage unit 144", and slides are stored as "second priority". P-3 and P-4 are stored.
Therefore, in ST26, it is determined that a plurality of slide numbers exist in the same priority, but in this step, if a plurality of slide numbers do not exist in the same priority, the process proceeds to ST27.
ST27では、「優先順位情報記憶部144」の優先順位に従い、各スライド番号を「推奨スライド番号」として、図1のタブレット型端末30の端末側タッチパネル31に表示する。
すなわち、タブレット型端末30は、MRに対して、医師との会話の流れに沿った適切な内容を有するスライドを「推奨スライド」として、その番号を随時、表示することになる。また、推奨スライドが複数あるときは、会話の流れにより沿った内容のスライドから順番(優先順位を付けて)に表示される。
In ST27, each slide number is displayed as a "recommended slide number" on the terminal-
That is, the tablet-
そして、このような表示を視認したMRは、当該「推奨スライド番号」を端末側タッチパネル31上で、クリック等して選択するだけで、当該推奨スライド番号のスライド内容が表示されること構成となっている。
したがって、MRは医師との会話中に、その内容に最適のスライド内容を迅速に端末側タッチパネル31に表示させることができるので、従来のように面談中にスライド検索等を行う必要がなく、会話が中断等することがなく、円滑なプレゼンテーションが可能となる。
Then, the MR who visually recognizes such a display is configured to display the slide content of the recommended slide number simply by clicking and selecting the "recommended slide number" on the
Therefore, since the MR can quickly display the optimum slide content on the
また、この推奨スライド番号は、会話の内容により合致した適切な内容の順番に表示されるので、MRは、最先の推奨スライド番号を選択するだけで、最適な内容のスライドを端末側タッチパネル31に表示させることができる。
なお、この「推奨スライド番号」が、推奨スライド情報の一例となっている。
Further, since the recommended slide numbers are displayed in the order of appropriate contents that match the contents of the conversation, the MR can simply select the first recommended slide number to select the slide with the optimum contents on the
This "recommended slide number" is an example of recommended slide information.
一方、ST26で、同じ優先順位に複数のスライド番号が存在すると判断されたときは、ST28へ進む。ST28では、図9の「病院固有情報記憶部151」を参照し、同じ優先順位のスライドでも「病院固有情報」が関連付けられたスライドをより優先表示として処理し、図5の「第1のスライド表示順位決定記憶部155」に記憶させる。
On the other hand, when it is determined in ST26 that a plurality of slide numbers exist in the same priority, the process proceeds to ST28. In ST28, referring to the “hospital-specific information storage unit 151” in FIG. 9, slides with the same priority but associated with “hospital-specific information” are processed as higher priority display, and the “first slide” in FIG. 5 is processed. It is stored in the display order
本実施の形態では、上述のように「病院固有情報記憶部151」では、スライドP-1、P-2、P-3、P-4の全てに「病院固有情報」が関連付けられているため、「第1優先順位」のスライドP-1とP-2が同じ優先表示として「第1のスライド表示順位決定記憶部155」に記憶され、「第2優先順位」のスライドP-3とP-4が同じ優先表示として「第1のスライド表示順位決定記憶部155」に記憶されることになる。
In the present embodiment, as described above, in the "hospital-specific information storage unit 151", the "hospital-specific information" is associated with all of the slides P-1, P-2, P-3, and P-4. , Slides P-1 and P-2 of "first priority" are stored in "first slide display order
次いで、ST29へ進む。ST29では、図10の「第2のスライド表示順決定処理部(プログラム)161」が動作し、「第1のスライド表示順位決定記憶部155」を参照し、同じ優先順位に複数のスライドが存在するか否かを判断する。
Then, the process proceeds to ST29. In ST29, the "second slide display order determination processing unit (program) 161" of FIG. 10 operates, and with reference to the "first slide display order
本実施の形態では、上述のように、「第1のスライド表示順位決定記憶部155」に同じ優先順位に複数のスライドが存在するので、ST30では、同じ優先順位に複数のスライドが存在すると判断される。
しかし、ST30で、本実施の形態と異なり、同じ優先順位で複数のスライドが存在しないと判断されたときは、ST31へ進む。
In the present embodiment, as described above, since the "first slide display order
However, in ST30, unlike the present embodiment, when it is determined that a plurality of slides do not exist in the same priority order, the process proceeds to ST31.
ST31では、「第1のスライド表示順位決定記憶部155」の優先順位に従い、各スライド番号を「推奨スライド番号」として、図1のタブレット型端末30の端末側タッチパネル31に表示する。
すなわち、タブレット型端末30は、MRに対して、医師との会話の流れに沿った適切な内容を有するスライドを「推奨スライド」として、その番号を随時、表示することになる。また、推奨スライドが複数あるときは、会話の流れにより沿った内容のスライドから順番(優先順位を付けて)に表示される。
In ST31, each slide number is displayed as a "recommended slide number" on the terminal
That is, the tablet-
一方、ST30で、上述の本実施の形態のように、同じ優先順位に複数のスライド番号が存在すると判断したときは、ST32へ進む。
ST32では、図9の「表示順スライドデータ記憶部153」を参照し、その表示順に従ってスライド表示順を決定し、「第2のスライド表示順決定記憶部162」に記憶する。
On the other hand, when it is determined in ST30 that a plurality of slide numbers exist in the same priority as in the above-described embodiment, the process proceeds to ST32.
In ST32, the slide display order is determined according to the display order of the "display order slide
本実施の形態では、上述のように、例えば、「表示順スライドデータ記憶部153」では、「スライドP-1」→「P-2」→「P-3」→「P-4」の優先表示順として記憶されている。
したがって、「第2のスライド表示順決定記憶部162」には、「スライドP-1」→「P-2」→「P-3」→「P-4」の優先表示順が記憶される。
In the present embodiment, as described above, for example, in the “display order slide
Therefore, the "second slide display order
次いで、ST33へ進む。ST33では、「第2のスライド表示順決定記憶部162」のスライドの表示順に従い、スライド番号が推奨スライド番号として、タブレット型端末30の端末側タッチパネル31に表示される。
この際に、面談中の医師等の発声に基づく「関連キーワード」を多く含むスライドを優先的に表示するだけでなく、同じ優先順位のスライドが存在した場合、当該医師に関する「病院固有情報(病院名、納入医薬品名、診療科別関連医薬品名、競合情報等)」に基づいて、より適切なスライドを優先的に表示させ、及び/または、他のMRが過去に表示したスライドの表示順の情報に基づいてより適切なスライドを優先的に表示させるような構成となっている。
Then, the process proceeds to ST33. In ST33, the slide number is displayed as a recommended slide number on the terminal-
At this time, not only the slides containing many "related keywords" based on the voices of the doctors during the interview are displayed preferentially, but also if there are slides with the same priority, "hospital-specific information (hospital)" regarding the doctors concerned. Name, delivered drug name, department-specific drug name, competitive information, etc.) ”, the more appropriate slides are displayed preferentially, and / or in the display order of the slides displayed by other MRs in the past. It is configured to preferentially display more appropriate slides based on information.
したがって、医師との会話中に当該会話と関連が深く、最適なスライドの番号を迅速に端末側タッチパネル31に表示することができ、MRは上述のように、当該番号を端末側タッチパネル31上で選択するだけで、迅速に適切なスライド内容を表示させることができる構成となっている。
また、端末側タッチパネル31上に表示された推奨スライドの番号が複数あっても、より適切な推奨スライド番号が優先的に表示されるので、MRは迷うことなく、適切な推奨スライドを選択することができる。
以上のように、本実施の形態のシステム1では、スライドの検索等で、医師との会話が中断等することがなく、円滑な医薬情報の提供が可能となる構成となっている。
Therefore, during a conversation with a doctor, the number of the optimum slide that is closely related to the conversation can be quickly displayed on the terminal
Further, even if there are a plurality of recommended slide numbers displayed on the
As described above, the
次いで、ST34へ進む。ST34では、端末側タッチパネル31に「テーマ関連スライドを表示させますか?」と表示される。
すなわち、医師との会話の内容と、「テーマ」が共通するスライドである「テーマ関連スライド」をST33等で表示される推奨スライドと別に表示するか否を問われる。
Then, the process proceeds to ST34. In ST34, "Do you want to display the theme-related slides?" Is displayed on the
That is, it is asked whether or not to display the content of the conversation with the doctor and the "theme-related slide", which is a slide having a common "theme", separately from the recommended slide displayed on ST33 or the like.
ST35で、テーマ関連スライドの表示を希望すると入力されたときは、ST36へ進む。ST36では、図10の「当該テーマ情報抽出処理部(プログラム)163」が動作し、図6の「端末側テーマ関連キーワード記憶部122」の「対応キーワード」が、図7の「発声キーワード記憶部135」の「発声キーワード」に含まれているか否かを判断する。
When it is input that the theme-related slides are desired to be displayed in ST35, the process proceeds to ST36. In ST36, the “theme information extraction processing unit (program) 163” of FIG. 10 operates, and the “corresponding keyword” of the “terminal-side theme-related
本実施の形態では、図6に示すように「対応キーワード」として、「副作用」と「降圧剤」があり、対応するテーマとして「降圧剤の副作用」が記憶されている。
また、上述の例では、「発声キーワード記憶部135」の「発声キーワード」として、
「高血圧」、「降圧剤」、「副作用」及び「高脂血症」が記憶されている。
したがって、「対応キーワード」の「副作用」と「降圧剤」が、「発声キーワード」に含まれていると判断されることになる。
In the present embodiment, as shown in FIG. 6, there are "side effects" and "antihypertensive agents" as "corresponding keywords", and "side effects of antihypertensive agents" are stored as corresponding themes.
Further, in the above example, as the "spoken keyword" of the "spoken
"Hypertension", "antihypertensive drug", "side effects" and "hyperlipidemia" are memorized.
Therefore, it is determined that the "side effect" and the "antihypertensive agent" of the "corresponding keyword" are included in the "vocalized keyword".
ST37で、「対応キーワード」が「発声キーワード」に含まれているときは、ST38へ進む。ST38では、「対応キーワード」と対応する「テーマ」を図10の「当該テーマ情報記憶部164」に記憶する。
本実施の形態では、「対応キーワード」の「副作用」と「降圧剤」が、「発声キーワード」に含まれているので、ST38では、「テーマ」である「降圧剤の副作用」が「当該テーマ情報記憶部164」に記憶される
In ST37, when the "corresponding keyword" is included in the "vocalized keyword", the process proceeds to ST38. In ST38, the "theme" corresponding to the "corresponding keyword" is stored in the "theme
In the present embodiment, the "side effect" and the "antihypertensive agent" of the "corresponding keyword" are included in the "vocalization keyword". Stored in the
次いで、ST39へ進む。ST39では、図10の「テーマ関連スライド情報抽出処理部(プログラム)165」が動作し、図5の「端末側スライドデータ記憶部111」を参照し、図10の「当該データ情報記憶部164」が記憶しているテーマ、本実施の形態では、例えば、「降圧剤の副作用」を有するスライドの有無を判断する。
Then, the process proceeds to ST39. In ST39, the "theme-related slide information extraction processing unit (program) 165" of FIG. 10 operates, the "terminal side slide
ST40で、「当該データ情報記憶部164」が記憶しているテーマ(例えば、「降圧剤の副作用」)を有するスライドが存在すると判断されるとST41へ進む。
本実施の形態では、図5の「端末側スライドデータ記憶部111」に示すように、「スライドP-1」、「P-2」及び「P-5」が存在する。
If it is determined in ST40 that there is a slide having the theme (for example, "side effect of antihypertensive agent") stored in the "data
In the present embodiment, as shown in the "terminal side slide
ST41では、図10の「テーマ関連スライド情報記憶部166」に存在するスライド番号を記憶する。本実施の形態では、例えば、「スライドP-1」、「P-2」及び「P-5」を記憶する。
In ST41, the slide number existing in the "theme-related slide
このように、本実施の形態では、MRが医師との会話で話題となったテーマについてのスライド番号情報を抽出し、記憶させることができる。 As described above, in the present embodiment, the MR can extract and store the slide number information about the theme that became a topic in the conversation with the doctor.
次いで、ST42へ進む。ST42では、図11の「表示用テーマ関連スライド抽出処理部(プログラム)171」が動作し、図8の「基本スライド記憶部142」を参照し、記憶されているスライドと重複しないスライドが図10の「テーマ関連スライド情報記憶部166」に記憶されているか否かを判断する。
Then, the process proceeds to ST42. In ST42, the “display theme-related slide extraction processing unit (program) 171” of FIG. 11 operates, and with reference to the “basic
本実施の形態では、上述のように、「基本スライド記憶部142」には、「スライドP-1」、「P-2」、「P-3」及び「P-4」が記憶されており、「テーマ関連スライド情報記憶部166」には、「スライドP-1」、「P-2」及び「P-5」が記憶されている。
したがって、「基本スライド記憶部142」と重複しないスライドは「スライドP-5」となり、このスライド番号が「テーマ関連スライド情報記憶部166」に記憶されていることになる。
In the present embodiment, as described above, the "slide P-1", "P-2", "P-3" and "P-4" are stored in the "basic
Therefore, the slide that does not overlap with the "basic
ST43で、「基本スライド記憶部142」と重複しないスライド番号が「テーマ関連スライド情報記憶部166」に記憶されているときは、ST44へ進む。
ST44では、図11の「表示用テーマ関連スライド記憶部172」に当該スライド番号、本実施の形態では、「スライドP-5」を記憶する。
In ST43, when a slide number that does not overlap with the "basic
In ST44, the slide number is stored in the “display theme-related
次いで、ST45へ進む。ST45では、図11の「表示用テーマ関連スライド記憶部172」に記憶されているスライド番号を「テーマ関連スライド」としてタブレット型端末30の端末側ディスプレイ31に表示する。
そして、このような表示を視認したMRは、「テーマ関連スライド」として表示された「スライド番号」を端末側タッチパネル31上で、クリック等して選択するだけで、当該スライド番号のスライド内容が表示されること構成となっている。
Then, the process proceeds to ST45. In ST45, the slide number stored in the “display theme-related
Then, the MR who visually recognizes such a display simply clicks and selects the "slide number" displayed as the "theme-related slide" on the
したがって、MRは、医師との会話で話題となったテーマに関連するスライド情報を表示できるので、医師との面談中により円滑且つ適切な医薬情報の提供を行うことができる。
また、本実施の形態では、「テーマ関連スライド」として表示するスライド番号は、ST33等で端末側ディスプレイ31に表示される推奨スライド番号に含まれないスライド番号であるため、同一のスライド番号を重複表示することを回避することができる。
したがって、面談中のMRに不要な混乱等を生じさせることを回避することができ、より円滑な医薬情報の提供を行うことができる。
Therefore, since the MR can display slide information related to the theme that has become a hot topic in the conversation with the doctor, it is possible to provide smoother and more appropriate medical information during the interview with the doctor.
Further, in the present embodiment, the slide numbers displayed as "theme-related slides" are slide numbers not included in the recommended slide numbers displayed on the
Therefore, it is possible to avoid causing unnecessary confusion to the MR during the interview, and it is possible to provide more smooth medical information.
なお、「テーマ関連スライド」が、関連分類推奨スライド情報の一例となっている。 The "theme-related slide" is an example of the related classification recommended slide information.
なお、本発明は上述の実施の形態に限らない。 The present invention is not limited to the above-described embodiment.
1・・・プレゼンテーション支援システム、2・・・インターネット網、3・・・基地局、10・・・X製薬医薬情報サーバ、11・・・サーバ制御部、12・・・サーバ側通信装置、13・・・サーバ側ディスプレイ、14・・・サーバ側各種情報入力装置、15・・・サーバ側スライドデータ記憶部、16・・・サーバ側キーワード関連データ記憶部、17・・・サーバ側テーマ関連キーワード記憶部、18・・・サーバ側病院データ記憶部、19・・・サーバ側スライド提供順履歴データ記憶部、30・・・タブレット型端末、31・・・端末側タッチパネル、32・・・端末側入力ボタン、33・・・端末制御部、70・・・携帯電話、71・・・携帯側タッチパネル、72・・・携帯側入力ボタン、73・・・マイクロホン、74・・・携帯制御部、75・・・携帯側通信装置、76・・・携帯電話装置本体、77・・・50音節記憶部、78・・・音節判断部(プログラム)、79・・・携帯側発声音節記憶部、80・・・端末側各種情報記憶部、110・・・第1の端末側各種情報記憶部、111・・・端末側スライドデータ記憶部、120・・・第2の端末側各種情報記憶部、121・・・端末側キーワード関連データ記憶部、122・・・端末側テーマ関連キーワード記憶部、123・・・端末側病院データ記憶部、130・・・第3の端末側各種情報記憶部、131・・・端末側スライド提供順履歴データ記憶部、132・・・訪問Dr情報記憶部、133・・・端末側発声音節記憶部、134・・・キーワード検出部(プログラム)、135・・・発声キーワード記憶部、136・・・関連キーワード検出部(プログラム)、137・・・関連単語基準キーワード検出部(プログラム)、140・・・第4の端末側各種情報記憶部、141・・・基本スライド選択処理部(プログラム)、142・・・基本スライド記憶部、143・・・スライド優先情報付与部(プログラム)、144・・・優先順位情報記憶部、145・・・病院固有情報付与部(プログラム)、150・・・第5の端末側各種情報記憶部、151・・・病院固有情報記憶部、152・・・表示順スライドデータ抽出部(プログラム)、153・・・表示順スライド順データ記憶部、154・・・第1のスライド表示順決定処理部(プログラム)、155・・・第1のスライド表示順位決定記憶部、160・・・第6の端末側各種情報記憶部、161・・・第2のスライド表示順決定処理部(プログラム)、162・・・第2のスライド表示順決定記憶部、163・・・当該テーマ情報抽出処理部(プログラム)、164・・・当該テーマ情報記憶部、165・・・テーマ関連スライド情報抽出処理部(プログラム)、166・・・テーマ関連スライド情報記憶部、170・・・第7の端末側各種情報記憶部、171・・・表示用テーマ関連スライド抽出処理部(プログラム)、172・・・表示用テーマ関連スライド記憶部
1 ... Presentation support system, 2 ... Internet network, 3 ... Base station, 10 ... X Pharmaceutical and pharmaceutical information server, 11 ... Server control unit, 12 ... Server side communication device, 13 ... Server side display, 14 ... Server side various information input devices, 15 ... Server side slide data storage unit, 16 ... Server side keyword related data storage unit, 17 ... Server side theme related keywords Storage unit, 18 ... Server side hospital data storage unit, 19 ... Server side slide provision order history data storage unit, 30 ... Tablet type terminal, 31 ... Terminal side touch panel, 32 ... Terminal side Input button, 33 ... Terminal control unit, 70 ... Mobile phone, 71 ... Mobile side touch panel, 72 ... Mobile side input button, 73 ... Microphone, 74 ... Mobile control unit, 75 ... mobile communication device, 76 ... mobile phone device body, 77 ... 50 syllables storage unit, 78 ... syllabary judgment unit (program), 79 ... mobile phone syllabary syllabary storage unit, 80. .. Terminal-side various information storage units, 110 ... First terminal-side various information storage units, 111 ... Terminal-side slide data storage unit, 120 ... Second terminal-side various information storage units, 121.・ ・ Terminal side keyword related data storage unit, 122 ・ ・ ・ terminal side theme related keyword storage unit, 123 ・ ・ ・ terminal side hospital data storage unit, 130 ・ ・ ・ third terminal side various information storage unit, 131 ・ ・-Terminal-side slide provision order history data storage unit, 132 ... Visit Dr information storage unit, 133 ... Terminal-side vocal syllable storage unit, 134 ... Keyword detection unit (program), 135 ... Vocalization
Claims (10)
対象者の発声を音節情報に変換する音声認識部と、
前記音声認識部で変換された前記音節情報を記憶する音節情報記憶部と、
説明用情報が含まれるスライド情報と、
前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報を記憶するスライド及びキーワード情報記憶部と、を有し、
前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワード情報として記憶し、前記発声キーワード情報を含む前記スライド情報を推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示され、
前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、
前記テーマ関連スライドは、前記推奨スライドと重複していないときにのみ表示される構成となっていることを特徴とする表示装置。 It is a display device that can automatically select and display slide information related to the explanation without interrupting the explanation to the target person.
A voice recognition unit that converts the subject's utterance into syllable information,
A syllable information storage unit that stores the syllable information converted by the voice recognition unit,
Slide information that includes explanatory information and
It has explanatory keyword information related to the explanatory information associated with the slide information, and a slide and a keyword information storage unit for storing the keyword information corresponding to the explanatory keyword information .
When the combination of the syllable information included in the syllable information storage unit corresponds to the explanatory keyword information, the corresponding keyword information is stored as the vocalized keyword information, and the slide information including the vocalized keyword information is recommended slide. By outputting the information as information at any time during the explanation to the target person and inputting the selection signal, the selected recommended slide is immediately selected and displayed .
The slide information includes theme-related slides having the same theme as the content of the conversation of the subject.
The theme-related slide is a display device characterized in that it is configured to be displayed only when it does not overlap with the recommended slide .
前記分類情報は、特定の前記説明キーワード情報と関連付けられ、
前記音節情報の組み合わせが、特定の前記説明キーワード情報に該当するときに、特定の当該説明キーワード情報に関連付けられている前記分類情報と対応付けられている前記推奨スライド情報を関連分類推奨スライド情報として出力することを特徴とする請求項1乃至請求項6のいずれか1項に記載の表示装置。 Classification information is associated with the recommended slide information.
The classification information is associated with the particular explanatory keyword information.
When the combination of the syllable information corresponds to the specific explanatory keyword information, the recommended slide information associated with the classification information associated with the specific explanatory keyword information is used as the related classification recommended slide information. The display device according to any one of claims 1 to 6, wherein the display device is characterized by outputting.
対象者の発声を音節情報に変換する音声認識部の機能、
前記音声認識部で変換された音節情報を音節情報記憶部に記憶する機能、
説明用情報が含まれるスライド情報と、前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報をスライド及びキーワード情報記憶部に記憶する機能、
前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワード情報として記憶し、前記発声キーワード情報を含む前記スライド情報が推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示される機能、
前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、前記テーマ関連スライドが、前記推奨スライドと重複していないときにのみ表示される機能、を実現させるための表示プログラム。 It is a display program of a display device that can automatically select and display slide information related to the explanation without interrupting the explanation to the target person.
The function of the voice recognition unit that converts the target person's utterance into syllable information,
A function of storing syllable information converted by the voice recognition unit in the syllable information storage unit,
A function of storing slide information including explanatory information, explanatory keyword information related to the explanatory information associated with the slide information, and keyword information corresponding to the explanatory keyword information in the slide and the keyword information storage unit.
When the combination of the syllable information included in the syllable information storage unit corresponds to the explanatory keyword information, the corresponding keyword information is stored as the vocalized keyword information, and the slide information including the vocalized keyword information is a recommended slide. A function that outputs the selected information as information at any time during the explanation to the target person and inputs the selection signal to immediately select and display the selected recommended slide.
The slide information includes theme-related slides having the same theme as the conversation content of the target person, and realizes a function of being displayed only when the theme-related slide does not overlap with the recommended slide . Display program for.
音声認識部が対象者の発声を音節情報に変換し、
前記音声認識部で変換された前記音節情報を音節情報記憶部に記憶し、
説明用情報が含まれるスライド情報と、前記スライド情報と関連付けられている前記説明用情報に関する説明キーワード情報と、前記説明キーワード情報と対応するキーワード情報をスライド及びキーワード情報記憶部に記憶し、
前記音節情報記憶部に含まれる前記音節情報の組み合わせが、前記説明キーワード情報に該当するときに、対応する前記キーワード情報を発声キーワードとして記憶し、前記発声キーワード情報を含む前記スライド情報を推奨スライド情報として前記対象者への説明中に随時、出力し、選択信号が入力されることで、前記選択された前記推奨スライドが直ちに選択表示され、
前記スライド情報には、前記対象者の会話の内容とテーマが共通するテーマ関連スライドが含まれ、
前記テーマ関連スライドは、前記推奨スライドと重複していないときにのみ表示されることを特徴とする表示装置の制御方法。 It is a control method of a display device that can automatically select and display slide information related to the explanation without interrupting the explanation to the target person.
The voice recognition unit converts the subject's utterance into syllable information,
The syllable information converted by the voice recognition unit is stored in the syllable information storage unit, and the syllable information is stored in the syllable information storage unit.
The slide information including the explanatory information, the explanatory keyword information related to the explanatory information associated with the slide information, and the keyword information corresponding to the explanatory keyword information are stored in the slide and the keyword information storage unit.
When the combination of the syllable information included in the syllable information storage unit corresponds to the explanatory keyword information, the corresponding keyword information is stored as a vocalized keyword, and the slide information including the vocalized keyword information is recommended slide information. By outputting and inputting a selection signal at any time during the explanation to the subject, the selected recommended slide is immediately selected and displayed.
The slide information includes theme-related slides having the same theme as the content of the conversation of the subject.
A method of controlling a display device , wherein the theme-related slide is displayed only when it does not overlap with the recommended slide .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020102165A JP7046326B2 (en) | 2020-06-12 | 2020-06-12 | Display device, display program, display system and control method of display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020102165A JP7046326B2 (en) | 2020-06-12 | 2020-06-12 | Display device, display program, display system and control method of display device |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016014261A Division JP6718243B2 (en) | 2016-01-28 | 2016-01-28 | Display device, display program, display system, and method for controlling display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020184343A JP2020184343A (en) | 2020-11-12 |
| JP7046326B2 true JP7046326B2 (en) | 2022-04-04 |
Family
ID=73044732
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020102165A Active JP7046326B2 (en) | 2020-06-12 | 2020-06-12 | Display device, display program, display system and control method of display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7046326B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7664084B2 (en) * | 2021-05-24 | 2025-04-17 | 武田薬品工業株式会社 | Information processing method, information processing device, and program |
| JP7102035B1 (en) * | 2021-08-02 | 2022-07-19 | 株式会社インタラクティブソリューションズ | Explanation support system |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005309630A (en) | 2004-04-20 | 2005-11-04 | Hitachi Hybrid Network Co Ltd | Communication system by voice recognition using Web |
| JP2009140103A (en) | 2007-12-04 | 2009-06-25 | Fujitsu Ltd | Product description content transcription support program, apparatus, and method. |
| JP2010181461A (en) | 2009-02-03 | 2010-08-19 | Olympus Corp | Digital photograph frame, information processing system, program, and information storage medium |
| JP2011248444A (en) | 2010-05-24 | 2011-12-08 | Konica Minolta Business Technologies Inc | Display controller and presentation method used therewith |
-
2020
- 2020-06-12 JP JP2020102165A patent/JP7046326B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005309630A (en) | 2004-04-20 | 2005-11-04 | Hitachi Hybrid Network Co Ltd | Communication system by voice recognition using Web |
| JP2009140103A (en) | 2007-12-04 | 2009-06-25 | Fujitsu Ltd | Product description content transcription support program, apparatus, and method. |
| JP2010181461A (en) | 2009-02-03 | 2010-08-19 | Olympus Corp | Digital photograph frame, information processing system, program, and information storage medium |
| JP2011248444A (en) | 2010-05-24 | 2011-12-08 | Konica Minolta Business Technologies Inc | Display controller and presentation method used therewith |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020184343A (en) | 2020-11-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11539900B2 (en) | Caption modification and augmentation systems and methods for use by hearing assisted user | |
| JP6718243B2 (en) | Display device, display program, display system, and method for controlling display device | |
| JP2024084742A (en) | Digital Assistant User Interface and Response Mode | |
| US11551698B2 (en) | System and method for assisting communication through predictive speech | |
| JP2000123013A (en) | Electronic conversation device, conversation expression collecting method and conversation promoting method | |
| JP7046326B2 (en) | Display device, display program, display system and control method of display device | |
| CN110298724A (en) | It orders recommended method, device, computer equipment and storage medium | |
| US8620668B2 (en) | System and method for configuring voice synthesis | |
| CN111989660A (en) | Information processing apparatus, information processing method, and program | |
| US8065154B2 (en) | Augmentative communications device for the speech impaired using commercial-grade technology | |
| JP2023075179A (en) | Call center system, operator screen providing method, display terminal device, operator screen display method, and computer program | |
| KR20060110787A (en) | Painting support device | |
| US11756536B2 (en) | Voice analysis system | |
| JP7102035B1 (en) | Explanation support system | |
| JP2000235588A (en) | Design construction support system | |
| JP2010054549A (en) | Answer voice-recognition system | |
| JPWO2019130410A1 (en) | Dialogue control system, dialogue control method, and program | |
| JP2002268667A (en) | Presentation system and control method thereof | |
| Mechraoui et al. | The direction giving pointing gestures of the Malay Malaysian speech community | |
| JP7355321B1 (en) | Perioperative nursing recording system, perioperative nursing recording method, client terminal, and computer program | |
| JPWO2020017151A1 (en) | Information processing equipment, information processing methods and programs | |
| JP6802623B2 (en) | Search information management device, search information management method and search information management program | |
| JPH06175688A (en) | Voice recognition device | |
| CN113627312A (en) | A system to assist speech output in paralyzed aphasia via eye tracking | |
| JP2022029869A (en) | Program, device and method for creating dialog scenario with verbs replaced so as to correspond to character attribute |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200612 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210324 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210324 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210524 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210915 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211213 |
|
| C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20211213 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20211222 |
|
| C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20211227 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220209 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220308 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7046326 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |