JP2017086274A - Medical care support system - Google Patents
Medical care support system Download PDFInfo
- Publication number
- JP2017086274A JP2017086274A JP2015217888A JP2015217888A JP2017086274A JP 2017086274 A JP2017086274 A JP 2017086274A JP 2015217888 A JP2015217888 A JP 2015217888A JP 2015217888 A JP2015217888 A JP 2015217888A JP 2017086274 A JP2017086274 A JP 2017086274A
- Authority
- JP
- Japan
- Prior art keywords
- image
- type
- inspection
- type information
- inspection image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007689 inspection Methods 0.000 claims abstract description 140
- 238000012545 processing Methods 0.000 claims abstract description 67
- 238000000034 method Methods 0.000 abstract description 10
- 238000012360 testing method Methods 0.000 description 15
- 238000007726 management method Methods 0.000 description 8
- 238000001574 biopsy Methods 0.000 description 6
- 238000003745 diagnosis Methods 0.000 description 5
- 238000013500 data storage Methods 0.000 description 4
- 238000001839 endoscopy Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000012323 Endoscopic submucosal dissection Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000012326 endoscopic mucosal resection Methods 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000001198 duodenum Anatomy 0.000 description 1
- 210000003238 esophagus Anatomy 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
Images
Landscapes
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
Description
本発明は、内視鏡画像などの検査画像を蓄積した画像サーバから、所定の検査画像を探しやすくするための技術に関する。 The present invention relates to a technique for making it easy to search for a predetermined inspection image from an image server that stores inspection images such as endoscopic images.
特許文献１は、医用レポート作成時に入力された所見と所見の入力開始時刻および終了時刻の少なくとも一方とを関連付けて記録する入力履歴記録部と、医用レポート作成時に操作した画像に対して行った操作の種類と当該操作を行った時刻とを操作した画像に関連付けて記録する操作履歴記録部とを備えるレポート作成支援システムを開示する。このシステムにおいて、選択部が医用レポート内の所見の少なくとも一部を選択すると、抽出部が、選択された位置に対応する所見の入力開始時刻および終了時刻の少なくとも一方と、対応する時刻の操作履歴の内容に基づいて、選択部によって選択された所見における注目画像を抽出する。
１回の内視鏡検査で、少なくとも数十枚、多ければ数百枚の検査画像が撮影され、撮影された検査画像は全て画像サーバに蓄積される。画像サーバは大容量の記憶装置を有して構成され、多数の検査で撮影された大量の検査画像を蓄積する。そのため画像サーバから所望の検査画像を探し出すことは容易ではない。 In one endoscopic examination, at least several tens and at most several hundreds of examination images are photographed, and all the photographed examination images are stored in the image server. The image server is configured to have a large-capacity storage device, and accumulates a large number of examination images taken by a large number of examinations. Therefore, it is not easy to find a desired inspection image from the image server.
検査画像に検索のための目印を付加できるシステムにおいては、医師が、あとで必要となりそうな検査画像に予め目印を付加しておくことで、目印を付加した検査画像を簡単に検索して読み出せるようにしている。病院では定期的にカンファレンスが行われるが、医師は、カンファレンスで使用する検査画像に目印を付加しておくことで、カンファレンス前に画像サーバから所望の検査画像を読み出せる。 In a system that can add a search mark to a test image, a doctor can easily search for and read a test image with a mark by adding a mark to a test image that may be necessary later. I am trying to put it out. Conferences are regularly held in hospitals, but doctors can read out desired test images from the image server before the conference by adding marks to the test images used in the conference.
しかしながら目印の付加操作は医師により手動で行われるため、医師が忘れた場合には、画像サーバから所望の検査画像を読み出せない。医師はカンファレンス前に、画像サーバに蓄積した検査画像サムネイルの一覧をディスプレイに表示して、所望の検査画像を選択することも可能であるが、膨大な量の検査画像の中から所望の検査画像を探し出すことは、時間的にも容易な作業ではない。そこで画像サーバから検査画像を検索する際に、所定の基準で検査画像を絞り込むための技術の構築が望まれている。 However, since the operation of adding a mark is manually performed by a doctor, if the doctor forgets, a desired inspection image cannot be read from the image server. Before the conference, the doctor can display a list of inspection image thumbnails stored in the image server on the display and select a desired inspection image, but the desired inspection image can be selected from a vast amount of inspection images. Finding out is not an easy task in time. Therefore, it is desired to construct a technique for narrowing down inspection images based on a predetermined standard when searching for inspection images from an image server.
本発明はこうした状況に鑑みなされたものであり、その目的は、内視鏡画像などの検査画像を蓄積した画像サーバから、所定の検査画像を抽出するための技術を提供することにある。 The present invention has been made in view of such circumstances, and an object thereof is to provide a technique for extracting a predetermined inspection image from an image server in which inspection images such as endoscopic images are accumulated.
上記課題を解決するために、本発明のある態様の医療支援システムは、撮影された複数の検査画像を記憶する検査画像記憶部と、検査画像に対するユーザの操作を受け付ける操作受付部と、検査画像に対して、操作受付部が受け付けたユーザ操作の種類に応じたタイプ情報を設定する処理部と、処理部が設定した検査画像のタイプ情報を記憶するタイプ情報記憶部と、検査画像記憶部から検査画像を検索する検索処理部とを備える。検索処理部は、タイプ情報にもとづいて検査画像を検索できる。 In order to solve the above-described problem, a medical support system according to an aspect of the present invention includes an examination image storage unit that stores a plurality of photographed examination images, an operation reception unit that accepts user operations on the examination images, and an examination image. In contrast, a processing unit that sets type information according to the type of user operation received by the operation receiving unit, a type information storage unit that stores type information of the inspection image set by the processing unit, and an inspection image storage unit A search processing unit for searching for an inspection image. The search processing unit can search for an inspection image based on the type information.
なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。 It should be noted that any combination of the above-described constituent elements and a conversion of the expression of the present invention between a method, an apparatus, a system, a recording medium, a computer program, and the like are also effective as an aspect of the present invention.
本発明によれば、内視鏡画像などの検査画像を蓄積した画像サーバから、所定の検査画像を抽出するための技術を提供できる。 ADVANTAGE OF THE INVENTION According to this invention, the technique for extracting a predetermined test | inspection image from the image server which accumulate | stored test | inspection images, such as an endoscopic image, can be provided.
図１は、本発明の実施例にかかる医療支援システム１の構成を示す図である。医療支援システム１は内視鏡検査で撮影された検査画像を管理するとともに、ユーザ（医師）のレポート作成業務を支援するシステムであり、内視鏡システム１０、画像サーバ２０、管理サーバ３０および端末装置４０を備え、それらはＬＡＮ（ローカルエリアネットワーク）などのネットワーク２によって相互接続される。端末装置４０はたとえばパーソナルコンピュータであって、画面出力可能に表示装置７０と接続されるが、端末装置４０は表示装置と一体となったラップトップコンピュータであってもよく、また携帯型タブレットであってもよい。
FIG. 1 is a diagram showing a configuration of a
内視鏡システム１０は、内視鏡１２、処理装置１４および表示装置１６を備える。内視鏡１２は患者の体内に挿入され、医師が内視鏡１２のレリーズスイッチを押したタイミングで体内の静止画像が撮影される。内視鏡１２は、固体撮像素子（たとえばＣＣＤイメージセンサまたはＣＭＯＳイメージセンサ）および信号処理回路を備える。固体撮像素子は入射光を電気信号に変換し、信号処理回路は、固体撮像素子により光電変換された画像データに対して、Ａ／Ｄ変換、ノイズ除去などの信号処理を施して、処理装置１４に出力する。
The
処理装置１４の一つの重要な役割は、内視鏡１２により撮影された検査画像を画像サーバ２０に送信して、画像サーバ２０の検査画像記憶部２４に記憶させることであり、もう一つの重要な役割は、内視鏡１２により取得されている映像を表示装置１６にリアルタイムで表示させることにある。前者の役割において、処理装置１４は、内視鏡１２のレリーズスイッチが押されると、内視鏡１２の撮影画像に、検査オーダを特定する検査ＩＤをメタデータとして付加して、画像サーバ２０に送信する。
One important role of the
画像サーバ２０は、大容量の画像データベースとして構成され、処理部２２、検査画像記憶部２４、編集データ記憶部２６およびタイプ情報記憶部２８を備える。処理部２２は画像サーバ２０全体を統括的に管理する。
The
処理部２２は、内視鏡システム１０から送信される検査画像を受け取り、検査画像記憶部２４に蓄積する。なお内視鏡検査において撮影された検査画像は、撮影順にシリアル番号が付与され、シリアル番号と検査ＩＤの組合せが、検査画像記憶部２４において検査画像を識別するための画像ＩＤを構成してよい。なお、これとは別に検査画像には、一意に識別するための画像ＩＤが内視鏡１２または処理装置１４により付加されてもよい。
The
検査画像記憶部２４は、内視鏡システム１０により撮影された検査画像を検査ごとにまとめて記憶する。一つの検査で撮影された複数の検査画像は、検査ＩＤに紐づけられて検査画像記憶部２４に保持されてよい。検査画像記憶部２４は、大容量のＨＤＤ（ハードディスクドライブ）で構成されてもよく、またフラッシュメモリで構成されてもよい。編集データ記憶部２６は、医師が編集した検査画像の編集データを記憶する。タイプ情報記憶部２８は、検査画像のタイプ情報を記憶する。
The inspection
管理サーバ３０は、内視鏡検査のオーダ情報や検査情報を管理する。管理サーバ３０は、患者の検査オーダを記憶するオーダ記憶部３２、実施した患者の検査情報を記憶する検査情報記憶部３４、医師により作成された検査レポートを記憶するレポート記憶部３６とを備える。
The
端末装置４０は、画像サーバ２０にアクセスして、検査画像記憶部２４に記憶された検査画像を表示装置７０に表示できる。特に医師が検査レポートを作成する際には、検査ＩＤに紐づけられて検査画像記憶部２４に保持されている全ての検査画像のサムネイルが端末装置４０に読み出され、医師が検査レポートに添付する検査画像を選択できるように、サムネイル一覧が表示装置７０に表示される。
The
端末装置４０は、レポート入力画面生成部４２、レポート入力部４４、操作受付部４６、画像取得部４８、編集画面生成部５０、編集データ処理部５２、保存処理部５４、登録処理部５６および検索処理部５８を備える。レポート入力画面生成部４２は、医師がレポートを作成するための入力画面を生成して表示装置７０に表示する機能をもつ。操作受付部４６は、検査画像に対するユーザの操作を受け付ける。
The
これらの構成はハードウエア的には、任意のプロセッサ、メモリ、その他のＬＳＩで実現でき、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。 These configurations can be realized by an arbitrary processor, memory, or other LSI in terms of hardware, and can be realized by a program loaded into the memory in terms of software, but here by their cooperation. Draw functional blocks. Accordingly, those skilled in the art will understand that these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.
端末装置４０は内視鏡科に設置されており、キーボードやマウスなどのユーザインタフェースが接続されている。医師は内視鏡検査を終了すると、端末装置４０でユーザインタフェースを操作して検査レポートを作成する。
The
図２は、内視鏡検査のレポート入力画面の一例を示す。レポート入力画面生成部４２が、管理サーバ３０の検査情報記憶部３４から検査情報を取得し、また画像サーバ２０の検査画像記憶部２４から検査画像のサムネイルを取得して、レポート入力画面を生成する。
FIG. 2 shows an example of a report input screen for endoscopy. The report input
レポート入力画面の左欄には、患者情報および検査画像のサムネイルが表示される。レポート入力画面生成部４２は、検査画像記憶部２４から取得した検査画像のサムネイルを一覧表示領域８０に並べて表示する。なお一覧表示領域８０の右側にはスクロールバー８１が設けられ、医師はスクロールバー８１をスクロールして、検査画像の全てのサムネイルを閲覧できる。検査画像には検査ＩＤがメタデータとして付加されており、レポート入力画面生成部４２は、レポートを作成する検査の検査ＩＤが付加されているサムネイルを検査画像記憶部２４から取得して表示する。同様にレポート入力画面生成部４２は、検査ＩＤに紐づけられた患者情報等を、管理サーバ３０から読み込み、所定の領域に表示する。
Patient information and thumbnails of examination images are displayed in the left column of the report input screen. The report input
レポート入力画面の右欄には、レポート入力すべき項目が表示される。図２に示す例では項目として「観察範囲」、「総合診断」、「検査後指示／合併症」および「各種コメント／使用スコープ／追加項目」が表示される。「観察範囲」は、人体の部位ごとに所見内容、診断内容、処置内容を入力する項目である。「総合診断」は、総合診断の内容を入力する項目である。「検査後指示／合併症」は、検査後の医師からの指示内容および合併症の有無を入力する項目である。「各種コメント／使用スコープ／追加項目」は、上記に記載した以外のコメントおよび検査に使用したスコープの種別を入力する項目である。 In the right column of the report input screen, items to be input are displayed. In the example shown in FIG. 2, “observation range”, “total diagnosis”, “post-examination instructions / complications”, and “various comments / usage scope / additional items” are displayed as items. “Observation range” is an item for inputting findings, diagnosis details, and treatment details for each part of the human body. “Comprehensive diagnosis” is an item for inputting the contents of comprehensive diagnosis. “Post-examination instructions / complications” is an item for inputting instructions from the doctor after the examination and the presence or absence of complications. “Various comments / usage scope / additional items” are items for inputting comments other than those described above and the type of scope used for the inspection.
医師は「観察範囲」の項目に、検査した「食道」、「胃」、「十二指腸」の部位の所見内容、診断内容、処置内容を入力する。医師はキーボードなどのユーザインタフェースから各内容を入力し、レポート入力部４４が、レポート入力を受け付ける。
In the “observation range” item, the doctor inputs the findings, diagnosis details, and treatment details of the examined “esophagus”, “stomach”, and “duodenum”. The doctor inputs each content from a user interface such as a keyboard, and the
また医師は、一覧表示領域８０に表示されたサムネイルをマウスで選択することで、選択したサムネイルを拡大表示できる。操作受付部４６は、サムネイルの選択操作を、検査画像の拡大操作として受け付け、サムネイルの画像ＩＤを含む取得要求を画像取得部４８に通知する。この通知を受けて画像取得部４８は、画像ＩＤを含む画像取得要求を画像サーバ２０に送信し、処理部２２は、検査画像記憶部２４から画像ＩＤで特定される検査画像を読み出し、端末装置４０に送信する。これにより画像取得部４８が検査画像を取得し、編集画面生成部５０が検査画像の拡大画像を含む編集画面を表示する。
The doctor can enlarge the selected thumbnail by selecting the thumbnail displayed in the
図３は、検査画像の編集画面の例を示す。この編集画面は、拡大した検査画像を含み、検査画像を編集するための画面を構成する。編集画面の右欄の検査画像表示領域９０には、画像編集の対象となる検査画像が拡大表示される。検査画像表示領域９０において、サムネイルよりも拡大された検査画像が表示されることで、医師は拡大された検査画像を詳しく観ることができ、画像の編集操作を行うか、またレポートへの添付操作を行うかを判断する。
FIG. 3 shows an example of an inspection image editing screen. This editing screen includes an enlarged inspection image and constitutes a screen for editing the inspection image. In the inspection
編集画面の左欄には、画像編集操作を行うための編集ボタン９１、９２が表示される。ここで編集ボタン９１は、医師が検査画像中にマークやメモを残すために使用される。たとえば処置した箇所ではないが、医師が気になる箇所、たとえば腫瘍が消失した箇所などにマークやメモを記録しておくことで、あとで検査画像を観るときに、記録情報として参照することができる。医師は検査画像中にマークやメモを付加する際、マウスなどのポインティングデバイスを操作して編集ボタン９１のいずれかを選択し、それから検査画像中の所望の位置にマークやメモを記述する。操作受付部４６は、検査画像に対するユーザの操作を、画像編集操作として受け付ける。
In the left column of the edit screen, edit
編集ボタン９２は、医師が検査画像中の処置箇所に、処置内容を示す描画アイテムを付加するために使用される。ここでは、生検マークを付加するための生検指定ボタン９２ａ、ポリペクトミーマークを付加するためのポリペクトミー指定ボタン９２ｂ、ＥＭＲ（内視鏡的粘膜切除術）−ＥＳＤ（内視鏡的粘膜下層剥離術）マークを付加するためのＥＭＲ−ＥＳＤ指定ボタン９２ｃが設けられている。医師は検査画像中に描画アイテムを付加する際、マウスなどのポインティングデバイスを操作して編集ボタン９２のいずれかを選択し、それから検査画像中の処置箇所をポイントする。たとえばマウス操作の場合には、所望の編集ボタン９２上にカーソルをあててクリックし、それから検査画像上の所望の位置にカーソルを配置してダブルクリックすると、その位置に描画アイテムが付加される。操作受付部４６は、検査画像に対するユーザの操作を、画像編集操作として受け付ける。
The
図４は、検査画像上に描画アイテムを配置した例を示す。図４に示す例では、検査画像上に、生検処置した箇所を示す描画アイテム９４が付加されている。操作受付部４６が、ユーザの操作を画像編集操作として受け付けると、編集データ処理部５２が、指定された検査画像中の位置に、編集内容に応じた表示物を配置する。ここではマウスにより指定された位置に、生検マークである“＜１”を表示している。なおポリペクトミーマーク、ＥＭＲ−ＥＳＤマークは、別の表示態様をもつ描画アイテムであり、生検マークとは区別される。検査画像が編集され、保存ボタン９５が押下されると、保存処理部５４が、指定された位置および編集内容を含む編集データを、画像ＩＤとともにメモリ（図示せず）に保存する。
FIG. 4 shows an example in which drawing items are arranged on the inspection image. In the example illustrated in FIG. 4, a
編集画面の左欄には、検査画像をレポートに添付するためのレポート添付ボックス９３が設けられる。レポート添付ボックス９３は、初期状態ではチェック無しの状態にあり、医師がポインティングデバイスでレポート添付ボックス９３をクリックすると、レポート添付ボックス９３にチェックマークが入れられる。操作受付部４６は、レポート添付ボックス９３の選択操作を、検査画像のレポート添付操作として受け付ける。チェックマークを入れた状態は、検査画像をレポートに添付することが選択された状態に対応する。なおレポート添付ボックス９３を再度クリックすると、チェックマークは外される。
In the left column of the edit screen, a
図５は、レポート添付ボックス９３にチェックマークが入った状態を示す。ここで保存ボタン９５が押下されると、レポート入力部４４が、作成中の検査レポートに、検査画像記憶部２４における検査画像の格納場所を示すリンク情報を書き込む。これにより作成したレポートを印刷する際には、リンク情報から検査画像を取得できるようにする。このとき保存処理部５４は、レポート添付される検査画像の格納場所を示すリンク情報を、メモリ（図示せず）に保存する。
FIG. 5 shows a state where a check mark is entered in the
なお検査レポートに添付する画像は、編集された検査画像に限らず、編集されていない検査画像であってもよい。図２を参照して、添付画像領域８３には、添付画像として選択された画像Ａ、画像Ｂが表示され、添付画像領域８４には、添付画像として選択された画像Ｃ、画像Ｄが表示されている。これらの表示画像は、一覧表示領域８０におけるサムネイルをさらに縮小した画像であってよい。
The image attached to the inspection report is not limited to the edited inspection image, and may be an inspection image that has not been edited. Referring to FIG. 2, images A and B selected as attached images are displayed in attached image area 83, and images C and D selected as attached images are displayed in attached image area 84. ing. These display images may be images obtained by further reducing thumbnails in the
医師が、レポート入力画面の全ての項目の入力を完了すると、登録ボタン８２を押下する。これにより登録処理部５６がレポート登録処理を実施する。具体的に登録処理部５６は、添付する検査画像のリンク情報を含むレポート内容を、管理サーバ３０に送信する。管理サーバ３０は、レポート内容を受信し、レポート記憶部３６に登録する。また登録処理部５６は、保存処理部５４がメモリに保存した添付画像のリンク情報、および検査画像の編集データを、画像サーバ２０に送信する。
When the doctor completes the input of all items on the report input screen, the
実施例の医療支援システム１においては、ユーザ（医師）によるレポート入力作業中に、操作受付部４６が、検査画像に対する医師の操作を受け付ける。検査画像に対して、以下の操作が実施される。
（１）検査画像の拡大操作
医師は、一覧表示領域８０に表示されるサムネイル（図２参照）を選択することで、検査画像を拡大表示する（図３参照）。操作受付部４６は、サムネイルの選択操作を、画像拡大操作として受け付ける。
（２）検査画像の編集操作
医師は、編集画面に表示された編集ボタン９１、９２を操作することで、検査画像を編集する（図４参照）。操作受付部４６は、編集ボタンを操作して検査画像にマークやアイテムなどを付加する操作を、画像編集操作として受け付ける。
（３）検査画像のレポート添付操作
医師は、編集画面に表示されたレポート添付ボックス９３を操作することで、検査画像をレポートに添付する（図５参照）。操作受付部４６は、レポート添付ボックス９３の選択操作を、レポート添付操作として受け付ける。
In the
(1) Magnification operation of examination image The doctor enlarges and displays the examination image by selecting a thumbnail (see FIG. 2) displayed in the list display area 80 (see FIG. 3). The
(2) Examination Image Editing Operation The doctor edits the examination image by operating the
(3) Report Attachment Operation for Examination Image The doctor attaches the examination image to the report by operating the
検査中に撮影された検査画像のうち、ほとんどの検査画像は医師から操作されることはない。そのため医師によるレポート入力作業中、操作された検査画像は、操作されなかった検査画像と比べて、医師にとって価値の高い画像であったことが考えられる。そこで医療支援システム１では、ユーザ操作が行われた検査画像に対して、行われた操作の種類に関する情報（タイプ情報）を設定し、後の検索処理に利用できるようにする。実施例では、画像サーバ２０における処理部２２が、検査画像に対して、操作受付部４６が受け付けたユーザ操作の種類に応じたタイプ情報を設定し、タイプ情報記憶部２８に記憶させる。なお、このタイプ情報の設定機能は、端末装置４０が有してもよく、端末装置４０がタイプ情報を設定して、画像サーバ２０に送信し、タイプ情報記憶部２８に記憶させてもよい。
Of the inspection images taken during the inspection, most of the inspection images are not operated by a doctor. Therefore, during the report input operation by the doctor, it is considered that the operated inspection image was a valuable image for the doctor compared with the inspection image that was not operated. Therefore, the
図６は、タイプ情報記憶部２８におけるタイプ情報の保持フォーマットの一例を示す。タイプ情報記憶部２８は、検査画像のタイプ情報を記憶する。この保持フォーマットにおいて、画像ＩＤ欄１００は、画像ＩＤが記述される項目であり、一つの検査において撮影した画像ＩＤが記述される。タイプ欄１０２は、タイプ情報を記録する項目である。各項目は、０又は１のフラグ値が設定され、フラグ値０は、そのタイプに相当する画像ではないこと、フラグ値１は、そのタイプに相当する画像であることを示す。なお実施例においては、フラグ値１を、「タイプ情報」とよぶこともある。
FIG. 6 shows an example of a type information holding format in the type
上記したように、レポート入力作業において、検査画像に対して（１）〜（３）の３種類の操作が実施される。タイプ欄１０２におけるタイプＡ〜Ｃは、操作（１）〜（３）に対応する。
As described above, in the report input operation, three types of operations (1) to (3) are performed on the inspection image. Types A to C in the
タイプＡは、検査画像に対して拡大操作がなされたか否かを特定するための項目であり、タイプＡのフラグ値１は、拡大操作がなされたこと、フラグ値０は、拡大操作がなされていないことを示す。
Type A is an item for specifying whether or not an enlargement operation has been performed on an inspection image. Type A
タイプＢは、検査画像に対して編集操作がなされたか否かを特定するための項目であり、タイプＢのフラグ値１は、編集操作がなされたこと、フラグ値０は、編集操作がなされていないことを示す。
Type B is an item for specifying whether or not an editing operation has been performed on an inspection image. Type
タイプＣは、検査画像に対してレポート添付操作がなされたか否かを特定するための項目であり、タイプＣのフラグ値１は、レポート添付操作がなされたこと、フラグ値０は、レポート添付操作がなされていないことを示す。
Type C is an item for specifying whether or not a report attachment operation has been performed on an inspection image. Type
タイプ情報記憶部２８の保持フォーマットは、初期状態、つまりレポート入力作業の開始前において、タイプ欄１０２における全てのフラグ値が０に設定されている。
In the holding format of the type
図７は、端末装置４０と画像サーバ２０の間の通信シーケンスを示す。端末装置４０において、ユーザである医師がレポート入力作業を開始する（Ｓ１０）。レポート入力画面生成部４２は、画像サーバ２０に対して、検査ＩＤを指定したサムネイル取得要求を送信し（Ｓ１２）、画像サーバ２０は、サムネイル画像を端末装置４０に送信する（Ｓ４０）。これによりレポート入力画面生成部４２は、レポート入力画面にサムネイル一覧を表示する。
FIG. 7 shows a communication sequence between the
端末装置４０において操作受付部４６が、検査画像の拡大操作を受け付けると、画像取得部４８が、画像ＩＤを指定した画像取得要求を画像サーバ２０に送信する（Ｓ１６ａ）。画像サーバ２０において処理部２２は、指定された画像ＩＤをもつ検査画像を検査画像記憶部２４から読み出して、端末装置４０に送信する（Ｓ１８ａ）。このとき処理部２２は、タイプ情報記憶部２８において、送信した検査画像の画像ＩＤに対応するタイプＡのフラグ値を１に設定する（Ｓ２０ａ）。この処理は、端末装置４０から画像取得要求が送信されるたびに実施され、画像取得部４８が画像取得要求を送信し（Ｓ１６ｍ）、処理部２２が検査画像を端末装置４０に送信すると（Ｓ１８ｍ）、処理部２２が、タイプ情報記憶部２８において、送信した検査画像の画像ＩＤに対応するタイプＡのフラグ値を１に設定する（Ｓ２０ｍ）。
When the
図８は、タイプ情報記憶部２８においてタイプＡのフラグ値が１に設定された例を示す。この例では、画像ＩＤ“001000001”、“001000002”、“001000003”、“001000005”のタイプＡのフラグ値が１に設定されている。このことは、これらの画像ＩＤの検査画像に対して、医師により拡大操作がなされたことを示している。
FIG. 8 shows an example in which the type A flag value is set to 1 in the type
医師が、レポート入力画面の全ての項目の入力を完了し、登録ボタン８２を押下すると、登録処理部５６がレポート登録処理を実施する（Ｓ２２）。登録処理部５６は、保存処理部５４がメモリに保存した検査画像の編集データ（画像ＩＤを含む）と、添付画像のリンク情報を、画像サーバ２０に送信する（Ｓ２４）。
When the doctor completes the input of all items on the report input screen and presses the
画像サーバ２０において、処理部２２は、編集データを編集データ記憶部２６に記憶する。また処理部２２は、編集データに含まれる画像ＩＤを参照し、タイプ情報記憶部２８において、編集された検査画像の画像ＩＤに対応するタイプＢのフラグ値を１に設定する（Ｓ２６）。
In the
また処理部２２は、添付画像のリンク情報から、レポート添付された画像の画像ＩＤを特定する。これにより処理部２２は、タイプ情報記憶部２８において、レポート添付された検査画像の画像ＩＤに対応するタイプＣのフラグ値を１に設定する。
The
図９は、タイプ情報記憶部２８においてタイプＢ、Ｃのフラグ値が１に設定された例を示す。この例では、画像ＩＤ“001000001”、“001000002”のタイプＢのフラグ値が１に設定されている。このことは、これらの画像ＩＤの検査画像に対して、医師により編集操作がなされたことを示している。
FIG. 9 shows an example in which the type B and C flag values are set to 1 in the type
また画像ＩＤ“001000001”、“001000003”のタイプＣのフラグ値が１に設定されている。このことは、これらの画像ＩＤの検査画像に対して、医師によりレポート添付操作がなされたことを示している。 In addition, the type C flag values of the image IDs “001000001” and “001000003” are set to 1. This indicates that a report attachment operation has been performed by the doctor on the inspection images with these image IDs.
このように処理部２２は、検査画像に対して、端末装置４０において操作受付部４６が受け付けたユーザ操作の種類に応じたタイプ情報（フラグ値１）を設定し、タイプ情報記憶部２８に記憶する。これにより検査画像に対して、ユーザにより実施された操作の種類を記録できる。図示されるように、複数種類のユーザ操作が行われた検査画像については、ユーザ操作に対応する複数のタイプ情報が記憶されている。
Thus, the
タイプ情報記憶部２８に記憶したタイプ情報は、ユーザによる検索処理に使用される。端末装置４０において、検索処理部５８は、検査画像記憶部２４から検査画像を検索する機能を有し、具体的にはタイプ情報にもとづいて検査画像を検索可能とする。
The type information stored in the type
たとえば画像ＩＤ“001000004”、“001000050”の画像には、いかなるタイプ情報も設定されていない。このことは、これらの画像に対してユーザが何も操作しなかったことを示し、つまり医師にとって価値の低い画像であることを意味する。一方で、いずれかのフラグ値が１に設定されている検査画像は、医師により何らかの操作をされた価値の高い画像である。そこで検索処理部５８は、タイプ情報記憶部２８を参照して、フラグ値が１に設定された検査画像を検索することで、価値の高い画像を抽出できる。このような検索を実行することで、医師は、カンファレンスに際し、価値の高い画像を容易に取得できるようになる。これにより医師は、価値の高い検査画像の中から所望の画像を探しやすくなる。
For example, no type information is set for the images with the image IDs “001000004” and “001000050”. This means that the user has not performed any operation on these images, which means that the images are of low value to the doctor. On the other hand, an inspection image in which any one of the flag values is set to 1 is a high-value image that has been operated by a doctor. Therefore, the
なおタイプ情報に対して、検索の優先順位が設定されてもよい。たとえばタイプＡとタイプＣのタイプ情報を比較すると、タイプＡのタイプ情報は、検査画像が拡大操作されたことを示すのに対し、タイプＣのタイプ情報は、検査画像がレポート添付操作されたことを示す。この観点からすれば、タイプＣの方が、重要度が高いということができる。そのため重要度の順番で言えば、タイプＣ＞タイプＢ＞タイプＡの関係が成立する。なお、この優先順位は病院によって定められてもよく、たとえばタイプＢ＞タイプＣ＞タイプＡの順位が設定されてもよい。 Note that a search priority may be set for the type information. For example, when comparing type A and type C type information, type A type information indicates that the inspection image has been enlarged, whereas type C type information indicates that the inspection image has been attached to a report. Indicates. From this point of view, it can be said that type C is more important. Therefore, in order of importance, the relationship of type C> type B> type A is established. This priority order may be determined by the hospital. For example, the order of type B> type C> type A may be set.
検索処理部５８は、いずれかのタイプ情報を指定して検査画像を検索することも可能であるが、タイプ情報の種類を指定せずに検査画像を検索することも可能である。この場合、タイプＡ〜Ｃのいずれかのフラグ値が１に設定されている検査画像を全て抽出する。このとき優先順位にしたがって、つまり優先順位が高く設定されている検査画像から順に、出力するようにしてもよい。
The
図１０は、優先順位の一例を示す。この優先順位は、複数のタイプ情報の組合せを条件として設定されている。たとえば優先順位の１位は、タイプＡ＆タイプＢ＆タイプＣであり、タイプＡ、Ｂ、Ｃの全てのフラグ値が１に設定されていることを条件としている。検索処理部５８は、検査画像記憶部２４から検査画像を選択する際、優先順位にしたがって検査結果を出力してよい。たとえば医師がカンファレンスで使用する検査画像を選ぶ際には、優先順位の高い検査画像から出力した方が、医師が所望の検査画像を探し出す時間を短縮できる。なお図１０に示す優先順位は一例であり、優先順位に対して他の条件が設定されてもよい。
FIG. 10 shows an example of the priority order. This priority is set on the condition of a combination of a plurality of type information. For example, the first priority is type A & type B & type C, and all flag values of types A, B and C are set to 1. When selecting the inspection image from the inspection
以上、本発明を実施例をもとに説明した。この実施例は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。 In the above, this invention was demonstrated based on the Example. This embodiment is an exemplification, and it will be understood by those skilled in the art that various modifications can be made to the combination of each component and each processing process, and such modifications are also within the scope of the present invention. .
実施例では、操作受付部４６が、画像拡大操作、画像編集操作、レポート添付操作の３種類の操作を受け付けるとしたが、このうちの少なくとも１種類のユーザを受け付け、その種類に応じたタイプ情報がタイプ情報記憶部２８に記憶されればよい。また操作受付部４６が、少なくとも２種類のユーザを受け付け、その種類に応じたタイプ情報がタイプ情報記憶部２８に記憶されるようにしてもよい。たとえばタイプＡとタイプＣのタイプ情報、またはタイプＢとタイプＣのタイプ情報が、タイプ情報記憶部２８に記憶されてもよい。
In the embodiment, the
なお実施例では、医師による編集ボタン９１、９２の操作を、操作受付部４６が画像編集操作として受け付けることを説明した。図３に関連して説明したように、編集ボタン９１は、医師が検査画像中にマークやメモを残すために使用され、編集ボタン９２は、医師が検査画像中の処置箇所に、処置内容を示す描画アイテムを付加するために使用される。編集ボタン９２を使用した画像編集操作は、レポート入力の内容に直接関係するものであり、編集ボタン９１を使用した画像編集操作と比較すると、その重要性は高い。そこで変形例では、処理部２２が、操作受付部４６が受け付けた画像編集操作のうち、編集ボタン９２を使用した第１の種類の画像編集操作と、編集ボタン９１を使用した第２の種類の画像編集操作とで、異なるタイプ情報を設定して、タイプ情報記憶部２８に記憶させてもよい。
In the embodiment, it has been described that the
実施例では、処理部２２は、編集データに含まれる画像ＩＤを参照し、タイプ情報記憶部２８において、編集された検査画像の画像ＩＤに対応するタイプＢのフラグ値を１に設定する。この変形例では、編集データが編集種類を示す情報も含まれており、すなわち、編集に使用された編集ボタンを特定する情報も含まれている。そのため処理部２２は、編集データに含まれる画像ＩＤおよび編集ボタンを特定する情報を参照し、タイプ情報を設定する。
In the embodiment, the
たとえば編集ボタン９２を使用した第１の種類の編集操作に対しては、「タイプＢ１」のタイプ情報が設定され、編集ボタン９１を使用した第２の種類の編集操作に対しては、「タイプＢ２」のタイプ情報が設定されてよい。この場合、タイプ情報記憶部２８におけるタイプ情報の保持フォーマットは、タイプ欄１０２において、タイプＡ、タイプＢ１、タイプＢ２、タイプＣの項目が設定されることになる。なお１つの画像において、編集ボタン９２を使用した第１の種類の編集操作がなされ、また編集ボタン９１を使用した第２の種類の編集操作もなされている場合には、その画像のタイプＢ１のフラグ値、タイプＢ２のフラグ値がそれぞれ１に設定される。
For example, type information of “type B1” is set for the first type of editing operation using the
なお検索処理の優先順位においては、タイプＣ＞タイプＢ１＞タイプＢ２＞タイプＡの関係が設定されてもよい。つまり生検マークなどを付加するための編集ボタン９２の操作を、メモなどを残すための編集ボタン９１の操作よりも重要度が高いと設定して、優先順位が設定されてもよい。
In the priority order of the search processing, a relationship of type C> type B1> type B2> type A may be set. That is, the priority order may be set by setting the operation of the
１・・・医療支援システム、２・・・ネットワーク、１０・・・内視鏡システム、１２・・・内視鏡、１４・・・処理装置、１６・・・表示装置、２０・・・画像サーバ、２２・・・処理部、２４・・・検査画像記憶部、２６・・・編集データ記憶部、２８・・・タイプ情報記憶部、３０・・・管理サーバ、３２・・・オーダ記憶部、３４・・・検査情報記憶部、３６・・・レポート記憶部、４０・・・端末装置、４２・・・レポート入力画面生成部、４４・・・レポート入力部、４６・・・操作受付部、４８・・・画像取得部、５０・・・編集画面生成部、５２・・・編集データ処理部、５４・・・保存処理部、５６・・・登録処理部、５８・・・検索処理部、７０・・・表示装置。
DESCRIPTION OF
Claims (5)
検査画像に対するユーザの操作を受け付ける操作受付部と、
検査画像に対して、前記操作受付部が受け付けたユーザ操作の種類に応じたタイプ情報を設定する処理部と、
前記処理部が設定した検査画像のタイプ情報を記憶するタイプ情報記憶部と、
前記検査画像記憶部から検査画像を検索する検索処理部と、を備え、
前記検索処理部は、タイプ情報にもとづいて、検査画像を検索可能であること、を特徴とする医療支援システム。 An inspection image storage unit for storing a plurality of inspection images taken;
An operation accepting unit for accepting a user operation on the inspection image;
A processing unit that sets type information corresponding to the type of user operation received by the operation receiving unit for the inspection image;
A type information storage unit for storing type information of the inspection image set by the processing unit;
A search processing unit for searching for an inspection image from the inspection image storage unit,
The medical support system, wherein the search processing unit is capable of searching an examination image based on type information.
ことを特徴とする請求項１から４のいずれかに記載の医療支援システム。 The processing unit sets different type information for the first type editing operation and the second type editing operation when the operation receiving unit receives an image editing operation.
The medical support system according to any one of claims 1 to 4.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015217888A JP6637291B2 (en) | 2015-11-05 | 2015-11-05 | Medical support system and examination image search method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015217888A JP6637291B2 (en) | 2015-11-05 | 2015-11-05 | Medical support system and examination image search method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017086274A true JP2017086274A (en) | 2017-05-25 |
| JP6637291B2 JP6637291B2 (en) | 2020-01-29 |
Family
ID=58766834
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015217888A Active JP6637291B2 (en) | 2015-11-05 | 2015-11-05 | Medical support system and examination image search method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6637291B2 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020109623A (en) * | 2018-11-30 | 2020-07-16 | コニカ ミノルタ ヘルスケア アメリカズ， インコーポレイテッド | Medical information device, medical information system, and medical information processing method |
| WO2023135816A1 (en) * | 2022-01-17 | 2023-07-20 | オリンパスメディカルシステムズ株式会社 | Medical assistance system and medical assistance method |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06180A (en) * | 1992-06-19 | 1994-01-11 | Toshiba Corp | Image display system |
| US20040239760A1 (en) * | 2003-05-27 | 2004-12-02 | Olympus Corporation | Medical image recording apparatus, endoscopic image display method, endoscopic image capture method, and portable storage medium therefor |
| JP2004350725A (en) * | 2003-05-27 | 2004-12-16 | Olympus Corp | Medical image recording apparatus |
| US20060106284A1 (en) * | 2003-05-22 | 2006-05-18 | Olympus Corporation | Communication method of storage device, image storage system and image storage device |
| JP2007236726A (en) * | 2006-03-10 | 2007-09-20 | Olympus Medical Systems Corp | Image management method and apparatus |
| JP2008006169A (en) * | 2006-06-30 | 2008-01-17 | Konica Minolta Medical & Graphic Inc | Medical image display system for small-scale institution |
| WO2015029584A1 (en) * | 2013-08-30 | 2015-03-05 | オリンパスメディカルシステムズ株式会社 | Image management device |
-
2015
- 2015-11-05 JP JP2015217888A patent/JP6637291B2/en active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06180A (en) * | 1992-06-19 | 1994-01-11 | Toshiba Corp | Image display system |
| US20060106284A1 (en) * | 2003-05-22 | 2006-05-18 | Olympus Corporation | Communication method of storage device, image storage system and image storage device |
| US20040239760A1 (en) * | 2003-05-27 | 2004-12-02 | Olympus Corporation | Medical image recording apparatus, endoscopic image display method, endoscopic image capture method, and portable storage medium therefor |
| JP2004350725A (en) * | 2003-05-27 | 2004-12-16 | Olympus Corp | Medical image recording apparatus |
| JP2005007145A (en) * | 2003-05-27 | 2005-01-13 | Olympus Corp | Device for recording medical image, method for displaying endoscopic image, method for fetching endoscopic image, and program |
| JP2007236726A (en) * | 2006-03-10 | 2007-09-20 | Olympus Medical Systems Corp | Image management method and apparatus |
| JP2008006169A (en) * | 2006-06-30 | 2008-01-17 | Konica Minolta Medical & Graphic Inc | Medical image display system for small-scale institution |
| WO2015029584A1 (en) * | 2013-08-30 | 2015-03-05 | オリンパスメディカルシステムズ株式会社 | Image management device |
| US20160048637A1 (en) * | 2013-08-30 | 2016-02-18 | Olympus Corporation | Image management apparatus |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020109623A (en) * | 2018-11-30 | 2020-07-16 | コニカ ミノルタ ヘルスケア アメリカズ， インコーポレイテッド | Medical information device, medical information system, and medical information processing method |
| JP7450375B2 (en) | 2018-11-30 | 2024-03-15 | コニカ ミノルタ ヘルスケア アメリカズ， インコーポレイテッド | Medical information device, medical information system, and medical information processing method |
| WO2023135816A1 (en) * | 2022-01-17 | 2023-07-20 | オリンパスメディカルシステムズ株式会社 | Medical assistance system and medical assistance method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6637291B2 (en) | 2020-01-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6360455B2 (en) | Inspection image browsing support device, operating method thereof and operating program | |
| JP4767759B2 (en) | Interpretation report creation device | |
| JP6373773B2 (en) | Endoscope support system | |
| US9411932B2 (en) | Image management apparatus | |
| JP6490894B2 (en) | Image observation apparatus and image observation program | |
| JP2008090715A (en) | Medical information management system, medical information management device, and medical information management program | |
| WO2018142664A1 (en) | Endoscopic image observation assistance system | |
| JP6532371B2 (en) | Medical report creation support system | |
| JP6637291B2 (en) | Medical support system and examination image search method | |
| JP2014053723A (en) | Medical image management device, medical image management method and medical image management program | |
| JP2015066169A (en) | Image display control apparatus, operation method for the same, and image display control program | |
| JP6401402B2 (en) | Interpretation report creation support system | |
| JP6335412B1 (en) | Endoscopic image observation support system | |
| JP6249908B2 (en) | Information processing system | |
| JP2023089277A (en) | Information processing apparatus, information processing method, and program | |
| JP5872976B2 (en) | Medical image management device | |
| JP4965997B2 (en) | Image data management apparatus, image data management method, and computer program | |
| JP6785557B2 (en) | Endoscope report creation support system | |
| US20200185111A1 (en) | Medical information processing system and medical information processing method | |
| JP6591267B2 (en) | Endoscopic image management device | |
| JP2009207610A (en) | Image processor for endoscope, image processing method for endoscope and endoscope system | |
| JP2005078365A (en) | Electronic medical chart patient condition correspondence table display system | |
| JP5963164B2 (en) | Image diagnosis support system and image diagnosis support program | |
| JP6728595B2 (en) | Image display program, method, and device | |
| JP2016136386A (en) | Medical image processor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180711 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190404 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190528 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190709 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191210 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191220 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6637291 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |