JP2018142072A - 情報端末の制御方法及びプログラム - Google Patents

Abstract

【課題】複数の画像症例を同時に比較する際、簡単に病変の形状比較を行い、診断時間を短縮可能な制御方法を提供する。【解決手段】医用情報管理システム２００は、複数の類似医用画像を情報端末２００のディスプレイに表示させる。複数の第１の類似医用画像は、第１の症例に対応する病変を含む医用画像を含み、複数の第２の類似医用画像は、第２の症例に対応する病変を含む医用画像を含む。複数の第１の類似医用画像の枚数と複数の第２の医用類似画像の枚数とは異なる。表示画面が表示された後に、ディスプレイに表示される第１及よび第２の類似医用画像の夫々の選択を検知し、選択を検知した第１及よび第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、第１の症例に対応する病変の医用画像を含む複数の第１の類似医用画像と、第２の症例に対応する病変の医用画像を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させる。【選択図】図２

Description

本発明は、読影対象の医用画像と類似する類似医用画像を検索するための情報端末の制御方法及びプログラムに関する。

近年、例えば、ＣＴ（Ｃｏｍｐｕｔｅｄ Ｔｏｍｏｇｒａｐｈｙ）、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）等の医用画像装置が発達および普及している。これらＣＴ又はＭＲＩなどは、デジタル化された高精細な医用画像を大容量で取得することを可能にした。また、医師が読影した医用画像は読影レポートと共にＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）に順次蓄積されつつある。ここで、例えば特許文献１、２、３に開示されるように、新たな読影の参考とするため、読影対象の医用画像と類似した過去の医用画像を、ＰＡＣＳに蓄積済の過去症例から検索する技術が開発され始めている。

特開２００７−３１２９２４号公報 特開２０１０−０９４３９７号公報 特開２００４−０００４１１号公報

特許文献１には、複数の超音波動画像を比較して閲覧する際に、任意の１つの動画像の再生時間に合わせて、他の動画の表示速度を調整する技術が開示されている。

また、特許文献２には、異なる２つのマンモグラフィ画像群を比較して閲覧する際に、両画像群のスライス厚を用いて、スライス数を同じ枚数に調整して表示する技術が開示されている。

また、特許文献３には、異なる複数の肺野動画像を比較して閲覧する際に、動画像から呼気と吸気の位相情報用いて、呼吸サイクルを合致させて表示する技術が開示されている。

しかし、特許文献１から特許文献３では、複数の医用動画を同時に再生する際に、動画中の病変部分の再生開始時刻と再生終了時刻が合致するように各動画の表示速度を調整することについての記載は一切ない。また、このような速度調整が限局性病変の場合にのみに必要である等の工夫をも開示していない。

医師は読影の際に医用画像を連続再生して病変の状態を確認する。複数の症例を比較する際は、複数の症例を同時に再生しながら病変の状態を比較する。この際、比較しやすくするために、再生開始位置を各症例の病変位置に設定する等の煩雑な作業が必要になる。

このような課題を解決するための従来技術は、個人内の動画比較を対象としていた。個人内比較では、臓器の大きさや病変位置には大きな違いが生じることがない。そのため、病変部分を動画で比較するにあたっては、画像枚数や呼吸等の周期的なズレを考慮するだけでよく、病変位置を考慮に入れた速度調整を行う必要が無かった。

一方、大量に蓄積された医用画像データベースの中から類似した医用画像症例を参照して診断を行う場合、検索された医用画像の比較は個人内ではなく個人間の比較になる。個人間の比較では、病変位置が異なる条件で病変を比較することになる。この際、従来技術の方法をそのまま適用すると、動画再生時に病変の再生開始位置が異なってしまうため、病変の比較が困難になる。特に、画像診断において限局性病変に対する病変の立体形状の確認は必須項目であり、病変の再生開始時刻が異なる動画で形状比較を行った場合には、誤った形状認識に繋がり、誤診が生じる恐れがある。このような個人間の症例比較は、類似医用画像を参照するシステムを利用した際に生じる特有の課題である。

このような場合であっても、前記読影対象の医用画像を診断する上で参考となる類似医用画像を効果的に医師に提示することが望まれる。

以上の考察により、本願発明者らは、以下の発明の各態様を想到するに至った。

本開示の一態様は、医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、記情報端末のコンピュータに対して、対象医用画像と所定以上の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、ここで、前記複数の類似医用画像は、複数の第１の類似医用画像と、複数の第２の類似医用画像とを含み、前記複数の第１の類似医用画像は、第１の症例に対応する病変を含む医用画像を含み、前記複数の第２の類似医用画像は、第２の症例に対応する病変を含む医用画像を含み、前記複数の第１の類似医用画像の枚数と前記複数の第２の医用類似画像の枚数とは異なり、前記対象医用画像を表示する第１表示領域と、前記第１の類似医用画像および前記第２の類似医用画像を含む複数の類似医用画像を表示する第２表示領域とを含む表示画面を前記ディスプレイに表示させ、前記表示画面が表示された後に、前記第２表示領域に表示される前記第１の類似医用画像および前記第２の類似医用画像のそれぞれの選択を検知し、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、前記第１の症例に対応する病変の医用画像を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変の医用画像を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させる。

上記態様により、医用画像データベースに登録されている複数の画像症例を同時に比較する際、限局性病変が含まれる症例に対しては、病変部分の動画表示を同一の開始終了時刻で再生することができるため、ユーザは簡単に病変の形状比較を行うことができ、診断時間を短縮することが可能になる。

本実施の形態における情報端末が適用された病院情報システムの全体構成図である。 情報端末、医用情報管理システム、及び症例検索システムの構成を示すブロック図である。 ２台のディスプレイの外観図である。 情報端末の実装形態の構成例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 情報端末にて類似症例検索アプリケーションを起動した直後にディスプレイに表示される基本画面の一例を示す図である。 症例表示領域に表示されるある１つの類似症例の表示領域を取り出して示した図である。 病名リスト表示領域の拡大図である。 「真菌症」で類似症例が絞り込まれたときの基本画面を示す図である。 患者情報のデータ構成を示す図である。 図１０に示す患者情報に登録された検査情報のデータ構成を示す図である。 医用画像データベースのデータ構成を示す図である。 診断レポートのデータ構成を示す図である。 類似症例データのデータ構成を示す図である。 スライス画像に設定された関心領域を模式的に示した図である。 疾患体系のデータ構成を示す図である。 情報端末が、医用情報管理システムから診断対象症例を取得した後、症例検索システムに対して類似症例検索の要求を行い、症例検索システムが類似症例検索の要求を受け取るまでの処理を示すシーケンス図である。 検査リストの画面図である。 検査が選択された後の検査リストの画面図である。 ユーザによりシリーズが選択された際に医用画像ビューワに表示されるスライス画像を示した図である。 症例検索システムが類似症例検索の要求を受け取った後、類似症例検索結果を情報端末に返し、検索結果の初期画面を表示する処理を示すシーケンス図である。 検索結果の初期画面を生成する処理のフローチャートである。 病名リストとして生成されたテーブル情報について示した図である。 病名リストの表示の一例である。 病名リストの表示の一例である。 病名リストの表示の一例である。 類似症例検索結果を表示した後、複数の症例を比較表示する要求を受け取った後、該当する複数症例を動画表示する処理を示すシーケンス図である。 動画速度算出処理のフローチャートである。 動画速度算出処理を説明する概念図である。 非病変スライス画像を含めた動画再生速度算出処理のフローチャートである。 非病変スライス画像を含めた動画再生速度算出処理を説明する概念図である。 画像枚数情報の表示例である。 画像フレームの強調表示例である。 動画表示を繰り返し行う際の表示例である。

本開示の一態様は、医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、（ａ）前記情報端末のコンピュータに対して、対象医用画像と所定以上の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、ここで、前記複数の類似医用画像は、複数の第１の類似医用画像と、複数の第２の類似医用画像とを含み、前記複数の第１の類似医用画像は、第１の症例に対応する病変を含む医用画像を含み、前記複数の第２の類似医用画像は、第２の症例に対応する病変を含む医用画像を含み、前記複数の第１の類似医用画像の枚数と前記複数の第２の医用類似画像の枚数とは異なり、（ｂ）前記対象医用画像を表示する第１表示領域と、前記第１の類似医用画像および前記第２の類似医用画像を含む複数の類似医用画像を表示する第２表示領域とを含む表示画面を前記ディスプレイに表示させ、（ｃ）前記表示画面が表示された後に、前記第２表示領域に表示される前記第１の類似医用画像および前記第２の類似医用画像のそれぞれの選択を検知し、（ｄ）前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、前記第１の症例に対応する病変の医用画像を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変の医用画像を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させる。

これにより、医用画像データベースに登録されている複数の画像症例を同時に比較する際、限局性病変が含まれる症例に対しては、病変部分の動画表示を同一の開始終了時刻で再生することができるため、ユーザは簡単に病変の形状比較を行うことができ、診断時間を短縮することが可能になる。

また、前記複数の第１の類似医用画像は、前記第１の症例に対応する病変を含む医用画像と、前記第１の症例に対応する病変を含まない医用画像とを含み、前記複数の第２の類似医用画像は、前記第２の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含まない医用画像とを含み、前記工程（ｄ）において、前記第１の症例に対応する病変の医用画像と、前記第２の症例に対応する病変の医用画像とを同一の時間で連続的に表示させる。

これにより、動画表示の際に病変部分のみを比較できるため、病変の形状比較をより簡単に行うことができ、診断時間を短縮することが可能になる。

また、前記複数の第１の類似医用画像は、前記第１の症例に対応する病変の医用画像と、前記第１の症例に対応する病変を含まない医用画像とを含み、前記複数の第２の類似医用画像は、前記第２の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含まない医用画像とを含み、前記工程（ｄ）において、前記第１の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含む医用画像とを同一の時間で連続的に表示させ、かつ、前記第１の症例に対応する病変を含まない医用画像と、前記第２の症例に対応する病変を含まない医用画像とを同一の時間で連続的に表示させる。

これにより、非病変を含む全スライス画像を確認しながら病変部分の再生開始終了時刻を同一にすることができるため、限局性病変の診断に必要な病変形状の比較を容易に行うことができ、かつ、非病変スライス画像の再生速度の比較により、直感的に病変位置の違いを把握することができ、診断時間の短縮や診断精度の向上が可能になる。

また、前記工程（ｄ）において、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像に、限局性病変が含まれていない場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない。

これにより、限局性病変が含まれない症例を比較する際に、限局性病変以外では不要な病変の形状比較を避けることができ、診断時間の短縮が可能になる。

また、前記工程（ｄ）において、（ｄ１）前記選択を検知した前記第１の類似医用画像または前記第２の類似医用画像が１枚である場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない。

病変領域または非病変領域の画像枚数が1枚の場合、その画像が長時間表示された際には、複数の同じ画像が表示されているのか、1枚の画像が表示され続けているのかの判別が困難になる。そのため、病変領域、非病変領域の画像枚数が1枚の場合は、同一時間の連続表示を行わないことで、誤った読影を防止することができ、診断精度の向上が可能になる。

また、前記工程（ｄ）において、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が第１の閾値以下である場合、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が閾値以下であることを示す通知情報を前記ディスプレイに表示させる。

病変が扁平な場合は病変フレーム数が少なくなる。少ない病変フレームを遅い再生速度で表示した場合、扁平な病変を誤って丸く錯覚させる可能性がある。そのため、病変フレームが小さい場合は、動画再生時に画像枚数を表示したり、「奥行き小」等の表示を行うことで、このような誤った読影を防止することができ、診断精度の向上が可能になる。

なお、前記通知情報とは、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方であることを示す。

また、前記工程（ｃ）において、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が第１の閾値以下である場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像又は前記第２の症例に対応する病変を含む複数の第２の類似医用画像を強調表示し、かつ同一の時間で連続的に表示させる。

なお、前記第１の症例に対応する病変を含む複数の第１の類似医用画像又は前記第２の症例に対応する病変を含む複数の第２の類似医用画像を点滅することによって強調表示し、かつ同一の時間で連続的に表示させてもよい。

上述した通り、病変が扁平な場合は病変フレーム数が少なくなる。少ない病変フレームを遅い再生速度で表示した場合、扁平な病変を誤って丸く錯覚させる可能性がある。そのため、病変フレームが小さい場合には、動画再生時に画像フレームを点滅させたり、強調させたりする等の表示を行うことで、このような誤った読影を防止することができ、診断精度の向上が可能になる。

また、前記工程（ｃ）において、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させ、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像に、限局性病変が含まれていない場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない。

限局性病変ではなく、びまん性病変を診断する際には、病変の形状ではなく病変の範囲を比較する必要がある。しかし、病変スライス画像の再生時間を合致させてしまうと、病変範囲を正しく比較することができなくなり、誤った診断を行ってしまう可能性がある。そのため、限局性病変以外では、動画再生速度を同一の時間で再生させないことで、診断精度の向上が可能になる。

さらに、（ｄ）前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを、前記工程（ｃ）で表示した順番と逆の順番で、同一の時間で連続的に表示させる。

医師は見落としや誤認識を防止するために同じ症例を複数回確認する。この際、通常は症例の再生方向を交互に変えて確認を行う。再生方向を交互に変えるとは、例えば肺のスライス画像を頭から足の方向に連続表示し、続いて足から頭方向に向けて同じ画像を連続表示させることを示す。このような確認方法では臓器位置の連続性が担保されるため、誤認識や見落としが起こりにくい。そのため、動画表示を繰り返し行う際は、医師の確認方法と合致させた再生方法を行うことにより、不連続な症例表示による誤診を避けることができ、診断精度の向上が可能になる。

（実施の形態）
以下本開示の一実施の形態について、図面を参照しながら説明する。なお、各図面において、同じ構成要素については同じ符号が用いられている。

図１は、本実施の形態における情報端末が適用された病院情報システムの全体構成図である。図１に示すように、病院情報システムは、情報端末１００、医用情報管理システム２００、症例検索システム３００を備えている。なお、医用情報管理システム２００や症例検索システム３００は必ずしも病院の中に配置される必要はなく、病院外のデータセンター、プライベートクラウドサーバ、パブリッククラウドサーバなどの上で動作するソフトウェアであってもよい。

情報端末１００としては、パーソナルコンピュータやタブレット端末などの情報端末が採用される。医用情報管理システム２００としては、ＰＡＣＳ（Ｐｉｃｔｕｒｅ Ａｒｃｈｉｖｉｎｇ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍｓ）や電子カルテシステムなどが採用される。

図２は、情報端末１００、医用情報管理システム２００、および症例検索システム３００の構成を示すブロック図である。図２に示すように、情報端末１００は、ディスプレイ１０１、操作部１０２、入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０６、通信制御部１０７、表示速度制御部１０８を備える。

ディスプレイ１０１は、例えば、液晶モニタにより構成され、ユーザが画像診断を行う対象の医用画像及びカルテ情報や、画像診断の結果を記入するレポート入力画面などを表示する。なお、ディスプレイ１０１は最低１台必要だが、通常、画像診断においては２〜３台が用いられる。本実施の形態では２台を用いる例を示し、それぞれ第１ディスプレイ１０１ａ、第２ディスプレイ１０１ｂとする。また、第１ディスプレイ１０１ａの表示画面を第１表示画面、第２ディスプレイ１０１ｂの表示画面を第２表示画面と呼ぶ。２台構成の様子を図３に示す。図３では、第１ディスプレイ１０１ａには、医用画像ビューワの画面が表示されており、第２ディスプレイ１０１ｂに症例検索システム３００の画面が表示されている。

操作部１０２は、例えば、キーボードやマウスにより構成され、ディスプレイに表示する医用画像やカルテ情報における表示内容の選択、画像診断結果の入力など、情報端末１００に種々の情報を入力することができる。

入力制御部１０３は、操作部１０２へのユーザの操作入力を認識すると、その操作の内容を解釈し、他の構成要素に操作内容を通知する。例えば、入力制御部１０３は、操作部１０２よりマウス座標を受け取り、表示制御部１０４で生成されたＧＵＩの座標と比較することにより、ＧＵＩにおけるボタンオブジェクトが選択された状態などを判定し、他の構成要素に操作内容を通知する。

表示制御部１０４は、情報端末１００のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を生成し、ディスプレイ１０１に表示させる。

ＲＯＩ管理部１０５は、類似症例検索を行う際の関心領域（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の管理を行う。

病名リスト管理部１０６は、類似症例サムネイル表示領域７１０に表示された類似症例サムネイルの病名リストの管理を行う。

通信制御部１０７は、情報端末１００及び医用情報管理システム２００間の通信や、情報端末１００及び症例検索システム３００間の通信を制御する。また、通信制御部１０７は、他のブロックから種々のデータの送信依頼を受け付けて、医用情報管理システム２００又は症例検索システム３００に送信すると共に、医用情報管理システム２００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。

表示速度制御部１０８は、入力制御部から受け取った操作内容を用いて検索結果を表示する際に各症例を動画表示するか否かを判定し、動画表示を行う症例に対しては、該当症例の再生速度を算出して表示制御部１０４に通知する。処理の詳細については後述する。

図２に示すように、医用情報管理システム２００は、患者情報蓄積部２０１、患者情報管理部２０２、医用画像データ蓄積部２０３、医用画像データ管理部２０４、診断レポート管理部２０５、通信制御部２０６を備える。

患者情報蓄積部２０１は、患者の性別・年齢・既往歴などの臨床情報、血液検査などの検査情報を蓄積する。

患者情報管理部２０２は、患者情報蓄積部２０１に蓄積された情報の入力・更新・出力について管理する。医用画像データ蓄積部２０３は、患者の検査画像を蓄積する。

医用画像データ管理部２０４は、患者の検査画像を表示する。

診断レポート管理部２０５は、患者の診断結果であるレポートの入力および表示の管理を行う。

また通信制御部２０６は、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は症例検索システム３００に送信すると共に、情報端末１００又は症例検索システム３００から送信されたデータを受信し、該当するブロックに渡す。

図２に示すように、症例検索システム３００は、類似症例データ蓄積部３０１、画像特徴抽出部３０２、類似症例検索部３０３、画像所見体系格納部３０４を備える。

類似症例データ蓄積部３０１は、予め、医用情報管理システム２００に管理されている症例のうち、類似症例検索の対象データとして選定された複数の症例について、それぞれから抽出された画像特徴、それぞれに付与された画像所見、それぞれのサムネイル画像などを蓄積する。

画像特徴抽出部３０２は、情報端末１００の通信制御部１１０から送信されたスライス画像のＩＤ（スライスＩＤ）およびＲＯＩ情報と、医用情報管理システム２００の医用画像データ蓄積部２０３に蓄積された前記スライスＩＤに対応する医用画像データを基にして、画像特徴を抽出する。

類似症例検索部３０３は、画像特徴抽出部３０２で抽出された画像特徴と、類似症例データ蓄積部３０１に蓄積された複数の類似症例の画像特徴とをそれぞれ比較することで類似症例検索結果を生成する。

通信制御部３０４は、他のブロックから種々のデータの送信依頼を受け付けて、情報端末１００又は医用情報管理システム２００に送信すると共に、情報端末１００又は医用情報管理システム２００から送信されたデータを受信し、該当するブロックに渡す。

図４は、情報端末１００の実装形態の構成例を示す図である。図４に示すように、情報端末１００は、アプリケーション５０１、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）５０２、メモリ５０３、及び図示しないその他のハードウェアを備えている。

アプリケーション５０１は、パーソナルコンピュータやタブレット端末を情報端末１００として機能させるためのアプリケーションソフトウェアであり、情報端末１００のプロセッサにより実行される。情報端末１００は、コンピュータ読み取り可能な記録媒体からアプリケーション５０１を読み出してアプリケーション５０１を実装してもよいし、ネットワークからダウンロードすることでアプリケーション５０１を実装してもよい。ＯＳ５０２は、携帯情報端末の基本ソフトウェアであり、情報端末１００のプロセッサにより実行される。メモリ５０３は、情報端末１００が備えるＲＡＭ、ＲＯＭ等の記憶装置により構成され、アプリケーション５０１に含まれるデータ群を記憶する。情報端末１００のプロセッサがアプリケーション５０１を実行することで、図２に示す入力制御部１０３、表示制御部１０４、ＲＯＩ管理部１０５、病名リスト管理部１０６、通信制御部１０７の機能が実現される。

但し、本実施の形態では、情報端末１００は、アプリケーション５０１のみ単独で実装されてもよいし、アプリケーション５０１及びＯＳ５０２で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、及びメモリ５０３で実装されてもよいし、アプリケーション５０１、ＯＳ５０２、メモリ５０３、及びその他の図示しないハードウェアで実装されてもよい。いずれの実装形態においても本実施の形態の情報端末１００を実現することは可能である。

図５、図６は、情報端末１００にて類似症例検索を起動した直後の画面構成を示す図である。なお、図５はディスプレイ１０１ａ、図６はディスプレイ１０１ｂの画面をそれぞれ表す。

図５に示すように、ディスプレイ１０１ａに表示された情報端末１００の基本画面は、４医用画像ビューワ６１０で構成されている。医用画像は通常ＤＩＣＯＭ（Ｄｉｇｉｔａｌ Ｉｍａｇｉｎｇ ａｎｄ ＣＯｍｍｕｎｉｃａｔｉｏｎ ｉｎ Ｍｅｄｉｃｉｎｅ）フォーマットで記録されており、医用画像ビューワ６１０はＤＩＣＯＭを扱えるビューワである。本実施の形態で扱う医用画像は、多数の断層画像（スライス画像ともいう）からなる胸部ＣＴ画像とする。医用画像ビューワに表示された胸部ＣＴ画像は、マウスやキーボードの操作により、スライス送りをすることができる。なお、胸部ＣＴ画像ではなく、ＭＲＩ（Ｍａｇｎｅｔｉｃ Ｒｅｓｏｎａｎｃｅ Ｉｍａｇｉｎｇ）画像や単純Ｘ線画像であってもよい。

医用画像ビューワ６１０には、類似症例検索を起動する元となった症例の画像が表示されている。胸部ＣＴ画像のうち、読影者が類似症例検索を起動したスライス位置の画像（すなわち、検索クエリ画像）が初期表示されている。なお、画像上に類似症例検索を行う対象の関心領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）を重畳表示していてもよい。

図６は、情報端末１００にて類似症例検索アプリケーションを起動した直後にディスプレイ１０１ｂに表示される基本画面Ｋ２の一例を示す図である。図６に示す基本画面Ｋ２は、症例表示領域７１０、診断対象症例表示領域７２０、病名リスト表示領域７３０を備える。

症例表示領域７１０は、検索クエリ画像に類似した類似症例のサムネイル画像を類似度順に表示する領域である。ここで、類似症例のサムネイル画像は、類似医用画像の一例である。

症例表示領域７１０には多数の類似症例が表示されるため、解像度や画素値の変換をその場で行うと処理に時間がかかってしまう。よって、サムネイル画像は、オリジナルのスライス画像から予め作成され、症例検索システム３００に保存されている。

以下、解像度や画素値の変換について少し補足する。オリジナルのスライス画像の解像度は５１２×５１２画素であるが、サムネイル画像はより低解像であるため、解像度変換を行う必要がある。そこで、サムネイル画像は、元となるスライス画像に対して低解像度処理及び階調変換処理が行われて生成される。

階調変換処理は例えば、下記のように行われる。ＣＴで取得したスライス画像は各画素値（ＣＴ値）が−１０００〜＋１０００（単位ＨＵ：Ｈｏｕｎｓｆｉｅｌｄ Ｕｎｉｔ）の２０００階調の値をとり、そのままでは通常の８ビット階調のディスプレイに表示できない。また、表示できたとしても、２０００階調の中で、肺気腫領域（ＣＴ値：−１０００ＨＵ）、肺野の正常組織（ＣＴ値：約−９００ＨＵ）、すりガラス領域（ＣＴ値：−８００ＨＵ）、軟部組織（ＣＴ値：−１００〜−５０ＨＵ）、水（ＣＴ値：０ＨＵ）、及び骨（ＣＴ値：１０００ＨＵ）を人間が肉眼で区別することは難しい。

よって、通常、スライス画像は、各画素値に対してウィンドウレベル及びウィンドウ幅が設定され、８ビットの画素値に再構成されて、ディスプレイに表示される。ここで、ウは、ウィンドウの中心となるＣＴ値を示し、ウィンドウ幅は、ウィンドウ中心の上下の幅を示す。

例えば、肺野条件でＤＩＣＯＭ画像が再構成される場合、ウィンドウレベルが−５５０〜−８００に設定され、ウィンドウ幅が１０００〜１６００に設定される。したがって、サムネイル画像も、元となるスライス画像から上記の処理によって画素値が８ビットに落とされることで生成される。

なお、症例表示領域７１０に表示されるサムネイル画像は、診断対象症例の特徴ベクトルに対する距離が所定の閾値以下の類似症例を示すサムネイル画像である。ここでは距離としては、例えば、ユークリッド距離が用いられる。なお、距離としては、市街地距離等の別の距離尺度が採用されてもよい。比較対象となる２つの画像は、距離が近いほど類似している。また、特徴ベクトルは、サムネイル画像から得られたものではなく、元画像であるスライス画像から得られたものが採用される。

図７は、症例表示領域７１０に表示されるある１つの類似症例の表示領域（個別領域の一例）を取り出して示した図である。類似症例の表示領域には、サムネイル画像が表示されており、このサムネイル画像の下部には、確定診断病名表示領域７１１及び距離表示領域７１２が配置されている。確定診断病名表示領域７１１には、対象となる類似症例の確定診断病名が表示される。確定診断病名とは、対象となる類似症例に対して診断が確定された病名を指す。距離表示領域７１２には、対象となる類似症例のスライス画像の特徴ベクトルと、検索クエリ画像の特徴ベクトルとの距離が表示される。図７の例では、確定診断病名表示領域７１１には、「非結核性抗酸菌症」と表示されているため、このサムネイル画像は「非結核性抗酸菌症」と確定診断がされた類似症例のサムネイル画像を示す。また、距離表示領域７１２には、「０．０５」と表示されているため、この類似症例のスライス画像と検索クエリ画像との距離が「０．０５」であることが示されている。

さらに、類似症例サムネイル表示領域７１０に表示する症例を、病名リスト表示領域７３０の操作により絞り込むことができる。現在表示されている症例の絞り込み条件は、検索件数領域７１３に表示される。図６の類似症例検索直後の状態では、何も絞り込みがされていないため、検索件数表示領域７１３には「全疾患」と表示される。

病名リスト表示領域７３０は、類似症例サムネイル表示領域７１０に表示された全ての類似症例の確定診断病名が表示される。類似症例検索対象の症例は、確定診断後の症例を用いるため、確定診断病名は予め各症例に付与されている。図８に病名リストの拡大図を示す。図８では、病名は、大分類の病名（７３１、７３４、７３７、７４１、７４４）と詳細分類の病名（７３２，７３３、７３５、７３６、７３８、７３９、７４０、７４２，７４３、７４５）とに分けて表示されている。また、大分類病名および詳細分類病名の横には、その病名の症例数が表示されている。ユーザは、この病名リストにおける大分類病名または詳細分類病名の任意の行を選択することで、類似症例サムネイル表示領域７１０に表示される症例を限定することができる。図６のように類似症例検索直後の状態では、多様な疾患を含む６２症例が表示対象になっているが、図８の行７３１をマウスでクリックした場合は、図９のように大分類病名が真菌症（全１４件）の症例のみの表示になる。この時、表示条件表示領域７１４は、現在表示されている症例がどのような絞り込み条件であるか分かるように、図９では「真菌症」という表示に変わる。この機能により、例えば、画像診断を行う医師が想起した病名について、その疾患の類似症例を複数表示することで、診断対象の症例が想起した病名との整合性を確認しやすくなる。

図１０は、患者情報１０００の構成を示す図である。患者情報１０００は、医用情報管理システム２００における患者情報蓄積部２０１で患者ごとに管理される。図１０に示すように、患者情報１０００は、患者ＩＤ１１００、氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００、検査情報１８００、確定診断１９００を備える。患者ＩＤ１１００は、患者に固有の識別番号である。氏名１２００、年齢１３００、性別１４００、既往歴１５００、家族歴１６００、主訴１７００は、それぞれ、患者ＩＤ１１００の患者の氏名、年齢、性別、既往歴、家族歴、主訴である。また、検査情報１８００は、図１１に示すように、当該患者が過去に受けた複数の検査に関する情報を表す。それぞれの検査は、検査ＩＤ１８１０、検査日時１８２０、検査種１８３０、検査結果１８４０を備える。検査ＩＤ１８１０は、検査に固有の識別番号である。検査日時１８２０は、当該検査が行われた日時である。検査種１８２０は、当該検査の種類である。例えば、血液検査、呼吸機能検査、内視鏡検査、単純Ｘ線撮影、ＣＴ撮影などがある。検査結果１８４０は、血液検査であれば、白血球数、ＬＤＨ，ＧＰＴなど各種指標の値や、それを基に医師が下した判断などである。また、単純Ｘ線撮影やＣＴ撮影などの画像検査であれば、撮影された画像そのものへのポインタ情報や画像診断結果のレポートへのポインタ情報も含まれる。画像そのものは、ＤＩＣＯＭフォーマットにて、医用情報管理システム２００における医用画像データ蓄積部２０３に蓄積される。

また、検査種１８３０が単純Ｘ線、ＣＴ，ＭＲＩ，ＰＥＴなど画像検査の場合、医用情報管理システム２００における医用画像データ蓄積部２０３に、医用画像データ２０００が、図１２に示すように蓄積される。医用画像データ２０００は、検査ＩＤ１８１０（図１１の検査ＩＤと共通）およびシリーズＩＤを持つ。１回の検査で、複数の種類の画像撮影（例えば、単純ＣＴと造影ＣＴなど）を行う場合があるので、１つの検査ＩＤに対し、複数のシリーズＩＤ２１００が対応する場合もある。また、ＣＴ検査やＭＲＩ検査などの場合、１回の撮影で複数スライス画像を取得するので１つのシリーズＩＤには、複数のスライスＩＤが対応する。

検査種１８３０が単純Ｘ線、ＣＴ，ＭＲＩ，ＰＥＴなど画像検査の場合、医用情報管理システム２００における診断レポート管理部２０５に、図１３に示すような診断レポート３０００が、蓄積される。診断レポート３０００は、検査ＩＤ１８１０（図１１の検査ＩＤと共通）、所見３１００、診断３２００を備える。

図１４は、類似症例データ４０００のデータ構成の一例を示す図である。類似症例データ４０００は、診断対象症例に対して類似する症例の検索時に参照されるデータであり、症例検索システム３００の類似症例データ蓄積部３０１に蓄積されている。類似症例データ４０００は、図１４に示すように、類似症例ＩＤ４１００、関心領域数４２００、確定診断数４３００、及び確定診断数４３００の個数分の疾患ＩＤ４４００を備える。

類似症例ＩＤ４１００は、類似症例データ４０００の識別子である。図１４の例では、類似症例ＩＤ４１００は、「ＳＩＭ」とそれに続く番号とで構成される記号列で構成されている。

関心領域数４２００は、類似症例ＩＤで示される症例に対して事前に設定された関心領域の数である。なお、類似症例データ４０００は、この関心領域数４２００の個数分だけ、関心領域ＩＤ４２１０、スライスＩＤ４２２０、画像所見ＩＤ４２３０、関心領域座標４２４０、及び画像特徴データ４２５０、サムネイル画像データ４２６０、動画表示用スライスＩＤ４２７０、病変フラグ４２８０の情報を持つ。関心領域ＩＤ４２１０は、類似症例ＩＤ４１００で示される類似症例に付与された関心領域のＩＤである。そのため、関心領域ＩＤ４２１０は、類似症例ＩＤ４１００で示す記号列の後に連番を付与して表現される。スライスＩＤ４２２０は、関心領域が設定されたスライス画像の識別子であり、図１２に示すスライスＩＤ２２００と同一である。画像所見ＩＤ４２３０は、後で説明する画像所見体系の中から設定された画像所見のＩＤである。関心領域座標４２４０は、スライス画像に設定された関心領域の位置を示す情報である。図１５は、スライス画像に設定された関心領域を模式的に示した図である。図１５の例では、関心領域は矩形状に設定されている。したがって、関心領域座標４２４０は、関心領域の左上の頂点の座標（ｘｌ、ｙｔ）と、右下の頂点の座標（ｘｒ、ｙｂ）との４値で構成される。もちろん、関心領域は矩形以外の形状でもよく、その場合は、領域を一意に特定可能なパラメータが関心領域座標４２４０として採用される。例えば、関心領域が円形であれば、円の中心座標と半径とが関心領域座標４２４０として採用される。画像特徴データ４２５０は、関心領域座標４２４０で定義される関心領域から抽出された所定次元（ここではＮ次元）の特徴値である。サムネイル画像データ４２６０は、スライスＩＤで特定されるＤＩＣＯＭフォーマットのスライス画像を基に、症例表示領域７１０に表示するために生成されたサムネイル画像の画像データである。本開示では、関心領域は、異なるスライス画像にまたがって複数設定可能である。そのため、類似症例ＩＤ４１００に対し、サムネイル画像の候補は複数存在する。ここでは、関心領域が付与されたスライス画像毎に、サムネイル画像が作成及び保持されているものとする。サムネイル画像データ４２６０は、例えば、サムネイル画像の左上の頂点から右下の頂点に向かうラスタ走査順にサムネイル画像の画素値が配置されている。先に説明を行ったが、ＣＴ検査で得られたＤＩＣＯＭ画像は、５１２×５１２画素の１１ビット（画素値：−１０００〜＋１０００）画像である。そこで、本実施の形態では、サムネイル画像の表示を高速化するために、サムネイル画像の元となるＤＩＣＯＭ画像に対して低解像度処理及び階調変換処理が行われて８ビットの画素値を持つサムネイル画像が予め作成され、類似症例データ４０００に登録されている。なお、サムネイル画像の作成は、例えば、医用情報管理システム２００が作成し、症例検索システム３００に送信するようにしてもよいし、症例検索システム３００が医用情報管理システム２００からＤＩＣＯＭ画像を取得して作成してもよい。動画表示用スライスＩＤ４２７０は、関心領域ＩＤ４２１０に関する症例を動画表示する際に必要となるスライスＩＤの集合である。例えば、スライスＩＤ４２２０が含まれるシリーズＩＤの全てのスライスＩＤが登録されている。病変フラグ４２８０は、動画表示用スライスＩＤ４２７０に登録されている各スライスが、限局性病変を含むスライスか、びまん性病変を含むスライスか、病変が含まれないスライスかを示すフラグが登録されている。

確定診断数４３００は、確定診断として付与された病名の数である。この例では、類似症例ＩＤ４１００で示される症例に２つの病名が付与されたので、確定診断数４３００には「２」が登録されている。

疾患ＩＤ４４００は、確定診断数４３００の個数分だけ、疾患体系５０００（図１６）で定義された疾患ＩＤを格納する。図１４の例では、類似症例ＩＤで示される症例に「ＤＩＳ０１２＿００７」で示される病名と、「ＤＩＳ０１５＿０１９」で示される病名が付与されたので、疾患ＩＤ４４００には、「ＤＩＳ０１２＿００７」及び「ＤＩＳ０１２＿０１９」が登録されている。

次に、情報端末１００が医用画像管理システム２００と症例検索システム３００と連携して読影作業開始から類似症例検索を開始するまでの流れを説明する。

図１７は、情報端末１００が、医用情報管理システム２００から読影対象症例を取得した後、症例検索システム３００に対して類似症例検索の要求を行い、症例検索システム３００が類似症例検索の要求を受け取るまでの流れを示すシーケンス図である。まず情報端末１００は、操作部１０２を通してユーザ（読影を行う医師）の読影対象検査リスト表示要求を受け付け、入力制御部１０３および通信制御部１１０を通して、医用画像管理システム２００の通信制御部２０６へ読影対象検査リスト表示要求を送信する（ステップＳ５１０）。通信制御部２０６は、患者情報管理部２０２へ読影対象検査リスト表示要求を送信する。患者情報管理部２０２は、画像検査が実施後で読影が未終了の検査をリスト化し、通信制御部２０６を通して、情報端末１００の通信制御部１１０に読影対象検査リストとして送信する（ステップＳ５２０）。情報端末１００の表示制御部１０４は、読影対象検査リストを受け、読影対象検査リストを表示する（ステップＳ５３０）。例えば、図１８のような画面が表示される。図１８の画面は、読影が未終了の検査リストを表示する領域８００と、検査ＩＤが含むシリーズ情報を表示する領域８１０とで構成される。ここでは、検査リスト８００の検査（行に対応）が選択されていないために、領域８１０には何も表示されていない。

ユーザは、リストの中から、これから読影を行う検査を選択する。選択が行われると、通信制御部１１０は、対象の検査ＩＤの検査画像の表示要求を、医用情報管理システム２００へ送信する（ステップＳ５４０）。医用情報管理システム２００は、患者情報管理部２０２で指定された検査ＩＤに含まれる全シリーズ画像（検査とシリーズの関係は図１２参照）を医用画像データ蓄積部２０３から取得し、通信制御部２０６を通して、情報端末１００に送信する（ステップＳ５５０）。情報端末１００の表示制御部１０４は、指定された検査ＩＤが含む全シリーズの情報を図１９の領域８１０のように表示し、ユーザにシリーズの選択を促す（ステップＳ５６０）。図１９の領域８００では選択された行が網掛け表示になっている。ユーザは、読影対象のシリーズを選択すると、表示制御部１０４により図２０のように医用画像ビューワが表示され、指定されたシリーズＩＤのシリーズ画像が全スライスをページ送りできる状態で表示される（ステップＳ５７０）。ユーザは、スライス送りをしながら画像診断を行う。画像診断に迷った場合は、類似症例検索を起動する。

類似症例検索の起動は、操作部１０２のキーボードでの予め定めたショートカットキーでもよいし、マウスで右クリックすることで医用画像ビューワのメニューを表示させ、その中から類似症例検索メニューを指定してもよい。類似症例検索の起動が指示されると、情報端末１００の管理はＲＯＩ管理部１０５に渡され、関心領域（ＲＯＩ）の受け付け状態になる。ユーザは、操作部１０２を通して、注目するスライス上の病変に関心領域（ＲＯＩ）を設定する（ステップＳ５８０）。ここでは、マウスドラッグにより矩形を設定し、入力された矩形情報（例えば、左上の点と右下の点の座標）は、ＲＯＩ管理部が受け取った後、通信制御部１１０を通して、症例検索システム３００の通信制御部３０４に送信される（ステップＳ５９０）。同時に、医用情報管理システム１００からステップＳ５５０にて受け取った全シリーズ画像のうち、類似症例検索を行う対象のスライス画像も、症例検索システム３００の通信制御部３０４に送信される（ステップＳ６００）。なお、類似症例検索を行う対象のスライス画像そのものではなく、スライスＩＤでも構わない。その場合は、症例検索システム３００が、そのスライスＩＤを基に、医用情報管理システム２００からスライス画像を取得すればよい。

次に、症例検索システム３００が類似症例検索を行い、情報端末１００に類似症例検索結果を初期表示するまでの流れを説明する。

図２１は、症例検索システム３００が類似症例検索の要求を受け取った後、類似症例検索結果を情報端末に返し、検索結果の初期画面表示までの流れを示すシーケンス図である。

症例検索システム３００の画像特徴抽出部３０２は、予め定めた複数次元の画像特徴を抽出する（ステップＳ６１０）。

「画像特徴量」としては、医用画像における臓器もしくは病変部分の形状に関するもの、または輝度分布に関するものなどがある。画像特徴量として、例えば、非特許文献：「根本，清水，萩原，小畑，縄野，“多数の特徴量からの特徴選択による乳房Ｘ線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案”，電子情報通信学会論文誌Ｄ−ＩＩ，Ｖｏｌ．Ｊ８８−Ｄ−ＩＩ，Ｎｏ．２，ｐｐ．４１６−４２６，２００５年２月」に４９０次元の特徴量を用いることが記載されている。本実施の形態においては、この画像特徴を用いる。もちろん、他の画像特徴でもよい。

類似症例検索部３０３は、画像特徴抽出部３０２で抽出した画像特徴と、類似症例データ蓄積部３０１に関心領域ＩＤ毎に蓄積された画像特徴（図１４における画像特徴データ４２５０）のそれぞれを比較し、距離を算出する（ステップＳ６２０）。そして、距離が所定の閾値以下の類似症例を、距離が小さい順にソートし、送信対象の症例として決定する（ステップＳ６３０）。次に、通信制御部３０４は、類似症例データ蓄積部に蓄積された類似症例データのうち、送信対象症例の関心領域ＩＤ４２１０、スライスＩＤ４２２０、画像所見ＩＤ４２３０、関心領域座標４２４０、サムネイル画像データ４２６０、確定診断数４３００分だけの疾患ＩＤ４４００及び、類似症例検索部３０３で算出された距離を、送信対象として決定された関心領域ＩＤの数の分だけ、関心領域ＩＤ毎に送信する（ステップＳ６４０）。

なお、検索の結果取得する類似症例として、距離が所定の閾値以下のものとしたが、常に所定の数を取得するようにしても良いし、常に所定の病名数が含まれるような症例数にするなど、別の決定方法でもよい。

次に、類似症例検索結果の初期画面の生成（ステップＳ６５０）について図２２のフローチャートに従って説明する。

まず、ステップＳ１０００にて、表示制御部１０４は、図２１のＳ６４０から受信した類似症例データの数をカウントし、カウント値を検索件数表示領域７１３に表示する。

次に、ステップＳ１１００にて、検索件数表示領域７１３に、初期状態として「全疾患」と表示する。

次に、Ｓ１２００にて、表示制御部１０４は、図２１のＳ６４０から受信した類似症例データに対応する類似症例のうち、症例表示領域７１０にサムネイル画像が表示可能な類似症例の件数分だけ、症例表示領域７１０に類似症例のサムネイル画像を表示すると共に、各サムネイル画像に対応付けて確定診断及び類似度を表示する。

症例表示領域７１０に表示可能な類似症例の件数の最大値は、図６の例では２０である。この最大値は予め定められている。また、この最大値はユーザが自由に変更できる構成にしてもよい。図２１のＳ６４０から受信した類似症例データの数が、最大値よりも多い場合、表示制御部１０４は、症例表示領域７１０の右端に縦方向に長尺のスクロールバー７１５を表示する。これにより、ユーザは、スクロールバー７１５を移動させ、初期の基本画面Ｋ２で非表示であった類似症例のサムネイル画像を閲覧できる。

最後にステップＳ１３００において、病名リストの生成・表示を行う。

まず、受信した類似症例（ここではＮＣ件とする）から、病名リストを生成する。病名リスト管理部１０６が、ＮＣ個の類似症例について、それぞれに付属している確定診断（大分類病名）４７００、確定診断（詳細分類病名）４８００を基に、病名リストを生成する。生成された病名リストは、図２３のようなテーブル情報６０００として、病名リスト管理部１０６で管理される。病名リストでは、病名、病名ＩＤ（病名毎の固有ＩＤ）、件数、対応する類似症例ＩＤ（その病名の件数分）が管理される。そして、表示制御部１０４により、病名リスト表示領域７３０に表示させる。病名リストの表示の例を図２４、図２５、図２６に示す。図２４は、確定診断を詳細分類病名で表現している例、図２５は、確定診断を大分類病名で表現している例、図２６は、大分類病名毎の件数順に並べた上で、大分類病名ごとにその中に含まれる詳細分類病名の件数毎に表現した例である。この場合は、患者情報蓄積部２０１の確定診断が、大分類病名と詳細分類病名との階層構造で表現されている。

ステップＳ１０００〜Ｓ１３００は、表示制御部１０４によって実行される。

次に、情報端末１００に類似症例検索結果が初期表示された後、検索結果画面で選択された複数の症例を動画表示するまでの流れを説明する。

図２７は、情報端末１００が類似症例検索結果を表示した後、情報端末１００で複数の症例を比較表示する要求を受け取った後、該当する複数症例を動画表示する処理を示すシーケンス図である。

情報端末１００の表示速度制御部１０８は、類似症例検索結果の初期表示後の操作から症例を比較表示するか否かを判定する（ステップＳ７１０）。具体的には、症例表示領域７１０で複数の症例が選択された場合には比較表示すると判定し、選択された症例が１つの場合には比較表示しないと判定する。

次に、表示速度制御部１０８は、ステップＳ７１０で比較表示すると判定された際に、ステップＳ７１０で選択された類似症例ＩＤ４１００が保持する動画表示用スライスＩＤ４２７０を医療情報システム２００に通知する（ステップＳ７２０）。

次に、表示速度制御部１０８は、ステップＳ７２０から受け取ったスライスＩＤに該当するスライス画像を情報端末１００に送付する（ステップＳ７３０）。

次に、表示速度制御部１０８は、ステップＳ７３０から受け取ったスライス画像を動画表示する際の表示速度を算出する（ステップＳ７４０）。

図２８は動画速度算出処理のフローチャートである。また、図２９は動画速度算出処理を説明する概念図である。以下、図２８および図２９を用いてステップＳ７４０で動画速度を算出する方法について説明する。

まず、ステップＳ２１００は、医療情報システム２００からステップＳ７１０で選択された各症例の病変フラグ４２８０を取得する。病変フラグとは前述した通り、限局性病変か、びまん性病変か、病変が含まれない非病変スライスかを示すフラグである。

次に、ステップＳ２２００は、ステップＳ２１００から取得した病変フラグの中に限局性病変を示すフラグが含まれるか否かを判定する。限局性病変が含まれる場合はステップＳ２３００に処理を進め、限局性病変が含まれない場合はステップＳ２５００に処理を進める。

次に、ステップＳ２３００は、ステップＳ２１００で受け取った病変フラグを用いて各症例に含まれる限局性病変のフラグ数ｎ_ｄｉをカウントする。図２９の例では、症例１の限局性病変フラグ数ｎ_ｄｉは８、症例２の限局性病変フラグ数ｎ_ｄ２は４になる。

次に、ステップＳ２４００は、ステップＳ２３００でカウントした限局性病変のフラグ数を用いて、各症例の病変スライス画像の再生速度を算出し、処理を終了する。再生速度は以下の式で算出することができる。

ｖ_ｄｉ＝ｔ_ｃ１／ｎ_ｄｉ

ここで、ｖ_ｄｉは症例iの病変スライス画像を再生する速度を示し、ｔ_ｃ１はステップＳ７１０で選択された症例の病変スライス画像の再生時間を示す。病変スライス画像の再生時間ｔ_ｃ１は設計者があらかじめ定めても良いし、ユーザが指定してもよい。図２９の例では、病変スライス画像の再生時間ｔ_ｃ１を２秒と設定した場合、スライス１枚あたりの再生速度は、ｖ_ｄ１＝２／８＝０．２５［秒／枚］、ｖ_ｄ２＝２／４＝０．５［秒／枚］と算出される。上記の式で算出された速度で再生された動画は、病変部分の再生時間が同一になる。そのため、限局性病変の診断に必要な病変の立体形状を複数同時に比較することが可能になり、診断時間の短縮や診断精度の向上が可能になる。

ステップＳ２５００は、病変スライス画像の再生速度ｖ_ｉをあらかじめ定められたｖ_ｃ２に設定する。ステップＳ２５００では、びまん性病変の病変スライス画像の再生速度を算出する。びまん性病変を診断するためには、病変の形状ではなく病変の範囲を比較する必要がある。しかし、病変スライス画像の再生時間を合致させてしまうと、病変の範囲を正しく比較することができなくなる。そのため、びまん性病変のスライス画像の再生速度は予め定められた速度ｖ_ｃ２を用いることで、正しい比較が可能になる。なお、速度ｖ_ｃ２はユーザが設定してもよい。

以上、ステップＳ２１００からステップＳ２５００の処理を行うことにより、表示速度制御部１０８は、ステップＳ７３０から受け取ったスライス画像を動画表示する際の表示速度を算出することができる。

なお、上記では病変スライス画像の再生速度算出について説明したが、非病変スライスの再生速度と病変スライス画像の再生速度を同時に算出してもよい。

図３０は非病変スライス画像を含めた動画再生速度算出処理のフローチャートである。また、図３１は非病変スライス画像を含めた動画再生速度算出処理を説明する概念図である。以下、図３０を用いてステップＳ７４０で動画速度を算出する方法について説明する。なお、図３０において図２８と同じ記号を示す処理については説明を省略する。

ステップＳ３１００では、ステップＳ２１００で取得した病変フラグを用いて非病変フラグの数ｎ_ｊをカウントする。図３１の例では、症例１の非病変フラグ数ｎ_ｎ１は４、症例２の限局性病変フラグ数ｎ_ｎ１は６になる。

次に、ステップＳ３２００では、ステップＳ３２００でカウントした非病変フラグ数を用いて、各症例の非病変スライス画像の再生速度を算出し、処理を終了する。再生速度は以下の式で算出することができる。

ｖ_ｎｉ＝ｔ_ｃ３／ｎ_ｎｉ

ここで、ｖ_ｎｉは症例iの非病変スライス画像を再生する速度を示し、ｔ_ｃ３はステップＳ７１０で選択された症例の非病変スライス画像の再生時間を示す。非病変スライス画像の再生時間ｔ_ｃ１は設計者があらかじめ定めても良いし、ユーザが指定してもよい。図３１の例では、非病変スライス画像の再生時間ｔ_ｃ２を２秒と設定した場合、スライス１枚あたりの再生速度は、ｎ_ｎ１＝２／４＝０．５［秒／枚］、ｖ_ｎ２＝２／６＝０．３３［秒／枚］と算出される。

上記の式で算出された速度で再生されたシリーズ画像は、非病変部分の再生時間が同一になる。そのため、非病変と病変スライスを合わせた全てのシリーズ画像の再生時間を同一にすることができ、かつ、限局性病変の再生開始時間と終了時間が同一に揃えることが可能になる。

これにより、非病変を含む全スライス画像を確認しながら病変部分の再生開始終了時刻を同一にすることができるため、限局性病変の診断に必要な病変形状の比較を容易に行うことができ、かつ、非病変スライス画像の再生速度の比較により、直感的に病変位置の違いを把握することができ、診断時間の短縮や診断精度の向上が可能になる。

なお、前記ステップＳ２３００又は前記ステップＳ３１００でのカウント数が１の時には、後段の速度算出を行わず、ステップＳ２５００に進んでもよい。病変領域または非病変領域の画像枚数が1枚の場合、その画像が長時間表示された際には、複数の同じ画像が表示されているのか、1枚の画像が表示され続けているのかの判別が困難になる。そのため、病変領域、非病変領域の画像枚数が1枚の場合は、同一時間の連続表示を行わないことで、誤った読影を防止することができ、診断精度の向上が可能になる。

また、前記ステップＳ２３００のカウント数が閾値以下の時には、画像枚数情報を画面に提示しても良い。病変が扁平な場合は病変フレーム数が少なくなる。少ない病変フレームを遅い再生速度で表示した場合、扁平な病変を誤って丸く錯覚させる可能性がある。そのため、病変フレームが小さい場合には、図３２に示すように画像枚数を表示したり、「奥行き小」等の表示を行うことで、このような誤った読影を防止することができ、診断精度の向上が可能になる。なお、画像枚数の閾値は、画像のスライス厚によって決めればよい。例えばスライス厚が５ｍｍの場合は１枚で、スライス厚が１ｍｍの場合は５枚と設定すれば良い。また、対象の臓器に応じてユーザが決定してもよい。

また、前記ステップＳ２３００のカウント数の合計が閾値以下の時には、画像フレームを強調表示しても良い。上述したように、病変が扁平な場合は病変フレーム数が少なくなる。少ない病変フレームを遅い再生速度で表示した場合、扁平な病変を誤って丸く錯覚させる可能性がある。そのため、病変フレームが小さい場合には、図３３に示すように画像フレームを点滅させたり、強調表示させたりすることで、このような誤った読影を防止することができ、診断精度の向上が可能になる。なお、画像枚数の閾値は、画像のスライス厚によって決めればよい。例えばスライス厚が５ｍｍの場合は１枚で、スライス厚が１ｍｍの場合は５枚と設定すれば良い。また、対象の臓器に応じてユーザが決定してもよい。

ここで、図２７のシーケンス図の説明に戻る。

表示速度制御部１０８は、ステップＳ７４０から受け取った動画表示速度を用いてステップＳ７１０で選択した症例を動画表示する。

なお、症例の動画表示を繰り返し行う際には、図３４に示すように、再生するスライス方向を交互に変化させながら再生しても良い。医師は見落としや誤認識を防止するために同じ症例を複数回確認する。この際、通常は症例の再生方向を交互に変えて確認を行う。再生方向を交互に変えるとは、例えば肺のスライス画像を頭から足の方向に連続表示し、続いて足から頭方向に向けて同じ画像を連続表示させることを示す。このような確認方法では臓器位置の連続性が担保されるため、誤認識や見落としが起こりにくい。そのため、動画表示を繰り返し行う際は、医師の確認方法と合致させた再生方法を行うことにより、不連続な症例表示による誤診を避けることができ、診断精度の向上が可能になる。

なお、上記では、症例検索システム３００にて画像特徴抽出する例を示したが、端末側で実施してもよい。

なお、本実施の形態では、肺の医用画像が主体的に用いられていたが、本開示はこれに限定されず、心臓、胃、膵臓等の他の器官の医用画像にも適用可能である。

本開示によれば、読影対象である医用画像を用いて診断するにあたって参考となる類似症例を提示する類似症例検索装置、および研修読影医のための読影教育装置等に利用可能である。

１００ 情報端末
１０１ ディスプレイ
１０２ 操作部
１０３ 入力制御部
１０４ 表示制御部
１０５ ＲＯＩ管理部
１０６ 病名リスト管理部
１０７ 通信制御部
１０８ 表示速度管理部
２００ 医用情報管理システム
２０１ 患者情報蓄積部
２０２ 患者情報管理部
２０３ 医用画像データ蓄積部
２０４ 医用画像データ管理部
２０５ 診断レポート管理部
２０６ 通信制御部
３００ 症例検索システム
３０１ 類似症例データ蓄積部
３０２ 画像特徴抽出部
３０３ 類似症例検索部
３０４ 通信制御部
４００ 病院ネットワーク
Ｋ２ 基本画面
５０１ アプリケーション
５０２ ＯＳ
５０３ メモリ
６１０ 医用画像ビューワ
７１０ 症例表示領域
７１１ 確定診断病名表示領域
７１２ 距離表示領域
７１３ 検索件数表示領域
７１４ 表示条件表示領域
７１５ スクロールバー
７２０ 診断対象症例表示領域
７３０ 病名リスト表示領域
８００ 検査リスト
８１０ シリーズ情報
１０００ 患者情報
１１００ 患者ＩＤ
１２００ 氏名
１３００ 年齢
１４００ 性別
１５００ 既往歴
１６００ 家族歴
１７００ 主訴
１８００ 検査情報
１８１０ 検査ＩＤ
１８２０ 検査日時
１８３０ 検査種
１８４０ 検査結果
１９００ 確定診断
２０００ 医用画像データ
２１００ シリーズＩＤ
２２００ スライスＩＤ
３０００ 診断レポート
３１００ 所見
３２００ 診断
４０００ 類似症例データ
４１００ 類似症例ＩＤ
４２００ 関心領域数
４２１０ 関心領域ＩＤ
４２２０ スライスＩＤ
４２３０ 画像所見ＩＤ
４２４０ 関心領域座標
４２５０ 画像特徴データ
４２６０ サムネイル画像データ
４２７０ 動画表示用スライスＩＤ
４２８０ 病変フラグ
４３００ 確定診断数
４４００ 疾患ＩＤ
５０００ 疾患体系
６０００ テーブル情報

Claims (11)

1. 医用画像を登録する医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、
   （ａ）前記情報端末のコンピュータに対して、対象医用画像と所定以上の類似度を有する複数の類似医用画像を前記症例検索システムから受信させ、
   ここで、前記複数の類似医用画像は、複数の第１の類似医用画像と、複数の第２の類似医用画像とを含み、
   前記複数の第１の類似医用画像は、第１の症例に対応する病変を含む医用画像を含み、前記複数の第２の類似医用画像は、第２の症例に対応する病変を含む医用画像を含み、
   前記複数の第１の類似医用画像の枚数と前記複数の第２の医用類似画像の枚数とは異なり、
   （ｂ）前記対象医用画像を表示する第１表示領域と、前記第１の類似医用画像および前記第２の類似医用画像を含む複数の類似医用画像を表示する第２表示領域とを含む表示画面を前記ディスプレイに表示させ、
   （ｃ）前記表示画面が表示された後に、前記第２表示領域に表示される前記第１の類似医用画像および前記第２の類似医用画像のそれぞれの選択を検知し、
   （ｄ）前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、前記第１の症例に対応する病変の医用画像を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変の医用画像を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させる、
   制御方法。
2. 前記複数の第１の類似医用画像は、前記第１の症例に対応する病変を含む医用画像と、前記第１の症例に対応する病変を含まない医用画像とを含み、
   前記複数の第２の類似医用画像は、前記第２の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含まない医用画像とを含み、
   前記工程（ｄ）において、前記第１の症例に対応する病変の医用画像と、前記第２の症例に対応する病変の医用画像とを同一の時間で連続的に表示させる、
   請求項１に記載の制御方法。
3. 前記複数の第１の類似医用画像は、前記第１の症例に対応する病変の医用画像と、前記第１の症例に対応する病変を含まない医用画像とを含み、
   前記複数の第２の類似医用画像は、前記第２の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含まない医用画像とを含み、
   前記工程（ｄ）において、前記第１の症例に対応する病変を含む医用画像と、前記第２の症例に対応する病変を含む医用画像とを同一の時間で連続的に表示させ、かつ、前記第１の症例に対応する病変を含まない医用画像と、前記第２の症例に対応する病変を含まない医用画像とを同一の時間で連続的に表示させる、
   請求項１に記載の制御方法。
4. 前記工程（ｄ）において、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像に、限局性病変が含まれていない場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない、
   請求項１に記載の制御方法。
5. 前記工程（ｄ）において、（ｄ１）前記選択を検知した前記第１の類似医用画像または前記第２の類似医用画像が１枚である場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない、
   請求項１に記載の制御方法。
6. 前記工程（ｄ）において、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が第１の閾値以下である場合、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が閾値以下であることを示す通知情報を前記ディスプレイに表示させる、
   請求項１に記載の制御方法。
7. 前記通知情報とは、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方であることを示す、
   請求項６に記載の制御方法。
8. 前記工程（ｃ）において、前記複数の第１の類似医用画像の枚数および前記複数の第２の医用類似画像の枚数の少なくとも一方が第１の閾値以下である場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像又は前記第２の症例に対応する病変を含む複数の第２の類似医用画像を強調表示し、かつ同一の時間で連続的に表示させる、
   請求項１に記載の制御方法。
9. 前記第１の症例に対応する病変を含む複数の第１の類似医用画像又は前記第２の症例に対応する病変を含む複数の第２の類似医用画像を点滅することによって強調表示し、かつ同一の時間で連続的に表示させる、
   請求項８に記載の制御方法。
10. 前記工程（ｃ）において、前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像の少なくとも一方に、限局性病変が含まれている場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させ、
    前記選択を検知した前記第１の類似医用画像および前記第２の類似医用画像に、限局性病変が含まれていない場合、前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを同一の時間で連続的に表示させない、
    請求項１に記載の制御方法。
11. さらに、
    （ｄ）前記第１の症例に対応する病変を含む複数の第１の類似医用画像と、前記第２の症例に対応する病変を含む複数の第２の類似医用画像とを、前記工程（ｃ）で表示した順番と逆の順番で、同一の時間で連続的に表示させる、
    請求項１に記載の制御方法。