[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP7065447B2 - 情報処理方法、情報処理装置、及びプログラム - Google Patents

情報処理方法、情報処理装置、及びプログラム Download PDF

Info

Publication number
JP7065447B2
JP7065447B2 JP2017224454A JP2017224454A JP7065447B2 JP 7065447 B2 JP7065447 B2 JP 7065447B2 JP 2017224454 A JP2017224454 A JP 2017224454A JP 2017224454 A JP2017224454 A JP 2017224454A JP 7065447 B2 JP7065447 B2 JP 7065447B2
Authority
JP
Japan
Prior art keywords
data
unit
information
information processing
measurement data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017224454A
Other languages
English (en)
Other versions
JP2018161462A (ja
Inventor
一弘 渡邉
朋彦 北村
靖雄 孝橋
勝 山岡
聡明 田中
健司 増田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to US15/915,008 priority Critical patent/US11185235B2/en
Priority to CN201810228173.7A priority patent/CN108662728B/zh
Publication of JP2018161462A publication Critical patent/JP2018161462A/ja
Application granted granted Critical
Publication of JP7065447B2 publication Critical patent/JP7065447B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本開示は、測定対象者の生体状態を把握する技術に関するものである。
近年、非接触で測定対象者の生体情報を感知する技術開発が行われている。例えば、特許文献1には、在室者に快適な空調を行うことを目的として、室内の撮像画像と室内の温度分布画像とを取得し、撮像画像を基に顔位置を算定し、顔位置から所定の距離離れた位置の温度情報を温度分布画像から取得し、取得した温度情報にしたがって空調制御を行う空気調和機が開示されている。
また、特許文献2には、乗員の顔の向きを考慮して、乗員の顔の温度を安定して算出することを目的として、下記の技術が開示されている。すなわち、特許文献2には、IR(InfraRed)カメラで得られた温度分布マップから、乗員の顔領域を抽出し、顔領域の中央領域と中央領域を挟んで顔領域の左右に位置する周辺領域との面積が同等になるように各領域の寄与度を調整し、調整した寄与度に基づいて乗員の顔温度を算出する技術が開示されている。
特開2009-119896号公報 特開2015-55393号公報
しかし、従来技術では、測定対象者の生体状態を正確に把握することが困難な場合があった。人体毎に身体の血流状態は異なっており、例えば、半身麻痺の人体は、麻痺側の体部温度が極端に低いといったことが知られている。そのため、特許文献2で開示されるように中央領域と周辺領域との面積が同等になるように各領域の寄与度を調整して顔部の体温を測定するだけでは、人体の体温の変化を正確に把握することが困難である。
特許文献1で開示される発明は、顔位置から所定距離離れた位置の温度を検出しているため、人体自身の体温を正確に把握することが困難である。
本開示の目的は、測定対象者の生体状態を正確に把握することができる技術を提供することである。
本開示の一態様に係る情報処理方法は、コンピュータを用いて、測定対象者の生体情報を算出するための測定データを、非接触で測定する測定部から取得し、
取得された前記測定データの内容に基づいて、前記測定データを前記測定対象者の少なくとも姿勢に応じたグループに分類し、前記分類された測定データから前記生体情報を算出し、前記算出した生体情報を前記測定データが属しているグループに対応する基準値と比較し、
前記比較に基づく通知を情報提示部にさせる、ものである。
本開示の実施形態によれば、測定対象者の生体状態を正確に把握することができる。
実施の形態1にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。 生体情報感知装置の接続構成の一例を示す図である。 実施の形態1にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。 学習フェーズにおけるデータ処理方法を説明する図である。 検出フェーズにおけるデータ処理方法を説明する図である。 図5に続く、検出フェーズにおけるデータ処理方法を説明する図である。 検出フェーズにおける情報処理装置の処理の一例を示すフローチャートである。 実施の形態2にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。 実施の形態2にかかる情報処理装置が適用された生体情報感知装置の機能構成の一例を示す図である。 学習フェーズにおけるデータ処理方法を説明する図である。 検出フェーズにおけるデータ処理方法を説明する図である。 図11に続く、検出フェーズにおけるデータ処理方法を説明する図である。 本開示の変形例2にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。 本開示の変形例3にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。 本開示の変形例3にかかる情報処理装置が適用された生体情報感知装置の接続構成の一例を示す図である。 本開示の変形例4にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。 本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。 本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の接続構成の第一例を示す図である。 本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の接続構成の第二例を示す図である。 本開示の変形例6にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。 本開示の変形例7にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。 本開示の変形例8にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。 本開示の変形例9にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。
(本開示の基礎となる知見)
高齢者介護においては、高齢者の日々の体調管理を行う上で、生活状況や体温の変化を記録管理することが必須とされている。そこで、人体の体温等の生体情報を周期的に測定し、測定値を基準値と比較し、異常等の変化があれば通知する体調管理システムが検討されている。
従来、人体の体温を測定する手段として、体温計や放射熱センサーが知られている。これらの手段は、腋下や内耳や顔正面等の人体の特定部位を測定することで体温を把握する。
しかし、これらの接触式の手段を体調管理システムに適用した場合、腋下部に体温計を接触させて体温を測定したり、内耳体温計等の人体に接触させる専用の機器を用いて体温を測定したりする必要がある。そのため、測定対象者に静止してもらったり、測定者が付き添った上で測定対象者の体温を測定したりする必要がある。その結果、測定者及び測定対象者ともに負担がかかるといった問題がある。
そこで、非接触で体温を計測する熱画像センサを用いて体温計測を行う特許文献2の手法を体調管理を行うシステムに適用することが考えられる。ここで、特許文献2では、各領域の寄与度を調整することで最終的に一つの体温が算出されているので、特許文献2の手法が適用された体調管理システムは、変化の有無を検出するための基準体温も一つ準備しておけば済む。
しかし、半身麻痺の人体は、麻痺側の体温と麻痺していない側の体温とが大きく相違している。そのため、一つの基準体温を用いて体温の変化の有無を検出すると、測定対象者が測定時にとっている姿勢によって麻痺側の体温が測定された場合、本来は発熱しているにも拘わらず、測定した体温が基準体温をよりも低いために例えば平熱と誤判定される可能性がある。また、測定対象者が検出時にとっている姿勢によって麻痺していない側の体温が測定された場合、本来は平熱であるにも拘わらず、測定した体温が基準体温よりも高いため例えば発熱していると誤判定される可能性がある。
本開示は、このような問題を解決するためになされたものであり、測定対象者及び測定者ともに負担をかけずに、測定対象者の生体状態を正確に把握することができる技術を提供することである。
本開示の一態様に係る情報処理装置は、コンピュータを用いて、測定対象者の生体情報を算出するための測定データを、非接触で測定する測定部から取得し、
取得された前記測定データの内容に基づいて、前記測定データを前記測定対象者の少なくとも姿勢に応じたグループに分類し、前記分類された測定データから前記生体情報を算出し、前記算出した生体情報を前記測定データが属しているグループに対応する基準値と比較し、
前記比較に基づく通知を情報提示部にさせる、ものである。
本態様によれば、測定部で測定された測定データが測定対象者の姿勢に基づいたグループに分類され、分類されたグループに対応する基準値と分類された測定データとを比較され、比較に基づく通知が行われる。そのため、測定時にとる測定対象者の姿勢に拘わらず測定対象者の生体状態を正確に把握した上で、通知を行うことができる。言い換えると、誤った通知についての処理の発生を低減することができる。したがって、通知についての処理負荷を低下させることができる。また、本態様によれば、生体情報が非接触で測定されているので、測定対象者及び測定者ともに負担をかけずに、生体状態を把握できる。
上記態様において、前記測定データの分類においては、前記測定データの内容に基づく前記測定データの前記グループへの分類を機械学習した機械学習モデルを用いて前記測定データを前記グループに分類し、
前記基準値は、前記機械学習において、前記グループに分類された前記測定データから算出された前記グループの前記生体情報の代表値であってもよい。
これにより、機械学習モデルにより測定データの分類が行われるため、ルールベースの分類に比べて、より適切な分類ができる。また、実際に分類された測定データから基準値が決定されるため、より正確な基準値を上記比較の処理に用いることができる。
上記態様において、前記情報処理方法は、さらに、
前記測定データの内容に基づく前記測定データの前記グループへの分類を前記機械学習モデルに機械学習させ、
前記機械学習において、前記グループに分類された測定データから前記グループの前記生体情報の代表値を、前記グループの前記基準値として算出してもよい。
本態様によれば、グループ毎に分類された測定データからグループ毎の生体情報の代表値が機械学習によって算出され、その代表値が基準値として算出されているので、測定対象者に適したグループ毎の基準値を算出できる。
上記態様において、前記測定部は、熱画像センサであり、
前記生体情報は、体温であり、
前記測定データは、前記熱画像センサで得られた熱画像データであり、
前記測定データの分類においては、前記熱画像センサにより得られた前記熱画像データに含まれる前記測定対象者を表す領域の特徴に基づいて前記熱画像データを前記グループに分類し、
前記比較においては、前記分類された熱画像データから前記測定対象者の体温を算出し、前記算出した体温と、前記分類された熱画像データが属するグループに対応する基準値とを比較してもよい。
本態様によれば、測定部は熱画像センサで構成されているので、測定対象者の生体状態を正確に把握できる。
上記態様において、前記測定部は、電波センサであり、
前記生体情報は、前記測定対象者の体動値、呼吸数、及び心拍数の少なくとも1つを含む活動量であり、
前記測定データは、前記電波センサにより得られた前記活動量を示す活動量データであり、
前記測定データの分類においては、前記電波センサにより得られた前記活動量データの波形情報に基づいて前記活動量データを前記グループに分類し、
前記比較においては、前記分類された活動量データから前記測定対象者の前記活動量を算出し、前記算出した活動量と、前記分類された活動量データが属するグループに対応する基準値とを比較してもよい。
本態様によれば、測定部は電波センサで構成されているので、測定対象者の体動値、呼吸数、及び心拍数の少なくとも1つを精度良く検出できる。
上記態様において、前記グループのいずれにも該当しない前記測定データの個数が基準個数を超えた場合、前記機械学習モデルの再学習を促す情報を生成してもよい。
本態様によれば、測定データを基準値と比較するに処理の実行中に、機械学習で分類されたいずれの姿勢にも該当しない測定データの個数が基準個数を超えた場合、機械学習モデルの再学習を促す情報が生成される。そのため、例えば、この情報を認識した管理者は、機械学習を再実行させることができる。これにより、測定データを基準値と比較する処理の実行中に、機械学習時には見られなかった姿勢を測定対象者がとるようになったとしても、測定対象者の生体状態を正確に把握できる。
上記態様において、前記情報処理方法は、さらに、前記測定データに対する測定時刻を示す時刻データを取得し、
前記比較においては、前記時刻データに基づいて前記測定データが所定の時間帯に測定されたか否かを判定し、前記測定データが前記所定の時間帯に測定されたと判定された場合、前記比較を実行してもよい。
本態様によれば、測定データが所定の時間帯に属している場合、比較する処理が実行されるので、例えば、測定対象者の状態が安定している時間帯に測定された測定データを用いて比較する処理を行うことができ、生体情報をより正確に把握することができる。
上記態様において、前記姿勢は、前記測定対象者の体の向きであってもよい。
これにより、測定対象者の体の向きに応じたグループに測定データを分類することができる。ここで、血流などの身体の特徴は体の向きによって異なるため、測定データ、すなわち、体温などの生体情報の基準値も体の向きによって異なる。したがって、適切な基準値を用いて測定対象者に異常がないかを判定することができる。
上記態様において、前記比較に基づく通知は、前記生体情報と前記基準値との比較結果、又は前記測定対象者の異常であってもよい。
これにより、情報提示部の通知を受けることができる人に測定対象者の異常を気づかせることができる。
上記態様は、構成する処理手段をステップとする方法として実現できる。そして、本開示は、その方法に含まれるステップをコンピュータに実行させるプログラムとして実現できる。さらに、本開示は、そのプログラムを記憶したCD-ROM等のコンピュータ読み取り可能な記憶媒体として実現できる。
(実施の形態1)
図1は、実施の形態1にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。図1において、感知装置101は熱画像センサーを含み、寝具107が配置された寝室等の居室内に配置されている。感知装置101は、例えば、空気調和機105と並んで設置されている。感知装置101は、例えば、空気調和機105の側面近傍に配置するというようにして、目立たない位置に配置することが好ましい。感知装置101は、例えば、寝具107の全域が計測範囲に含まれるように居室に設置されている。
感知装置101は、人体106(測定対象者の一例)を含む居室内の熱分布を示す熱画像データを取得する。感知装置101は、取得した熱画像データをゲートウェイ(以下GWとする)104を介し、情報処理装置102に送信する。情報処理装置102は、熱画像データを人体106の姿勢に基づくグループ毎に分類して管理する。なお、GW104はルーターとも称される。
ここで、居室は、例えば、高齢者介護施設において介護対象者である人体106が滞在する一室であってもよいし、人体106が住む住宅の一室であってもよい。
情報処理装置102は、グループ毎に分類された熱画像データと今回測定した熱画像データとを比較することで、人体106の体温の変化を検出すると、GW104を介して、人体106の体温に異常が見られたこと示すアラーティング情報を情報表示装置103に送信する。情報表示装置103は、アラーティング情報を受信すると、アラートを発報する。これにより、人体106の管理者は、人体106の体温に異常があったことを認識する。
人体106の管理人としては、例えば、人体106を介護する介護人や、介護施設の管理人が採用できる。
図2は、生体情報感知装置の接続構成の一例を示す図である。図2に示すように、生体情報感知装置は、感知装置101と、情報処理装置102と、情報表示装置103と、GW104とを含む。感知装置101と情報処理装置102と情報表示装置103とは、それぞれ、所定のネットワークを介してGW104と接続されている。所定のネットワークとしては、例えば、有線LANや無線LANや両者が混在するLANが採用される。
図3は実施の形態1にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。生体情報感知装置は、感知装置101に相当する感知部101A、情報処理装置102に相当する情報処理部102A、情報表示装置103に相当する情報表示部103Aとを含む。
感知部101A(測定部の一例)は、センサ部301と、送信部302とを含み、生体情報を非接触で測定する。センサ部301は、例えば、熱画像センサで構成され、所定のサンプリング周期で人体106の居室を撮像することで、熱画像データ(測定データの一例)を取得する。送信部302は、例えば、無線LAN又は有線LANの通信回路で構成され、センサ部301で取得された熱画像データを所定のサンプリング周期で情報処理部102Aに送信する。
情報処理部102Aは、受信部303、時刻データ付与部304、データ分類部305、データ管理部306、変化検出部307、送信部308、及びDB部311を含む。
受信部303(取得部の一例)は、例えば、無線LAN又は有線LANの通信回路で構成され、感知部101Aから送信された熱画像データを所定のサンプリング周期で受信する。
時刻データ付与部304は、受信部303で受信された熱画像データに対して、測定時刻を付与する。ここで、測定時刻としては、例えば、受信部303が熱画像データを取得したときの取得時刻が付与される。また、測定時刻は、例えば、年/月/日/時/分/秒を表すデータで構成される。
データ分類部305は、姿勢に基づくグループを学習する学習フェーズにおいて、時刻データ付与部304により時刻データが付与された熱画像データを順次に取得することで複数の熱画像データを取得する。そして、データ分類部305は、取得した複数の熱画像データのそれぞれに含まれる人体106を表す領域の特徴に基づいて熱画像データを分類することでグループを学習する。画素の特徴としては、人体106を表す領域の輪郭やその領域を構成する温度分布が採用される。
ここで、データ分類部305は、例えば、機械学習によりグループを学習すればよい。ここで、機械学習としては、例えば、ニューラルネットワークを用いた教師あり機械学習又は教師なし機械学習が採用されればよい。教師あり機械学習の場合、データ分類部305は、例えば、各熱画像データに対して事前に与えられた姿勢に基づくグループを識別するグループ識別子が出力されるようにニューラルネットワークの重み係数を学習すればよい。
ここで、事前に与えられた姿勢としては、例えば、人体106の向きが採用できる。人体106の向きとしては、例えば、人体106を正面から見た向きを示す「前」と、人体106を正面を基準に左側から見た向きを示す「左」と、人体106を正面を基準に右側から見た向きを示す「右」と、人体106を背中から見た向きを示す「後」との最低4パターンが採用できる。更に、人体106の向きとしては、例えば、前後左右の4パターンのそれぞれにおける奥行のパターンが加えられてもよい。奥行きのパターンとしては、例えば、熱画像センサとの距離を段階的に分けたパターンが採用できる。この場合、奥行きのパターンとしては、例えば、「近い」、「普通」、「遠い」といったパターンが採用できる。人体106の向きとして前後左右の4パターンがあり、人体106の奥行きとして「近い」、「普通」、「遠い」の3パターンがあるとすると、熱画像データは姿勢及び奥行きに応じて、4×3=12の12のグループに分類されることになる。ここで、奥行きを考慮するのは、熱画像センサから人体106までの距離が離れるほど熱画像センサの計測精度が低下することを考慮したからである。なお、人体106の向きとしては、上記の4パターン以外の向き(例えば、右斜め前方、左斜め前方、右斜め後方、左斜め後方)が加えられても良いし、上記4パターンのうちいずれか1つ又は複数が省かれても良い。
また、教師なし機械学習を採用する場合、データ分類部305は、通常のニューラルネットワークよりも階層数が多いディープニューラルネットワークを採用すればよい。ディープニューラルネットワークを採用した場合、事前に姿勢及び奥行きを設定しなくても、データ分類部305は、熱画像データに含まれる人体106を示す領域の特徴にしたがって、熱画像データを分類することで、グループを学習できる。
なお、データ分類部305は、機械学習以外の手法を用いてグループを学習してもよい。機械学習以外の手法を採用する場合、データ分類部305は、まず、熱画像データから人体106の領域を抽出する。この場合、例えば、データ分類部305は、熱画像データからHOG(Histograms of Oriented Gradients)特徴量を算出し、HOG特徴量にしたがって熱画像データを人体106の領域と背景の領域とに分けることにより、人体106の領域を抽出すればよい。次に、データ分類部305は、抽出した人体106の領域の輪郭と、顔部における鼻及び口の相対的な位置関係とを用いて人体106の向きを決定すればよい。ここで、顔部は人体106の形状から抽出でき、鼻及び口の位置は顔部の熱分布から求めることができる。また、ここで、決定される人体106の向きは上記の前後左右の4パターンの向きというように事前に定めらた向きが採用される。
次に、データ分類部305は、決定した向きに応じたグループ識別子を熱画像データに付与することで、熱画像データを分類する。この場合、データ分類部305は、顔部の大きさから上記の奥行のパターン毎に熱画像データを更に分類してもよい。この場合、データ分類部305は、人体106の向きをと奥行きとの組毎のグループ識別子を熱画像データに付与することで熱画像データを分類すればよい。
一方、データ分類部305は、生体情報の変化を検出する検出フェーズにおいて、時刻データ付与部304により時刻データが付与された熱画像データを順次に取得する。そして、データ分類部305は、取得した熱画像データのそれぞれに含まれる人体106を表す領域の特徴に基づいて、取得した熱画像データを学習フェーズで学習されたいずれかのグループに分類する。例えば、学習フェーズでニューラルネットワークが採用された場合、データ分類部305は、検出フェーズにおいて、検出対象となる熱画像データをニューラルネットワークに入力することで、当該熱画像データが属するグループを決定すればよい。
また、学習フェーズで上記の機械学習以外の手法が採用された場合、その手法を用いて、データ分類部305は、検出対象の熱画像データが属するグループを決定すればよい。
データ管理部306は、学習フェーズにおいて、データ分類部305で分類された熱画像データからグループ毎の体温の代表値を、グループ毎の基準値として算出する。ここで、基準値は、人体106の平熱を想定しており、分類された熱画像データから得られるグループ毎の体温の平均値が採用される。
そして、データ管理部306は、算出したグループ毎の基準値をDB部311に格納することで、基準値を管理する。なお、データ管理部306は、検出フェーズにおいても、熱画像データの分類結果に基づいて、基準値を更新してもよい。
変化検出部307(比較部の一例)は、検出フェーズにおいて、データ分類部305によりいずれかのグループに分類された熱画像データから人体106の体温(生体情報の一例)を算出し、算出した体温と、当該熱画像データが属するグループに対応する基準値とを比較することで、人体106の体温の変化の有無を検出する。そして、変化検出部307は、体温の変化を検出した場合、体温の異常を示すアラーティング情報を生成する。ここで、基準値は、人体106の平熱を想定しているので、変化検出部307は、例えば、対象となる熱画像データから算出した体温と基準値が示す平熱との温度差がプラスマイナス1℃以上であれば、体温の変化があったと判定すればよい。ここでは、温度差がプラスマイナス1℃以上であれば、体温の変化があると判定しているが、本開示はこれに限定されず、温度差が1℃以外の所定温度(例えば、0.5℃、1.5℃等)以上であれば、体温の変化があると判定してもよい。
ここで、変化検出部307は、後述する比較部位パラメータ311Cが指定する部位(例えば、顔部)を熱画像データから検出し、検出した部位の例えば平均温度を人体106の体温を算出すればよい。
送信部308は、例えば、無線LAN又は有線LANの通信回路で構成され、変化検出部307によりアラーティング情報が生成された場合、そのアラーティング情報を情報表示部103Aに送信する。
データベース(以下DBとする)部311は、例えば不揮発性の記憶装置で構成され、データ管理部306が管理する各種データを記録する。DB部311は、分類パラメータ311Aと、分類データ311Bと、比較部位パラメータ311Cとを記憶する。
分類パラメータ311Aは、例えば、学習フェーズとしてニューラルネットワークが採用されたのであれば、学習の結果得られたニューラルネットワークの重み係数である。
分類データ311Bは、学習フェーズ及び検出フェーズにおいて、データ分類部305によりグループ毎に分類された熱画像データである。
比較部位パラメータ311Cは、変化検出部307が変化検出時に使用する比較対象となる人体106の部位を示すパラメータである。例えば、比較部位パラメータとしては、顔が比較対象とされるのであれば、顔を示す情報が採用される。
なお、教師あり機械学習が採用される場合、DB部311は、事前に定められた分類対象となる姿勢及び奥行きを示す情報を記憶しても良い。
情報表示部103Aは、例えば、人体106の管理者が使用可能なコンピュータで構成され、受信部309と、表示部310とを含み、アラーティング情報を出力する。ここで、情報表示部103Aは、据え置き型のコンピュータで構成されてもよいし、タブレット端末やスマートフォン等の携帯可能なコンピュータで構成されてもよい。
受信部309は、無線LAN又は有線LANの通信回路で構成され、情報処理部102Aから送信されたアラーティング情報を受信する。表示部310は、例えば、液晶ディスプレイや有機ELディスプレイで構成され、アラーティング情報を表示する。この場合、表示部310は、例えば、人体106の体温が異常であることを示すメッセージ等を表示すればよい。なお、情報表示部103Aは、人体106の体温が異常であることを示す音声を図略のスピーカから出力してもよい。
次に、図4~図6を用いて情報処理部102Aにおけるデータ処理方法を説明する。図4は、学習フェーズにおけるデータ処理方法を説明する図である。図5は、検出フェーズにおけるデータ処理方法を説明する図である。図6は、図5に続く、検出フェーズにおけるデータ処理方法を説明する図である。
図4を参照する。生体情報感知装置が現場に設置されると、情報処理部102Aは、一定期間、熱画像データを学習することで分類パラメータ311Aを生成する。まず、時刻データ付与部304は、感知部101Aが取得した熱画像データ(401)のそれぞれに対し、時刻データを付与する(402)。次に、データ分類部305は、時刻データが付与された熱画像データ(403)のそれぞれに対し、所定の温度範囲(例えば、25℃~45℃)以外の領域をマスクするマスク処理を行う。次に、データ分類部305は、ニューラルネットワークを用いた機械学習を行うことで、熱画像データを人体106のグループ毎に分類し、分類パラメータ311Aを生成する(404)。ここでは、所定の温度範囲として、25℃~45℃が採用されたが、例えば30℃~45℃等の温度範囲が採用されることで、人体106と人体106以外の物体(例えば家具等)との差異をより明確化することができる。なお、所定の温度範囲は、人体106がとり得る温度範囲を想定したものである。
続いて、図5を参照する。学習フェーズが終了すると検出フェーズが開始される。まず、時刻データ付与部304は、学習フェーズと同様、感知部101Aで取得された熱画像データ(501)に対し、時刻データを付与する(402)。次に、データ分類部305は、学習フェーズと同様、時刻データが付与された熱画像データ(503)に対してマスク処理を行い所定の温度範囲以外の領域をマスクする。次に、データ分類部305は、所定の温度範囲以外の領域がマスクされた熱画像データを学習フェーズで生成したニューラルネットワークに入力することで、当該熱画像データを学習フェーズで分類されたいずれかのグループに分類する(504)。ここでは、グループとして、第1~第Nのグループがあるので、熱画像データは第1~第N(Nは1以上の整数)のグループのいずれかに分類される。これにより、検出対象の熱画像データは、人体106を表す領域の特徴に基づいて分類される。分類された熱画像データは、分類データ311BとしてDB部311に格納される。なお、学習フェーズにより生成されたニューラルネットワークは機械学習モデルの一例である。
続いて、図6を参照する。変化検出部307は、分類データ311Bから検出対象となる熱画像データを読み出し、読み出した熱画像データから比較部位パラメータ311Cが指定する部位を検出する(601)。例えば、比較部位パラメータ311Cとして顔部が指定されているのであれば、変化検出部307は、検出対象となる熱画像データから顔部を検出する。
次に、変化検出部307は、熱画像データから検出した部位の体温を算出し、算出した体温と、当該熱画像データが属するグループに対応する基準値とを比較することで、人体106の体温の変化の有無を検出する(602)。ここでは、変化検出部307は、算出した体温と基準値が示す平熱との温度差がプラスマイナス1℃以上であれば、体温の変化があったと判定する。
図6の例では、分類データ311Bは姿勢及び奥行きに応じて第1~第Nのグループに分けられている。したがって、基準値も第1~第Nのグループに対応してN個存在する。
本実施の形態では、基準値は、学習フェーズで算出されたものを採用したが、本開示はこれに限定されず、グループ毎に事前に定められた値が採用されもよい。或いは、基準値は、現在から過去一定期間に分類された熱画像データからグループ毎に算出された値が採用されてもよい。
図7は、検出フェーズにおける情報処理装置102の処理の一例を示すフローチャートである。なお、図7のフローチャートは、例えば、感知部101Aが熱画像データを取得する所定のサンプリング周期で定期的に実行される。
まず、データ分類部305は、時刻データ付与部304により時刻データが付与された熱画像データを取得する(S701)。次に、データ分類部305は、取得した熱画像データに対してマスク処理を行い、25℃~45℃以外の部分をマスクする(S702)。
次に、データ分類部305は、マスク処理が行われた熱画像データを、学習フェーズで分類パラメータ311Aが生成されたニューラルネットワークに入力することで分類する(S703)。これにより、熱画像データは、姿勢及び奥行きに応じて第1~第Nのグループのうち、いずれかのグループに分類されることになる。また、熱画像データは第1~第Nのいずれのグループにも分類できないことも生じ得る。例えば、学習フェーズではとらなかった姿勢及び奥行きを検出フェーズにおいて、人体106がとるようになった場合である。この場合、この熱画像データはその他のグループに分類される。
次に、データ分類部305は、その他のグループに分類された熱画像データの個数が基準個数を超えたか否かを判定する(S704)。
その他のグループに分類された熱画像データの個数が基準個数を超えた場合(S704でYES)、学習フェーズの再実行を促すフラグを生成する(S705)。ここで、生成されたフラグは、例えば、情報表示部103Aに送信される。情報表示部103Aは、フラグが生成されたことを示す画像を表示部310に表示する。これにより、管理者は、再度、学習フェーズを実行するように促されることになる。管理者は、例えば、図略の入力装置を用いて再学習コマンドを情報処理部102Aに入力する。すると、データ分類部305は、現在までに分類データ311Bとして蓄積された全ての熱画像データを用いて、上記の学習フェーズを実行し、分類パラメータ311Aを再度生成する。これにより、その他のグループに分類された熱画像データが示す人体106の姿勢及び奥行きを含むグループが新たに学習されることになる。その結果、検出フェーズにおいて新たにとるようになった人体106の姿勢及び奥行きに基づくグループが分類対象のグループとして追加されることになる。なお、学習フェーズが再実行された場合、グループ毎に分類された熱画像データからグループ毎の基準値が算出されるので、新たに追加されたグループに分類された熱画像データは、対応する基準値と比較されて温度の変化が検出されることになる。
次に、変化検出部307は、検出対象となる熱画像データから比較部位パラメータ311Cが示す部位を検出し、検出した部位の画素値を用いて人体106の体温を算出する(S706)。
次に、変化検出部307は、検出対象となる熱画像データのグループに対応する基準値と、S706で算出した人体106の体温とを比較し、人体106の体温と基準値との温度差がプラスマイナス1℃以上であれば(S708でYES)、アラーティング情報を生成する(S709)。S709が終了すると処理はS710に進む。生成されたアラーティング情報は、情報表示部103Aに送信され、管理者にアラートが発報される。一方、人体106の体温と基準値との温度差がプラスマイナス1℃未満であれば(S708でNO)、処理はS710に進む。
S710では、データ管理部306は、検出対象となる熱画像データが分類された分類データ311Bを用いて、当該熱画像データが属するグループの基準値を更新し、処理をS701に戻す。例えば、検出対象となる熱画像データが第1のグループに分類されたとするならば、データ管理部306は、第1のグループの基準値を更新すればよい。
以上のように、実施の形態1の情報処理装置102によれば、熱画像データを姿勢及び奥行きに基づくグループに応じて分類し、そのグループに対応する基準値と、熱画像データから算出される体温とを比較することで、人体106の体温の異常を検出する。そのため、情報処理装置102は、測定時にとる人体106の姿勢及び奥行きに拘わらず人体106の体温の異常の有無を精度良く検出できる。また、情報処理装置102は、人体106の体温を非接触で測定できるので、人体106及び人体106の管理者ともに負担をかけずに体温の異常を検出できる。また、本態様は、人体106を撮影することで得られた熱画像データから基準値が算出されているので、人体106に適した基準値を算出できる。
(実施の形態2)
図8は、実施の形態2にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。実施の形態2にかかる生体情報感知装置は、電波センサを含む感知装置901_Aを採用したものである。本実施の形態において、実施の形態1と同一の構成要素については説明を省く。
感知装置901_Aは、電波センサを含み、図1と同様、寝室等の居室内に配置されている。ここで、感知装置901_Aは、例えば、寝具107の全域が計測範囲に含まれるように居室に設置されている。感知装置901_Aは、人体106の活動量データを取得する。感知装置901_Aは、取得した活動量データをGW104を介し、情報処理装置902に送信する。情報処理装置902は、活動量データを人体106の姿勢に基づくグループ毎に分類して管理する。
情報処理装置902は、グループ毎に分類された活動量データと今回測定した活動量データとを比較することで、人体106の活動量(生体情報の一例)の変化を検出すると、GW104を介して、人体106の活動量が異常であることを示すアラーティング情報を情報表示装置103に通知する。情報表示装置103は、アラーティング情報を受信するとアラートを発報する。これにより、人体106の管理者は、人体106の活動量の異常を認識する。
図9は、実施の形態2にかかる情報処理装置が適用された生体情報感知装置の機能構成の一例を示す図である。生体情報感知装置は、感知装置901_Aに相当する感知部901A(測定部の一例)、情報処理装置902に相当する情報処理部902A、及び情報表示装置103に相当する情報表示部103Aを含む。感知部901Aは、図3に対してセンサ部901が相違する。
センサ部901は、例えば、2chのドップラー方式の電波センサで構成されており、人体106に対して所定のサンプリング周期で電波を照射して人体106からの反射波を受信することで、人体106の活動量データを取得する。電波としては、例えば、24GHz帯のマイクロ波が採用できる。
なお、センサ部901はドップラー方式以外の電波センサが採用されてもよい。例えば、Frequency Modulated Continuous Wave(FMCW)方式などの電波センサが採用されてもよい。
データ分類部905は、学習フェーズにおいて、時刻データ付与部304により時刻データが付与された複数の活動量データを取得し、取得した複数の活動量データを波形情報に基づいて分類することで、人体106の姿勢に基づくグループを学習する。
センサ部901が2chのドップラー方式の電波センサで構成されるのであれば、活動量データの振幅に応じて人体106までの距離が変化し、活動量データの周波数の変化に応じて体動の速さが変化する。したがって、この場合、波形情報として、振幅及び周波数が採用される。
また、センサ部901がFMCW方式の電波センサで構成されているのであれば、活動量データの振幅及び位相に応じて人体106までの距離が変化し、活動量データの位相の変化に応じて体動の速さが変化する。したがって、この場合、波形情報として、振幅及び位相が採用される。
また、仰向けやうつぶせや横向きといった人体106の姿勢に応じて体動の速さが変化し、就寝中や起床中といった人体106の状態に応じて体動の速さが変化する。したがって、波形情報に基づいて活動量データを分類することで、活動量データを人体106の姿勢と状態と距離とのグループ毎に分類でき、人体106がとった姿勢と状態と距離毎のグループを学習できる。
なお、本実施の形態では、データ分類部905は、実施の形態1で説明した機械学習を用いてグループを学習すればよい。
データ分類部905は、生体情報の変化を検出する検出フェーズにおいて、時刻データ付与部304により時刻データが付与された活動量データを波形情報に基づいて、学習フェーズで学習されたいずれかのグループに分類する。詳細には、データ分類部905は、学習フェーズで生成されたニューラルネットワークに活動量データを入力することで活動量データを分類すればよい。
データ管理部906は、学習フェーズにおいて、データ分類部905でグループ毎に分類された活動量データからグループ毎の活動量の代表値を、グループ毎の基準値として算出する。ここで、基準値としては、体動値、心拍数、及び呼吸数のそれぞれの基準値が採用できる。活動量データにおいて、体動値、心拍数、及び呼吸数の周波数帯域は事前に知られているので、それぞれの周波数帯域の値から体動値、心拍数、及び呼吸数を検出できる。したがって、データ管理部906は、体動値、心拍数、及び呼吸数のそれぞれのグループ毎の平均値を、グループ毎の体動値、心拍数、及び呼吸数の基準値として算出すればよい。なお、データ管理部306は、検出フェーズにおいても、活動量データの分類結果に基づいて、基準値を更新してもよい。
変化検出部907は、検出フェーズにおいて、データ分類部905によりいずれかのグループに分類された活動量データから人体106の体動値、呼吸数、及び心拍数を含む活動量を算出し、算出した活動量を対応するグループの基準値とを比較することで、人体106の活動量の変化の有無を検出する。そして、変化検出部907は、活動量の変化を検出した場合、活動量が異常であることを示すアラーティング情報を生成する。ここで、基準値は、人体106の平常時の活動量を想定しているので、変化検出部907は、対象となる活動量データが示す活動量と基準値との差分がプラスマイナス所定値以上であれば、活動量に変化があると判定すればよい。
DB部911は、分類パラメータ911Aと、分類データ911Bと、比較値算出パラメータ911Cとを記憶する。分類パラメータ911Aは、例えば、学習フェーズにおいて、活動量データを学習することで得られたニューラルネットワークの重み係数である。比較値算出パラメータ911Cは、変化検出部907が変化検出時に活動量データから検出する比較値の内容を定めるパラメータである。本実施の形態では、体動値、脈拍数、心拍数が比較値として採用されるため、比較値算出パラメータ911Cとしては、例えば、体動値、脈拍数、及び心拍数のそれぞれを示す情報が採用される。或いは、比較値算出パラメータ911Cとしては、例えば、体動値、脈拍数、及び心拍数のそれぞれの活動量データにおける周波数帯域が採用されてもよい。
なお、教師あり機械学習が採用される場合、DB部911は、事前に定められた分類対象となるグループに関する情報(姿勢を示す情報(仰向け及び俯せ等)、状態(就寝中及び起床中等)、距離)を記憶しても良い。
次に、図10~図12を用いて情報処理部902Aにおけるデータ処理方法を説明する。図10は、学習フェーズにおけるデータ処理方法を説明する図である。図11は、検出フェーズにおけるデータ処理方法を説明する図である。図12は、図11に続く、検出フェーズにおけるデータ処理方法を説明する図である。
図10を参照する。生体情報感知装置が現場に設置されると、情報処理部902Aは、活動量データを学習することで分類パラメータ911Aを生成する。まず、時刻データ付与部304は、感知部901Aが取得した活動量データ(1001)のそれぞれに対し、時刻データを付与する(1002)。
次に、データ分類部905は、ニューラルネットワークを用いた機械学習を行うことで、時刻データが付与された活動量データ(1003)をグループ毎に分類し、分類パラメータ911Aを生成する(1004)。
続いて、図11を参照する。学習フェーズが終了すると検出フェーズが開始される。時刻データ付与部304は、学習フェーズと同様、感知部901Aで取得された活動量データ(1101)に対し、時刻データを付与する(1002)。次に、データ分類部905は、学習フェーズと同様、時刻データが付与された活動量データ(1103)を学習フェーズで生成したニューラルネットワークに入力することで、当該活動量データを学習フェーズで分類されたいずれかのグループに分類する(1104)。これにより、検出対象の活動量データは、波形情報に基づいて分類される。分類された活動量データは、分類データ911BとしてDB部911に格納される。
続いて、図12を参照する。変化検出部907は、分類データ911Bから検出対象となる活動量データを読み出し、読み出した活動量データから比較値算出パラメータ911Cが指定する比較値を検出する(1201)。ここでは、比較値としては、体動値、脈拍数、及び心拍数が採用される。したがって、読み出した活動量データから体動値、脈拍数、及び心拍数が抽出される。
次に、変化検出部907は、活動量データから検出した体動値、脈拍数、及び心拍数と、当該活動量データが分類されたグループに対応する基準値とを比較することで、人体106の活動量の変化の有無を検出する(1202)。ここでは、変化検出部307は、検出した体動値、脈拍数、及び心拍数とそれぞれに対応する基準値との差分がプラスマイナス所定値以上であれば、活動量に変化があったと判定する。
図12の例では、分類データ911Bは第1~第N(Nは1以上の整数)のN個のグループに分けられている。したがって、基準値も第1のグループ~第Nのグループに対応してN個存在する。なお、図12の例では、基準値として体動値、心拍数、及び脈拍数のいずれか一つの基準値が図示されているが、実際には体動値、心拍数、及び脈拍数のそれぞれの基準値が含まれている。
本実施の形態では、基準値は、学習フェーズで算出されたものを採用したが、本開示はこれに限定されず、グループ毎に事前に定められた値が採用されもよい。或いは、基準値は、現在から過去一定期間に分類された活動量データから算出された値が採用されてもよい。
なお、実施の形態2において、フローチャートは、熱画像データを活動量データとする以外、図7と同じであるため、説明を省く。
以上のように、実施の形態2では、活動量データの波形情報によって、姿勢、状態、及び距離を含むグループ毎に活動量データが分類され、分類された活動量データの活動量が対応するグループの基準値と比較されて、活動量の異常が検出される。そのため、実施の形態2では、測定時にとる人体106の姿勢に拘わらず、人体106の活動量の異常の有無を精度良く検出することができる。また、本態様は、生体情報を非接触で測定するので、人体106及び測定者ともに負担をかけずに、活動量の異常を検出できる。
なお、本開示にかかる情報処理装置は下記の変形例を採用できる。
(変形例1)
変化検出部307は、測定データに付与された時刻データに基づいて測定データが所定の時間帯に測定された測定データであるか否かを判定し、所定の時間帯に測定された測定データである場合、変化を検出する処理を実行してもよい。ここで、所定の時間帯としては、人体106の活動量が安定した時間帯が採用され、例えば、起床直後の一定時間、起床直前の一定時間、就寝直前の一定時間、又は就寝直後の一定時間が採用できる。
この場合、データ分類部305は、所定の時間帯の測定された測定データのみを分類してもよい。これにより、基準値は所定の時間帯の測定データから算出されたものとなり、生体情報の変化を精度良く検出できる。
或いは、データ分類部305は、姿勢や状態や距離に加えて時間帯も考慮に入れて測定データを分類してもよい。この場合、時間帯に応じて異なる人体106の活動量を考慮に入れて生体情報の変化を精度良く検出できる。
(変形例2)
図13は、本開示の変形例2にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。実施の形態1では、図1に示すように、感知装置101は、空気調和機105とは別体で構成されているが、変形例2では、図13に示すように、感知装置101_Bは、空気調和機105Bに内蔵されていている。図13の例では、感知装置101_Bは、空気調和機105Bの前面において、センサ面が人体106と対向するように配置されている。
変形例2においては、情報処理装置102は、例えば、クラウドサーバで構成されてもよいし、ローカルに設置されたサーバで構成されてもよい。
(変形例3)
図14は、本開示の変形例3にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。実施の形態1では、情報処理部102Aは、感知部101Aと別体で構成されていたが、変形例3では、感知部101Bは、図14に示すように、図3に示す感知部101Aと情報処理部102Aとが統合して構成されている。変形例3では、感知部101Bによって情報処理装置が構成される。
変形例3では、感知部101Aと情報処理部102Aとが統合されているので、図3に存在した、送信部302及び受信部303が省かれている。なお、変形例3において、感知部101Bは、空気調和機105に内蔵されたセンサユニットで構成されてもよいし、空気調和機105とは別体に設けられた専用のセンサユニットで構成されてもよい。
図15は、本開示の変形例3にかかる情報処理装置が適用された生体情報感知装置の接続構成の一例を示す図である。感知装置101_Bは、図14に示す感知部101Bに相当する。感知装置101_Bは、GW104を介して情報表示装置103と接続されている。
(変形例4)
図16は、本開示の変形例4にかかる情報処理装置が適用された生体情報感知構成の機能の構成を示す図である。実施の形態1では、時刻データ付与部304は、情報処理部102Aに設けられていたが、変形例4では、時刻データ付与部304は感知部101Cに設けられている。時刻データ付与部304は、センサ部301と送信部302との間に設けられている。一方、情報処理部102Cは時刻データ付与部304を備えていない。変形例4では、時刻データを付与する処理が感知部101Cで行われるので、情報処理部102Cの処理負担を軽減できる。変形例4では、感知部101Cは空気調和機105に内蔵された高機能センサ、或いは空気調和機105とは別体で構成された高機能センサで構成されている。
(変形例5)
図17は、本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の機能の構成を示す図である。図17の例では、情報処理部102Eが、時刻データ付与部304を備える情報処理部102Dと、情報処理部102Eとに分けられている。
情報処理部102Dは、例えば、空気調和機105に内蔵された高機能センサ或いは家庭用のコンピュータで構成される。情報処理部102Eは、例えば、クラウドサーバで構成される。情報処理部102Dは、感知部101Dと通信するための受信部303Dと、情報処理部102Eと通信するための送信部302Dとを備えている。情報処理部102Eは、情報処理部102Dと通信するための受信部303を備えている。図18は、本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の接続構成の第一例を示す図である。情報処理部102Dに相当する情報処理装置102_Dは、GW104を介して情報処理部102Eに相当する情報処理装置102_E及び情報表示装置103と接続されている。また、情報処理装置102_Dは感知部101Dに相当する感知装置101_Dと接続されている。
図19は、本開示の変形例5にかかる情報処理装置が適用された生体情報感知装置の接続構成の第二例を示す図である。第二例では、感知装置101_D、情報処理装置102_D、情報処理装置102_E、及び情報表示装置103は、それぞれ、GW104を介して接続されている。
(変形例6)
図20は、本開示の変形例6にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。変形例6では、GW104は、公衆通信網801を介して情報処理装置102及び情報表示装置103と接続されている。なお、感知装置101は、GW104と接続されている。
(変形例7)
図21は、本開示の変形例7にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。変形例7は、公衆通信網801を利用して変形例5にかかる生体情報感知装置を構成したものである。GW104は公衆通信網801を介して情報処理装置102_Eと情報表示装置103と接続されている。感知装置101は、情報処理装置102_Dを介してGW104と接続されている。
(変形例8)
図22は、本開示の変形例8にかかる情報処理装置が適用された生体情報感知装置の接続構成を示す図である。変形例8は、公衆通信網801を利用して変形例5にかかる生体情報感知装置を構成したものである。
GW104は、公衆通信網801を介して情報処理装置102_Eと情報表示装置103と接続されている。感知装置101と情報処理装置102_DはそれぞれLANを介してGW104と接続されている。
(変形例9)
図23は、本開示の変形例9にかかる情報処理装置が適用された生体情報感知装置の概要を示す図である。変形例9は、実施の形態2にかかる生体情報感知装置において、感知装置901_Aを寝具107の下部に配置したものである。寝具107の下部に感知装置901_Aを配置した場合においても、実施の形態2と同様、活動量データを計測できる。
(変形例10)
実施の形態2では、活動量として体動値、心拍数、及び脈拍数が採用されたが、これらのうちの少なくとも1つが活動量として採用されてもよい。
(変形例11)
実施の形態1では、変化検出部307は、人体106の体温の異常を示すアラーティング情報を生成するとして説明したが、本開示はこれに限定されない。例えば、変化検出部307は、熱画像データから算出した人体106の体温と基準値との差分を比較結果として生成し、当該差分を示す情報を送信部308を介して情報表示部103Aに送信してもよい。
(変形例12)
実施の形態2では、変化検出部907は、人体106の活動量の活動量の異常を示すアラーティング情報を生成するとして説明したが、本開示はこれに限定されない。変化検出部907は、活動量データから算出された人体106の活動量と基準値との差分を比較結果として生成し、当該差分を示す情報を送信部308を介して情報表示部103Aに送信してもよい。活動量データには、体動値、呼吸数、及び心拍数が含まれるので、変化検出部907は、体動値、呼吸数、及び心拍数のそれぞれについての基準値に対する差分を比較結果に含ませればよい。
なお、変形例1~8は実施の形態1,2ともに適用可能である。
本開示の各実施形態にかかる情報処理装置及び方法は、人体に対し非侵襲で生体情報を取得することができ、さらに被測定者の姿勢が変化しても適切に生体状態を把握することができることにより、高齢者介護における日々の生体情報記録及び変化の検知や、体動状態に連動した空気調和機の制御に有用である。
101A 感知部
102A 情報処理部
103A 情報表示部
106 人体
301 センサ部
302 送信部
303 受信部
304 時刻データ付与部
305 データ分類部
306 データ管理部
307 変化検出部
308 送信部
309 受信部
310 表示部
311 DB部
901A 感知部
901 センサ部
902A 情報処理部
905 データ分類部
906 データ管理部
907 変化検出部
911 DB部

Claims (11)

  1. コンピュータを用いて、測定対象者の生体情報を算出するための測定データを、非接触で測定する測定部から取得し、
    取得された前記測定データの内容に基づいて、前記測定データを前記測定対象者の少なくとも姿勢に応じたグループに分類し、前記分類された測定データから前記生体情報を算出し、前記算出した生体情報を前記測定データが属しているグループに対応する基準値と比較し、
    前記比較に基づく通知を情報提示部にさせる、
    情報処理方法。
  2. 前記測定データの分類においては、前記測定データの内容に基づく前記測定データの前記グループへの分類を機械学習した機械学習モデルを用いて前記測定データを前記グループに分類し、
    前記基準値は、前記機械学習において、前記グループに分類された前記測定データから算出された前記グループの前記生体情報の代表値である、
    請求項1記載の情報処理方法。
  3. 前記情報処理方法は、さらに、
    前記測定データの内容に基づく前記測定データの前記グループへの分類を前記機械学習モデルに機械学習させ、
    前記機械学習において、前記グループに分類された測定データから前記グループの前記生体情報の代表値を、前記グループの前記基準値として算出する、
    請求項2記載の情報処理方法。
  4. 前記測定部は、熱画像センサであり、
    前記生体情報は、体温であり、
    前記測定データは、前記熱画像センサで得られた熱画像データであり、
    前記測定データの前記グループへの分類とは、前記熱画像センサにより得られた前記熱画像データに含まれる前記測定対象者を表す領域の特徴に基づいて前記熱画像データを人体の姿勢に基づくグループ毎に分類することであり、
    前記比較においては、前記分類された熱画像データから前記測定対象者の体温を算出し、前記算出した体温と、前記分類された熱画像データが属するグループに対応する基準値とを比較する、
    請求項1~3のいずれかに記載の情報処理方法。
  5. 前記測定部は、電波センサであり、
    前記生体情報は、前記測定対象者の体動値、呼吸数、及び心拍数の少なくとも1つを含む活動量であり、
    前記測定データは、前記電波センサにより得られた前記活動量を示す活動量データであり、
    前記測定データの前記グループへの分類とは、前記電波センサにより得られた前記活動量データの波形情報に基づいて前記活動量データを人体の姿勢に基づくグループ毎に分類することであり、
    前記比較においては、前記分類された活動量データから前記測定対象者の前記活動量を算出し、前記算出した活動量と、前記分類された活動量データが属するグループに対応する基準値とを比較する、
    請求項1~3のいずれかに記載の情報処理方法。
  6. 前記グループのいずれにも該当しない前記測定データの個数が基準個数を超えた場合、前記機械学習モデルの再学習を促す情報を生成する、
    請求項3記載の情報処理方法。
  7. 前記情報処理方法は、さらに、前記測定データに対する測定時刻を示す時刻データを取得し、
    前記比較においては、前記時刻データに基づいて前記測定データが所定の時間帯に測定されたか否かを判定し、前記測定データが前記所定の時間帯に測定されたと判定された場合、前記比較を実行する、
    請求項1~6のいずれかに記載の情報処理方法。
  8. 前記姿勢は、前記測定対象者の体の向きである、
    請求項1~7のいずれかに記載の情報処理方法。
  9. 前記比較に基づく通知は、前記生体情報と前記基準値との比較結果、又は前記測定対象者の異常である、
    請求項1~8のいずれかに記載の情報処理方法。
  10. 測定対象者の生体情報を算出するための測定データを、非接触で測定する測定部から取得する取得部と、
    受信された前記測定データの内容に基づいて、前記測定データを前記測定対象者の少なくとも姿勢に応じたグループに分類するデータ分類部と、
    前記分類された測定データから前記生体情報を算出し、前記算出した生体情報を前記測定データが属しているグループに対応する基準値と比較する比較部と、
    前記比較に基づく通知を情報提示部にさせるための情報を前記情報提示部に送信する送信部と、
    を備える情報処理装置。
  11. 請求項1~9のいずれか1項に記載の情報処理方法をコンピュータに実行させるプログラム。
JP2017224454A 2017-03-27 2017-11-22 情報処理方法、情報処理装置、及びプログラム Active JP7065447B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/915,008 US11185235B2 (en) 2017-03-27 2018-03-07 Information processing method, information processing device, and recording medium
CN201810228173.7A CN108662728B (zh) 2017-03-27 2018-03-20 信息处理方法、信息处理装置以及记录介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017061295 2017-03-27
JP2017061295 2017-03-27

Publications (2)

Publication Number Publication Date
JP2018161462A JP2018161462A (ja) 2018-10-18
JP7065447B2 true JP7065447B2 (ja) 2022-05-12

Family

ID=63859248

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017224454A Active JP7065447B2 (ja) 2017-03-27 2017-11-22 情報処理方法、情報処理装置、及びプログラム

Country Status (1)

Country Link
JP (1) JP7065447B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7429877B2 (ja) * 2018-12-28 2024-02-09 パナソニックIpマネジメント株式会社 推定方法および推定装置
JP7049524B2 (ja) * 2019-03-01 2022-04-06 三菱電機株式会社 空気調和機および健康管理補助システム
US20220280063A1 (en) * 2019-08-23 2022-09-08 Data Solutions, Inc. Respiration detection system and respiration detection method
KR102389286B1 (ko) * 2020-04-02 2022-04-21 주식회사 시온테크닉스 열이미지 알고리즘을 이용한 노인 케어 장치
WO2023080019A1 (ja) * 2021-11-04 2023-05-11 オムロン株式会社 生体情報処理装置、生体情報処理方法およびプログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001236583A (ja) 2000-12-19 2001-08-31 Matsushita Electric Ind Co Ltd 安否確認システム
JP2001256480A (ja) 2000-03-09 2001-09-21 Hitachi Ltd 画像自動分類方法及び装置
JP2001315519A (ja) 2000-05-09 2001-11-13 Denso Corp 車両用空調装置
JP2008167899A (ja) 2007-01-11 2008-07-24 Adachi Shokai:Kk 測定システム、測定装置、通信装置及び測定方法
JP2003534864A5 (ja) 2001-06-07 2008-07-24
JP2009119896A (ja) 2007-11-12 2009-06-04 Nissan Motor Co Ltd 顔温度算出装置および顔温度算出方法
JP2014234113A (ja) 2013-06-04 2014-12-15 株式会社デンソー 車両用基準値生成装置
JP2016067773A (ja) 2014-09-30 2016-05-09 国立大学法人 千葉大学 自律移動ロボット及びバイタルサインモニタリング方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6996256B2 (en) * 2000-06-08 2006-02-07 Honeywell International Inc. Detection system and method using thermal image analysis

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001256480A (ja) 2000-03-09 2001-09-21 Hitachi Ltd 画像自動分類方法及び装置
JP2001315519A (ja) 2000-05-09 2001-11-13 Denso Corp 車両用空調装置
JP2001236583A (ja) 2000-12-19 2001-08-31 Matsushita Electric Ind Co Ltd 安否確認システム
JP2003534864A5 (ja) 2001-06-07 2008-07-24
JP2008167899A (ja) 2007-01-11 2008-07-24 Adachi Shokai:Kk 測定システム、測定装置、通信装置及び測定方法
JP2009119896A (ja) 2007-11-12 2009-06-04 Nissan Motor Co Ltd 顔温度算出装置および顔温度算出方法
JP2014234113A (ja) 2013-06-04 2014-12-15 株式会社デンソー 車両用基準値生成装置
JP2016067773A (ja) 2014-09-30 2016-05-09 国立大学法人 千葉大学 自律移動ロボット及びバイタルサインモニタリング方法

Also Published As

Publication number Publication date
JP2018161462A (ja) 2018-10-18

Similar Documents

Publication Publication Date Title
CN108662728B (zh) 信息处理方法、信息处理装置以及记录介质
JP7065447B2 (ja) 情報処理方法、情報処理装置、及びプログラム
Deep et al. A survey on anomalous behavior detection for elderly care using dense-sensing networks
Liu et al. TagSheet: Sleeping posture recognition with an unobtrusive passive tag matrix
US11270799B2 (en) In-home remote monitoring systems and methods for predicting health status decline
JP7065459B2 (ja) 通信装置、異常通知システム、および異常通知方法
Rastogi et al. A systematic review on machine learning for fall detection system
US20180049675A1 (en) Location, activity, and health compliance monitoring using multidimensional context analysis
US11516625B2 (en) Systems and methods for mapping a given environment
KR102350643B1 (ko) 활동 및 수면 데이터를 활용한 수면 품질 평가 시스템
JP2023521416A (ja) 環境健康監視および予測的評価を可能にする非接触型センサー駆動デバイス、システム、および方法
US20230206078A1 (en) Anatomical position monitoring for bodily pressure ulcers
KR102304877B1 (ko) 딥러닝 기반의 수면 평가 및 예측을 위한 수면 평가 시스템
CN111759273A (zh) 行为追踪方法及装置
CN114140997A (zh) 养老院卫生间老人滞留及身体状况监测预警系统及方法
Adolf et al. Deep neural network based body posture recognitions and fall detection from low resolution infrared array sensor
Hung et al. Bed posture classification based on artificial neural network using fuzzy c-means and latent semantic analysis
Del Regno et al. Thermal imaging and radar for remote sleep monitoring of breathing and apnea
US11457875B2 (en) Event prediction system, sensor signal processing system, event prediction method, and non-transitory storage medium
JP7327397B2 (ja) コンピューターで実行されるプログラム、情報処理システム、および、コンピューターで実行される方法
JP7342863B2 (ja) コンピュータで実行されるプログラム、情報処理システム、および、コンピュータで実行される方法
US11313962B2 (en) Presence/absence detection method, non-transitory storage medium, sensor processing system, and sensor system
Ahamed Smart aging: utilisation of machine learning and the Internet of Things for independent living
JP7215481B2 (ja) コンピューターで実行されるプログラム、情報処理装置、および、コンピューターで実行される方法
KR20200082689A (ko) 딥러닝 기반의 재실자 포즈 분류를 이용한 재실자 활동량 산출 방법 및 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200612

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210506

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220322

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220411

R151 Written notification of patent or utility model registration

Ref document number: 7065447

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151