JP6856236B2 - システム、端末装置、サーバ装置、プログラムおよび方法 - Google Patents

Description

本発明は、製品の製造に関する情報を記録する技術に関する。

製品の製造の様子を撮影した画像を記憶しておき、必要に応じて画像を読み出して表示させることにより、過去に行われた製造の様子を確認できるようにした仕組みが提案されている。例えば、本願の出願人による出願に係る特許文献１に記載の仕組みにおいては、作業場毎に設けられた撮影装置が撮影した画像が蓄積され、表示装置に表示される複数の進捗表示欄のなかからユーザによりいずれかの進捗表示欄が特定されると、当該特定された進捗表示欄に応じた画像が表示装置に表示される。

特許第５４１６３２２号明細書

本発明の目的は、過去に行われた製造に関する情報を確認し易くすることである。

本発明は、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第１の表示装置が表示した画像を表す第２の画像データを取得するデータ取得手段と、前記データ取得手段が取得した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像を第２の表示装置に同時に表示させる表示指示手段とを備えるシステムを提供する。

上記のシステムにおいて、前記データ取得手段は、前記製造の管理情報を示す製造管理データを取得し、前記記憶制御手段は、前記データ取得手段が取得した前記製造管理データに対応付けて、前記データ取得手段が取得した前記第１の画像データと前記第２の画像データを前記記憶装置に記憶させ、前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像と共に、前記第１の画像データと前記第２の画像データに対応付けて前記記憶装置に記憶されている前記製造管理データが示す管理情報を前記第２の表示装置に表示させる、という構成が採用されてもよい。

上記のシステムにおいて、前記データ取得手段は、前記製造装置を操作するオペレータを撮影装置により撮影した画像を表す第３の画像データを取得し、前記記憶制御手段は、前記データ取得手段が取得した同時期に生成された前記第１の画像データと前記第２の画像データと前記第３の画像データを対応付けて前記記憶装置に記憶させ、前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データと前記第３の画像データの各々が表す画像を前記第２の表示装置に同時に表示させる、という構成が採用されてもよい。

また、本発明は、第１の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する受信手段と、前記受信手段が受信した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データを第２の端末装置に送信する送信手段とを備えるサーバ装置を提供する。

また、本発明は、サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する受信手段と、前記受信手段が受信した前記第１の画像データと前記第２の画像データの各々が表す画像を表示装置に同時に表示させる表示指示手段とを備える端末装置を提供する。

また、本発明は、コンピュータに、第１の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する処理と、受信した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる処理と、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データを第２の端末装置に送信する処理とを実行させるためのプログラムを提供する。

また、本発明は、コンピュータに、サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する処理と、受信した前記第１の画像データと前記第２の画像データの各々が表す画像を表示装置に同時に表示させる処理とを実行させるためのプログラムを提供する。

また、本発明は、システムが、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第１の表示装置が表示した画像を表す第２の画像データを取得するステップと、前記システムが、取得した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させるステップと、前記システムが、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像を第２の表示装置に同時に表示させるステップとを備える方法を提供する。

本発明によれば、過去に行われた製造に関する情報が確認し易くなる。

実施形態にかかるシステムの全体構成を示した図。 制御コンピュータの表示装置に表示される画面の一例を示す図。 制御コンピュータの表示装置に表示される画面の一例を示す図。 制御コンピュータの表示装置に表示される画面の一例を示す図。 制御コンピュータの表示装置に表示される画面の一例を示す図。 実施形態にかかる制御コンピュータのハードウェアとして利用可能なコンピュータの基本構成を示した図。 実施形態にかかる制御コンピュータの機能構成を示した図。 実施形態にかかるサーバ装置のハードウェアとして利用可能なコンピュータの基本構成を示した図。 実施形態にかかるサーバ装置の機能構成を示した図。 実施形態にかかるサーバ装置のハードウェアとして利用可能なコンピュータの基本構成を示した図。 実施形態にかかるサーバ装置の機能構成を示した図。 実施形態にかかるサーバ装置に記憶されている製造管理テーブルの構成を例示した図。 実施形態にかかるサーバ装置に記憶されている対応関係テーブルの構成を例示した図。 実施形態にかかる端末のハードウェアとして利用可能なコンピュータの基本構成を示した図。 実施形態にかかる端末の機能構成を示した図。 実施形態にかかる記録動作の一例を示すシーケンスチャート 実施形態にかかる閲覧動作の一例を示すシーケンスチャート 表示装置に表示される画面の一例を示す図。 表示装置に表示される画面の一例を示す図。 変形例にかかるシステムの全体構成を示した図。 変形例にかかる撮影装置の概略を示す図。

［実施形態］
図１は本発明の一実施形態に係る記録システム１の全体構成を示す図である。記録システム１は製品の製造等に関する情報を記録するシステムである。記録システム１は製造装置１１ａ、１１ｂの動作環境の属性値（温度、湿度等）や製造に用いられた材料の量等の情報を記録する。記録システム１は、撮影装置１２ａ、１２ｂ、制御コンピュータ（端末装置の一例）１３ａ、１３ｂ、端末１４、サーバ装置１５、およびサーバ装置１６を備える。制御コンピュータ１３ａ、１３ｂは本発明に係る端末装置の一例である。サーバ装置１５およびサーバ装置１６は本発明に係るサーバ装置の一例である。

製造装置１１ａ、１１ｂは製品の組立等の製造を行う装置である。製造装置１１ａ、１１ｂは例えば板金加工を行う装置や、製品の塗装を行う装置であってもよい。以下の説明では、説明の便宜上、製造装置１１ａ、１１ｂに共通する構成や動作を説明する場合には、これらを「製造装置１１」と称する。この実施形態では、１または複数の工程を経て製品が製造され、各工程の作業が１または複数の製造装置１１により行われる。

製造装置１１のそれぞれには、各装置の動作に関連する各種物理量を計測する１または複数のセンサＳが設けられている（または接続されている）。センサＳ（計測装置の一例）が計測する物理量の種別は、例えば温度、湿度、照度、材料の流量、機器の電力値、モータの回転数、塗装に係る水槽の洗浄度、ｐＨ値であるがこれらに限られない。センサＳによって計測される物理量の種別は記録対象の製造装置１１の種類や製品の種類によって異なる。この実施形態ではそれぞれの製造装置１１に応じた種別のセンサＳが予め設けられている。センサＳは計測結果を示す計測結果データを制御コンピュータ１３に出力する。センサＳは、例えば「１分間隔」や「５分間隔」など、予め定められたサンプリング周期で物理量を計測してもよい。

製造装置１１に設けられた（または接続された）センサＳおよび製造装置１１の種類や製造元メーカーは様々であり、製造装置１１のそれぞれで、センサＳなどの外部装置との間で入出力されるデータのフォーマットやインタフェース規格は異なる。製造装置１１およびセンサＳは独自のインタフェース規格でデータを入出力してもよい。

撮影装置１２ａ、１２ｂは撮影し、撮影した画像（静止画像または動画像）を表す画像データを出力する。この実施形態では、撮影装置１２ａは製造装置１１ａを撮影し、撮影装置１２ｂは製造装置１１ｂを撮影する。以下の説明では、撮影装置１２ａ、１２ｂに共通する構成や動作を説明する場合には、これらを「撮影装置１２」と称する。この実施形態では、撮影装置１２は、製造装置１１の動作状態や製造装置１１に対する操作者の操作を、予め定められたタイミング（例えば、１秒毎）で撮影し、撮影した静止画像を表す画像データ（以下「撮影データ」という）を生成する。撮影装置１２は、撮影データ、その撮影データの撮影時刻を示す時刻情報（タイムスタンプ）および撮影装置１２を識別する撮影識別子（以下「撮影ＩＤ」という）を対応付けてサーバ装置１５に送信する。なお、撮影データが動画像である場合、撮影装置１２は動画のデータフォーマットのなかに予め定められた単位時間毎の撮影時刻を付与する。なお、図１の例では、ひとつの製造装置１１に対してひとつの撮影装置１２が設けられているが、ひとつの製造装置１１を複数の撮影装置１２が撮影してもよい。

制御コンピュータ１３ａは製造装置１１ａを制御するコンピュータであり、制御コンピュータ１３ｂは製造装置１１ｂを制御するコンピュータである。制御コンピュータ１３ａは製造装置１１ａと有線ケーブルにより接続されている。制御コンピュータ１３ｂは製造装置１１ａと一体として構成されている。以下の説明では、説明の便宜上、制御コンピュータ１３ａと制御コンピュータ１３ｂに共通する構成や動作を説明する場合には、これらを「制御コンピュータ１３」と称する。制御コンピュータ１３は、製造装置１１とは別体として構成されていてもよく、また、製造装置１１に内蔵されていてもよい。制御コンピュータ１３は例えばパーソナルコンピュータであってもよい。図１の例では、ひとつの製造装置１１に対しひとつの制御コンピュータ１３が設けられているが、各装置の台数はこれに限られない。例えば、複数の製造装置１１についてひとつの制御コンピュータ１３が設けられていてもよい。また、ひとつの製造装置１１について複数の制御コンピュータ１３が設けられていてもよい。

制御コンピュータ１３は製造装置１１の制御に関する各種情報を表示する表示装置１３０を有する。表示装置１３０は、制御コンピュータ１３に内蔵されていてもよく、また、制御コンピュータ１３と別体として構成され有線または無線により制御コンピュータ１３と接続されてもよい。また、例えば、表示装置１３０は製造装置１１に設けられた操作パネルであってもよい。表示装置１３０には、制御コンピュータ１３が取得した各種センサＳの計測値や、制御コンピュータ１３により製造装置１１の制御に係る情報が表示される。製造装置１１の制御に係る情報は、例えば、製造装置１１の制御プログラムを識別するプログラム番号や、製造装置１１の運転状態を示す情報を含んでもよい。制御コンピュータ１３はオペレータＯＰにより操作される。表示装置１３０に表示される画面は、オペレータＯＰの操作を受け付ける操作画面や、オペレータＯＰにより編集可能な画面であってもよい。

図２乃至図５は表示装置１３０に表示される画面の一例を示す図である。図２に例示される画面は、ＦＥＭＳ（Factory Energy Management System）などの工場エネルギー管理システムにおいて、受配電設備のエネルギー管理や生産設備のエネルギー使用・稼働状況が表示された画面である。図２の例では、設置された各種機器の電力値、蒸気の量、バルブの状態などが模式的に表示されている。

図３に例示される画面は、複数のウィンドウＷ１、Ｗ２、Ｗ３を含む。ウィンドウＷ１には、予め定められた測定対象についての設定値と、実際の測定値とが表示されている。ウィンドウＷ２およびウィンドウＷ３には、製造装置１１に対する制御コマンドなどの情報が表示されている。図４に例示される画面は、測定対象である製造装置１１に備えられているエンジンの回転数や温度などを表すメーターの画像を含む。図５に例示される画面は、測定対象である機材についての電気使用量を表す情報などを含む。

表示装置１３０には、センサＳによる測定結果以外にも、エラーが発生した旨を示すメッセージや、エラーの種別や内容を表すメッセージまたはエラーコードが表示されてもよい。製造装置１１の管理者は、制御コンピュータ１３の表示装置１３０に表示される画面を確認しつつ、製造ラインの管理・保守を行う。

制御コンピュータ１３のハードウェアは、記録システム１のために設計された専用装置であってもよく、また、汎用的なコンピュータであってもよい。制御コンピュータ１３のハードウェアとして利用可能なコンピュータの形態は限定されない。制御コンピュータ１３のハードウェアは、例えば、ノート型ＰＣ（Personal Computer）、タブレット型ＰＣであってもよい。また、制御コンピュータ１３が通話機能を備えたタブレット型ＰＣ（いわゆるスマートフォン）であってもよい。

図６は制御コンピュータ１３のハードウェアとして利用可能なコンピュータの一例であるコンピュータ１０の基本構成を示す図である。コンピュータ１０は、各種データを記憶するメモリ１０１と、メモリ１０１に記憶されているプログラムに従ったデータ処理を行うプロセッサ１０２と、計時を行うクロック１０３と、データ通信を行うインタフェースである通信ＩＦ１０４と、タッチパネルなどの操作装置１０５とを備える。なお、コンピュータ１０は、表示装置（例えば液晶ディスプレイ）と操作装置（例えばタッチパネル）が一体として構成されたタッチディスプレイを備えていてもよい。

図７は制御コンピュータ１３の機能構成を示す図である。すなわち、コンピュータ１０がプログラムに従ったデータ処理を行うことにより、図７に示す構成部を備える制御コンピュータ１３が実現される。以下に制御コンピュータ１３が備える機能構成部を説明する。

計測結果取得手段１３１は、製品の製造に関係する物理量を計測する計測装置（センサＳ）により生成された測定結果データを取得する。測定装置により計測される物理量は、例えば、製造装置１１の運転に関係する計測値（機器の電力値、モータの回転数、材料の流量）や、製造装置１１が設けられている環境の温度、湿度、照度、製造装置１１に含まれる部品の温度であってもよい。

計測結果表示指示手段１３２は、計測結果取得手段１３１により取得された計測結果データの表す計測結果を表示装置（タッチディスプレイなど）に表示させる。

画像データ取得手段１３３は、製品の製造に関係する物理量を計測する計測装置（センサＳ）により計測された計測結果を表す画像データを取得する。この実施形態では、画像データ取得手段１３３は表示装置１３０に表示された画面がキャプチャされて生成された画像データ（以下「キャプチャデータ」という）を取得する。取得されるキャプチャデータには、キャプチャされた時刻を示す時刻情報（タイムスタンプ）や制御コンピュータ１３を識別する制御ＩＤが付される。

送信手段１３４は、製品の製造に関係する製造管理データを、画像データ取得手段１３３により取得された画像データまたは画像データに関する情報に対応付けて記憶装置に記憶させるサーバ装置（サーバ装置１６）に送信する。

指示取得手段１３５は、記録の開始指示を示す開始指示データと、記録の終了指示を示す終了指示データとを取得する。条件データ取得手段１３６は、画面を取得するタイミングに関する条件を示す条件データを取得する。

制御コンピュータ１３には製造装置１１の制御用の第１のプログラムと、表示される画面をキャプチャしてサーバ装置１５にアップロードする第２のプログラムとが記憶されている。制御コンピュータ１３が第１のプログラムを実行することにより、計測結果取得手段１３１と計測結果表示指示手段１３２が実現される。制御コンピュータ１３が第２のプログラムを実行することにより、画像データ取得手段１３３および送信手段１３４が実現される。より具体的には、制御コンピュータ１３は、第１のプログラムを実行することにより、各種センサＳから測定結果データを取得し、取得した測定結果データの示す測定結果を表示装置１３０に表示させる。また、制御コンピュータ１３は、第２のプログラムを実行することにより、表示装置１３０に表示された測定結果を表す画面をキャプチャし、キャプチャデータをサーバ装置１５にアップロードするとともに、製造管理データをサーバ装置１６に送信する。

この実施形態では、上記第１のプログラムと第２のプログラムはマルチタスクＯＳにより並行して実行される。すなわち、この実施形態では、製造装置１１の制御処理とキャプチャ画像のアップロード処理とが制御コンピュータ１３により並行して実行される。

図１の説明に戻る。サーバ装置１５は、例えば汎用のサーバコンピュータであり、撮影装置１２から出力される撮影データや、制御コンピュータ１３によりキャプチャされたキャプチャデータなどの画像データを蓄積する。サーバ装置１５のハードウェアは、記録システム１のために設計された専用装置であってもよいが、汎用的なコンピュータが用いられてもよい。サーバ装置１５のハードウェアとして利用可能なコンピュータの形態は限定されない。例えば、デスクトップ型ＰＣ、ノート型ＰＣであってもよい。

図８は、サーバ装置１５のハードウェアとして利用可能なコンピュータの一例であるコンピュータ２０の基本構成を示した図である。コンピュータ２０は、各種データを記憶するメモリ２０１と、メモリ２０１に記憶されているプログラムに従ったデータ処理を行うプロセッサ２０２と、データ通信を行うインタフェースである通信ＩＦ２０３を備える。

図９はサーバ装置１５の機能構成を示した図である。すなわち、コンピュータ２０がプログラムに従ったデータ処理を行うことにより、図９に示す構成部を備えるサーバ装置１５が実現される。以下にサーバ装置１５が備える機能構成部を説明する。

画像データ取得手段１５１は、撮影装置１２から撮影データを受信する。受信される撮影データには、タイムスタンプや撮影ＩＤが付されている。また、画像データ取得手段１５１は制御コンピュータ１３からキャプチャデータを受信する。受信されるキャプチャデータには、タイムスタンプや制御ＩＤが付されている。

記憶制御手段１５２は受信された画像データ（撮影データやキャプチャデータ）を、製造管理データまたは製造管理データに関する情報に対応付けて画像データベース１５３に記憶する。この実施形態では、製造管理データに関する情報として制御ＩＤまたは撮影ＩＤが用いられる。画像データベース１５３には、撮影データが時刻情報および撮影ＩＤに対応付けて記憶されるとともに、キャプチャデータが時刻情報および制御ＩＤに対応付けて記憶される。この実施形態では、製造管理データに装置ＩＤが含まれているとともに、画像データベース１５３に記憶される画像データに撮影ＩＤや制御ＩＤが付されている。装置ＩＤと撮影ＩＤおよび制御ＩＤとの対応関係は後述する対応関係テーブルに記憶されているため、装置ＩＤ、制御ＩＤおよび撮影ＩＤにより製造管理データと画像データとが紐づいている。なお、画像データに付される、製造管理データに関する情報は制御ＩＤや撮影ＩＤに限られない。製造管理データに関する情報は他の情報であってもよい。

送信手段１５４は、端末１４からの要求に応じて画像データベース１５３から画像データ群を読み出し、読み出した画像データ群を要求元の端末１４に送信する。端末１４から受信される要求には、画像データの種別を示す情報（撮影データかキャプチャデータかを示す情報）、時刻情報、撮影ＩＤまたは制御ＩＤが含まれてもよい。

サーバ装置１５には画像データベース１５３が記憶されている。画像データベース１５３には、上述したように、撮影装置１２で撮影された撮影データや、制御コンピュータ１３でキャプチャされたキャプチャデータが記憶される。画像データベース１５３に記憶される各データには、撮影された時刻やキャプチャされた時刻を示す時刻情報（タイムスタンプ）が付されている。

図１の説明に戻る。サーバ装置１６は、例えば汎用のサーバコンピュータであり、製造装置１１の製造工程を管理するための各種の処理を行う。サーバ装置１６は、センサＳの計測結果を示す計測結果データを受信する。図１において、撮影装置１２、制御コンピュータ１３、端末１４、サーバ装置１５およびサーバ装置１６は、ＬＡＮ（Local Area Network）やインターネット等の通信網２００に接続されている。

サーバ装置１６のハードウェアは、記録システム１のために設計された専用装置であってもよいが、汎用的なコンピュータが用いられてもよい。サーバ装置１６のハードウェアとして利用可能なコンピュータの形態は限定されない。例えば、デスクトップ型ＰＣ、ノート型ＰＣであってもよい。

図１０は、サーバ装置１６のハードウェアとして利用可能なコンピュータの一例であるコンピュータ３０の基本構成を示した図である。コンピュータ３０は、各種データを記憶するメモリ３０１と、メモリ３０１に記憶されているプログラムに従ったデータ処理を行うプロセッサ３０２と、データ通信を行うインタフェースである通信ＩＦ３０３を備える。

図１１はサーバ装置１６の機能構成を示した図である。すなわち、コンピュータ３０がプログラムに従ったデータ処理を行うことにより、図１１に示す構成部を備えるサーバ装置１６が実現される。以下にサーバ装置１６が備える機能構成部を説明する。

製造管理データ取得手段１６２は、製品の製造に関係する製造管理データを取得する。この実施形態では、製造管理データ取得手段１６２は、制御コンピュータ１３から製造管理データを受信することによって該データを受信する。

記憶制御手段１６３は、製造管理データ取得手段１６２により取得された製造管理データを、画像データ（撮影データやキャプチャデータ）または画像データに関連する情報に対応付けて記憶装置に記憶させる。この実施形態では、画像データに関連する情報として撮影ＩＤと制御ＩＤとが用いられる。この実施形態では、製造管理データに装置ＩＤが含まれているとともに、画像データベース１５３に記憶される画像データに撮影ＩＤや制御ＩＤが付されている。装置ＩＤと撮影ＩＤおよび制御ＩＤとの対応関係は後述する対応関係テーブルに記憶されているため、装置ＩＤ、制御ＩＤおよび撮影ＩＤにより製造管理データと画像データとが紐づいている。なお、製造管理データに付される、画像データに関する情報は撮影ＩＤや制御ＩＤに限られない。画像データに関する情報は他の情報であってもよい。

表示指示手段１６４は、製造管理データの表す内容を表示装置に表示させる際に、その製造管理データに対応する画像データの表す画像を表示させる。この実施形態では、表示指示手段１６４は、製造管理データと画像データとを端末１４に送信し、端末１４に表示を指示する。撮影データ取得手段１６５は、製造に関係する撮影対象物（製造装置１１など）を撮影する撮影装置１２により生成された撮影データを取得する。条件データ送信手段１６６は、製造管理データに応じた画像データの取得タイミングに関する条件を示す条件データを記憶装置から読み出し、画像データの送信元である端末に送信する。

図１２はサーバ装置１６に記憶されている製造管理テーブルの構成を例示した図である。製造管理テーブルには、記録システム１における製造を管理するためのデータ（製造管理データの一例）が記録される。

製造管理テーブルは、フィールドとして、［製品種別］、「工程種別」、［装置ＩＤ］、［時刻情報］、［撮影タイミング条件］、および［キャプチャタイミング条件］を備える。［製品種別］は、「製品０１」等の製造対象の種別を示すデータを格納する。［工程種別］は、「工程０１」等の工程の種別を示すデータを格納する。１つの製品（対象物）に対し複数の製造工程が行われることが多い。［装置ＩＤ］は、「装置０１」等の製造装置１１を識別するデータを格納する。［時刻情報］は、製造動作の開始時刻や終了時刻を示す時刻情報が格納される。［時刻情報］に続く［撮影タイミング条件］以降のフィールドは、［時刻情報］に格納されるデータの各々に応じたデータを格納する。

［撮影タイミング条件］は、対象物の製造に応じた撮影タイミングに関する条件を示す撮影タイミング条件データを格納する。撮影タイミングに関する条件として典型的なものは、「６０秒間隔」等の所定時間の経過という条件である。この条件に従う場合、対象物の製造に応じた所定の時間間隔で撮影装置１２により撮影が行われる。また、撮影タイミングに関する条件として、例えば、「温度変化＝１℃」といったものの考えられる。この条件に従う場合、センサＳにより計測される温度が１℃変化する毎に撮影装置１２により撮影が行われる。

［キャプチャタイミング条件］は、制御コンピュータ１３が表示装置１３０の画面をキャプチャするタイミングに関する条件を示すキャプチャタイミング条件データを格納する。キャプチャタイミングに関する条件として典型的なものは、「５分間隔」といった条件である。この場合、表示装置１３０の画面が５分の経過毎にキャプチャされる。また、キャプチャタイミングに関する条件として、例えば「撮影タイミングと同期」といったものも考えられる。この条件に従う場合、撮影装置１２により撮影が行われるタイミングに同期したタイミングで表示装置１３０の画面がキャプチャされる。

なお、製造管理テーブルには、上述した以外のフィールドが含まれていてもよい。例えば、製造管理テーブルは、センサＳの計測タイミングに関する条件を示す継続タイミング条件データを格納する［計測タイミング条件］のフィールドを含んでもよい。製造される対象物によって計測対象の物理量は異なり、また、１つの製造装置１１に応じて複数の物理量が計測対象となる場合もある。計測タイミングに関する条件は、例えば、「温度：５分間隔」であってもよい。この条件が用いられる場合、センサＳにより温度が５分の経過毎に計測される。計測タイミングに関する条件は、「湿度：撮影タイミングと同期」であってもよい。この条件が用いられる場合、撮影装置１２により撮影が行われるタイミングでセンサＳによる湿度の計測が行われる。また、例えば、製造管理テーブルは、製品の納期を示す情報を格納するフィールドや、オペレータを示す情報を格納するフィールド、進捗状況を示すフィールドを含んでいてもよい。

なお、上述した撮影タイミング、キャプチャタイミングおよび計測タイミングに関する条件はあくまでも例示であり、他に様々な種類の条件が採用可能である。

図１３はサーバ装置１６に記憶されている対応関係テーブルの構成を例示した図である。対応関係テーブルは製造装置１１、撮影装置１２、および制御コンピュータ１３の対応関係を記憶するテーブルである。記録管理テーブルは、フィールドとして［装置ＩＤ］、［撮影ＩＤ］、および［制御ＩＤ］を備える。［装置ＩＤ］は製造装置１１を識別する識別ＩＤを格納する。［撮影ＩＤ］は、製造装置１１を撮影する撮影装置１２を識別する撮影ＩＤを格納する。［制御ＩＤ］は製造装置１１を制御する制御コンピュータ１３を識別する制御ＩＤを格納する。

図１の説明に戻る。端末１４は、ユーザの操作に応じて各種の処理を行う。端末１４は例えばパーソナルコンピュータである。端末１４は記録システム１の管理者により用いられる。管理者は、端末１４を用いて製品の製造に関する進捗状況等の種々の情報を把握する。端末１４は、制御コンピュータ１３や製造装置１１が設けられている場所以外の場所に設けられてもよい。なお、制御コンピュータ１３が記録のために用いられていない間は、制御コンピュータ１３が情報の閲覧に用いられてもよい。この場合、制御コンピュータ１３が一時的に端末１４として用いられる。

端末１４のハードウェアは、記録システム１のために設計された専用装置であってもよく、また、汎用的なコンピュータであってもよい。端末１４のハードウェアとして利用可能なコンピュータの形態は限定されない。端末１４のハードウェアは、例えば、ノート型ＰＣ、タブレット型ＰＣであってもよい。また、端末１４が通話機能を備えたタブレット型ＰＣであってもよい。

図１４は端末１４のハードウェアとして利用可能なコンピュータの一例であるコンピュータ４０の基本構成を示す図である。コンピュータ４０は、各種データを記憶するメモリ４０１と、メモリ４０１に記憶されているプログラムに従ったデータ処理を行うプロセッサ４０２と、計時を行うクロック４０３と、データ通信を行うインタフェースである通信ＩＦ４０４と、表示装置（例えば液晶ディスプレイ）と操作装置（例えばタッチパネル）が一体として構成されたタッチディスプレイ４０５とを備える。

図１５は端末１４の機能構成を示した図である。すなわち、コンピュータ４０がプログラムに従ったデータ処理を行うことにより、図１５に示す構成部を備える端末１４が実現される。図において、表示指示手段１４１は、サーバ装置１６の送信手段１３４から送信されてくる画像データを受信し、受信した画像データの表す画像を表示装置１４２に表示させる。表示装置１４２は表示指示手段１４１からの指示に従って画像を表示する。

図１６は記録システム１の記録動作の一例を示すシーケンスチャートである。製造装置１１は制御コンピュータ１３の制御の下、製品の製造等の動作を行う。ステップＳ１０１において、制御コンピュータ１３は管理者の操作に応じたタイミング等の予め定められたタイミングで、自装置が制御する製造装置１１の装置ＩＤを含むデータ（製造管理データの一例）をサーバ装置１６に送信する。ステップＳ１０２において、サーバ装置１６は制御コンピュータ１３からデータを受信すると、受信されたデータに従って製造管理テーブルを更新する。

製造装置１１が動作している期間またはその前後の期間にわたって、製造装置１１の付近に設けられた各種のセンサＳがそれぞれ物理量を計測し、計測結果を示す計測結果データを制御コンピュータ１３に出力する。

ステップＳ１０３において、制御コンピュータ１３はセンサＳから出力された計測結果データを取得する。ステップＳ１０４において、制御コンピュータ１３は取得した計測結果データの表す計測結果を含む制御画面をリアルタイムで表示装置１３０に表示させる。このとき、制御コンピュータ１３は取得された計測結果データの示す内容を視覚的に把握し易い形態で表示装置１３０に表示させる。具体的には、例えば、制御コンピュータ１３は、図４に例示されるような、温度メーターの画像や湿度メーターの画像を含む画面を表示装置１３０に表示させてもよく、また、例えば、工場に設置された装置の配置を概略的に示す配置図を表示装置１３０に表示させてもよい。製造装置１１に対応する表示装置１３０には、図２乃至図５に例示される、製造装置１１に関連する計測内容を表す画面が表示される。また、製造装置１１やセンサＳにおいてエラーが検知された場合にその旨やエラーの内容を制御コンピュータ１３が表示装置１３０に表示させてもよい。製造装置１１の管理者は、表示装置１３０に表示される画面を視認することにより、製造装置１１の環境、動作状況、エラーの発生の有無などを把握する。

ステップＳ１０５において、制御コンピュータ１３は、サーバ装置１６にキャプチャ条件データや撮影条件データの取得要求を送信する。この取得要求には、製造装置１１を識別する装置ＩＤが含まれる。なお、図１６の例では、ステップＳ１０１乃至Ｓ１０４の後にステップＳ１０５の処理が行われるが、処理の順序は図示されたものに限られない。

ステップＳ１０６において、サーバ装置１６は、取得要求を受信すると、受信された取得要求に含まれる装置ＩＤに対応するキャプチャ条件データや撮影条件データを製造管理テーブルから読み出し、読み出したデータを制御コンピュータ１３へ送信する。

制御コンピュータ１３はサーバ装置１６からキャプチャ条件データや撮影条件データを受信する。ステップＳ１０７において、制御コンピュータ１３はサーバ装置１６から受信されたキャプチャ条件データの示すタイミングで、表示装置１３０に表示された画面をキャプチャしてキャプチャデータを生成する（画像データを取得する）。ステップＳ１０８において、制御コンピュータ１３は、キャプチャした画面を表すキャプチャデータに時刻情報と制御ＩＤとを付与して、サーバ装置１５へ逐次送信する。

ステップＳ１０９において、サーバ装置１５は、制御コンピュータ１３から送信されてくるキャプチャデータを受信し、受信したキャプチャデータを画像データベース１５３に蓄積していく。これにより、画像データベース１５３には、予め定められたタイミングでキャプチャされたキャプチャデータが順次蓄積されていく。具体的には、図２乃至図５に例示される画面のキャプチャ画像を表すデータが画像データベース１５３に記憶される。

一方、ステップＳ１１０において、撮影装置１２の各々は、予め定められたタイミング（例えば１秒毎）で、製造装置１１を撮影し、撮影した画像を表す撮影データに撮影時刻情報と撮影ＩＤとを付与して、サーバ装置１５へ逐次送信する。撮影装置１２により、例えば製造装置１１における製品への加工状況の変化が静止画像の群として記録される。サーバ装置１５は、撮影装置１２から送信されてくる撮影データを受信する。ステップＳ１１１において、サーバ装置１５は受信した撮影データを画像データベース１５３に蓄積していく。これにより、画像データベース１５３には、予め定められたタイミングで撮影された撮影データが順次蓄積されていく。

また、ステップＳ１１２において、制御コンピュータ１３は製造装置１１の動作の対象物である製品の製品ＩＤ、工程ＩＤ、その製品についての製造動作を開始した時刻や終了した時刻を示すデータ等、製品の製造に関係する製造管理データを取得し、取得した製造管理データをサーバ装置１６へ送信する。製造管理データは、管理者が制御コンピュータ１３を操作することによって入力してもよく、また、製造装置１１から出力される情報に応じて制御コンピュータ１３が生成してもよい。製造管理データがサーバ装置１６へ送信されるタイミングは、例えば予め定められた単位時間毎の定期的なタイミングであってもよく、また、例えば、管理者によって送信するための操作が行われたタイミングであってもよい。

制御コンピュータ１３から送信された製造管理データは、サーバ装置１６により受信される。ステップＳ１１３において、サーバ装置１６は受信した製造管理データを製造管理テーブルに登録し、製造管理テーブルを更新する。これにより、製造管理テーブルには、製造装置１１による製品の製造に係る製造管理データが順次蓄積されていく。

図１７は製造管理データの閲覧動作の一例を示すシーケンスチャートである。サーバ装置１６に蓄積された製造管理データやサーバ装置１５に蓄積された画像データは、管理者等が過去に行われた製品の製造の様子を確認したい場合に利用される。例えば端末１４のユーザが端末１４を操作してサーバ装置１６が提供する管理者用のＷｅｂサイトにログインすると、ステップＳ１２０において、端末１４からサーバ装置１６に画像閲覧画面のＷｅｂページ要求データが送信される。ステップＳ１２１において、サーバ装置１６はＷｅｂページ要求データに応じてＷｅｂページデータを生成し、端末１４に送信する。ステップＳ１２２において、端末１４はサーバ装置１６から受信したＷｅｂページデータに従い、検索条件を指定するための画面（以下「条件指定画面」という）を表示する。

条件指定画面において、ユーザは、「製品ＩＤ」や「期間」などの検索条件を入力した後、「検索」ボタンを操作する。この操作に応じて、端末１４はステップＳ１２３において、操作された内容に応じた検索条件データをサーバ装置１６に送信する。ステップＳ１２４において、サーバ装置１６は検索条件データを受信し、受信された検索条件に対応する製造管理データ群を製造管理テーブルから読み出し、読み出した製造管理データ群を端末１４に送信する。ステップＳ１２５において、端末１４は製造管理データ群を受信し、受信したデータ群の表す内容を自装置に接続された表示装置に表示する。これにより、ユーザに指定された検索条件に対応する製造管理データのリストが端末１４の表示装置に表示される。

図１８は表示装置に表示される画面の一例を示す図である。この画面には、製品の製造に関係する製造管理データの表す情報の一覧が表示される。なお、表示される製造管理データは図１８に例示するものに限られない。表示される製造管理データに他の情報が含まれていてもよい。また、例えば、表示される製造管理データに［製品納期］のフィールドが含まれていなくてもよい。また、表示されるリストは、例えば製品種別や装置ＩＤでソートされて表示されてもよく、他のレイアウトで表示されてもよい。

ユーザが表示されたリストからいずれかの製造管理データを選択すると、図１７のステップＳ１２６において、端末１４は選択された製造管理データに含まれる装置ＩＤと時刻情報とを含む画像取得要求を、サーバ装置１６に送信する。ステップＳ１２７において、サーバ装置１６は、端末１４から画像取得要求を受信すると、受信した画像取得要求に含まれる装置ＩＤに対応する制御ＩＤと撮影ＩＤとを対応関係テーブルから読み出し、読み出した制御ＩＤ、撮影ＩＤ、端末１４から受信した時刻情報および端末１４を示す情報を含む画像取得要求をサーバ装置１５に送信する。ステップＳ１２８において、サーバ装置１５は、サーバ装置１６から画像取得要求を受信すると、受信した画像取得要求に含まれる装置ＩＤと時刻情報に対応するキャプチャデータの群を画像データベース１５３から読み出すとともに、受信した画像取得要求に含まれる撮影ＩＤと時刻情報に対応する撮影データの群を画像データベース１５３から読み出す。ステップＳ１２９において、サーバ装置１５は、読み出したキャプチャデータ群と撮影データ群とを端末１４に応答として送信する。なお、ステップＳ１２９においてサーバ装置１５は画像データ群をサーバ装置１６に送信し、サーバ装置１６が端末１４への画像データの送信を中継してもよい。

ステップＳ１３０において、端末１４はサーバ装置１５からキャプチャデータ群と撮影データ群とを受信すると、受信したキャプチャデータ群の表す画像や受信した撮影データ群の表す画像を、製造管理データの表す内容とともに表示装置に順次表示させる。これにより、ユーザに選択された製造管理データに対応する撮影データやキャプチャデータの表す画像が表示装置に時系列に順番に表示される。これにより、撮影された製造装置１１による加工状況の変化や製造に係る各種計測値の変化を管理者が時系列に確認することができる。

図１９は表示装置に表示される画面の一例を示す図である。この画面は、リスト表示エリアＡ３１と、撮影画像表示エリアＡ３２と、キャプチャ画像表示エリアＡ３３とを含む。端末１４は図１８のリストをリスト表示エリアＡ３１に表示するとともに、サーバ装置１５から取得された撮影データ群の表す画像を撮影画像表示エリアＡ３２に表示する。また、端末１４は、サーバ装置１５から取得されたキャプチャデータ群の表す画像をキャプチャ画像表示エリアＡ３３に表示する。このとき、端末１４は、キャプチャデータの表す画像と撮影データの表す画像とを時間的に同期させて表示再生する。

この実施形態では、端末１４は、受信した画像データ（撮影データやキャプチャデータ）の表す画像を、タッチディスプレイ４０５等の操作子から出力される情報に応じた切替速度で、画像データに付与された時刻情報に従って時系列に表示する。より具体的には、例えば、端末１４は、複数の静止画像を、例えば０．５秒毎に切り替えて表示してもよい。また、図１９に例示する画面において、ユーザは、タッチディスプレイ４０５を用いて静止画像の切替速度を変更することができる。具体的には、例えば、端末１４が、図１９に示すようなタブＡ３４，Ａ３５を表示し、ユーザがタッチディスプレイ４０５を用いてタブＡ３４，Ａ３５の位置を移動させることによって切替速度を変更してもよい。ユーザによって操作が行われると、タッチディスプレイ４０５は操作された内容に応じた情報を出力し、端末１４は、タッチディスプレイ４０５から出力される情報に応じて、表示する画像の切替速度を変更する。このとき、端末１４は、一方の画像データ（撮影データまたはキャプチャデータ）の切替速度がユーザにより変更された場合に、他方の画像データの切替速度もあわせて変更してもよい。

管理者は、端末１４の表示装置に表示される画面により、製造装置１１による加工状況の変化とそれに伴う測定結果の変化をひとつの画面で確認することができる。

ところで、製品の製造等に関する情報を記録する方法としては、人が監視して記録する方法や、センサなどによる計測値が記録される方法がある。しかし、記録された数値の羅列をみてもユーザが当時の状況を判断することは難しい場合がある。また、計測値の保存形式はセンサの種類などによって異なり、データの再現をまとめて行うことが困難な場合がある。

装置のセンサやコントロールデータは多種多様であり、それぞれのセンサやデータが種々のメーカーによって作られ様々な種類のデータとして記録されている。センサのメーカーなどによってデータのフォーマットはそれぞれ異なるため、それぞれのデータを記録しようとすれば、それぞれに対応するインタフェースを準備する必要があり、その作業は煩雑である。更に、複数の種類の計測結果データをまとめて表示しようとすると、データのフォーマットを統一させたりするなどの煩雑な作業が必要になってしまう。そのため、記録された各種データを統括的に確認するには多大な時間と費用、手間が必要である。

それに対しこの実施形態では、製品の製造過程において制御コンピュータ１３により表示される制御画面をキャプチャして画像として逐次記録し、製造に関係する製造管理データに紐付けて管理する。画面をキャプチャするため、製造に係る各種のデータのそれぞれのデータ形式に依存することなく、全てを統括して単一のデータ形式にまとめることができる。そのため、データの記録に係る手間や費用を抑えることができ、また、ユーザは製造に係る各種データを統括的に確認し易い。特に、この実施形態では制御画面を画像として汎用性の高いデータ形式で保存するため、過去の製造状況を確認するために、専用の装置だけでなく種々のコンピュータが利用され得る。このように、この実施形態では、複数の異なるデータフォーマットの計測結果データがまとめて表示された画面をキャプチャすることにより、それらの計測結果データのデータフォーマットの違いがある場合であっても、それらの計測結果をまとめて記録することができる。また、記録システム１は、製造ラインに含まれる複数の製造装置１１について撮影画像やキャプチャ画像を蓄積することにより、一連の製造工程を経て生産される製品の製造ラインで適用可能である。

また、この実施形態に係る記録システム１は、撮影装置１２を現場に設置するとともに、画面をキャプチャするプログラムを制御コンピュータ１３にインストールすることで導入されるため、特殊なデータインタフェースを準備する必要がなく、既存の製造ラインなどに容易に導入可能である。

また、この実施形態では、撮影装置１２により製造装置１１の動作状態や管理者による操作が撮影され、画像として記録される。この撮影画像がキャプチャ画像と時間的に同期再生されるため、ユーザは当時の状況を把握し易い。また、例えばエラーが発生した場合にはその旨やエラーの内容が表示された画面のキャプチャ画像が記録されるため、その画像が表示再生されることで、ユーザは当時の状況を視覚的に把握し易い。

また、この実施形態によれば、例えば、センサが異なる種類のものに交換された場合であっても、新たに設置されたセンサに対応するインタフェースを準備する必要がなく、記録システム１に変更を加えることなく、キャプチャ画像や撮影画像をそれまでと同様に記録することができる。

［変形例］
上述した実施形態は一具体例であって、本発明の技術的思想の範囲内で様々に変形可能である。以下にそれらの変形の例を示す。なお、上述した実施形態と以下に例示する変形例はそれらの２以上が組み合わされてもよい。

（１）記録システム１において、オペレータＯＰを撮影し、撮影データをサーバ装置１５にアップロードする撮影装置が設けられてもよい。

図２０は変形例にかかる記録システム１Ｂの全体構成を示した図である。記録システム１Ｂの構成が上述した実施形態に係る記録システム１の構成と異なる点は、オペレータＯＰを撮影する撮影装置１７が設けられている点である。撮影装置１７は、オペレータＯＰが撮影される位置に設けられており、予め定められたタイミングで撮影を行い、撮影データを出力する。撮影装置１７が撮影データを出力するタイミングは、撮影装置１２が撮影データを出力するタイミングおよび／または制御コンピュータがキャプチャデータを出力するタイミングと同期されたタイミングであってもよい。

撮影データはサーバ装置１５にアップロードされ、画像データベース１５３に蓄積される。この変形例においては、管理者が端末１４を用いて製造管理データを閲覧する際に、製造管理データや撮影データ、キャプチャ画像とあわせて、撮影装置１７によって撮影された撮影データの表す画像が表示装置に表示される。管理者は、表示装置に表示された画面により、製造装置１１による製造状況の変化とそれに伴う測定結果の変化とともに、オペレータＯＰによる作業状況の変化をあわせて確認することができる。

（２）上述の記録システム１において、管理者が端末１４を用いて製造管理データを閲覧する際に、閲覧したい画像データを検索するための機能が設けられてもよい。例えば、端末１４が上述の図１７のステップＳ１２２において、センサＳの計測値の範囲（例えば温度の範囲、湿度の範囲）を指定するための画面を表示してもよい。この場合、管理者は、表示された画面を用いてセンサＳの計測値の範囲を指定する。端末１４は、管理者により指定された範囲を示すデータを検索条件として含む画像取得要求を、サーバ装置１６に送信する。サーバ装置１６は、端末１４から受信された画像取得要求に対応する画像取得要求をサーバ装置１５へ送信する。サーバ装置１５は画像取得要求を受信すると、受信された画像取得要求に含まれる検索条件に従って画像データの検索を行う。

サーバ装置１５が行う検索処理においては、画像認識が用いられてもよい。具体的には、例えば、キャプチャ画像としてセンサＳの計測結果を表すメーター画像がキャプチャされたデータが用いられる場合、センサＳの計測値の範囲に対応するメーター画像（またはメータ画像の特徴）を表す照合用データを予め所定の記憶領域に記憶させておき、サーバ装置１５が、照合用データを用いて画像データのパターンマッチング処理を行うことにより、画像データベース１５３に蓄積された画像データの中から、照合された画像データを読み出して端末１４に送信してもよい。この態様によれば、管理者が閲覧したい条件に対応する画像データが検索されて端末１４の表示装置に表示される。この態様においても、上述の実施形態と同様に、各種センサからの出力データに対応するインタフェースのつくりこみは不要である。

（３）上述の実施形態では、撮影装置１２と制御コンピュータ１３とは別体の装置であったが、撮影装置１２の機能と制御コンピュータ１３の機能とを備える装置が用いられてもよい。また、上述の実施形態では、サーバ装置１５とサーバ装置１６の２つのサーバ装置が用いられたが、サーバ装置の台数は２に限られない。例えば、サーバ装置１５の機能とサーバ装置１６の機能を有する単体のサーバ装置が用いられてもよい。また、サーバ装置１５の機能とサーバ装置１６の機能とが３以上のサーバ装置により分担されて提供されてもよい。

（４）本発明に係る記録システムは、種々の形態で利用可能である。例えば、本発明に係るシステムは、板金加工を行う工場において板金加工を行う装置の動作に関する情報を記録するシステムや、食品の梱包を行う工場において各種情報を記録するシステムとして用いられてもよい。また、例えば、集積回路等の各種の製品についての製造ラインに関する情報を記録するために用いられてもよい。また、建造物の建設装置の建設工程に関する情報を記録するために用いられてもよい。また、本発明に係る製品は、製造業に係る製品に限定されるものではなく、サービス業に係る商品や、部品等の中間製品も含む。

（５）上述の実施形態では、画像データ取得手段１３３は、表示装置１３０に表示された画面がキャプチャされた画像データを取得したが、画像データはキャプチャされたデータに限られない。画像データ取得手段１３３によって取得される画像データは、例えば、表示装置１３０に表示された画面を撮影した撮影装置により生成された画像データであってもよい。

また、画像データ取得手段１３３が取得する画像データは、表示された画面を表す画像データに限られない。例えば、製造装置１１の製造に関する物理量の計測結果を示すメーターが製造装置１１に設けられている場合に、そのメーターを撮影する撮影装置を設け、撮影した画像を表す画像データがサーバ装置１５にアップロードされてもよい。

図２１はこの変形例に係る撮影装置１８の概略を示す図である。図において、メーター１９は、製造装置１１に設けられ、製造装置１１の製造に関する物理量（温度、湿度など）の計測結果を示すメーターである。撮影装置１８は、メーター１９を撮影し、撮影結果を示す画像データを、サーバ装置１５にアップロードする。この場合、管理者が端末１４を用いて製造管理データを閲覧する際、製造管理データとあわせて、撮影装置１８によって生成された画像データの表す画像が表示装置に表示される。管理者は、表示装置に表示された画面により、製造装置１１による製造状況の変化とそれに伴う測定結果の変化をひとつの画面上で容易に確認することができる。

（６）上述の実施形態では、サーバ装置１５にアップロードされる画像データと、サーバ装置１６にアップロードされる製造管理データとは、装置ＩＤ、撮影ＩＤ、制御ＩＤおよび対応関係テーブルにより対応付けられていた。画像データと製造管理データとを対応付ける方法は上述したものに限られない。画像データと製造管理データとは他の種類の情報により紐付けられてもよい。また、画像データと製造管理データとを直接対応付けるデータベースが用いられてもよい。

（７）上述の実施形態では、画像データベース１５３には、撮影装置１２によって撮影された撮影データと、制御コンピュータ１３によりキャプチャされたキャプチャデータとが記憶された。画像データベース１５３に撮影データが記憶されなくてもよい。この場合、制御コンピュータ１３から送信されてくるキャプチャデータが画像データベース１５３に蓄積される。

（８）上述の実施形態では、撮影装置１２、制御コンピュータ１３、端末１４、サーバ装置１５、サーバ装置１６が通信網２００に接続されていたが、記録システム１の構成はこれに限られない。例えば、記録システム１に係る装置の一部または全部が一体となって構成され、スタンドアロンで動作する装置が用いられてもよい。

（９）上述の実施形態では、キャプチャデータは制御ＩＤと時刻情報とが付与されて画像データベース１５３に記憶されたが、他のデータが付与されてもよい。また、撮影データは撮影ＩＤと時刻情報とが付与されて画像データベース１５３に記憶されたが、他のデータが付与されてもよい。また、製造管理データに含まれるデータは上述した実施形態で示したものに限られない。他のデータが製造管理データに含まれてもよい。

（１０）上述の実施形態において、記録の開始および終了は制御コンピュータ１３を操作するオペレータＯＰによって指示されてもよい。この場合、制御コンピュータ１３の指示取得手段１３５は、オペレータＯＰの操作に応じた開始指示データおよび終了指示データを取得することになる。また、他の例として、予め定められたイベントの発生等をトリガに、ユーザの操作を要することなく制御コンピュータ１３に対する記録の開始および終了の少なくとも一方が指示されてもよい。例えば、製造管理テーブルに、製造内容の各々に応じた開始タイミングおよび終了タイミングを示すデータを記憶する［予定動作時間］のフィールドを設けておき、制御コンピュータ１３がサーバ装置１６から当該データを受信し、当該データが示す開始タイミングにキャプチャ画像の記録を開始し、当該データが示す終了タイミングにキャプチャを終了する構成が採用されてもよい。この場合、制御コンピュータ１３の指示取得手段１３５は、サーバ装置１６から受信したデータが示すタイミングの到来時に開始指示データおよび終了指示データを取得することになる。また、記録の開始タイミングおよび終了タイミングはオペレータＯＰやサーバ装置１６から直接指定される必要はない。例えば、オペレータＯＰが制御コンピュータ１３に対し記録の開始操作を行ったタイミングから所定時間の経過後に自動的に記録の終了が行われる構成が採用されてもよい。

（１１）上述した実施形態においては、撮影装置１２および制御コンピュータ１３は画像データを生成後速やかにサーバ装置１５に送信する。これに代えて、撮影装置１２および／または制御コンピュータ１３が生成した画像データを記憶しておき、例えば所定時間の経過毎、作業の終了時、撮影装置１２および／または制御コンピュータ１３が通信速度の速いネットワークに接続したとき、等に記憶しておいた画像データをサーバ装置１５に送信してもよい。

（１２）上述した実施形態において、制御コンピュータ１３、端末１４、サーバ装置１５およびサーバ装置１６はコンピュータがプログラムに従った処理を実行することにより実現されるものとした。これに代えて、制御コンピュータ１３、端末１４、サーバ装置１５およびサーバ装置１６の少なくともいずれかひとつが、例えばＡＳＩＣ（Application Specific Integrated Circuit）等を備える専用装置として構成されてもよい。

（１３）上述した実施形態において、ＰＣ１０に例示されるコンピュータに制御コンピュータ１３の処理を実行させるためのプログラム、コンピュータ２０に例示されるコンピュータにサーバ装置１５の処理を実行させるためのプログラム、コンピュータ３０に例示されるコンピュータにサーバ装置１６の処理を実行させるためのプログラム、およびコンピュータ４０に例示されるコンピュータに端末１４の処理を実行させるためのプログラムは、持続的にデータを記録する記録媒体に記録されて配布されてもよいし、インターネット等のデータ通信ネットワークを介してコンピュータへダウンロードされる形態で配布されてもよい。

（１４）上述した実施形態において例示した各種データの構成は様々に変更されてよい。例えば、サーバ装置１６に記憶されている製造管理テーブルがオペレータのフィールドを備える構成であってもよい。また、例えば、製造管理テーブルが工程種別のフィールドを備えない構成であってもよい。

１…記録システム、１０，２０…コンピュータ、１１…製造装置、１２…撮影装置、１３…制御コンピュータ、１４…端末，１６…サーバ装置、１０１，２０１…メモリ、１０２，２０２…プロセッサ、１０３…クロック、１０４，２０３…通信ＩＦ、１０５…操作装置、１３１…計測結果取得手段、１３２…計測結果表示指示手段、１３３…画像データ取得手段、１３４…送信手段、１３５…指示取得手段、１３６…条件データ取得手段、１４１…表示指示手段、１５１…画像データ取得手段、１５２…記憶制御手段、１５３…画像データベース、１５４…送信手段、１６２…製造管理データ取得手段、１６３…記憶制御手段、１６４…表示指示手段、１６５…撮影データ取得手段、１６６…条件データ送信手段、２００…通信網。

Claims (8)

1. 製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、
   前記製造に関係する物理量を計測装置により計測した結果を第１の表示装置が表示した画像を表す第２の画像データを取得するデータ取得手段と、
   前記データ取得手段が取得した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、
   前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像を第２の表示装置に同時に表示させる表示指示手段と
   を備えるシステム。
2. 前記データ取得手段は、前記製造の管理情報を示す製造管理データを取得し、
   前記記憶制御手段は、前記データ取得手段が取得した前記製造管理データに対応付けて、前記データ取得手段が取得した前記第１の画像データと前記第２の画像データを前記記憶装置に記憶させ、
   前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像と共に、前記第１の画像データと前記第２の画像データに対応付けて前記記憶装置に記憶されている前記製造管理データが示す管理情報を前記第２の表示装置に表示させる
   請求項１に記載のシステム。
3. 前記データ取得手段は、前記製造装置を操作するオペレータを撮影装置により撮影した画像を表す第３の画像データを取得し、
   前記記憶制御手段は、前記データ取得手段が取得した同時期に生成された前記第１の画像データと前記第２の画像データと前記第３の画像データを対応付けて前記記憶装置に記憶させ、
   前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データと前記第３の画像データの各々が表す画像を前記第２の表示装置に同時に表示させる
   請求項１又は２に記載のシステム。
4. 第１の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する受信手段と、
   前記受信手段が受信した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、
   前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データを第２の端末装置に送信する送信手段と
   を備えるサーバ装置。
5. サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する受信手段と、
   前記受信手段が受信した前記第１の画像データと前記第２の画像データの各々が表す画像を表示装置に同時に表示させる表示指示手段と
   を備える端末装置。
6. コンピュータに、
   第１の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する処理と、
   受信した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させる処理と、
   前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データを第２の端末装置に送信する処理と
   を実行させるためのプログラム。
7. コンピュータに、
   サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第２の画像データを受信する処理と、
   受信した前記第１の画像データと前記第２の画像データの各々が表す画像を表示装置に同時に表示させる処理と
   を実行させるためのプログラム。
8. システムが、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第１の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第１の表示装置が表示した画像を表す第２の画像データを取得するステップと、
   前記システムが、取得した同時期に生成された前記第１の画像データと前記第２の画像データを対応付けて記憶装置に記憶させるステップと、
   前記システムが、前記記憶装置に対応付けて記憶されている前記第１の画像データと前記第２の画像データの各々が表す画像を第２の表示装置に同時に表示させるステップと
   を備える方法。

Images