JPH11167532A - データ加工システムおよび装置、データ加工方法、記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 小型携帯情報端末に備えられる様々なアプリ
ケーション用にデータを入力する作業をより簡単に行え
るようにする。 【解決手段】 画像入力機能３、通信機能４およびアプ
リケーションプログラム実行機能５を有する携帯情報端
末２と、サーバ８とを備え、画像入力機能３で入力した
デジタル画像データを端末２からサーバ８に送信し、サ
ーバ８において、受信したデジタル画像データに対して
データ加工処理を施すことによって所定の属性を持つテ
キストデータに変換するとともに、端末２で実行されて
いるアプリケーションプログラムに応じたデータフォー
マットに変換して端末２に返送することにより、画像入
力のための操作を行うだけでアプリケーションプログラ
ムの管理データを自動的に登録できるようにする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明はデータ加工システム
および装置、データ加工方法、記録媒体に関し、特に、
デジタルカメラ等の画像入力機能、通信機能およびアプ
リケーションプログラム実行機能を有する端末（クライ
アント）と、それらの端末と通信可能なサーバとの間で
行われるサービスに用いて好適なものである。

【０００２】

【従来の技術】近年、半導体技術やソフトウェア技術等
の発展により、携帯に便利な小型携帯情報端末が普及し
てきている。この種の小型携帯情報端末の中には、例え
ばアドレス帳やスケジュールなどの個人情報管理機能、
データベース機能等を備えたものが多く見られる。

【０００３】

【発明が解決しようとする課題】しかしながら、従来の
小型携帯情報端末においては、機能と携帯性とのバラン
スのもとに設計されるため、操作性のよいキーボードや
デジタイザ等の入力装置を実装するのは困難である。そ
の一方で、テンキーやスイッチ類のみでは、情報の入力
操作が複雑になって分かりにくいという欠点があった。

【０００４】このため、例えば小型携帯情報端末のアド
レス帳に名刺のデータを登録するといったような場合
は、大変な労力を必要としていた。よって、名刺のデー
タをたびたび追加登録したり変更したりするといった使
い方は、実際上はできなかった。また、スケジュール管
理やデータベース管理等を行うための情報入力の際も、
多大な労力を必要としていた。

【０００５】本発明は、このような問題を解決するため
に成されたものであり、小型携帯情報端末に備えられる
様々なアプリケーション用にデータを入力する作業をよ
り簡単に行えるようにすることを目的とする。

【０００６】

【課題を解決するための手段】最近、技術の進歩により
小型携帯情報端末にデジタルカメラ機能や通信機能を内
蔵できるようになってきた。本発明では、これらの機能
を利用し、デジタルカメラで撮影したデジタル画像デー
タを通信機能を介してサーバに送信し、サーバ側で、そ
のデジタル画像データに対してパターン認識処理、文字
認識処理、単語認識処理、データ解析処理等を施すこと
により、名前や住所や電話番号等といった属性を持った
テキストデータに変換する。さらに、前記デジタル画像
データを送信してきた端末のアプリケーションに対応す
るデータフォーマットに変換してこれを端末に返送す
る。これにより、例えば端末のシャッターボタンを押す
だけで、撮影された被写体に表示されている情報をアプ
リケーションの管理データとして自動的に登録すること
ができるようになる。また、本発明は、このようなデジ
タルカメラ機能だけでなく、スキャナ機能やファクシミ
リ機能等の他の画像入力機能にも対応するものである。

【０００７】

【発明の実施の形態】（第１の実施形態）図１および図
２は、本発明の第１の実施形態を示し、名刺に書かれて
いる種々の情報をＰＩＭ（Personal Infomation Manage
r ）のアドレス帳に自動的に登録するサービスを提供す
る場合のシステム構成を示したものである。

【０００８】図１において、１は名刺、２は携帯情報端
末（ＰＤＡ：Personal Digital Assistants ）、８はサ
ーバである。上記携帯情報端末２が備える構成におい
て、３は撮影した画像データをデジタルデータとして処
理できるデジタルカメラ機能、４はデジタル画像データ
やテキストデータ等をサーバ８等との間で送受信できる
通信機能、５は個人情報やアドレス帳を管理できるＰＩ
Ｍ機能、６は前記３，４，５の各機能を制御するＣＰＵ
である。

【０００９】また、７は携帯情報端末２からサーバ８に
至る通信経路、１５はサーバ８から携帯情報端末２に至
る通信経路である。さらに、上記サーバ８が備える構成
において、９はデジタル画像データやテキストデータ等
を携帯情報端末２との間で送受信できる通信機能、１０
はパターン認識処理機能、１１は文字認識処理機能、１
２は単語認識処理機能、１３はデータ解析処理機能、１
４はデータ変換処理機能である。図２は、図１中に示し
た名刺１を拡大して示したものである。

【００１０】上記構成において、名刺１に書かれている
種々の情報をＰＩＭのアドレス帳に入力するには、まず
携帯情報端末２に内蔵されたデジタルカメラ機能３で名
刺１の全面を撮影する。撮影された名刺１のデジタル画
像データは、デジタルカメラ機能３の図示しないフレー
ムメモリ等のメモリに記録される。記録された名刺１の
デジタル画像データは、携帯情報端末２側の通信機能４
とサーバ８側の通信機能９とで送受信され、通信径路７
を経由してサーバ８に送られる。

【００１１】サーバ８側では、以下に順次述べるよう
に、送られてきたデジタル画像データを加工処理するこ
とにより、所定の属性を持ったテキストデータに変換す
る。その際にヒントとなる画像データパターンや単語
は、図３のように属性と対応付けた「ヒント−属性表」
として予め登録してある。例えば、属性がロゴの欄のヒ
ント項目に太字で示したもの（×××××，Ｐａｎｄ
ａ，Ｍａｒｕｋｏ）は、画像データで画像パターンとし
て登録されている。

【００１２】サーバ８ではまず、送られてきたデジタル
画像データをスキャンし、パターン認識機能１０による
処理を行う。例えば、横書きの名刺の場合、横方向にデ
ジタル画像データ全体をスキャンし、一定量以上の空白
部分を検出する。そして、その空白部分に囲まれている
データ領域を切り出す（図２の名刺１を例にすると、図
２の２２〜２８で示した各点線枠内のデータ領域を切り
出す）。

【００１３】そして、切り出したデータ領域の位置関係
を示す位置情報、切り出したデータ領域に使用されてい
る色を示す色情報、切り出したデータ領域の縦方向の長
さ（つまり、名刺に書かれている文字の大きさ）を大・
中・小の３段階程度のレベルで示した大きさ情報等を図
示しないメモリに記憶しておく。さらに、図３のヒント
−属性表のロゴの画像パターンと、切り出されたデータ
領域内の画像データとを比較し、何れかのパターンに近
似するものは、その画像データに対応する属性を付けて
おく。

【００１４】例えば、図２の点線枠２２内の画像データ
は“ロゴ、キヤノン株式会社”という属性と対応付けら
れて登録されている画像データのパターン（図３のヒン
ト−属性表の最上位の項目）と近似する。さらに、ヒン
ト欄の“左上”という位置情報や“カラー表示”という
条件も一致するため、ロゴと判断できる。そこで、図２
の点線枠２２内の画像データには、“キヤノン株式会
社、ロゴ”という属性を付けておく。

【００１５】次に、前記パターン認識処理により切り出
された各データ領域内の画像データに対して、文字認識
機能１１による処理を行う。その結果、図２の２３〜２
８で示す点線枠内の文字が、テキストデータとして得ら
れる。次に単語認識機能１２では、前記文字認識処理の
結果得られたテキストデータを、図３のヒント−属性表
のヒント欄に登録してある単語と比較することにより、
単語認識を行う。

【００１６】その結果、図２の点線枠２３内には“プロ
ジェクト”、点線枠２４内には“主任”、点線枠２５内
には“小原”、点線枠２６内には“株式会社”、点線枠
２７内には“〒”，“都”，“区”、点線枠２８内には
“ＴＥＬ”の単語がそれぞれ含まれていることが認識さ
れる。

【００１７】次に、データ解析機能１３により、前記各
認識処理で得られた情報とヒント−属性表とを基に、前
記文字認識処理で得られた各テキストデータ（図２の各
点線枠２３〜２８内のテキストデータ）の属性を解析す
る。本実施形態では、例えば図２の点線枠２３内のテキ
ストデータは、“プロジェクト”という単語を含んでい
ること、およびヒント−属性表のヒント欄の“プロジェ
クト”が属性１の欄の“所属”と対応付けられているこ
とから、“ＸＸプロジェクト”という所属名である
（“所属”という属性を持つ）ことが分かる。

【００１８】同様に、図２の点線枠２４内のテキストデ
ータは“主任”という役職であることが分かる。また、
点線枠２５内のテキストデータは、ヒント項目にある
“小原”が一致する上に、前記パターン認識のときに得
た位置情報や大きさ情報が、ヒント項目の“役職の右
側”、“所属の下側”、“大きい”という条件を満たす
ため、“小原啓二”という氏名であることが分かる（氏
名のように解析するのが困難なものは、上記例のよう
に、複数のヒント項目から判断する）。

【００１９】同様にして、図２の点線枠２６内のテキス
トデータは、“株式会社”という単語が含まれる上に、
前記パターン認識のときのロゴの属性と一致するため、
“キヤノン株式会社”という社名であることが確実であ
る。以下同様に、点線枠２７内のテキストデータから、
“１４６”は郵便番号、“東京都大田区下丸子３−３０
−２”は住所であることが分かり、点線枠２８内のテキ
ストデータから、０３（１２３４）５６７８は外線の電
話番号であることが分かる。

【００２０】以上のようにして、名刺１のデジタル画像
データから名刺１に書かれている種々の情報が解析でき
る。この解析された情報をＰＩＭのアドレス帳等に登録
するには、解析された情報をそのＰＩＭのアドレス帳等
が管理できるデータ・フォーマットに変換する必要があ
る。例えば、アドレス帳の一件分の情報が図４のように
表示され、このアドレス帳のデータ・フォーマットが、
図４に示した表の各項目に対するテキストデータを表の
上から下に向かう順番にカンマで区切って並べたもので
あるとする。

【００２１】つまり、氏名の属性を持つテキストデータ
が最初にあり、その後をカンマで区切って次に会社（社
名）の属性を持つテキストデータが続く。同様に、カン
マで区切りながら次々とその順番位置の属性に対応する
テキストデータをつなぎ、最後に登録日の日付テキスト
データがくる。ここで、最後の登録日の情報は、サーバ
８の図示しない時計機能から読み出した値で構成するも
のである。

【００２２】前記データ解析機能１３で解析されたデー
タを、図４のようにアドレス帳が管理できるデータ・フ
ォーマットに変換すると、次のようになる。小原啓二，
キヤノン株式会社，ＸＸプロジェクト，主任，１４６，
東京都大田区下丸子３−３０−２，０３（１２３４）５
６７８，１９９７年６月２４日

【００２３】以上のようにして、サーバ８側での一連の
処理が終了し、名刺１のデジタル画像データから携帯情
報端末２内のＰＩＭ機能５のアドレス帳が管理できるデ
ータ・フォーマットのデータに変換されたテキストデー
タは、サーバ８の通信機能９と携帯情報端末２の通信機
能４との間で送受信処理が行われ、携帯情報端末２に追
加データとして返送される。

【００２４】携帯情報端末２側では、サーバ８から返送
されてきたテキストデータをＰＩＭ機能５のアドレス帳
が管理しているアドレス・データエリアに追加する。つ
まり、アドレス帳に新しいデータを追加登録する。この
状態で、アドレス帳の検索機能によって“小原”を検索
すると、図示しないディスプレイ画面に図５のように表
示されることになる（追加登録されたデータは、登録直
後に自動的に表示させるようにもできる）。操作者は、
このディスプレイ画面に表示された内容を目視でチェッ
クし、間違いや誤入力があった場合にはこの画面上で修
正できる。

【００２５】この実施形態では、携帯情報端末２側から
サーバ８側に名刺１のデジタル画像データを送信し、サ
ーバ８側でそのデジタル画像データの加工処理をリアル
タイムで行い、加工したデータを直ぐに携帯情報端末２
側に返送することを想定している。ただし、サーバ８側
のデータ加工処理に時間がかかる場合は、通信コストを
低減させるために、携帯情報端末２側からサーバ８側へ
デジタル画像データを転送し終った段階で一旦通信回線
を切断する。その後、サーバ８側の加工処理が終わり次
第、サーバ８から携帯情報端末２に対して通信回線を接
続して加工データを返送したり、次のデジタル画像デー
タを送るために携帯情報端末２がサーバ８に対し回線を
接続したときに前回の加工データを返送したりしてもよ
い。

【００２６】以上のように、本実施形態のデータ加工シ
ステムを提供することにより、携帯情報端末２で図示し
ない撮影用のシャッターボタンを押すだけで、名刺１に
書かれている種々の情報をアドレス帳に自動的に追加登
録することができる。

【００２７】（第２の実施形態）前記第１の実施形態に
おいて、サーバ８が名刺１のデジタル画像データに対し
てパターン認識処理、文字認識処理、単語認識処理、デ
ータ解析処理等を施しても、属性を持つテキストデータ
として解析できないこともある。

【００２８】その第１の理由としては、文字認識処理ま
では正常に行うことができ、テキストデータに変換する
ことができるが、そのテキストの属性をアドレス帳がサ
ポートしていないために、属性が付けられないというこ
とが挙げられる。例えば、前記第１の実施形態のアドレ
ス帳は、ふりがな（ルビ）やｅ−ｍａｉｌアドレス等は
サポートしていないため、名刺にこれらの情報が書かれ
ていても属性の無いテキストデータにしか変換できな
い。

【００２９】第２の理由としては、名刺に顔写真があっ
たりやヒント−属性表に登録されていないロゴ等が書か
れている場合、さらには、名刺に手書きでメモが書き加
えられたりした場合には、文字認識処理の段階で識別で
きないので、その後の処理が行えず、属性が付けられな
いということが挙げられる。また、ヒント−属性表に登
録されているロゴは、属性は付けられるが画像データで
あるので、テキストデータとしての属性は付けられな
い。

【００３０】以上のような、属性を持つテキストデータ
に解析できないデータをも有効利用できるようにするた
めに、第２の実施形態では、前記第１の実施形態で述べ
たアドレス帳に、図６に示すようにメモ欄や画像欄を追
加する。つまり、アドレス帳が“メモ”属性や“画像”
属性といった特定の属性を新たにサポートするようにす
る。

【００３１】そして、サーバ８がデジタル画像データに
対してパターン認識処理、文字認識処理、単語認識処
理、データ解析処理等を施しても、属性を持つテキスト
データとして解析できないデータに対し、前記第１の理
由のデータには“メモ”という属性を、前記第２の理由
のデータには“画像”という属性を付ける。そして、こ
れらを他の属性の付いているテキストデータと共に、携
帯情報端末２のアドレス帳５が管理しているアドレス・
データエリアに返送する。

【００３２】携帯情報端末２側では、前記第１の実施形
態と同様に、サーバ８から返送されてきたデータをアド
レス帳５が管理しているアドレス・データエリアに追加
する。つまり、新しいデータを追加登録する。この状態
で、アドレス帳５の検索機能によって“小原”を検索す
ると、図６のように表示されることになる。なお、第２
の実施形態において、データ加工システムの基本構成
は、前記第１の実施形態で述べた図１と同じである。

【００３３】以上のように、携帯情報端末２のアドレス
帳５が“メモ”属性と“画像”属性とを新たにサポート
できるようにし、サーバ８が名刺のデジタル画像データ
に対してパターン認識処理、文字認識処理、単語認識処
理、データ解析処理等を施しても、属性を持つテキスト
データとして解析できないデータに対し“メモ”属性や
“画像”属性を付けて、他の属性の付いているテキスト
データと共に携帯情報端末２のアドレス帳５が管理して
いるアドレス・データエリアに返送することにより、ふ
りがな、ロゴ、顔写真、ｅ−ｍａｉｌアドレス、手書き
メモ等の名刺に書かれているすべての情報をアドレス帳
に自動的に登録することができる。

【００３４】（第３の実施形態）前記第１の実施形態に
おいて、図７のように名刺が書かれている場合（外線の
電話番号であることを示す表示が、ヒント−属性表にな
い記号によって書かれている場合）は、最後の行の属性
が判別できない。この場合、第２の実施形態によれば、
“メモ”属性あるいは“画像”属性の何れかの属性が与
えられるが、本来は“外線の電話番号”の属性が与えら
れるべきものであるので好ましくない。

【００３５】このような場合、サーバ８側のデータ解析
機能１３での処理中に、この部分の切り出されたデータ
領域の画像データあるいは属性不明のままのテキストデ
ータを一旦携帯情報端末２側の属性判別不可データエリ
アに返送する。

【００３６】一方、携帯情報端末２側では、属性判別不
可データエリア内の画像データと、属性指定用アイコン
等とを図示しないディスプレイ画面に表示し、操作者に
属性を選択させる。操作者が外線電話番号の属性アイコ
ンを押して、ディスプレイ画面に表示された画像データ
が外線電話番号の属性であることを指示すると、携帯情
報端末２は、外線電話番号の属性コードをサーバ８側に
送る。

【００３７】サーバ８側では、携帯情報端末２に返送し
た画像データに対して、外線電話番号の属性が送り返さ
れてくるので、画像データ中の文字認識処理後のテキス
トデータの数字“０３（１２３４）５６７８”は、外線
の電話番号であることが分かる。この後の処理は、前記
第１の実施形態と同じである。

【００３８】以上のように、サーバ８が名刺のデジタル
画像データに対してパターン認識処理、文字認識処理、
単語認識処理、データ解析処理等を施しても、属性を持
つテキストデータとして解析できない部分があった場合
には、その部分のデジタル画像データまたは属性不明の
テキストデータを切り出して携帯情報端末２に返送し、
その返送した部分のデータの属性を操作者に問い合わせ
る。そして、操作者が指定した属性名（属性コード）を
携帯情報端末２からサーバ８に送信することにより、サ
ーバ８のデータ解析処理の精度を上げることができる。

【００３９】（第４の実施形態）前記第１〜第３の実施
形態においては、名刺のデジタル画像データを得るため
に携帯情報端末２のデジタルカメラ機能３を用いたが、
サーバ８側では、そのデジタル画像データの作成方法は
問わない。つまり、図示しないスキャナで読み込んだデ
ジタル画像データでも、図示しないファクシミリで送ら
れてきたデジタル画像データでも処理できる。

【００４０】したがって、サーバ８で提供されるサービ
スは、携帯情報端末２のみでなく、デスクトップパソコ
ンに通信機能とスキャナやファクシミリ機能とを組み合
わせたような装置に対しても行うことができる。なお、
この第４の実施形態において、サーバ８側の基本構成
は、前記第１の実施形態で述べた図１と同じである。

【００４１】（第５の実施形態）前記第１〜第３の実施
形態においては、携帯情報端末２のデジタルカメラ機能
３で撮影する対象物は、名刺等の活字文字で書かれてい
る情報のみである。これに対して第５の実施形態では、
サーバ８の文字認識機能１１による処理において手書き
文字も認識できるように機能拡張する。そして、紙や白
板に書いた手書き文字や絵を含んだものをデジタルカメ
ラで撮影してサーバ８に送信し、サーバ８側では、送信
されてきたデジタル画像データに対しパターン認識処
理、文字認識処理、単語認識処理、データ解析処理等を
施した後、その撮影された情報を扱えるアプリケーショ
ンに応じたフォーマットに変換して返送できるようにす
る。

【００４２】第５の実施形態において、データ加工シス
テムの基本構成は、前記第１の実施形態で述べた図１と
同じである。第５の実施形態では、名刺１の代わりに例
えば図８のような文章を紙や白板に書いたものをデジタ
ルカメラで撮影し、これにより得られたデジタル画像デ
ータをサーバ８に送信する。サーバ８側では、前記第１
の実施形態と同様にパターン認識処理、（手書き）文字
認識処理を行う。

【００４３】次に、単語認識処理を行うわけであるが、
ここではまず、サーバ８に予め登録されているアプリケ
ーション判別表（図９に示すように、携帯情報端末２か
ら送られてきたデジタル画像データがどのアプリケーシ
ョン用のデータかを判別するための表）を基に、最初の
行に関して単語認識を行う。本実施形態の場合、最初の
行の内容が“Ｅ−ｍａｉｌ”であるので、サーバ８に送
られてきたデジタル画像データは、電子メール・アプリ
ケーション用のデータであると判断できる。よってこの
場合は、２行目以後のデータは、図１０のような予め登
録されている第２のヒント属性表の属性１が“電子メー
ル”の欄のヒント情報を基に、単語認識処理を行う。

【００４４】その後、データ解析処理を行うことによ
り、差出人：小原、受取人：吉田、件名：ミーティン
グ、本文：「明日、１０：００からバッテリーについて
のミーティングをしたいのですが、御都合は如何でしょ
うか？」ということが分る。その他、絵のような、テキ
ストデータに変換できないデータには“画像”の属性を
付けておく。

【００４５】サーバ８は、これらの属性付きデータを、
携帯情報端末２の電子メール・アプリケーションのデー
タフォーマットに変換して電子メール・アプリケーショ
ンが管理しているデータエリアに返送する。

【００４６】携帯情報端末２側では、サーバ８から返送
されてきた属性付きデータを基に、電子メール・アプリ
ケーションの作成・編集画面上の各入力項目にデータを
入力する。その様子を、図１１に示す。このとき、宛先
（受取人）の名前“吉田”は、電子メール・アプリケー
ションが管理するメール・アドレス帳に予め登録されて
いるので、電子メールアドレスを参照してそのアドレス
に送信することができる。また、本文の１行目には、
“差出人＋です。”という文章を自動挿入できるように
なっている。もし、画像属性のデータがある場合には、
電子メール・アプリケーションのMIMEやuuencode等の添
付データとして扱う。

【００４７】操作者は、以上のようにして携帯情報端末
２の図示しないディスプレイに表示された電子メール・
アプリケーションの作成・編集画面を目視でチェックし
た後に、送信ボタンを押すことにより、その内容の電子
メールを宛先に送信することができる（もちろん、目視
チェックを省略して送信することも可能である）。ま
た、目視チェックの結果、間違いや誤入力等があった場
合には、この電子メール・アプリケーションの作成・編
集画面上で内容の編集・修正をした後に送信ボタンを押
して、送信することができる。また、サーバ側に電子メ
ール送信機能が有る場合には、サーバ側から直接送信し
ても良い。

【００４８】この第５の実施形態では、単語認識機能１
２での最初の行の処理で、電子メール・アプリケーショ
ン用のデータであることが判別されたときは、その後の
処理では電子メール・アプリケーションを対象にした処
理が行われるが、もし、最初の行の処理で、他のアプリ
ケーション用（メモ帳・アプリケーション、スケジュー
ル管理・アプリケーション等）のデータと判別された場
合には、その後の処理では、その判別されたアプリケー
ションを対象にした処理が行われる。

【００４９】以上のように、本実施形態のデータ加工シ
ステムを提供することにより、携帯情報端末２で図示し
ないシャッターボタンを押すだけで、撮影された情報を
電子メールで送信したり、メモ帳に登録したり、スケジ
ュール帳に予定を書込んだりすることができる。このよ
うに、本実施形態では、１台のサーバで複数のアプリケ
ーションに対するサービスを提供することができる。

【００５０】（第６の実施形態）前記第１〜第５の実施
形態においては、サーバ８が提供するサービスは、デー
タ変換機能１４による処理において特定のアプリケーシ
ョンのデータ・フォーマットを対象とするため、特定の
機種の携帯情報端末２にしか対応できない。また、特定
の携帯情報端末２であっても、別のアプリケーションが
実行されているときには対応できない。

【００５１】そこで、第６の実施形態では、サーバ８側
に、図１２に示すように複数種類のサービス処理プログ
ラムをサービス指定情報（例えば番号）に対応付けて予
め登録しておく。そして、携帯情報端末２から撮影した
デジタル画像データを送信するときに、希望するサービ
スに対応するサービス指定情報を付加して送る。サーバ
８側では、受信したデジタル画像データに対し、そのデ
ジタル画像データに付加されているサービス指定情報
（番号）で指定されるサービス処理プログラムを実行
し、サービス処理を行う。

【００５２】図１２の例では、携帯情報端末２で撮影さ
れたデジタル画像データにサービス指定番号“１”を付
加してサーバ８に送信すると、サーバ８は、その画像デ
ータをサーバ８の図示しない記憶装置の予め指定されて
いるエリアに保存するサービス処理を行う。このサービ
スの場合、サーバ８から携帯情報端末２へ返送されるデ
ータはない。

【００５３】また、デジタル画像データにサービス指定
番号“２”を付加してサーバ８に送信すると、サーバ８
は、携帯情報端末２から送信されてきた画像に予めサー
バ８に登録されている画像を重ね合わせた画像を携帯情
報端末２に返送するサービス処理を行う。また、デジタ
ル画像データにサービス指定番号“３”を付加してサー
バ８に送信すると、サーバ８は、前記第１〜第４の実施
形態の何れかのサービスと同様のサービス処理を行う。

【００５４】また、デジタル画像データにサービス指定
番号“４”を付加してサーバ８に送信すると、サーバ８
は、前記第５の実施形態において最初の行に“Ｅ−ｍａ
ｉｌ”と書かれている場合と同様のサービス処理を行
う。なお、このサービス処理において、Ｅ−ｍａｉｌの
内容を携帯情報端末２あるいはデスクトップパソコン側
で確認する必要がない場合は、Ｅ−ｍａｉｌの内容を携
帯情報端末２等には返送しないで、サーバ８から直接Ｅ
−ｍａｉｌ送信をしてもよい。

【００５５】また、デジタル画像データにサービス指定
番号“５”を付加してサーバ８に送信すると、サーバ８
は、前記第５の実施形態において最初の行に“Ｓｃｈｅ
ｄｕｌｅ”と書かれている場合と同様のサービス処理、
すなわち、紙や白板に書かれているスケジュール情報を
入力したデジタル画像データを、携帯情報端末２あるい
はデスクトップパソコンで実行されるスケジュール管理
プログラムで扱えるデータフォーマットに変換して返送
するサービス処理を行う。

【００５６】以上のように、第６の実施形態では、端末
から送信するデジタル画像データにサービス指定情報を
付加して送信できるようにするとともに、サーバ側では
予め複数種類のサービス処理プログラムをサービス指定
情報に対応付けて登録しておく。そして、送信されてき
たデジタル画像データに対し、そのデジタル画像データ
に付加して送られてきたサービス指定情報で決定される
サービス処理プログラムによりサービス処理を行うこと
により、１台のサーバで複数の種類の携帯情報端末や複
数のアプリケーションに対するサービスを提供すること
ができる。

【００５７】なお、以上の各実施形態において、パター
ン認識機能１０、文字認識機能１１、単語認識機能１
２、データ解析機能１３、データ変換機能１４を携帯情
報端末２内に設けることにより、サーバ８との通信を不
要にすることも可能であるが、サーバ８側に設けて通信
を行うようにすることにより、携帯情報端末２では、大
規模なテキスト入力・編集処理、各種認識処理、解析処
理、フォーマット変換処理等のプログラムが不要となる
ため、メモリ容量が小さくできる。これにより、端末の
小型化、コスト、消費電力等の点でメリットを有する。

【００５８】（本発明の他の実施形態）本発明は、以上
の実施形態で示したように複数の機器（例えば、サー
バ、携帯情報端末、インタフェース機器、リーダ、プリ
ンタ、ファクシミリ装置等）から構成されるシステムに
適用しても１つの機器からなる装置に適用しても良い。

【００５９】また、上述した実施形態の機能を実現する
ように各種のデバイスを動作させるように、該各種デバ
イスと接続された装置あるいはシステム内のコンピュー
タに対し、上記実施形態の機能を実現するためのソフト
ウェアのプログラムコードを供給し、そのシステムある
いは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格
納されたプログラムに従って上記各種デバイスを動作さ
せることによって実施したものも、本発明の範疇に含ま
れる。

【００６０】また、この場合、上記ソフトウェアのプロ
グラムコード自体が上述した実施形態の機能を実現する
ことになり、そのプログラムコード自体、およびそのプ
ログラムコードをコンピュータに供給するための手段、
例えばかかるプログラムコードを格納した記録媒体は本
発明を構成する。かかるプログラムコードを記憶する記
録媒体としては、例えばフロッピーディスク、ハードデ
ィスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、
磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用い
ることができる。

【００６１】また、コンピュータが供給されたプログラ
ムコードを実行することにより、上述の実施形態の機能
が実現されるだけでなく、そのプログラムコードがコン
ピュータにおいて稼働しているＯＳ（オペレーティング
システム）あるいは他のアプリケーションソフト等の共
同して上述の実施形態の機能が実現される場合にもかか
るプログラムコードは本発明の実施形態に含まれること
は言うまでもない。

【００６２】さらに、供給されたプログラムコードがコ
ンピュータの機能拡張ボードやコンピュータに接続され
た機能拡張ユニットに備わるメモリに格納された後、そ
のプログラムコードの指示に基づいてその機能拡張ボー
ドや機能拡張ユニットに備わるＣＰＵ等が実際の処理の
一部または全部を行い、その処理によって上述した実施
形態の機能が実現される場合にも本発明に含まれること
は言うまでもない。

【００６３】

【発明の効果】以上説明したように、本発明のデータ加
工システムによれば、画像入力のために例えば端末で撮
影用のシャッターボタン（またはスキャナのスキャン開
始ボタンやファクシミリの送信開始ボタン）を押すだけ
の簡単な操作で、例えば名刺や紙や白板に書かれている
情報をアドレス帳やメモ帳に自動的に登録したり、電子
メールで送信したり、スケジュール帳に予定を書込んだ
りすることができる。さらに、端末側に多くのキーを持
つ大きなキーボードや操作性の悪い小型スイッチ等を装
備する必要がなく、しかも、大規模なテキスト入力・編
集処理、各種認識処理、解析処理、フォーマット変換処
理等のプログラムが不要となるため、メモリ容量が小さ
くできる。これにより、端末の小型化、低コスト化、低
消費電力化等の点でメリットがある。また、端末の操作
者にとっても、キー入力操作や煩雑なスイッチ操作をす
る必要がないため、分厚いマニュアルを読んだり訓練し
たりすることなく、誰でも直ぐに使いこなせるというメ
リットがある。

【図面の簡単な説明】

【図１】本発明の一実施形態であるデータ加工システム
の構成例を示す図である。

【図２】名刺の例を示す図である。

【図３】サーバに予め登録されているヒント−属性表
（テーブル情報）の例を示す図である。

【図４】アドレス帳のデータ表示フォーマットの例を示
す図である。

【図５】アドレス帳のデータ表示例を示す図である。

【図６】機能拡張されたアドレス帳のデータ表示例を示
す図である。

【図７】名刺の他の例を示す図である。

【図８】紙や白板に書いた文章の例を示す図である。

【図９】サーバに予め登録されているアプリケーション
判別表（テーブル情報）の例を示す図である。

【図１０】サーバに予め登録されている第２のヒント−
属性表（テーブル情報）の例を示す図である。

【図１１】電子メール・アプリケーションのメッセージ
作成画面の例を示す図である。

【図１２】サーバに予め登録されているサービス指定表
（テーブル情報）の例を示す図である。

【符号の説明】

１ 名刺 ２ 携帯情報端末 ３ デジタルカメラ機能 ４ 携帯情報端末が有する通信機能 ５ ＰＩＭ機能（アドレス帳） ６ ＣＰＵ ７ 携帯情報端末からサーバに至る通信経路 ８ サーバ ９ サーバが有する通信機能 １０ パターン認識処理機能 １１ 文字認識処理機能 １２ 単語認識処理機能 １３ データ解析処理機能 １４ データ変換処理機能 １５ サーバから携帯情報端末に至る通信経路

Claims (29)

【特許請求の範囲】
1. 【請求項１】 画像入力機能、通信機能およびアプリケ
   ーションプログラム実行機能を有する端末と、 前記端末より送信されたデジタル画像データを受信し、
   該デジタル画像データを所定の属性を持つテキストデー
   タに変換するデータ加工手段と、 前記加工されたテキストデータを、前記デジタル画像デ
   ータを送信してきた端末で実行されているアプリケーシ
   ョンプログラムに応じたデータフォーマットに変換する
   フォーマット変換手段と、 前記フォーマット変換されたテキストデータを前記端末
   に返送する通信手段とを備えたことを特徴とするデータ
   加工システム。
2. 【請求項２】 前記データ加工手段、フォーマット変換
   手段および通信手段は、前記端末とは別のサーバに備え
   られることを特徴とする請求項１に記載のデータ加工シ
   ステム。
3. 【請求項３】 請求項１または２に記載のデータ加工シ
   ステムにおいて、前記データ加工手段は、 前記端末より送信されたデジタル画像データ中に含まれ
   る画像パターンを認識するパターン認識手段と、 前記端末より送信されたデジタル画像データ中に含まれ
   る文字を認識してテキストデータに変換する文字認識手
   段と、 前記文字認識手段により認識された文字中に所定の単語
   が含まれるかどうかを認識する単語認識手段と、 前記パターン認識手段および前記単語認識手段の認識結
   果から、前記デジタル画像データ中に含まれる画像パタ
   ーンおよび文字に所定の属性を与える属性付与手段とを
   備えることを特徴とするデータ加工システム。
4. 【請求項４】 請求項３に記載のデータ加工システムに
   おいて、 前記単語認識手段および前記属性付与手段は、所定のテ
   ーブル情報に基づいて処理を行うことを特徴とするデー
   タ加工システム。
5. 【請求項５】 請求項１に記載のデータ加工システムに
   おいて、 前記端末は、前記通信手段により前記アプリケーション
   プログラムが管理するデータエリアに返送されたテキス
   トデータの内容を修正する手段を備えることを特徴とす
   るデータ加工システム。
6. 【請求項６】 請求項２に記載のデータ加工システムに
   おいて、 前記端末から前記サーバに前記デジタル画像データを送
   信し終わった段階で通信回線を切断し、その後前記サー
   バのフォーマット変換手段でフォーマット変換処理が終
   わった後に前記通信回線を再び接続し、前記通信手段に
   より前記サーバから前記端末にデータ返送を行うことを
   特徴とするデータ加工システム。
7. 【請求項７】 請求項２に記載のデータ加工システムに
   おいて、 前記端末から前記サーバに前記デジタル画像データを送
   信し終わった段階で通信回線を切断し、次のデジタル画
   像データを送信するために前記通信回線を再び接続した
   ときに前記通信手段により前記サーバから前記端末にデ
   ータ返送を行うことを特徴とするデータ加工システム。
8. 【請求項８】 請求項１に記載のデータ加工システムに
   おいて、 前記デジタル画像データ中に前記所定の属性を持つテキ
   ストデータとして解析できないデータ領域があった場合
   には、そのデータ領域に特定の属性を付けるようにした
   ことを特徴とするデータ加工システム。
9. 【請求項９】 請求項１に記載のデータ加工システムに
   おいて、 前記デジタル画像データ中に前記所定の属性を持つテキ
   ストデータとして解析できないデータ領域があった場合
   には、そのデータ領域のデジタル画像データまたは属性
   不明のテキストデータを切り出して前記端末に返送し、
   その返送した部分のデータの属性を前記端末の操作者に
   問い合わせ、前記操作者が指定した属性名を得るように
   したことを特徴とするデータ加工システム。
10. 【請求項１０】 請求項１〜９の何れか１項に記載のデ
    ータ加工システムにおいて、 前記端末の画像入力機能は、少なくともデジタルカメラ
    による画像入力機能、スキャナによる画像入力機能また
    はファクシミリによる画像入力機能等の何れか１つを含
    むことを特徴とするデータ加工システム。
11. 【請求項１１】 請求項１〜１０の何れか１項に記載の
    データ加工システムにおいて、 前記データ加工手段は、前記デジタル画像データ中の手
    書き文字を認識して処理可能なように構成されるととも
    に、その文字認識の結果に基づいて、前記デジタル画像
    データを送信してきた端末で実行されているアプリケー
    ションプログラムを判別するアプリケーション判別手段
    を備え、 前記アプリケーション判別手段による判別結果に応じて
    データ加工処理およびフォーマット変換処理を行うこと
    を特徴とするデータ加工システム。
12. 【請求項１２】 請求項１１に記載のデータ加工システ
    ムにおいて、 前記端末で実行されるアプリケーションプログラムは、
    アドレス帳、電子メール、メモ帳、スケジュール管理等
    の各処理プログラムのうち少なくとも１つを含むことを
    特徴とするデータ加工システム。
13. 【請求項１３】 請求項１〜１０の何れか１項に記載の
    データ加工システムにおいて、 前記端末から送信するデジタル画像データにサービス指
    定情報を付加して送信するようになすとともに、これら
    情報の受信側では複数種類のサービス処理プログラムを
    前記サービス指定情報に対応付けて予め登録しておき、 前記データ加工手段およびフォーマット変換手段は、前
    記端末から送信されてきたデジタル画像データに対し、
    そのデジタル画像データに付加して送られてきたサービ
    ス指定情報で指定されるサービス処理プログラムにより
    処理を行うことを特徴とするデータ加工システム。
14. 【請求項１４】 請求項１３に記載のデータ加工システ
    ムにおいて、 前記複数種類のサービス処理プログラムは、画像データ
    蓄積、画像データ重畳、アドレス帳、電子メール、メモ
    帳、スケジュール管理等の各サービス処理プログラムの
    うち少なくとも２つを含むことを特徴とするデータ加工
    システム。
15. 【請求項１５】 画像入力機能、通信機能およびアプリ
    ケーションプログラム実行機能を有する外部の端末より
    送られてきたデジタル画像データに対してデータ加工処
    理を施して所定の属性を持つテキストデータに変換する
    データ加工手段と、 前記加工されたテキストデータを、前記外部の端末で実
    行されているアプリケーションプログラムに応じたデー
    タフォーマットに変換するフォーマット変換手段と、 前記フォーマット変換されたテキストデータを前記外部
    の端末に返送する通信手段とを備えたことを特徴とする
    データ加工装置。
16. 【請求項１６】 画像入力機能およびアプリケーション
    プログラム実行機能を有する端末に備えられ、 前記画像入力機能で入力されたデジタル画像データに対
    してデータ加工処理を施して所定の属性を持つテキスト
    データに変換するデータ加工手段と、 前記加工されたテキストデータを、現在実行されている
    アプリケーションプログラムに応じたデータフォーマッ
    トに変換するフォーマット変換手段と、 前記フォーマット変換されたテキストデータを、現在実
    行されているアプリケーションプログラムが管理するデ
    ータエリアに記憶する記憶手段とを備えたことを特徴と
    するデータ加工装置。
17. 【請求項１７】 請求項１５または１６に記載のデータ
    加工装置において、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    には、そのデータ領域に特定の属性を付けるようにした
    ことを特徴とするデータ加工装置。
18. 【請求項１８】 請求項１５または１６に記載のデータ
    加工装置において、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    には、そのデータ領域のデジタル画像データまたは属性
    不明のテキストデータを切り出して提示し、その提示し
    た部分のデータの属性を前記端末の操作者に問い合わ
    せ、前記操作者が指定した属性名を得るようにしたこと
    を特徴とするデータ加工装置。
19. 【請求項１９】 画像入力機能と通信機能とアプリケー
    ションプログラム実行機能とを有する端末が、前記画像
    入力機能で入力したデジタル画像データを前記通信機能
    を介してサーバに送信し、 前記デジタル画像データを受信したサーバが、そのデジ
    タル画像データに対してデータ加工処理を施すことによ
    って所定の属性を持つテキストデータに変換するととも
    に、前記端末で実行されているアプリケーションプログ
    ラムに応じたデータフォーマットに変換し、それを前記
    端末で実行されているアプリケーションプログラムが管
    理するデータエリアに返送することにより、 前記アプリケーションプログラムの管理データを自動的
    に登録できるようにしたことを特徴とするデータ加工方
    法。
20. 【請求項２０】 請求項１９に記載のデータ加工方法に
    おいて、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    には、そのデータ領域に特定の属性を付けるようにした
    ことを特徴とするデータ加工方法。
21. 【請求項２１】 請求項１９に記載のデータ加工方法に
    おいて、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    には、そのデータ領域のデジタル画像データまたは属性
    不明のテキストデータを切り出して提示し、その提示し
    た部分のデータの属性を前記端末の操作者に問い合わ
    せ、前記操作者が指定した属性名を得るようにしたこと
    を特徴とするデータ加工方法。
22. 【請求項２２】 請求項１９に記載のデータ加工方法に
    おいて、 前記端末のデジタルカメラの撮影により得たデジタル画
    像データ、前記端末のスキャナで画像を読み込むことに
    より得たデジタル画像データ、または前記端末のファク
    シミリ機能で受信したデジタル画像データを前記サーバ
    に送信するようにしたことを特徴とするデータ加工方
    法。
23. 【請求項２３】 請求項１９に記載のデータ加工方法に
    おいて、 前記サーバは、前記デジタル画像データ中の手書き文字
    を認識可能であり、その文字認識の結果に基づいて、前
    記デジタル画像データを送信してきた端末で実行されて
    いるアプリケーションプログラムを判別し、当該判別結
    果に応じたデータ加工処理およびフォーマット変換処理
    を行うことを特徴とするデータ加工方法。
24. 【請求項２４】 請求項１９に記載のデータ加工方法に
    おいて、 前記端末から送信するデジタル画像データにサービス指
    定情報を付加して送信するようになすとともに、前記サ
    ーバ側では複数種類のサービス処理プログラムを前記サ
    ービス指定情報に対応付けて予め登録しておき、 前記サーバは、前記端末から送信されてきたデジタル画
    像データに対し、そのデジタル画像データに付加して送
    られてきたサービス指定情報で指定されるサービス処理
    プログラムにより処理を行うことを特徴とするデータ加
    工方法。
25. 【請求項２５】 端末より入力したデジタル画像データ
    をサーバに送信し、当該サーバにおいて、受信したデジ
    タル画像データに対してデータ加工処理を施すことによ
    って所定の属性を持つテキストデータに変換するととも
    に、前記端末で実行されているアプリケーションプログ
    ラムに応じたデータフォーマットに変換し、それを前記
    端末に返送するようにするプログラムを記録したことを
    特徴とするコンピュータ読み取り可能な記録媒体。
26. 【請求項２６】 請求項２５に記載の記録媒体におい
    て、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    に、そのデータ領域に特定の属性を付けるようにするプ
    ログラムを更に記録したことを特徴とするコンピュータ
    読み取り可能な記録媒体。
27. 【請求項２７】 請求項２５に記載の記録媒体におい
    て、 前記デジタル画像データ中に前記所定の属性を持つテキ
    ストデータとして解析できないデータ領域があった場合
    に、そのデータ領域のデジタル画像データまたは属性不
    明のテキストデータを切り出して前記端末に返送し、そ
    の返送した部分のデータの属性を前記端末の操作者に問
    い合わせ、前記操作者が指定した属性名を前記端末から
    前記サーバに送信するようにするプログラムを更に記録
    したことを特徴とするコンピュータ読み取り可能な記録
    媒体。
28. 【請求項２８】 請求項２５に記載のデータ加工方法に
    おいて、 前記デジタル画像データ中の手書き文字を認識可能とな
    し、その文字認識の結果に基づいて、前記デジタル画像
    データを送信してきた端末で実行されているアプリケー
    ションプログラムを判別し、当該判別結果に応じたデー
    タ加工処理およびフォーマット変換処理を行うようにす
    るプログラムを更に記録したことを特徴とするコンピュ
    ータ読み取り可能な記録媒体。
29. 【請求項２９】 請求項２５に記載の記録媒体におい
    て、 前記端末から送信するデジタル画像データにサービス指
    定情報を付加して送信するようになすとともに、前記サ
    ーバ側では、前記サービス指定情報に対応付けて予め登
    録しておいた複数種類のサービス処理プログラムのう
    ち、前記デジタル画像データに付加して送られてきたサ
    ービス指定情報で指定されるサービス処理プログラムを
    用いて、前記端末から送信されてきたデジタル画像デー
    タに対してデータ加工処理を行うようにするプログラム
    を更に記録したことを特徴とするコンピュータ読み取り
    可能な記録媒体。