[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP4323593B2 - Mobile communication device and communication method - Google Patents

Mobile communication device and communication method Download PDF

Info

Publication number
JP4323593B2
JP4323593B2 JP31711298A JP31711298A JP4323593B2 JP 4323593 B2 JP4323593 B2 JP 4323593B2 JP 31711298 A JP31711298 A JP 31711298A JP 31711298 A JP31711298 A JP 31711298A JP 4323593 B2 JP4323593 B2 JP 4323593B2
Authority
JP
Japan
Prior art keywords
image data
moving image
compression
input
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP31711298A
Other languages
Japanese (ja)
Other versions
JP2000152231A5 (en
JP2000152231A (en
Inventor
真二 土田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP31711298A priority Critical patent/JP4323593B2/en
Publication of JP2000152231A publication Critical patent/JP2000152231A/en
Publication of JP2000152231A5 publication Critical patent/JP2000152231A5/ja
Application granted granted Critical
Publication of JP4323593B2 publication Critical patent/JP4323593B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、携帯通信装置及び通信方法に関し、より具体的には、画像入力手段及び画像表示手段を具備する携帯通信装置及び通信方法に関する。
【0002】
【従来の技術】
撮像手段のような画像入力手段を無線又は有線で接続して、画像を入力及び送信できるようにした携帯通信装置は、公知である。
【0003】
【発明が解決しようとする課題】
しかし、従来の携帯通信装置は、データを送信する場合、目的に合った通信方式で通信することができなかった。
【0004】
本発明は、このような不都合を解消した携帯通信装置及び通信方法を提示することを目的とする。
【0005】
【課題を解決するための手段】
発明に係る携帯通信装置は、シャッターキーと、前記シャッターキーが押されたことに応じて動画像データ又は静止画像データを入力する画像入力手段と、前記画像入力手段により入力される画像データを圧縮符号化する圧縮手段であって、1画面分の画像データの静止画圧縮、第1の圧縮率の動画圧縮、及び前記第1の圧縮率より低い第2の圧縮率の動画圧縮の何れかで圧縮する圧縮手段と、通信相手に前記第1の圧縮率の動画圧縮で圧縮された動画像データを送信し、前記通信相手から動画像データを受信する送受信手段と、前記静止画圧縮で圧縮された画像データ、及び前記第2の圧縮率の動画圧縮で圧縮された動画像データを記録媒体に記録可能な記録手段と、前記送受信手段により送信される動画像データの動画像及び受信される動画像データの動画像を表示する表示手段と、動画モード及びオートモードを設定する設定手段と、前記通信相手と通信中であるか否かを判定する判定手段と、前記圧縮手段、前記送受信手段及び前記記録手段を制御する制御手段とを具備し、前記制御手段は、前記シャッターキーが押されたときに前記設定手段により動画モードが設定されている場合、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを前記圧縮手段に前記第2の圧縮率の動画圧縮で圧縮させ当該圧縮された動画像データを前記通信相手にリアルタイムで送信せずに、記録媒体に記録させ、前記制御手段は、前記シャッターキーが押されたときに前記オートモードが設定されている場合であって、前記判定手段により通信中であると判定されたときには、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを前記圧縮手段に前記第1の圧縮率の動画圧縮で圧縮させ、当該圧縮された動画像データを前記通信相手に送信させ、前記制御手段は、前記シャッターキーが押されたときに前記オートモードが設定されている場合であって、前記判定手段により通信中でないと判定されたときには、前記画像入力手段に1画面分の画像データを入力させ当該入力された静止画像データを前記圧縮手段に前記静止画圧縮で圧縮させ、当該圧縮された静止画像データを前記通信相手にリアルタイムで送信せずに前記記録媒体に記録させることを特徴とする。
本発明に係る通信方法は、画像入力手段により入力される動画像データを通信相手にリアルタイムで送信し、前記通信相手から送信される動画像データを受信し、前記画像入力手段により入力される動画像データの動画像とともに通信相手から受信された動画像データの動画像を表示する携帯通信装置が行う通信方法であって、シャッターキーが押されたときにオートモードが設定されている場合で通信中であるとき、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを第1の圧縮率の動画圧縮で圧縮してから通信相手にリアルタイムで送信するステップと、前記シャッターキーが押されたときに前記オートモードが設定されている場合で通信中でないとき、前記画像入力手段に1画面分の静止画データを入力させ当該入力された静止画データを静止画圧縮で圧縮してから前記記録媒体に記録するステップと、前記シャッターキーが押されたときに動画モードが設定されている場合に、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを、前記通信相手にリアルタイムで送信せずに、前記第1の圧縮率よりも低い第2の圧縮率の動画圧縮で圧縮してから前記記録媒体に記録するステップとを具備することを特徴とする。
【0007】
【実施例】
以下、図面を参照して、本発明の実施例を詳細に説明する。
【0008】
図1は、本発明の一実施例の概略構成ブロック図を示す。本実施例の構成及び動作を説明する前に、基本的な機能を説明する。第1に、動画像をCCDカメラで撮影して、本装置内のデータ記憶媒体に記憶でき、また、遠隔地に送信できる。例えば遠隔地のコンピュータに送信でき、それに装備される記憶媒体にリアルタイムに画像データを格納できる。第2に、静止画像をCCDカメラで撮影して、本装置内のデータ記憶媒体に記憶でき、また、遠隔地に送信できる。例えば、遠隔地のコンピュータに送信でき、それに装備される記憶媒体に格納できる。第3に、動画も静止画も伴わずに、通常の携帯電話と同様に、音声で通話できる。
【0009】
図1に示す実施例の構成を説明する。10はCCDカメラであって、撮影画像をR、G及びB成分に分けて出力する。12は、CCDカメラ10から出力されるRGB画像信号をディジタル信号に変換するA/D変換器、14は、A/D変換器12の出力画像データを1画面分記憶するフィールド・メモリ、16はフィールド・メモリ14から出力されるディジタル画像データをアナログ信号に変換するD/A変換器、18はD/A変換器16の出力画像信号を画像表示する表示装置である。
【0010】
20は、A/D変換器12及びD/A変換器16の変換タイミング並びにフィールド・メモリ14の書き込み及び読み出しタイミングを制御するタイミング制御回路である。
【0011】
22は、全体を制御するCPU、24は、CPU22のためのプログラム及び固定データを記憶するROM、26は、可変データを記憶するRAM、28は、映像入力のためのシヤッタ・キー、通信相手を発呼するためのダイヤルキー、入力する映像が静止画か動画かを指定するキー等を具備するキーパッドである。
【0012】
30はディジタルビデオ規格に準拠する画像コーデック(符号化復号化回路)であり、フィールド・メモリ14の画像データを圧縮符号化して画像メモリ31に格納し、画像メモリ31に格納される圧縮画像データを伸長してフィールド・メモリ14に格納する。
【0013】
32は、H.263規格に準拠する画像コーデック(符号化復号化回路)であり、フィールド・メモリ14の画像データを圧縮符号化し、圧縮画像データを伸長してフィールド・メモリ14に格納する。なお、画像コーデック32によるH.263規格の圧縮は、画像コーデック30によるディジタルビデオ規格の圧縮によりも高い圧縮率を達成できる。この点で、画像コーデック32は高圧縮率の圧縮方式に準拠し、画像コーデック30は低圧縮率の圧縮方式に準拠する。
【0014】
33は静止画像を記憶する画像メモリ、34は、画像メモリ33に記憶すべき画像を圧縮符号化し、画像メモリ33から読み出した圧縮画像データを伸長する画像コーデック(符号化復号化回路)である。
【0015】
36は、装置全体に電源を供給するバッテリである。
【0016】
38は、通信路として無線通信(PHS)、有線通信(ISDN)及び光(赤外線)通信の何れか1つを選択するスイッチである。
【0017】
40は、PIAFSプロトコル処理回路(無線通信制御回路)であり、呼接続制御(PHSの規格RCR STD−28に関する制御)によって回線が接続された後のPIAFSのプロトコル処理を行う。この処理回路40は、PIAFSのデータ通信処理とリアルタイム通信処理の両方を行ない、CPU22からの指示に従いデータ通信かリアルタイム通信かを選択する。リアルタイム通信は、H.324M規格に準拠する。画像データはH.263規格に従って圧縮され、音声データはG.723.1規格に従って圧縮されるが、処理回路40自体は、この圧縮を行わない。多重化処理もH.223Mに準拠する。通信制御はH.245に準拠する。処理回路40は、H.223M及びH.245の処理を含む。
【0018】
42は、発着信制御を行い、回線が接続した後のX25プロトコル処理を行なう回路(有線通信制御回路)である。
【0019】
44は、光通信制御回路であり、赤外線によりコンピュータとの間でのローカルな赤外線通信プロトコルIrDAを処理する。
【0020】
PIAFSプロトコル、X25プロトコル及びIrDAプロトコルの詳細は公知であり、その内容は本実施例の特徴とは関係しないので、詳細な説明を省略する。
【0021】
46は無線通信回路であり、無線回線を確立するまでに必要なプロトコル(PHSの規格RCR STD−28に関する制御)を処理し、アンテナ48が接続する。
【0022】
50はISDN通信回路であって、ISDN回線を確立するまでに必要なプロトコルを処理する。この規格も公知なので詳しい説明を省略する。
【0023】
52は光通信回路であって、ローカルな赤外線通信をコンピュータと行うための回路である。プロトコル処理以外の処理も行う。本実施例では、IrDAに準拠する光通信方式を採用するが、この技術の詳細も公知なので詳しい説明を省略する。
【0024】
54はマイク、56はマイク54からの音声信号をディジタル信号に変換して、音声コーデック(符号化復号化回路)58,60に供給するるA/D変換器、62は音声コーデック58,60からの音声データをアナログ信号に変換するD/A変換器、64はD/A変換器62からの音声信号を音声出力するスピーカである。
【0025】
音声コーデック58は、マイク54又は通信系から入力した音声情報をディジタルビデオ規格に準拠して符号化して音声メモリ66に格納し、音声メモリ66に格納されるディジタルビデオ規格で符号化された音声データを復号化する。
【0026】
音声コーデック60は、マイク54から入力した音声情報をG.723.1規格に準拠して符号化し、G.723.1規格で符号化された音声データを復号化する。
【0027】
68は音源であり、他の端末などから着信があった場合の着信音等を発生する。
【0028】
図2は、本実施例の正面図を示す。カメラ10は、Aの部分で本体に対して回転自在に支持されている。
【0029】
70は設定キーであり、本実施例では、オート・モード、動作モード、静止画モード、音声モード及びデータ送信モードを設定できる。表示装置18の表示画面上の左側部分(状態表示領域)18aには、設定キー70で選択可能なモードが表示される。設定キー70を押下した後、設定したいデータ種目を数字キー72により選択する。数字キー72は、通信相手端末のダイヤル番号を入力するのにも使用される。
【0030】
オート・モードが設定されると、撮影モード(動画撮影モード又は静止画撮影モード)を通信中か否かの状態によって自動的に選択する。通信中のときにはH.263規格に準拠する動画撮影モードを選択し、通信中でなければ静止画撮影モードを選択する。
【0031】
動画モードが設定されると、他の条件によらず、撮影モードは、ディジタル・ビデオ規格に準拠する動画撮影モードになる。
【0032】
静止画モードが設定されると、他の条件によらず、撮影モードは静止画撮影モードになる。表示画面の点線より右側部分(ファインダ領域)18bがCCDカメラ10のファインダとなる。
【0033】
音声モードが設定されると、CCDカメラ10とそのファインダ領域18bは動作せず、音声のみが処理される。
【0034】
データ送信モードが設定されると、記憶されている録画データを通信相手に送信する。
【0035】
74は、通信中を示すLEDであり、他の通信端末と通信している状態であるときに点灯する。
【0036】
76は録画中を示すLED付のオン/オフ・スイッチであり、このキーを押下すると録画モードになり、LEDが点灯する。再度押下すると、録画モードでなくなり、LEDは消灯する。
【0037】
78はカウンタ表示を指示するキーであり、このキー78を押下すると、CCDカメラ10から入力し録画した画像データ(静止画)の枚数が状態表示領域18aに表示される。
【0038】
80は通信手段を変更する切替えスイッチであり、1度押下すると、現在設定されている通信手段が表示画面の状態表示領域18aに表示され、再度、押下すると次の通信手段に表示が変更される。即ち、スイッチ80を押す度に、通信手段の表示が変更される。3秒間、このスイッチ80を押さないと、通信手段の表示が消えるとともに、表示されていた通信手段が設定される。通信手段の切り替え順序は、無線通信、有線通信及び光通信の順である。デフォルトは無線通信である。
【0039】
82は、録画した静止画像データの再生表示を指示する再生表示キーであり、CCDカメラ10から入力した画像を再生表示する場合は、このキー82を押下した後に数字キー72で適当な数値を入力することにより、入力された数値に該当するページの画像が再生表示される。その後は、▽(ダウン)キー84及び△(アップ)キー86により、表示するページを前後のページに変更できる。
【0040】
88は、静止画録画の場合はシヤッタとなり、動画記録の場合はCCDカメラ10からの映像の取り込み開始/停止(取り込み画像の表示/停止)を指示するシャッタ・キーである。動画の場合の開始と停止が押下する毎に繰り返されるトグル・スイッチになっている。オートモードが設定されている場合、通信中か否かで動画撮影か静止画撮影かが変わるが、シヤッタ・キー88押下時の動作は同じである。
【0041】
90は、電源のオン/オフを切り換える電源キーであり、押下する毎に電源オン/オフを繰り返す。静止画の場合、スイッチ90をオンにすると、CCDカメラ10による撮影画像をファインダ領域18bに表示し、電源をオフにすると、CCDカメラ10、表示装置18及びその他の部品の電源を遮断する。
【0042】
92は、スピーカ64の出力レベルを設定するボリューム・キーであり、最低(最左端)にすると、出力音量がゼロになる。94は、マイク54の入力レベルを設定するボリューム・キーであり、最低(最左端)にすると、マイク54のゲインがゼロになり、音が入力されなくなる。
【0043】
95は発信又は着信の受付を指示する発信/着信キーである。
【0044】
96は実行中の処理を中断する場合に押下するストップ・キーである。このキー96が押下されると、実行中の処理が直ちに中断される。
【0045】
設定キー70によって静止画モードが設定されている場合、電源キー90が押下されて電源が入った状態では、CCDカメラ10から入力される画像は、表示装置18のファインダ領域18bに表示される。シヤッタ・キー88を押下すると、CCDカメラ10から出力されてフィールドメモリ14に格納された静止画像データが画像メモリ31に圧縮記憶される。
【0046】
設定キー70によって動画モードが設定されている場合、シヤッタ・キー88が押下されると、CCDカメラ10から出力される画像は、表示装置18のファインダ18bに表示される。次に録画キー76が押下されると、CCDカメラ10から出力される画像が逐次、画像メモリ31に圧縮記録され、録画キー76に付属するLEDが点灯する。
【0047】
図3は、本実施例の背面図を示す。98はISDN用モジュラージャック、100は、光通信(例えば、IrDA)で使用するLED光の送受信部である。
【0048】
図4は、本実施例を使用する通信システムの概略構成ブロック図を示す。110は交換網であって、公衆網又は構内網のどちらでもよい。112,114は本実施例からなる端末装置、116はコンピュータである。118は基地局であり、端末装置112と交換網110を無線及び有線で接続する。端末装置114は、コンピュータ116と光通信方式で通信する。120は通常の電話端末である。
【0049】
図5〜図10に示すフローチャートを参照して、本実施例の動作を説明する。なお、図5乃至図10に示すフローチャートは、使用者の操作を受けて、端末装置112,114(のCPU22)がどのように動作するかを示す。
【0050】
図5は、本実施例のメイン・ルーチンのフローチャートを示す。先ず、動画像を撮影する場合の一連の動作を説明する。電源キー90がオンになると、バッテリ36から各部に電源が供給される(S1)。CPU22が、ROM24に記憶されているプログラムで指定されている処理を開始する。CPU22は初めに、各処理部に故障があるか否かをチェックする(S2)。いずれかの処理ブロックに故障があると(S3)、障害発生を使用者に通知する(S4)。例えば、エラーを表示したり、表示装置18の故障に対して音を発生したり、或る機能が使用不能であることを使用者に通知する。
【0051】
故障が無いか又は、機能を制限して使用可能である場合(S3)、無線通信回路46又は有線通信回路50からの着信の有無をチェックし(S5)、着信があれば、着信処理を実行する(S6)。着信が無ければ(S5)、発信/着信キー95の押下による発信指示の有無をチェックし(S7)、発信指示があれば、発信処理を実行する(S8)。
【0052】
発信もなければ(S7)、静止画モードか否かをチェックし(S9)、静止画モードであれば、静止画処理を実行する(S10)。
【0053】
静止画モードでなければ(S9)、キーパッド28のシヤッタ・キー88が押下されたか否かを確認する(S11)。シャッタ・キー88が押下された場合(S11)、設定されているモードが静止画モードのときには(S12)、静止画処理(S10)を、動画モードのときには(S13)、動画処理(S14)を、オートモードのときには(S15)、オート処理(S16)をそれぞれ実行する。静止画モード、動画モード及びオート・モードの何れでもなければ、その他の処理を実行する(S17)。また、シャッタ・キー88が押下されない場合にも(S11)、その他の処理を実行する(S17)。
【0054】
図6は、オート処理(S16)の詳細なフローチャートを示す。通信中か否かをチェックする(S21)。発信又は着信の処理中には、通信中であることを示すフラグにより、通信中か否かをチェックする。通信中でなければ(S21)、静止画処理を実行する(S10)。
【0055】
通信中であれば(S21)、マイクをオンにして(S23)、表示画面の状態表示領域18aに録画中のシンボルなどを表示し、録画スイッチ76に付属するLEDを点灯する(S24)。
【0056】
その後、CCDカメラ10に入射する光学像を表示装置18のファインダ領域18bに表示すると共に、マイク54の出力音声を取り込み、ディジタル信号に変換する(S25)。即ち、CCDカメラ10の出力画像をA/D変換器12によりディジタル信号に変換し、フィールドメモリ14に一時記憶する。1画面分の画像データがフィールドメモリ14に記憶されると、それを読み出し、D/A変換器16によりアナログ信号に変換して表示装置18に印加する。これにより、CCDカメラ10に入射する光学像が表示装置18のファインダ領域18bに表示される。画像表示用にフィールドメモリ14から画像データを読み出している間、CCDカメラ10からの画像データがフィールドメモリ14に書き込まれないように、タイミング制御回路20がメモリ14の書き込みと読み出しのタイミングを制御し、その動作状態をCPU22に通知する。CPU22は、タイミング制御回路20からの、フィールドメモリ14への書き込み完了信号とフィールドメモリ14からの読み出し完了信号を受けて、CCDカメラ10からの画像信号の読み出しとメモリ14への書き込み、並びに、フィールド・メモリ14からの画像データの読み出しを制御する。
【0057】
次に、画像データをH.263規格で符号化し、音声データをG.723.1規格で符号化する(S26)。即ち、ファインダ領域18bに表示した1画面分の画像データをフィールドメモリ14から画像コーデック32に送出する。画像コーデック32は入力する画像データをH.263規格で符号化し、PIAFSプロトコル処理回路40に送る。A/D変換器56によりディジタル化された音声信号は音声コーデック60に送られ、ここでG.723.1規則に従って符号化されてPIAFSプロトコル処理回路40に送られる。
【0058】
PIAFSプロトコル処理回路40は、入力した画像データと音声データをH.223Mの規格に従って多重化してPIAFSフォーマットに入れこみ、フレーム化して無線通信回路46に送る。無線通信回路46は、回路40からのデータをPHS規格に従って、通信相手(例えば、コンピュータ116)に送信する(S27)。
【0059】
送信し終わると、コンピュータ側からディスク(メモリ)フル等のエラーメッセージを受信していないかどうかをチェックし(S28)、受信していなければ(S28)、録画スイッチ76の状態をチェックする(S30)。録画オンであれば(S30)、次の1画面データを入力及び送信するためにS25に戻り、録画スイッチ76がオフになるまでS25〜S28を繰り返す。
【0060】
相手のコンピュータからエラーメッセージを受信していれば(S28)、状態表示領域18aにエラーメッセージを表示する(S29)。
【0061】
録画スイッチ76がオフになるか(S30)、エラーを表示した場合(S29)、録画中の表示を停止し、録画スイッチ76に付属するLEDを消灯して(S31)、通信回線を遮断する(S32)。
【0062】
シャッタ・キー88がオフになるのを待って(S33)、表示装置18をオフにし(S34)、電源キー90がオフかどうかを確認し(S35)、オフならば、各部への電源供給を遮断して終了する。
【0063】
図6では、通信相手をコンピュータとして、画像音声情報を送信したが、通信相手が本実施例と同様の端末装置であってもよく、また、相手から画像音声情報を受信するようにしてもよい。その場合には、例えば、受信した画像データをファインダ領域18bに表示し、送信している画像を確認するために、表示装置18の画面の例えば左下に送信画像を表示するようにすればよい。
【0064】
図7は、動画処理(S14)の詳細なフローチャートを示す。マイクをオンにして(S41)、表示画面の状態表示領域18aに録画中のシンボルなどを表示し、録画スイッチ76に付属するLEDを点灯する(S42)。
【0065】
その後、CCDカメラ10に入射する光学像を表示装置18のファインダ領域18bに表示すると共に、マイク54の出力音声を取り込み、ディジタル信号に変換する(S43)。即ち、CCDカメラ10の出力画像をA/D変換器12によりディジタル信号に変換し、フィールドメモリ14に一時記憶する。1画面分の画像データがフィールドメモリ14に記憶されると、それを読み出し、D/A変換器16によりアナログ信号に変換して表示装置18に印加する。これにより、CCDカメラ10に入射する光学像が表示装置18のファインダ領域18bに表示される。画像表示用にフィールドメモリ14から画像データを読み出している間、CCDカメラ10からの画像データがフィールドメモリ14に書き込まれないように、タイミング制御回路20がメモリ14の書き込みと読み出しのタイミングを制御し、その動作状態をCPU22に通知する。CPU22は、タイミング制御回路20からの、フィールドメモリ14への書き込み完了信号とフィールドメモリ14からの読み出し完了信号を受けて、CCDカメラ10からの画像信号の読み出しとメモリ14への書き込み、並びに、フィールド・メモリ14からの画像データの読み出しを制御する。
【0066】
次に、画像データ及び音声データをディジタル・ビデオ規格で符号化する(S44)。即ち、ファインダ領域18bに表示した1画面分の画像データをフィールドメモリ14から画像コーデック30に送出する。画像コーデック30は入力する画像データをディジタル・ビデオ規格で符号化して画像メモリ31に格納し、音声コーデック58が、A/D変換器56によりディジタル化された音声信号をディジタル・ビデオ規格に従って符号化し、音声メモリ66に格納する。
【0067】
メモリ31又は同66がフルかどうかをチェックし(S46)、何れかのメモリ31,66がフルならば、その旨を表示して使用者に知らせる(S47)。何れのメモリ31,66もフルでなければ(S46)、録画スイッチ76がオフになるまで(S48)、S43に戻って、S43以降を繰り返す。
【0068】
録画スイッチ76がオフになるか(S48)、録画エラーを通知した場合には(S47)、マイクをオフにして録画中の表示を停止し、録画スイッチ76に付属するLEDを消灯する(S49)。シャッタ・キー88がオフになるのを待って(S50)、表示装置18をオフにし(S51)、電源キー90がオフかどうかを確認し(S52)、オフならば、各部への電源供給を遮断して終了する。
【0069】
図8は、静止画処理(S10)の詳細なフローチャートを示す。先ず、CCDカメラ10に入射する光学像を表示装置18のファインダ領域18bに表示する(S61)。即ち、CCDカメラ10の出力画像をA/D変換器12によりディジタル信号に変換し、フィールドメモリ14に一時記憶する。1画面分の画像データがフィールドメモリ14に記憶されると、それを読み出し、D/A変換器16によりアナログ信号に変換して表示装置18に印加する。これにより、CCDカメラ10に入射する光学像が表示装置18のファインダ領域18bに表示される。画像表示用にフィールドメモリ14から画像データを読み出している間、CCDカメラ10からの画像データがフィールドメモリ14に書き込まれないように、タイミング制御回路20がメモリ14の書き込みと読み出しのタイミングを制御し、その動作状態をCPU22に通知する。CPU22は、タイミング制御回路20からの、フィールドメモリ14への書き込み完了信号とフィールドメモリ14からの読み出し完了信号を受けて、CCDカメラ10からの画像信号の読み出しとメモリ14への書き込み、並びに、フィールド・メモリ14からの画像データの読み出しを制御する。
【0070】
キー入力待ちになる(S62)。このとき、使用者は、必要なら表示装置18に表示されるカメラ入力画像を確認しながら、カメラ10の向きを調整してもよい。この向きの調整は機械的なものなので、CPU22は何ら関知しない。
【0071】
シヤッタ・キー88が押されると(S63)、CCDカメラ10から1画面分の画像をフィールド・メモリ14に取り込み、ファインダ領域18bに表示する。フィールドメモリ14に記憶される画像を画像コーデック34で圧縮符号化して画像メモリ33に書き込む(S64)。画像メモリ33に空きがなければ(S65)、その旨を使用者に通知し(S66)、表示をオフにして(S68)、終了する。画像メモリ33に空きがあれば(S65)、S61に戻り、次の記録に備える。
【0072】
入力されたキーが電源キー90の場合(S67)、表示をオフにして(S68)、終了する。
【0073】
その他のキーが入力された場合には(S67)、対応する処理を実行して(S69)、S61に戻る。
【0074】
図9は、着信処理(S6)の詳細なフローチャートを示す。先ず、録画中か否かをチェックする(S71)。録画中ならば(S71)、着信音を出力せずに、表示装置18の状態表示領域18aに着信を表示し、使用者に録画中止の操作を促す(S72)。その場合、単に、着信があったことを表示するのみでなく、相手電話番号、それが電話帳に登録されていれば、登録されている使用者の名前、及び相手端末の位置情報(相手端末がPHSの場合)等も同時に表示する。これにより、呼を接続する前に相手端末を確認でき、呼接続の必要性と緊急性を判断できる。
【0075】
録画中でないならば(S71)、音源68を起動して着信音をスピーカ64から送出して、使用者に着信を通知する(S73)。使用者は、着信に応答する場合、発信/着信キー95を押下する。発信/着信キー95が押下されると(S74)、CPU22は、マイク54及びスピーカ64をオンにし、無線通信回路46に着信応答するよう指示して通話状態になる(S75))。
【0076】
無線通信回路46は、PHSでの音声符号化規則であるADPCM符号化回路を備えており、音声通話の呼を確立した後、マイク54からの入力音声を送信処理し、通信相手からの音声を受信処理する。
【0077】
ストップ・キー96が押下されると(S76)、無線通信回路46に回線を遮断させ、通信を終了する(S77)。
【0078】
図10は、発信処理(S8)の詳細なフローチャートを示す。ここでは、通信相手がコンピュータであり、記憶している画像データおよび音声データを相手のコンピュータに送信する場合を説明する。ダイヤル・キー72が押下されると(S81)、入力されたダイヤル情報を記憶し(S82)、発信/着信キー95が押下されると(S83)、CPU22は、ダイヤル入力終了と判断して、発呼処理を無線通信回路46に指示し、無線通信回路46は、この指示に従い、相手端末(ここでは、コンピュータ)を呼び出す(S84)。
【0079】
相手からの応答を待ち(S85)、応答があると(S85)、データ送信モードか否かををチェックする(S86)。CPU22は、データ送信でない場合(S86)、無線通信回路46に指示して音声通信を行い(S87)、データ送信の場合(S86)、PIAFSプロトコル処理回路40と無線通信回路46にデータ通信を指示をして、画像メモリ31から符号化画像データを読み出してPIAFSプロトコル処理回路40に送り、PIAFSプロトコルのデータ通信プロトコルでデータを通信相手のコンピュータに送信する。画像データを全て送信し終えると、次に、音声データを音声メモリ66から読み出し、同様に、データ通信プロトコルに従って通信相手に送信する(S88)。
【0080】
1フレーム送信し終える度に、通信相手のコンピュータからディスク(メモリ)フル等のエラーメッセージを受信していないかどうかをチェックし(S89)、受信していなければ、S86に戻り次のフレームを送信する。全画像データ及び全音声データを送信し終えるまで、この処理を繰り返す。
【0081】
相手のコンピュータからエラーメッセージを受信した場合(S89)、表示装置18の状態表示領域18aにエラーメッセージを表示し(S90)、通信回線を切断して終了する(S92)。
【0082】
また、データ送信中でも、ストップキー96が押下された場合も(S91)、通信回線を切断して終了する(S92)。
【0083】
【発明の効果】
以上の説明から容易に理解できるように、本発明によれば、通信中の記録では、その通信速度で送信できるような高圧縮方式を使用し、通信でないときの記録では、高品質を得られる低圧縮率の圧縮方式を使用するというように、状況に応じて圧縮方式が自動的に選択されるので、使用者が状況に応じて使用すべき圧縮方法を迷うことが無くなり、操作性が向上する。また、本発明によれば、リアルタイム通信の場合は画像データと音声データを多重化して送信し、記憶している画像データ及び音声データを送信する場合は画像データをすべて送信してから音声データを送信するようにしたので、目的に合った通信方式で通信することができる。
【図面の簡単な説明】
【図1】 本発明の一実施例の概略構成ブロック図である。
【図2】 本実施例の正面図である。
【図3】 本実施例の背面図である。
【図4】 本実施例を使用するネットワークの概略構成図である。
【図5】 本実施例のフローチャートである。
【図6】 オート処理(S16)のフローチャートである。
【図7】 動画処理(S14)のフローチャートである。
【図8】 静止画処理(S10)のフローチャートである。
【図9】 着信処理(S6)のフローチャートである。
【図10】 発信処理(S8)のフローチャートである。
【符号の説明】
10:CCDカメラ
12:A/D変換器
14:フィールド・メモリ
16:D/A変換器
18:表示装置
18a:状態表示領域
18b:ファインダ領域
20:タイミング制御回路
22:CPU
24:ROM
26:RAM
28:キーパッド
30:画像コーデック
31:画像メモリ
32:画像コーデック
33:画像メモリ
34:画像コーデック
36:バッテリ
38:スイッチ
40:PIAFSプロトコル処理回路(無線通信制御回路)
42:X25プロトコル処理回路(有線通信制御回路)
44:光通信制御回路
46:無線通信回路
48:アンテナ
50:ISDN通信回路
52:光通信回路
54:マイク
56:A/D変換器
58、60:音声コーデック
62:D/A変換器
64:スピーカ
66:音声メモリ
68:音源
70:設定キー
72:数字キー
74:通信中LED
76:録画スイッチ
78:カウンタ表示指示キー
80:切替えスイッチ
82:再生表示キー
84:ダウン・キー
86:アップ・キー
88:シャッタ・キー
90:電源キー
92,94:ボリューム・キー
95:発信/着信キー
96:ストップ・キー
98:ISDN用モジュラージャック
100:LED光送受信部
110:交換網
112,114:端末装置
116:コンピュータ
118:基地局
120:電話端末
[0001]
BACKGROUND OF THE INVENTION
  The present inventionMobile phoneCommunication device andcommunicationMore specifically, the present invention relates to a portable communication device comprising image input means and image display means, andcommunicationRegarding the method.
[0002]
[Prior art]
A portable communication device in which an image input unit such as an imaging unit is connected wirelessly or by wire so that an image can be input and transmitted is known.
[0003]
[Problems to be solved by the invention]
  However, conventional mobile communication devicesThe dataWhen sendingIn, Could not communicate with the communication method that suits the purpose.
[0004]
  The present invention has solved such inconvenience.Mobile phoneCommunication device andcommunicationThe purpose is to present a method.
[0005]
[Means for Solving the Problems]
  BookInventionMobile phoneThe communication deviceInputs moving image data or still image data in response to the shutter key being pressed.An image input unit and a compression unit that compresses and encodes image data input by the image input unit, the still image compression of image data for one screen, the moving image compression at a first compression rate, and the first Compression means for compressing at one of the second compression rates lower than the compression rate of the video, and moving image data compressed by the first compression rate moving image compression to the communication partner, Transmission / reception means for receiving moving image data, recording means capable of recording image data compressed by the still image compression and moving image data compressed by moving image compression at the second compression rate on a recording medium, and Whether display is in progress of moving image data transmitted and received by the transmission / reception means, display means for displaying moving image data of the received moving image data, setting means for setting the moving image mode and auto mode, and communication with the communication partner. Whether or not A constant determining means, said compression means, and control means for controlling said transmitting and receiving means and said recording means, said control means,When the shutter key is pressedWhen the moving image mode is set by the setting means, the image input meansEnter moving image data, and the inputMoving image dataThe compression means compresses the video with the second compression rate.,The compressed video dataInstead of transmitting to the communication partner in real time, recorded on a recording medium, the control means,When the shutter key is pressedWhen the auto mode is set and the determination means determines that communication is in progress, moving image data is stored in the image input means.The input moving image data is input to the compression means.Compressed with video compression of the first compression rateThe compressed video dataTransmitting to the communication partner, the control means,When the shutter key is pressedWhen the auto mode is set and the determination means determines that communication is not being performed, image data for one screen is stored in the image input means.Let me input,The input still image data is sent to the compression means.Compressed with the still image compressionWithout sending the compressed still image data to the communication partner in real time.It is recorded on the recording medium.
  In the communication method according to the present invention, the moving image data input by the image input unit is transmitted to the communication partner in real time, the moving image data transmitted from the communication partner is received, and the moving image input by the image input unit is received. Displays the moving image of the moving image data received from the communication partner together with the moving image of the image data.Performed by mobile communication deviceA communication method,When the shutter key is pressedWhen the auto mode is set and communication is in progress, the image input meansEnter moving image data, and the inputA step of compressing moving image data by moving image compression at a first compression rate and then transmitting the moving image data to a communication partner in real time;When the shutter key is pressedWhen the auto mode is set and communication is not being performed, still image data for one screen is stored in the image input means.Let me input,The input still image dataRecording on the recording medium after compression by still image compression;When the shutter key is pressedWhen the video mode is set, the image input meansEnter moving image data, and the inputRecording the moving image data on the recording medium after compressing the moving image data by moving image compression at a second compression rate lower than the first compression rate without transmitting the moving image data to the communication partner in real time. It is characterized by.
[0007]
【Example】
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[0008]
FIG. 1 shows a schematic block diagram of an embodiment of the present invention. Before describing the configuration and operation of this embodiment, the basic functions will be described. First, moving images can be taken with a CCD camera and stored in a data storage medium in the apparatus, or transmitted to a remote location. For example, the image data can be transmitted to a remote computer, and the image data can be stored in real time on a storage medium provided in the computer. Secondly, still images can be taken with a CCD camera and stored in a data storage medium in the apparatus, or transmitted to a remote location. For example, the data can be transmitted to a remote computer and stored in a storage medium installed in the computer. Thirdly, a voice call can be made in the same manner as a normal mobile phone without moving images or still images.
[0009]
The configuration of the embodiment shown in FIG. 1 will be described. Reference numeral 10 denotes a CCD camera which divides a photographed image into R, G, and B components and outputs them. 12 is an A / D converter that converts the RGB image signal output from the CCD camera 10 into a digital signal, 14 is a field memory that stores the output image data of the A / D converter 12 for one screen, and 16 is A D / A converter 18 converts digital image data output from the field memory 14 into an analog signal, and 18 is a display device that displays an image of the output image signal of the D / A converter 16.
[0010]
A timing control circuit 20 controls the conversion timing of the A / D converter 12 and the D / A converter 16 and the writing and reading timing of the field memory 14.
[0011]
Reference numeral 22 denotes a CPU for controlling the whole, 24 a ROM for storing programs and fixed data for the CPU 22, 26 a RAM for storing variable data, 28 a shutter key for video input, and a communication partner. The keypad includes a dial key for making a call and a key for designating whether an input video is a still image or a moving image.
[0012]
Reference numeral 30 denotes an image codec (encoding / decoding circuit) compliant with the digital video standard. The image data in the field memory 14 is compression-encoded and stored in the image memory 31, and the compressed image data stored in the image memory 31 is stored in the image memory 31. It is decompressed and stored in the field memory 14.
[0013]
  32 is an H.264 standard. An image codec (encoding / decoding circuit) compliant with the H.263 standard, which compresses and encodes image data in the field memory 14, decompresses the compressed image data, and stores the decompressed image data in the field memory 14.Note that H.264 by the image codec 32 is used. The compression of the H.263 standard can achieve a higher compression rate than the compression of the digital video standard by the image codec 30. In this respect, the image codec 32 conforms to a compression method with a high compression rate, and the image codec 30 conforms to a compression method with a low compression rate.
[0014]
Reference numeral 33 denotes an image memory for storing still images, and reference numeral 34 denotes an image codec (encoding / decoding circuit) that compresses and encodes an image to be stored in the image memory 33 and decompresses the compressed image data read from the image memory 33.
[0015]
A battery 36 supplies power to the entire apparatus.
[0016]
Reference numeral 38 denotes a switch for selecting one of wireless communication (PHS), wired communication (ISDN), and optical (infrared) communication as a communication path.
[0017]
A PIAFS protocol processing circuit (wireless communication control circuit) 40 performs PIAFS protocol processing after a line is connected by call connection control (control related to the PHS standard RCR STD-28). The processing circuit 40 performs both PIAFS data communication processing and real-time communication processing, and selects data communication or real-time communication in accordance with an instruction from the CPU 22. Real-time communication Conforms to the 324M standard. The image data is H.264. The audio data is compressed according to the G.263 standard. Although compressed according to the 723.1 standard, the processing circuit 40 itself does not perform this compression. Multiplexing processing is also described in H.264. It conforms to 223M. The communication control is H.264. H.245. The processing circuit 40 is H.264. 223M and H.I. 245 processes are included.
[0018]
Reference numeral 42 denotes a circuit (wired communication control circuit) that performs outgoing / incoming control and performs X25 protocol processing after the line is connected.
[0019]
An optical communication control circuit 44 processes the local infrared communication protocol IrDA with the computer using infrared rays.
[0020]
Details of the PIAFS protocol, the X25 protocol, and the IrDA protocol are publicly known, and the details thereof are not related to the features of the present embodiment, and thus detailed description thereof is omitted.
[0021]
A wireless communication circuit 46 processes a protocol (control related to the PHS standard RCR STD-28) necessary for establishing a wireless line, and an antenna 48 is connected.
[0022]
Reference numeral 50 denotes an ISDN communication circuit which processes a protocol required until an ISDN line is established. Since this standard is also known, a detailed description is omitted.
[0023]
An optical communication circuit 52 is a circuit for performing local infrared communication with a computer. Performs processing other than protocol processing. In this embodiment, an optical communication system conforming to IrDA is adopted, but details of this technique are well known, and detailed description thereof is omitted.
[0024]
54 is a microphone, 56 is an A / D converter that converts a voice signal from the microphone 54 into a digital signal and supplies the digital signal to voice codecs 58 and 60, and 62 is a voice codec 58 and 60. A D / A converter for converting the audio data into an analog signal, and a speaker for outputting the audio signal from the D / A converter 62 as audio.
[0025]
The audio codec 58 encodes audio information input from the microphone 54 or the communication system in accordance with the digital video standard, stores the encoded information in the audio memory 66, and stores the audio data encoded in the digital video standard stored in the audio memory 66. Is decrypted.
[0026]
The audio codec 60 converts the audio information input from the microphone 54 into G.P. Encoding in accordance with the 723.1 standard; Audio data encoded according to the 723.1 standard is decoded.
[0027]
Reference numeral 68 denotes a sound source, which generates a ring tone when an incoming call is received from another terminal.
[0028]
FIG. 2 shows a front view of this embodiment. The camera 10 is supported by the portion A so as to be rotatable with respect to the main body.
[0029]
Reference numeral 70 denotes a setting key. In this embodiment, an auto mode, an operation mode, a still image mode, an audio mode, and a data transmission mode can be set. In the left part (status display area) 18a on the display screen of the display device 18, a mode selectable with the setting key 70 is displayed. After pressing the setting key 70, the data type to be set is selected by the numeric key 72. The numeric key 72 is also used for inputting a dial number of the communication partner terminal.
[0030]
When the auto mode is set, the shooting mode (moving image shooting mode or still image shooting mode) is automatically selected depending on whether communication is in progress. H. The moving image shooting mode conforming to the H.263 standard is selected, and if not communicating, the still image shooting mode is selected.
[0031]
When the moving image mode is set, the shooting mode becomes a moving image shooting mode compliant with the digital video standard regardless of other conditions.
[0032]
When the still image mode is set, the shooting mode becomes the still image shooting mode regardless of other conditions. The right portion (finder region) 18b from the dotted line of the display screen becomes the finder of the CCD camera 10.
[0033]
When the sound mode is set, the CCD camera 10 and its finder area 18b do not operate and only sound is processed.
[0034]
When the data transmission mode is set, the stored recording data is transmitted to the communication partner.
[0035]
Reference numeral 74 denotes an LED indicating that communication is in progress and is lit when the communication is being performed with another communication terminal.
[0036]
Reference numeral 76 denotes an on / off switch with an LED indicating that recording is in progress. When this key is pressed, the recording mode is set and the LED is lit. When pressed again, the recording mode is lost and the LED is turned off.
[0037]
Reference numeral 78 denotes a key for instructing counter display. When the key 78 is pressed, the number of image data (still images) input and recorded from the CCD camera 10 is displayed in the status display area 18a.
[0038]
Reference numeral 80 denotes a changeover switch for changing the communication means. When the switch is pressed once, the currently set communication means is displayed in the status display area 18a of the display screen, and when pressed again, the display is changed to the next communication means. . That is, each time the switch 80 is pressed, the display of the communication means is changed. If the switch 80 is not pressed for 3 seconds, the communication means display disappears and the displayed communication means is set. The switching order of the communication means is the order of wireless communication, wired communication, and optical communication. The default is wireless communication.
[0039]
Reference numeral 82 denotes a reproduction display key for instructing reproduction display of recorded still image data. When an image input from the CCD camera 10 is reproduced and displayed, an appropriate numerical value is input with the numeric key 72 after the key 82 is pressed. By doing so, the image of the page corresponding to the input numerical value is reproduced and displayed. Thereafter, the page to be displayed can be changed to the previous or next page by using the ▽ (down) key 84 and the △ (up) key 86.
[0040]
Reference numeral 88 denotes a shutter key that serves as a shutter in the case of still image recording, and instructing start / stop of image capturing (display / stop of captured image) from the CCD camera 10 in the case of moving image recording. It is a toggle switch that is repeated each time the start and stop in the case of a movie are pressed. When the auto mode is set, moving image shooting or still image shooting varies depending on whether communication is in progress, but the operation when the shutter key 88 is pressed is the same.
[0041]
Reference numeral 90 denotes a power key for switching on / off of the power source, which is repeatedly turned on / off each time it is pressed. In the case of a still image, when the switch 90 is turned on, an image taken by the CCD camera 10 is displayed in the finder area 18b, and when the power is turned off, the power of the CCD camera 10, the display device 18 and other parts is shut off.
[0042]
Reference numeral 92 denotes a volume key for setting the output level of the speaker 64. When the volume key is set to the lowest (leftmost), the output volume becomes zero. 94 is a volume key for setting the input level of the microphone 54. When the volume key is set to the lowest (leftmost), the gain of the microphone 54 becomes zero and no sound is input.
[0043]
Reference numeral 95 denotes an outgoing / incoming key for instructing reception of outgoing or incoming calls.
[0044]
Reference numeral 96 denotes a stop key that is pressed when interrupting a process being executed. When this key 96 is pressed, the process being executed is immediately interrupted.
[0045]
When the still image mode is set by the setting key 70, an image input from the CCD camera 10 is displayed in the finder area 18 b of the display device 18 when the power key 90 is pressed and the power is turned on. When the shutter key 88 is pressed, still image data output from the CCD camera 10 and stored in the field memory 14 is compressed and stored in the image memory 31.
[0046]
When the moving image mode is set by the setting key 70, when the shutter key 88 is pressed, an image output from the CCD camera 10 is displayed on the finder 18b of the display device 18. Next, when the recording key 76 is pressed, images output from the CCD camera 10 are sequentially compressed and recorded in the image memory 31, and the LED attached to the recording key 76 is lit.
[0047]
FIG. 3 shows a rear view of this embodiment. 98 is a modular jack for ISDN, and 100 is an LED light transmission / reception unit used in optical communication (for example, IrDA).
[0048]
FIG. 4 shows a schematic block diagram of a communication system using this embodiment. Reference numeral 110 denotes an exchange network, which may be either a public network or a private network. Reference numerals 112 and 114 denote terminal devices according to this embodiment, and 116 denotes a computer. Reference numeral 118 denotes a base station that connects the terminal device 112 and the exchange network 110 wirelessly and by wire. The terminal device 114 communicates with the computer 116 by an optical communication method. Reference numeral 120 denotes an ordinary telephone terminal.
[0049]
The operation of the present embodiment will be described with reference to the flowcharts shown in FIGS. Note that the flowcharts shown in FIGS. 5 to 10 show how the terminal devices 112 and 114 (the CPU 22 thereof) operate in response to a user operation.
[0050]
FIG. 5 shows a flowchart of the main routine of this embodiment. First, a series of operations when shooting a moving image will be described. When the power key 90 is turned on, power is supplied from the battery 36 to each unit (S1). The CPU 22 starts processing specified by the program stored in the ROM 24. First, the CPU 22 checks whether or not each processing unit has a failure (S2). If there is a failure in any of the processing blocks (S3), the occurrence of the failure is notified to the user (S4). For example, an error is displayed, a sound is generated in response to a failure of the display device 18, or the user is notified that a certain function cannot be used.
[0051]
If there is no failure or the function can be limited (S3), the presence or absence of an incoming call from the wireless communication circuit 46 or the wired communication circuit 50 is checked (S5). (S6). If there is no incoming call (S5), the presence / absence of a transmission instruction by pressing the transmission / incoming key 95 is checked (S7), and if there is a transmission instruction, a transmission process is executed (S8).
[0052]
If there is no transmission (S7), it is checked whether or not it is still image mode (S9), and if it is still image mode, still image processing is executed (S10).
[0053]
If it is not the still image mode (S9), it is confirmed whether or not the shutter key 88 of the keypad 28 is pressed (S11). When the shutter key 88 is pressed (S11), when the set mode is the still image mode (S12), the still image processing (S10) is performed, and when the set mode is the moving image mode (S13), the moving image processing (S14) is performed. In the auto mode (S15), auto processing (S16) is executed. If the still image mode, the moving image mode, or the auto mode is not selected, other processing is executed (S17). Even when the shutter key 88 is not pressed (S11), other processing is executed (S17).
[0054]
FIG. 6 shows a detailed flowchart of the auto process (S16). It is checked whether communication is in progress (S21). During the process of outgoing or incoming call, it is checked whether or not the communication is in progress by a flag indicating that the communication is in progress. If not in communication (S21), still image processing is executed (S10).
[0055]
If the communication is in progress (S21), the microphone is turned on (S23), the currently recorded symbol or the like is displayed in the status display area 18a of the display screen, and the LED attached to the recording switch 76 is lit (S24).
[0056]
Thereafter, the optical image incident on the CCD camera 10 is displayed on the finder region 18b of the display device 18, and the output sound of the microphone 54 is captured and converted into a digital signal (S25). That is, the output image of the CCD camera 10 is converted into a digital signal by the A / D converter 12 and temporarily stored in the field memory 14. When the image data for one screen is stored in the field memory 14, it is read out, converted into an analog signal by the D / A converter 16, and applied to the display device 18. As a result, an optical image incident on the CCD camera 10 is displayed in the finder region 18 b of the display device 18. The timing control circuit 20 controls the timing of writing and reading in the memory 14 so that the image data from the CCD camera 10 is not written into the field memory 14 while reading the image data from the field memory 14 for image display. The CPU 22 is notified of the operation state. The CPU 22 receives the write completion signal to the field memory 14 and the read completion signal from the field memory 14 from the timing control circuit 20, reads the image signal from the CCD camera 10, writes to the memory 14, and the field. Controls reading of image data from the memory 14.
[0057]
Next, the image data is converted to H.264. The audio data is encoded according to the G.263 standard. Encode according to the 723.1 standard (S26). That is, the image data for one screen displayed in the finder area 18b is sent from the field memory 14 to the image codec 32. The image codec 32 converts the input image data to H.264. It is encoded by the H.263 standard and sent to the PIAFS protocol processing circuit 40. The voice signal digitized by the A / D converter 56 is sent to the voice codec 60, where G.P. It is encoded according to the 723.1 rule and sent to the PIAFS protocol processing circuit 40.
[0058]
The PIAFS protocol processing circuit 40 converts the input image data and audio data to H.264 format. Multiplexed in accordance with the H.223M standard, put into the PIAFS format, framed, and sent to the wireless communication circuit 46. The wireless communication circuit 46 transmits the data from the circuit 40 to a communication partner (for example, the computer 116) according to the PHS standard (S27).
[0059]
When the transmission is completed, it is checked whether an error message indicating that the disk (memory) is full is received from the computer side (S28). If not received (S28), the state of the recording switch 76 is checked (S30). ). If the recording is on (S30), the process returns to S25 to input and transmit the next one-screen data, and repeats S25 to S28 until the recording switch 76 is turned off.
[0060]
If an error message has been received from the partner computer (S28), the error message is displayed in the status display area 18a (S29).
[0061]
If the recording switch 76 is turned off (S30) or an error is displayed (S29), the display during recording is stopped, the LED attached to the recording switch 76 is turned off (S31), and the communication line is shut off (S31). S32).
[0062]
Waiting for the shutter key 88 to turn off (S33), the display device 18 is turned off (S34), and it is confirmed whether the power key 90 is off (S35). Shut off and exit.
[0063]
In FIG. 6, the audio / video information is transmitted using the communication partner as a computer. However, the communication partner may be a terminal device similar to the present embodiment, or may receive the image / audio information from the partner. . In that case, for example, the received image data may be displayed in the finder area 18b, and the transmitted image may be displayed, for example, on the lower left of the screen of the display device 18 in order to confirm the image being transmitted.
[0064]
FIG. 7 shows a detailed flowchart of the moving image processing (S14). The microphone is turned on (S41), a symbol being recorded is displayed in the status display area 18a of the display screen, and an LED attached to the recording switch 76 is lit (S42).
[0065]
Thereafter, an optical image incident on the CCD camera 10 is displayed on the finder region 18b of the display device 18, and the output sound of the microphone 54 is captured and converted into a digital signal (S43). That is, the output image of the CCD camera 10 is converted into a digital signal by the A / D converter 12 and temporarily stored in the field memory 14. When the image data for one screen is stored in the field memory 14, it is read out, converted into an analog signal by the D / A converter 16, and applied to the display device 18. As a result, an optical image incident on the CCD camera 10 is displayed in the finder region 18 b of the display device 18. The timing control circuit 20 controls the timing of writing and reading in the memory 14 so that the image data from the CCD camera 10 is not written into the field memory 14 while reading the image data from the field memory 14 for image display. The CPU 22 is notified of the operation state. The CPU 22 receives the write completion signal to the field memory 14 and the read completion signal from the field memory 14 from the timing control circuit 20, reads the image signal from the CCD camera 10, writes to the memory 14, and the field. Controls reading of image data from the memory 14.
[0066]
Next, the image data and audio data are encoded according to the digital video standard (S44). That is, the image data for one screen displayed in the finder area 18 b is sent from the field memory 14 to the image codec 30. The image codec 30 encodes input image data according to the digital video standard and stores it in the image memory 31, and the audio codec 58 encodes the audio signal digitized by the A / D converter 56 according to the digital video standard. And stored in the audio memory 66.
[0067]
It is checked whether or not the memory 31 or 66 is full (S46). If any of the memories 31 and 66 is full, a message to that effect is displayed and the user is notified (S47). If neither of the memories 31 and 66 is full (S46), the process returns to S43 until the recording switch 76 is turned off (S48), and S43 and subsequent steps are repeated.
[0068]
Whether the recording switch 76 is turned off (S48) or when a recording error is notified (S47), the microphone is turned off to stop the recording display and the LED attached to the recording switch 76 is turned off (S49). . Waiting for the shutter key 88 to be turned off (S50), the display device 18 is turned off (S51), and it is confirmed whether the power key 90 is turned off (S52). Shut off and exit.
[0069]
FIG. 8 shows a detailed flowchart of the still image processing (S10). First, an optical image incident on the CCD camera 10 is displayed on the finder area 18b of the display device 18 (S61). That is, the output image of the CCD camera 10 is converted into a digital signal by the A / D converter 12 and temporarily stored in the field memory 14. When the image data for one screen is stored in the field memory 14, it is read out, converted into an analog signal by the D / A converter 16, and applied to the display device 18. As a result, an optical image incident on the CCD camera 10 is displayed in the finder region 18 b of the display device 18. The timing control circuit 20 controls the timing of writing and reading in the memory 14 so that the image data from the CCD camera 10 is not written into the field memory 14 while reading the image data from the field memory 14 for image display. The CPU 22 is notified of the operation state. The CPU 22 receives the write completion signal to the field memory 14 and the read completion signal from the field memory 14 from the timing control circuit 20, reads the image signal from the CCD camera 10, writes to the memory 14, and the field. Controls reading of image data from the memory 14.
[0070]
Waiting for key input (S62). At this time, the user may adjust the orientation of the camera 10 while confirming the camera input image displayed on the display device 18 if necessary. Since the adjustment of this orientation is mechanical, the CPU 22 has no knowledge.
[0071]
When the shutter key 88 is pressed (S63), an image for one screen is taken into the field memory 14 from the CCD camera 10 and displayed in the finder area 18b. The image stored in the field memory 14 is compression encoded by the image codec 34 and written to the image memory 33 (S64). If there is no space in the image memory 33 (S65), the user is notified of this (S66), the display is turned off (S68), and the process ends. If there is free space in the image memory 33 (S65), the process returns to S61 to prepare for the next recording.
[0072]
If the input key is the power key 90 (S67), the display is turned off (S68), and the process ends.
[0073]
If any other key is input (S67), the corresponding process is executed (S69), and the process returns to S61.
[0074]
FIG. 9 shows a detailed flowchart of the incoming call process (S6). First, it is checked whether or not recording is in progress (S71). If recording is in progress (S71), an incoming call is displayed in the status display area 18a of the display device 18 without outputting a ringing tone, and the user is prompted to stop recording (S72). In that case, it is not only displayed that there was an incoming call, but also the other party's telephone number, if it is registered in the phone book, the name of the registered user and the position information of the other party's terminal (the other party's terminal Are also displayed at the same time. As a result, the partner terminal can be confirmed before connecting the call, and the necessity and urgency of the call connection can be determined.
[0075]
If recording is not in progress (S71), the sound source 68 is activated and a ring tone is sent from the speaker 64 to notify the user of the incoming call (S73). The user presses the call / incoming key 95 when responding to an incoming call. When the call / incoming key 95 is pressed (S74), the CPU 22 turns on the microphone 54 and the speaker 64 and instructs the wireless communication circuit 46 to answer the incoming call (S75).
[0076]
The wireless communication circuit 46 includes an ADPCM encoding circuit that is a voice encoding rule in PHS. After establishing a call for a voice call, the wireless communication circuit 46 performs a transmission process on the input voice from the microphone 54 and receives the voice from the communication partner. Receive processing.
[0077]
When the stop key 96 is pressed (S76), the wireless communication circuit 46 is disconnected and the communication is terminated (S77).
[0078]
FIG. 10 shows a detailed flowchart of the calling process (S8). Here, a case where the communication partner is a computer and stored image data and audio data are transmitted to the partner computer will be described. When the dial key 72 is pressed (S81), the input dial information is stored (S82), and when the outgoing / incoming key 95 is pressed (S83), the CPU 22 determines that the dial input is completed, Call processing is instructed to the wireless communication circuit 46, and the wireless communication circuit 46 calls a partner terminal (here, a computer) in accordance with this instruction (S84).
[0079]
Waiting for a response from the other party (S85), if there is a response (S85), it is checked whether or not the data transmission mode is set (S86). If the data is not transmitted (S86), the CPU 22 instructs the wireless communication circuit 46 to perform voice communication (S87). If the data is transmitted (S86), the CPU 22 instructs the PIAFS protocol processing circuit 40 and the wireless communication circuit 46 to perform data communication. Then, the encoded image data is read from the image memory 31 and sent to the PIAFS protocol processing circuit 40, and the data is sent to the communication partner computer using the PIAFS protocol data communication protocol. When all the image data has been transmitted, the audio data is then read from the audio memory 66 and similarly transmitted to the communication partner according to the data communication protocol (S88).
[0080]
Every time one frame is transmitted, it is checked whether an error message such as disk (memory) full is received from the communication partner computer (S89). If not received, the process returns to S86 and the next frame is transmitted. To do. This process is repeated until transmission of all image data and all audio data is completed.
[0081]
When an error message is received from the partner computer (S89), the error message is displayed in the status display area 18a of the display device 18 (S90), the communication line is disconnected, and the process ends (S92).
[0082]
Even during data transmission, if the stop key 96 is pressed (S91), the communication line is disconnected and the process ends (S92).
[0083]
【The invention's effect】
  As can be easily understood from the above description, according to the present invention, a high-compression method that can be transmitted at the communication speed is used for recording during communication, and high quality can be obtained when recording is not performed. Since the compression method is automatically selected according to the situation, such as using a compression method with a low compression rate, the user will not be confused about the compression method to be used according to the situation, improving operability. To do.Further, according to the present invention, in the case of real-time communication, image data and audio data are multiplexed and transmitted, and in the case of transmitting stored image data and audio data, the audio data is transmitted after transmitting all the image data. Since it transmits, it can communicate by the communication system suitable for the objective.
[Brief description of the drawings]
FIG. 1 is a schematic block diagram of an embodiment of the present invention.
FIG. 2 is a front view of the present embodiment.
FIG. 3 is a rear view of the embodiment.
FIG. 4 is a schematic configuration diagram of a network using the present embodiment.
FIG. 5 is a flowchart of this embodiment.
FIG. 6 is a flowchart of auto processing (S16).
FIG. 7 is a flowchart of moving image processing (S14).
FIG. 8 is a flowchart of still image processing (S10).
FIG. 9 is a flowchart of incoming call processing (S6).
FIG. 10 is a flowchart of outgoing call processing (S8).
[Explanation of symbols]
10: CCD camera
12: A / D converter
14: Field memory
16: D / A converter
18: Display device
18a: Status display area
18b: Finder area
20: Timing control circuit
22: CPU
24: ROM
26: RAM
28: Keypad
30: Image codec
31: Image memory
32: Image codec
33: Image memory
34: Image codec
36: Battery
38: Switch
40: PIAFS protocol processing circuit (wireless communication control circuit)
42: X25 protocol processing circuit (wired communication control circuit)
44: Optical communication control circuit
46: Wireless communication circuit
48: Antenna
50: ISDN communication circuit
52: Optical communication circuit
54: Microphone
56: A / D converter
58, 60: Audio codec
62: D / A converter
64: Speaker
66: Audio memory
68: Sound source
70: Setting key
72: Number keys
74: LED during communication
76: Recording switch
78: Counter display instruction key
80: Changeover switch
82: Playback display key
84: Down key
86: Up key
88: Shutter key
90: Power key
92, 94: Volume key
95: Call / incoming key
96: Stop key
98: Modular jack for ISDN
100: LED light transmission / reception unit
110: Switching network
112, 114: Terminal device
116: Computer
118: Base station
120: Telephone terminal

Claims (2)

シャッターキーと、
前記シャッターキーが押されたことに応じて動画像データ又は静止画像データを入力する画像入力手段と、
前記画像入力手段により入力される画像データを圧縮符号化する圧縮手段であって、1画面分の画像データの静止画圧縮、第1の圧縮率の動画圧縮、及び前記第1の圧縮率より低い第2の圧縮率の動画圧縮の何れかで圧縮する圧縮手段と、
通信相手に前記第1の圧縮率の動画圧縮で圧縮された動画像データを送信し、前記通信相手から動画像データを受信する送受信手段と、
前記静止画圧縮で圧縮された画像データ、及び前記第2の圧縮率の動画圧縮で圧縮された動画像データを記録媒体に記録可能な記録手段と、
前記送受信手段により送信される動画像データの動画像及び受信される動画像データの動画像を表示する表示手段と、
動画モード及びオートモードを設定する設定手段と、
前記通信相手と通信中であるか否かを判定する判定手段と、
前記圧縮手段、前記送受信手段及び前記記録手段を制御する制御手段
とを具備し、
前記制御手段は、前記シャッターキーが押されたときに前記設定手段により動画モードが設定されている場合、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを前記圧縮手段に前記第2の圧縮率の動画圧縮で圧縮させ当該圧縮された動画像データを前記通信相手にリアルタイムで送信せずに、記録媒体に記録させ、
前記制御手段は、前記シャッターキーが押されたときに前記オートモードが設定されている場合であって、前記判定手段により通信中であると判定されたときには、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを前記圧縮手段に前記第1の圧縮率の動画圧縮で圧縮させ、当該圧縮された動画像データを前記通信相手に送信させ、
前記制御手段は、前記シャッターキーが押されたときに前記オートモードが設定されている場合であって、前記判定手段により通信中でないと判定されたときには、前記画像入力手段に1画面分の画像データを入力させ当該入力された静止画像データを前記圧縮手段に前記静止画圧縮で圧縮させ、当該圧縮された静止画像データを前記通信相手にリアルタイムで送信せずに前記記録媒体に記録させる
ことを特徴とする携帯通信装置。
Shutter key,
Image input means for inputting moving image data or still image data in response to pressing of the shutter key ;
Compression means for compressing and encoding image data input by the image input means, which is still image compression for one screen of image data, moving image compression at a first compression rate, and lower than the first compression rate Compression means for compressing at one of the video compressions of the second compression rate;
Transmitting / receiving means for transmitting moving image data compressed by moving image compression at the first compression rate to a communication partner, and receiving moving image data from the communication partner;
A recording unit capable of recording the image data compressed by the still image compression and the moving image data compressed by the moving image compression of the second compression rate on a recording medium;
Display means for displaying a moving image of the moving image data transmitted by the transmitting / receiving means and a moving image of the received moving image data;
Setting means for setting the video mode and auto mode;
Determining means for determining whether or not the communication partner is communicating;
Control means for controlling the compression means, the transmission / reception means and the recording means,
When the moving image mode is set by the setting unit when the shutter key is pressed , the control unit causes the image input unit to input moving image data, and the input moving image data is input to the compression unit. The moving image data compressed at the second compression rate, and the compressed moving image data is recorded on a recording medium without being transmitted to the communication partner in real time,
In the case where the auto mode is set when the shutter key is pressed and the determination unit determines that communication is being performed, the control unit sends moving image data to the image input unit. Causing the compression means to compress the input moving image data by moving image compression at the first compression rate, and transmitting the compressed moving image data to the communication partner.
The control means is a case where the auto mode is set when the shutter key is pressed, and when the determination means determines that communication is not being performed, an image for one screen is displayed on the image input means. Data is input , the input still image data is compressed by the compression means by the still image compression, and the compressed still image data is recorded on the recording medium without being transmitted to the communication partner in real time. A portable communication device characterized by the above.
画像入力手段により入力される動画像データを通信相手にリアルタイムで送信し、前記通信相手から送信される動画像データを受信し、前記画像入力手段により入力される動画像データの動画像とともに通信相手から受信された動画像データの動画像を表示する携帯通信装置が行う通信方法であって、
シャッターキーが押されたときにオートモードが設定されている場合で通信中であるとき、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを第1の圧縮率の動画圧縮で圧縮してから通信相手にリアルタイムで送信するステップと、
前記シャッターキーが押されたときに前記オートモードが設定されている場合で通信中でないとき、前記画像入力手段に1画面分の静止画データを入力させ当該入力された静止画データを静止画圧縮で圧縮してから前記記録媒体に記録するステップと、
前記シャッターキーが押されたときに動画モードが設定されている場合に、前記画像入力手段に動画像データを入力させ、当該入力された動画像データを、前記通信相手にリアルタイムで送信せずに、前記第1の圧縮率よりも低い第2の圧縮率の動画圧縮で圧縮してから前記記録媒体に記録するステップ
とを具備することを特徴とする通信方法。
The moving image data input by the image input means is transmitted to the communication partner in real time, the moving image data transmitted from the communication partner is received, and the moving image data input by the image input means is transmitted together with the moving image data. A communication method performed by a mobile communication device that displays a moving image of moving image data received from
When the auto mode is set when the shutter key is pressed and communication is in progress, moving image data is input to the image input means, and the input moving image data is a moving image having a first compression rate. Sending in real time to the communication partner after compressing with compression,
Wherein when it is not in communication when the automatic mode is set when the shutter key is pressed, the image input means to input still image data of one screen, the still image still image data the input Recording on the recording medium after compression by compression,
When the moving image mode is set when the shutter key is pressed , the moving image data is input to the image input means, and the input moving image data is not transmitted to the communication partner in real time. And recording the data on the recording medium after compression by moving image compression at a second compression rate lower than the first compression rate.
JP31711298A 1998-11-09 1998-11-09 Mobile communication device and communication method Expired - Fee Related JP4323593B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP31711298A JP4323593B2 (en) 1998-11-09 1998-11-09 Mobile communication device and communication method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP31711298A JP4323593B2 (en) 1998-11-09 1998-11-09 Mobile communication device and communication method

Publications (3)

Publication Number Publication Date
JP2000152231A JP2000152231A (en) 2000-05-30
JP2000152231A5 JP2000152231A5 (en) 2005-12-08
JP4323593B2 true JP4323593B2 (en) 2009-09-02

Family

ID=18084581

Family Applications (1)

Application Number Title Priority Date Filing Date
JP31711298A Expired - Fee Related JP4323593B2 (en) 1998-11-09 1998-11-09 Mobile communication device and communication method

Country Status (1)

Country Link
JP (1) JP4323593B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002245571A (en) * 2001-02-16 2002-08-30 East Japan Railway Co Security system and security device
US20030126620A1 (en) * 2001-12-31 2003-07-03 Toshio Hayakawa Multimedia display system using display unit of portable computer, and signal receiver for television, radio, and wireless telephone
JP2006079632A (en) * 2005-09-29 2006-03-23 Fujitsu Ltd Information apparatus system
KR100834510B1 (en) 2007-05-10 2008-06-02 주식회사 씬멀티미디어 Multi media data recoding apparatus in mobile communication terminal and method thereof
JP5416070B2 (en) * 2010-10-04 2014-02-12 京セラ株式会社 Digital broadcast receiver

Also Published As

Publication number Publication date
JP2000152231A (en) 2000-05-30

Similar Documents

Publication Publication Date Title
KR20050015932A (en) Telephone communication system
JP4264170B2 (en) Imaging apparatus and control method thereof
JP4323593B2 (en) Mobile communication device and communication method
WO2003001773A1 (en) Telephone apparatus having video telephone function
JP2000151832A (en) Communication equipment and control method therefor
KR101232537B1 (en) Video communication terminal and video method communicating in video communication terminal
JP4526965B2 (en) TV door phone device
KR20020096486A (en) Remote supervisory apparatus and method using mobile phone
JP3512327B2 (en) Variable image data area method for portable videophone system
KR100630182B1 (en) Method for recording in video communication mode of wireless terminal
KR100574858B1 (en) Apparatus and Method for transmitting additional data in image-phone
JP3567289B2 (en) Videophone equipment
KR100617564B1 (en) A method of multimedia data transmission using video telephony in mobile station
JP3177042B2 (en) Videophone device and communication device control method
JP2003051869A (en) Digital information equipment system, digital mobile terminal and control method
JP2000092464A (en) Image communication device and computer-readable storage medium
JPH11308589A (en) Image transmitter and its method
KR20020015782A (en) Imagephone
JP3065647B2 (en) Multimedia terminal and its received video display method
JP4122997B2 (en) Video phone equipment
JP2002229594A (en) Communicated terminal unit
KR20000041521A (en) Portable digital monitoring system
JPH06284220A (en) Video telephone system and communication method for video telephone
JPH0591214A (en) Multi-medium communication equipment
JPH08149436A (en) Video telephone system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051018

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051018

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080123

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080318

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090526

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090605

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130612

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees