JP2014164763A - フィードバック提供方法及び端末 - Google Patents

Abstract

【課題】本発明はオブジェクトに対するタッチ入力手段（例、指やペン）のホバリングに応答して視覚的なフィードバックを提供する方法及びこれを具現する端末を提供するためのものである。
【解決手段】本発明によるフィードバック提供方法は、画面に設置されたタッチパネルを有する端末により遂行され、オブジェクトを前記画面に表示するステップと、前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、前記ホバリングに応答して前記オブジェクトと前記タッチ入力手段との間の距離である深さ値に対応する視覚的なフィードバックを提供するステップと、を有する。
【選択図】図２

Description

本発明は、フィードバック提供方法及び端末に係り、より詳しくは、タッチパネルに対するユーザの入力に応答してフィードバックを提供する方法及びこれを具現する端末に関するものである。

現在、スマートフォン、タブレットＰＣのような端末はタッチパネルを備えることが趨勢である。端末はオブジェクトを画面に表示する。ユーザがこれらのうち、特定オブジェクトをタッチすれば、端末はタッチパネルからユーザのタッチを検出し、タッチに応答して該当機能を遂行することができる。例えば、ウェブページで特定テキストがタッチされれば、テキストにリンクされている他のウェブページを画面に表示できる。

ところで、従来ではタッチの前にオブジェクトに対する視覚的な効果を提供できなかった。したがって、オブジェクトがぎっしりと集まっている場合、ユーザは所望のオブジェクトを選択し難いことがある。即ち、ユーザの意図しないオブジェクトがタッチされて機能が実行される問題が発生しうる。また、ユーザはオブジェクトに機能が対応していることさえも知らないことがある。この場合、該当機能はユーザが認知するまで実行されないという問題が発生しうる。一方、オブジェクトの上には他のオブジェクトが表示できる。例えば、ウェブページの上に電子文書が表示できる。即ち、ウェブページの特定オブジェクトが電子文書により表示されないことがある。その場合、電子文書の表示が終了するまでは特定オブジェクトが実行できないという問題が発生しうる。

本発明は上記従来のフィードバック提供方法及び端末における問題点に鑑みてなされたものであって、本発明の目的は、オブジェクトに対するタッチ入力手段（例、指やペン）のホバリングに応答して視覚的なフィードバックを提供する方法及びこれを具現する端末を提供することにある。

上記目的を達成するためになされた本発明によるフィードバック提供方法は、画面に設置されたタッチパネルを有する端末により遂行され、オブジェクトを前記画面に表示するステップと、前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、前記ホバリングに応答して前記オブジェクトと前記タッチ入力手段との間の距離である深さ値に対応する視覚的なフィードバックを提供するステップと、を有することを特徴とする。

また、上記目的を達成するためになされた本発明によるフィードバック提供方法は、画面に設置されたタッチパネルを有する端末により遂行され、オブジェクトを前記画面に表示するステップと、前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、前記ホバリングに応答して前記オブジェクトに対応する機能と関連した視覚的なフィードバックを提供するステップと、を有することを特徴とする。

また、上記目的を達成するためになされた本発明によるフィードバック提供方法は、画面に設置されたタッチパネルを有する端末により遂行され、オブジェクトを前記画面に表示し、イメージを前記オブジェクトの上に表示するステップと、前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、前記ホバリングに応答して前記オブジェクトを前記イメージの上に表示するステップと、前記オブジェクトが前記イメージの上に表示されている状態で、前記オブジェクトに対する前記タッチ入力手段のタッチジェスチャーを検出するステップと、前記タッチジェスチャーに応答して前記オブジェクトの機能を遂行するステップと、を有することを特徴とする。

上記目的を達成するためになされた本発明による端末は、オブジェクトを画面に表示する表示部と、前記表示部の画面に設置されるタッチパネルと、前記表示部及び前記タッチパネルを制御する制御部と、を有し、前記制御部は、前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトと前記タッチ入力手段との間の距離である深さ値に対応する視覚的なフィードバックを提供するよう前記表示部を制御することを特徴とする。

また、上記目的を達成するためになされた本発明による端末は、オブジェクトを画面に表示する表示部と、前記表示部の画面に設置されるタッチパネルと、前記表示部及び前記タッチパネルを制御する制御部と、を有し、前記制御部は、前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトに対応する機能と関連した視覚的なフィードバックを提供するよう前記表示部を制御することを特徴とする。

また、上記目的を達成するためになされた本発明による端末は、オブジェクトを画面に表示しイメージを前記オブジェクトの上に表示する表示部と、前記表示部の前記画面に設置されるタッチパネルと、前記表示部及び前記タッチパネルを制御する制御部と、を有し、前記制御部は、前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトを前記イメージの上に表示するよう制御することを特徴とする。

本発明に係るフィードバック提供方法及び端末によれば、オブジェクトに対するタッチ入力手段のホバリングに応答して視覚的なフィードバックを提供することができるという効果をもたらすものである。

本発明の一実施形態による携帯端末の構成を示すブロック図である。 深さ値による視覚的な効果提供方法を説明するためのフローチャートである。 深さ値による視覚的な効果提供方法を説明するための画面である。 深さ値による視覚的な効果提供方法を説明するための画面である。 深さ値による視覚的な効果提供方法を説明するための画面である。 深さ値による視覚的な効果提供方法を説明するための画面である。 深さ値による視覚的な効果提供方法を説明するための画面である。 インタラクティブオブジェクト（ｉｎｔｅｒａｃｔｉｖｅ ｏｂｊｅｃｔ）に対する視覚的なヒント提供方法を説明するためのフローチャートである。 視覚的なヒント提供方法の一例を説明するための画面である。 視覚的なヒント提供方法の一例を説明するための画面である。 視覚的なヒント提供方法の一例を説明するための画面である。 視覚的なヒント提供方法の他の例を説明するための画面である。 視覚的なヒント提供方法の他の例を説明するための画面である。 視覚的なヒント提供方法の他の例を説明するための画面である。 視覚的なヒント提供方法の他の例を説明するための画面である。 視覚的なヒント提供方法の更に他の例を説明するための画面である。 視覚的なヒント提供方法の更に他の例を説明するための画面である。 視覚的なヒント提供方法の更に他の例を説明するための画面である。 視覚的なヒント提供方法の更に他の例を説明するための画面である。 隠されたインタラクティブオブジェクトと関連した視覚的な情報を提供する方法を説明するためのフローチャートである。 視覚的な情報提供方法の一例を説明するための画面である。 視覚的な情報提供方法の一例を説明するための画面である。 視覚的な情報提供方法の一例を説明するための画面である。

次に本発明に係るフィードバック提供方法及び端末を実施するための形態の具体例を図面を参照しながら詳細に説明する。

以下で使われる用語や単語は通常的または辞典的な意味に限定して解釈されてはならず、本発明の技術的思想に符合する意味と概念として解釈されなければならない。したがって、以下の説明と添付した図面は本発明の好ましい実施形態に過ぎないものであり、本発明の技術的思想を全て代弁するものではないので、本出願時点においてこれらを取り替えることができる多様な均等物と変形例がありうる。また、添付の図面で一部の構成要素は誇張、省略、または概略的に図示され、各構成要素のサイズは実際のサイズを全的に反映するものでない。したがって、本発明は添付した図面に描かれた相対的なサイズや間隔により制限されるものではない。また、本発明と関連した公知機能または構成に対する具体的な説明が本発明の要旨を曖昧にしうると判断される場合、その詳細な説明は省略する。

本発明による端末はタッチパネルを有する。また、本発明による端末は携帯可能な端末、車両などに設置される端末、または業務用または家庭用に使われるコンピュータでありうる。具体的に、本発明による端末は、スマートフォン、タブレットＰＣ、ノートブックＰＣ、ディジタルカメラ、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ）、メディアプレーヤー（Ｍｅｄｉａ Ｐｌａｙｅｒ）（例えば、ＭＰ３プレーヤー）、ナビゲーション端末、デスクトップＰＣなどである。また、本発明による端末は、表示部と、このような表示部に設置されたタッチパネルと、これらを制御する制御部を有する家電機器（例えば、冷蔵庫、ＴＶ、洗濯機など）であってもよい。

タッチ入力手段（例、ペン先、指先、静電式タッチペン、電磁気式タッチペンなど）が例えば、１０ｃｍ以内に画面に接近すれば、端末はタッチ入力手段の接近（ｐｒｏｘｉｍｉｔｙ）を検出することができる。例えば、両方の間の距離（例えば、深さ（ｄｅｐｔｈ））が５ｃｍ以内であれば、端末はタッチ入力手段の動きとその方向を検出することができる。例えば、両方の間の距離が３ｃｍ以内であれば、端末はタッチ入力手段の位置を検出することができる。このように、タッチ入力手段がその位置を端末が検出することができる水準まで接近することをホバリング（ｈｏｖｅｒｉｎｇ）と称する。ここで、３ｃｍは１つの例示的な値であり、この数値によりホバリングを検出したか否かが定義されるものではない。例えば、端末の性能によってその値が左右される。

本発明による端末は、ホバリングに応答して視覚的なフィードバックを提供することができる。視覚的なフィードバックだけでなく、聴覚的なフィードバック（例、音声）及び触覚的なフィードバック（例、端末の振動）も端末により提供できる。視覚的なフィードバックは、視覚的な情報、視覚的なコンテンツ、視覚的な効果、視覚的なヒントなどと称することもある。聴覚的なフィードバックは、聴覚的な情報、聴覚的なコンテンツ、聴覚的な効果、聴覚的なヒントなどと称することもある。触覚的なフィードバックは、触覚的な情報、触覚的なコンテンツ、触覚的な効果、ハプティック（ｈａｐｔｉｃｓ）などと称することもある。

図１は、本発明の一実施形態による携帯端末の構成を示すブロック図である。
図１を参照すると、本発明の一実施形態による携帯端末１００は、表示部１１０、キー入力部１２０、格納部１３０、無線通信部１４０、オーディオ処理部１５０、スピーカーＳＰＫ、マイクＭＩＣ、制御部１６０、及びペン１７０を含む。

表示部１１０は、制御部１６０の制御下でデータを画面に表示する。即ち、制御部１６０がデータを処理（例えば、デコーディング（ｄｅｃｏｄｉｎｇ））してバッファに格納すると、表示部１１０はバッファに格納されたデータをアナログ信号に変換して画面に表示する。表示部１１０に電源が供給されると、表示部１１０は固定画像を画面に表示する。固定画像が表示されている状態で固定解除情報が検出されると、制御部１６０は固定を解除する。表示部１１０は、制御部１６０の制御下で固定画像の代わりに、例えばインジケータを画面の上端に表示し、その下にホームイメージを表示する。インジケータは携帯端末１００の使用状態をユーザに案内するためのイメージであって、例えば、３Ｇ接続状態、バッテリー残量、現在時間、Ｗｉ−Ｆｉ接続状態などを含むことができる。

ユーザがインジケータをタッチし、その状態で下にドラッグするようにすると、制御部１６０はこれに応答してインジケータの領域を拡張することができる。拡張された領域では追加情報、例えば、受信メッセージ、天気、株式情報、温度などが表示できる。ホームイメージは、背景（ｂａｃｋｇｒｏｕｎｄ）イメージ（例えば、ユーザにより設定された写真）とこの上に表示される多数のアイコンを含む。ここで、アイコンは各々アプリケーションまたはコンテンツ（例、写真ファイル、ビデオファイル、録音ファイル、文書、メッセージなど）を示す。アイコンのうちの１つ、例えばアプリケーションアイコンがユーザにより選択されると、制御部１６０は該当アプリケーションを実行する。表示部１１０は、制御部１６０からアプリケーションの実行イメージを受信し、アナログ信号に変換して出力する。

表示部１１０は、制御部１６０の制御下でイメージを多層（ｍｕｌｔｉ−ｌａｙｅｒ）構造で画面に表示することができる。例えば、表示部１１０はインジケータとホームイメージの上に写真を表示する。

表示部１１０は、例えば液晶表示装置（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ：ＬＣＤ）、ＡＭＯＬＥＤ（Ａｃｔｉｖｅ Ｍａｔｒｉｘ Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｅｄ Ｄｉｏｄｅ）、フレキシブルディスプレイ（Ｆｌｅｘｉｂｌｅ ｄｉｓｐｌａｙ）、または透明ディスプレイからなる。

タッチパネル１１１は、表示部１１０の画面に設置される。具体的に、タッチパネル１１１は表示部１１０の画面に位置するアドオンタイプ（ａｄｄ−ｏｎ ｔｙｐｅ）や表示部１１０の内に挿入されるオンセルタイプ（ｏｎ−ｃｅｌｌ ｔｙｐｅ）、またはインセルタイプ（ｉｎ−ｃｅｌｌ ｔｙｐｅ）で具現される。

タッチパネル１１１は、画面に対するユーザのジェスチャーに応答してイベントを発生し、イベントをＡＤ（Ａｎａｌｏｇ ｔｏ Ｄｉｇｉｔａｌ）変換して制御部１６０に伝達する。ここで、イベントは、接近イベント、ホバリングイベント、またはタッチイベントでありうる。

タッチ入力手段が画面に接近すると、タッチパネル１１１はこれに応答して接近イベントを発生する。接近イベントは、タッチ入力手段の動きとその方向を表す情報を含むことができる。

タッチ入力手段が画面にホバリングすると、タッチパネル１１１はこれに応答してホバリングイベントを発生する。ホバリングイベントは、１つ以上のホバリング座標（ｘ、ｙ）を含む。例えば、タッチパネル１１１のタッチＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）はホバリングを検出し、ホバリングに応答して画面でホバリング領域を決定し、ホバリング領域に含まれた座標（ｘ、ｙ）を制御部１６０に伝達する。ここで、ホバリング座標はピクセル単位でありうる。例えば、画面の解像度が６４０（横ピクセルの個数）×４８０（縦ピクセルの個数）である場合、ｘ座標は０〜６４０であり、ｙ座標は０〜４８０である。制御部１６０は、タッチパネル１１１からホバリング座標が受信されると、タッチ入力手段がタッチパネル１１１にホバリングされたと判断し、タッチパネル１１１からホバリング座標が受信されないと、タッチ入力手段のホバリングが解除されたと判断する。また、ホバリングイベントは深さ値を算出するための感知情報を含む。例えば、ホバリング座標は（ｘ、ｙ、ｚ）でありうる。即ち、ｚ値が深さ値を意味する。

タッチ入力手段が画面にタッチすると、タッチパネル１１０はこれに応答してタッチイベントを発生する。ここで、タッチイベントは１つ以上のタッチ座標（ｘ、ｙ）を含む。例えば、タッチパネル１１１のタッチＩＣはユーザのタッチを検出し、タッチに応答してタッチ領域を決定し、タッチ領域に含まれたタッチ座標（ｘ、ｙ）を制御部１６０に伝達する。ここで、タッチ座標はピクセル単位でありうる。

制御部１６０は、タッチパネル１１１からタッチ座標を受信した場合、タッチ入力手段がタッチパネル１１１にタッチされたと判断し、タッチパネル１１１からタッチ座標を受信しない場合、タッチ入力手段のタッチが解除されたと判断する。また、制御部１６０はタッチ座標が変化し、その変化量が予め設定された移動しきい値を超過した場合、制御部１６０はタッチ入力手段の動きが発生したと判断する。
制御部１６０は、タッチ入力手段の移動に応答してタッチ入力手段の位置変化量（ｄｘ、ｄｙ）及びタッチ入力手段の移動速度などを算出する。制御部１６０は、タッチ座標、タッチ入力手段のタッチ解除か否か、タッチ入力手段の移動の有無、タッチ入力手段の位置変化量、及びタッチ入力手段の移動速度などに基づいて画面に対するユーザのジェスチャーをタッチ、マルチタッチ、タップ（Ｔａｐ）、ダブルタップ（Ｄｏｕｂｌｅ Ｔａｐ）、ロングタップ（Ｌｏｎｇ ｔａｐ）、タップアンドタッチ（Ｔａｐ ＆ ｔｏｕｃｈ）、ドラッグ（Ｄｒａｇ）、フリック（Ｆｌｉｃｋ）、プレス（Ｐｒｅｓｓ）、ピンチイン（ｐｉｎｃｈ ｉｎ）、及びピンチアウト（ｐｉｎｃｈ ｏｕｔ）などのうちからいずれか１つに決定する。

タッチパネル１１１は、手ジェスチャーを感知する手タッチパネルとペンジェスチャーを感知するペンタッチパネルを含んで構成された複合タッチパネルでありうる。ここで、手タッチパネルは静電容量方式（ｃａｐａｃｉｔｉｖｅ ｔｙｐｅ）で具現される。勿論、手タッチパネルは、抵抗膜方式（ｒｅｓｉｓｔｉｖｅ ｔｙｐｅ）、赤外線方式、または超音波方式で具現することもできる。また、手タッチパネルは手ジェスチャーのみによりイベントを発生するものではなく、他の物体（例、静電容量変化を加えることができる伝導性材質の物体）によってもイベントを生成することができる。ペンタッチパネルは、電子誘導方式（ｅｌｅｃｔｒｏｍａｇｎｅｔｉｃ ｉｎｄｕｃｔｉｏｎ ｔｙｐｅ）により構成できる。これによって、ペンタッチパネルは磁場を形成することができるよう特殊製作されたタッチ用ペンによりイベントを生成する。ペンタッチパネルは、キーイベントを発生することができる。例えば、ペンに設置されたキーが押されると、ペンのコイルで発生する磁場が変化する。ペンタッチパネルは磁場の変化に応答してキーイベントを発生し、これを制御部１６０に伝達する。

キー入力部１２０は、少なくとも１つのタッチキーを含むことができる。タッチキーは、ユーザのタッチを感知するために静電容量方式や抵抗膜方式などで具現される。タッチキーは、ユーザのタッチに応答してイベントを発生し、これを制御部１６０に伝達する。また、タッチキーは画面に隣接するよう（例えば、画面の下端）設置できる。また、キー入力部１２０はタッチ方式の他の異なる方式のキーも含むことができる。例えば、ドーム（ｄｏｍｅ）キー方式のホームキー（ｈｏｍｅ ｋｅｙ）が含まれる。ユーザがホームキーを押せば、ホームキーが変形されて印刷回路基板に接触し、これによって、印刷回路基板でキーイベントが発生して制御部１６０に伝達される。

格納部（ｓｅｃｏｎｄａｒｙ ｍｅｍｏｒｙ ｕｎｉｔ）１３０は、ディスク、ＲＡＭ、ＲＯＭまたはフラッシュメモリなどである。格納部１３０は、制御部１６０の制御下で、携帯端末１００で生成されるか、または無線通信部１４０を通じて外部装置（例、サーバ、デスクトップＰＣ、タブレットＰＣなど）から受信したデータを格納する。また、格納部１３０は複写及び貼り付け（ｃｏｐｙ ＆ ｐａｓｔｅ）などのためにユーザがメッセージ、写真、ウェブページ、文書などで複写したデータを臨時格納する。また、格納部１３０は携帯端末１００の運営のための多様な設定値（例、画面明るさ、タッチ発生時の振動の有無、画面の自動回転の有無など）を格納する。

格納部１３０は、ブーティングプログラム、少なくとも１つ以上のオペレーティングシステム及びアプリケーションを格納する。オペレーティングシステムはハードウェアとアプリケーションとの間、そして、アプリケーションの間のインターフェースの役割をし、ＣＰＵ、ＧＰＵ、メインメモリ、及び格納部１３０などのコンピュータ資源を管理する。アプリケーションは、埋め込みアプリケーション（ｅｍｂｅｄｄｅｄ ａｐｐｌｉｃａｔｉｏｎ）とサードパーティアプリケーション（３ｒｄ ｐａｒｔｙ ａｐｐｌｉｃａｔｉｏｎ）とに分類される。例えば、埋め込みアプリケーションはウェブブラウザ（Ｗｅｂ ｂｒｏｗｓｅｒ）、ｅメールプログラム、インスタントメッセンジャー（ｉｎｓｔａｎｔ ｍｅｓｓｅｎｇｅｒ）などである。

無線通信部１４０は制御部１６０の制御下で、ネットワークを介して外部装置と音声通話、画像通話、またはデータ通信を遂行する。無線通信部１４０は、送信される信号の周波数を高周波変換及び増幅する無線周波数送信部と、受信される信号の周波数を低雑音増幅及び低周波変換する無線周波数受信部とを含む。また、無線通信部１３０は移動通信モジュール（例えば、第３世代（３−Ｇｅｎｅｒａｔｉｏｎ）移動通信モジュール、第３．５世代（３．５−Ｇｅｎｅｒａｔｉｏｎ）移動通信モジュール、または第４世代（４−Ｇｅｎｅｒａｔｉｏｎ）移動通信モジュールなど）、ディジタル放送モジュール（例えば、ＤＭＢ：Ｄｉｇｉｔａｌ Ｍｕｌｔｉｍｅｄｉａ Ｂｒｏａｄｃａｓｔｉｎｇモジュール）及び近距離通信モジュール（例、ワイファイ（Ｗｉ−Ｆｉ）モジュール、ブルートゥース（ｂｌｕｅｔｏｏｔｈ（登録商標））モジュール、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）モジュール）を含む。

オーディオ処理部１５０は、スピーカーＳＰＫ及びマイクＭＩＣと結合して音声認識、音声録音、ディジタルレコーディング、及び通話のためのオーディオ信号（例、音声データ）の入力及び出力を遂行する。オーディオ処理部１５０は、制御部１６０からオーディオ信号を受信し、受信したオーディオ信号をアナログにＤ／Ａ変換して増幅した後、スピーカーＳＰＫで出力することができる。スピーカーＳＰＫは、オーディオ処理部１５０から受信したオーディオ信号を音波（ｓｏｕｎｄ ｗａｖｅ）に変換して出力する。一方、携帯端末１００は多数のスピーカーを備えることができる。例えば、第１スピーカーは通話用途であり、レシーバーともいう。即ち、第１スピーカーはユーザが携帯端末１００を耳に当てて通話する時に使われるものである。第２スピーカーは通話だけでなく音楽、ビデオなどのようなデータの再生用途であり、別名、ラウドスピーカ（ｌｏｕｄ ｓｐｅａｋｅｒ）という。マイクＭＩＣは、人やその他の音源（ｓｏｕｎｄ ｓｏｕｒｃｅ）から伝達された音波をオーディオ信号に変換する。オーディオ処理部１５０は、マイクＭＩＣから受信したオーディオ信号をディジタルにＡ／Ｄ変換した後、制御部１６０に伝達する。

制御部１６０は、携帯端末１００の全般的な動作及び携帯端末１００の内部構成の間の信号流れを制御し、データを処理する機能を遂行し、バッテリーから上記構成への電源供給を制御する。

制御部１６０は、１つ以上の中央処理ユニット（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＣＰＵ）を含む。周知のように、ＣＰＵはデータの演算及び比較と、命令語の解釈及び実行などを遂行するコンピュータシステムの核心的な制御ユニットである。ＣＰＵは、データや命令を一時格納する各種レジスタを含む。制御部１６０は、１つ以上のグラフィック処理ユニット（Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ：ＧＰＵ）を含むことができる。ＧＰＵはＣＰＵの代わりをして、グラフィックと関連したデータの演算及び比較と、命令語の解釈及び実行などを遂行するグラフィック制御ユニットである。ＣＰＵとＧＰＵは、各々２つ以上の独立コア（例、クアッドコア（ｑｕａｄ−ｃｏｒｅ））が単一集積回路として機能する１つのパッケージに集積することできる。即ち、ＣＰＵは１つのマルチコアプロセッサに集積されたものである。また、多数のＧＰＵも１つのマルチコアプロセッサに集積されたものである。また、ＣＰＵとＧＰＵは１つのチップに集積（ＳｏＣ：Ｓｙｓｔｅｍ ｏｎ Ｃｈｉｐ）されたものでもよい。また、ＣＰＵとＧＰＵはマルチレイヤ（ｍｕｌｔｉ ｌａｙｅｒ）にパッケージングされたものでもよい。一方、アプリケーションプロセッサ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｃｅｓｓｏｒ：ＡＰ）はＣＰＵ及びＧＰＵを含むことができる。延いては、ＡＰはＩＳＰ（Ｉｍａｇｅ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）をさらに含むこともできる。

制御部１６０はメインメモリ（ｍａｉｎ ｍｅｍｏｒｙ ｕｎｉｔ）、例えばＲＡＭを含む。メインメモリは、格納部１３０からローディングされた各種プログラム、例えばブーティングプログラム、オペレーティングシステム、及びアプリケーションを格納する。制御部１６０にバッテリーの電源が供給されると、先にブーティングプログラムが制御部１６０のメインメモリにローディング（ｌｏａｄｉｎｇ）される。このようなブーティングプログラムはオペレーティングシステムをメインメモリにローディングする。オペレーティングシステムは、アプリケーションをメインメモリにローディングする。制御部１６０（例えば、ＡＰ）は、このようなプログラムにアクセスしてプログラムの命令語を解読し、解読結果に従う機能（例、ホバリングに応答してフィードバックを提供する）を実行する。また、制御部１６０は格納部１３０に記録（ｗｒｉｔｅ）するデータを臨時格納し、格納部１３０から読み出した（ｒｅａｄ）データを臨時格納するキャッシュメモリを含む。

ペン１７０は携帯端末１００から分離可能な携帯端末１００の付属品であって、ペン軸と、ペン軸の先に配置されたペン先と、ペン先に隣接するようにペン軸の内部に配置されて磁場を発生するコイルと、磁場を変化させるためのボタンとを含む。ペン１７０のコイルはペン先の付近に磁場を形成する。タッチパネル１１１は磁場を感知し、磁場に対応するイベントを発生する。

一方、携帯端末１００はイヤジャック、振動モータ、カメラ、加速度センサ、近接センサ、照度センサ、ＧＰＳ受信部、アクセサリーなどのように上記に言及のない構成をさらに含むことができる。ここで、アクセサリーは携帯端末１００から分離可能な携帯端末１００の付属品であって、例えばペン１７０でもよい。

図２は、深さ値による視覚的な効果提供方法を説明するためのフローチャートである。図３から図７は、深さ値による視覚的な効果提供方法を説明するための画面である。

図２を参照すると、ステップＳ２１０で、制御部１６０はホバリングが検出されるか否かを判断する。ホバリングが検出されると、ステップＳ２２０で制御部１６０はホバリングの深さ値を算出する。
ステップＳ２３０で、制御部１６０はホバリングを検出されたオブジェクトに対して深さ値に対応する視覚的な効果を提供する。
ステップＳ２４０で、制御部１６０はホバリングを解除するか否かを決定する。制御部１６０は、ホバリングが解除された場合、視覚的な効果の提供を終了し、そうでない場合、ステップＳ２２０に戻る。深さ値に対応する視覚的な効果提供方法の具体的な例示は、次の通りである。

図３を参照すると、表示部１１０は制御部１６０の制御下で、メッセージリスト３１０を画面に表示する。

ユーザは、自身の手を画面に接近させる。これに応答して、タッチパネル１１１は接近イベントを発生して制御部１６０に伝達する。これによって、制御部１６０は何かが画面に接近したことを認知する。

図４を参照すると、ユーザは自身の手を画面にさらに接近させる。例えば、ユーザは第１アイテム３１１に人差し指３２０を近接させる。これに応答して、タッチパネル１１１はホバリングイベントを発生する。タッチパネル１１１は、ホバリングイベントを制御部１６０に伝達し、制御部１６０はホバリングを検出されたオブジェクトが第１アイテム３１１であることを認識する。このようにホバリングを検出されたオブジェクトが認識されると、制御部１６０は第１深さ値を算出する。制御部１６０は、ルックアップテーブルで第１深さ値に対応する第１明度値を確認する。ここで、ルックアップテーブルは格納部１３０に格納されうる。制御部１６０は、第１明度値を有する第１アイテム３１１の地色を表示するよう表示部１１０を制御する。

図３及び図４を参照すると、人差し指３２０が第１アイテム３１１に接近しない場合、第１アイテム３１１の地色は他のアイテムのものと同一である。
ところで、人差し指３２０が第１アイテム３１１に接近した場合、第１アイテム３１１の地色は他のアイテムのものより濃くなる。

図５を参照すると、第１アイテム３１１の地色が濃くなった後、ユーザは人差し指３２０を第１アイテム３１１にさらに接近させる。すると、第１深さ値より小さな第２深さ値が算出される。このように、深さ値が変更されると、制御部１６０はルックアップテーブルで第２深さ値に対応する第２明度値を確認する。その後、制御部１６０は第２明度値を有する第１アイテム３１１の地色を表示するよう表示部１１０を制御する。これによって、第１アイテム３１１の地色はさらに濃くなる。

図３から図７を参照すると、ユーザが人差し指３２０を第１アイテム３１１に接近させるほど第１アイテム３１１の地色は徐々に濃くなる。ユーザが第１アイテム３１１をタッチすると、第１アイテム３１１の地色は最も濃くなる。

ユーザが第１アイテム３１１からタッチを解除すると、これに応答して制御部１６０は第１アイテム３１１の詳細内容を表示するよう表示部１１０を制御する。人差し指３２０が第１アイテム３１１から遠ざかるほど第１アイテム３１１の地色は徐々に薄くなる。ホバリングが第１アイテム３１１から解除されると、第１メッセージ３１１の地色は他のアイテムのものと同一になる。

一方、上記の例示において、‘明度’は該当オブジェクトの１つの属性であり、本発明の技術的思想を限定するものではない。即ち、明度の以外に、色相、明るさ、サイズ（例えば、オブジェクトに含まれた字のサイズ）、形態（例えば、オブジェクトに含まれた字の形態）などが変化してもよい。

また、上記の例示において、‘アイテム’はオブジェクトの一例であり、本発明の技術的思想を限定するものではない。即ち、オブジェクトは画面に表示されてユーザに情報を提供するものであって、アイテムの他にも、メッセージ、テキスト、イメージ、アイコン、サムネイル、写真、ツールバー、チェックボックス、ウィジェット、ウェブページ、電子ブックのページ、キー、またはメニューなどになることができる。

また、上記の例示における効果は視覚的な効果以外に、聴覚的な効果や触覚的な効果を含むことができる。例えば、制御部１６０はホバリングが検出されると、第１効果音が出力されるようオーディオ処理部１５０を制御することができる。また、制御部１６０はタッチが検出されると、第２効果音が出力されるようオーディオ処理部１５０を制御することができる。また、制御部１６０はタッチが検出されると、振動モータを振動させることができる。

また、上記の例示において、タッチ入力手段はユーザの指として例示したが、他の物体、例えばペン（例、静電式タッチペン、電磁気式タッチペンなど）でもよい。

また、上記の例示で検出されたホバリングがシングルホバリングの場合（例えば、一本の指でオブジェクトをホバリングする場合）と、マルチホバリングの場合（例えば、２本の指で１つのオブジェクトをホバリングする場合、または２本の指で各々異なるオブジェクトをホバリングする場合）で、視覚的な効果を相違させることができる。例えば、同一なオブジェクトがホバリングされる時、シングルの場合よりマルチの時にさらに濃く表示できる。また、現在のホバリング技術は指の形態が検出可能である。したがって、親指がホバリングしたオブジェクトと人差し指がホバリングしたオブジェクトが相違するよう表示できる。

図８は、インタラクティブオブジェクト（ｉｎｔｅｒａｃｔｉｖｅ ｏｂｊｅｃｔ）に対する視覚的なヒント提供方法を説明するためのフローチャートである。ここで、インタラクティブオブジェクトはユーザと相互作用が可能なオブジェクトを意味する。例えば、アプリケーションアイコンが選択されると、これに応答して制御部１６０は該当アプリケーションを実行する。したがって、アプリケーションアイコンはインタラクティブオブジェクトに該当する。また、写真が選択されると、これに応答して制御部１６０は写真にタギング（ｔａｇｇｉｎｇ）されたタグ情報、例えば、撮影日付、撮影場所、他の写真情報、連絡先、人物の名前などを表示するよう表示部１１０を制御する。したがって、タグ情報がタギングされている写真はインタラクティブオブジェクトに該当する。その他にも、インタラクティブオブジェクトは、キーパッド、インジケータ、ウェブページなど、多様である。

図９から図１１は、視覚的なヒント提供方法の一例を説明するための画面である。図１２から図１５は、視覚的なヒント提供方法の他の例を説明するための画面である。図１６から図１８は、視覚的なヒント提供方法の更に他の例を説明するための画面である。図１９は、視覚的なヒント提供方法の更に他の例を説明するための画面である。

図８を参照すると、ステップＳ４１０で、制御部１６０はホバリングが検出されたか否かを判断する。ホバリングが検出された場合、ステップＳ４２０で制御部１６０はホバリングが検出されたオブジェクトに対応する機能があるか否かを判断する。即ち、制御部１６０はホバリングが検出されたオブジェクトがインタラクティブオブジェクトであるか否かを判断する。ホバリングが検出されたオブジェクトに対応する機能がある場合、ステップＳ４３０で制御部１６０は機能に対応する視覚的なヒントを提供する。視覚的なヒントの提供後、ステップＳ４４０で制御部１６０はホバリングが検出されたオブジェクトに対してタッチジェスチャーを検出する。ステップＳ４５０で、制御部１６０はタッチジェスチャーに応答して上記機能を実行する。インタラクティブオブジェクトに対する視覚的なヒント提供方法の具体的な例示は、次の通りである。

図９を参照すると、表示部１１０は制御部１６０の制御下で、画面左側領域にメッセージリスト５１０を表示し、画面右側領域に１つの詳細内容５２０を表示する。

図１０を参照すると、ユーザは２表示領域を区分する境界線５３０に人差し指５４０を接近させる。これに応答して、タッチパネル１１１はホバリングイベントを発生する。タッチパネル１１１は、ホバリングイベントを制御部１６０に伝達し、制御部１６０はホバリングが検出されたオブジェクトが境界線５３０であることを認識する。そして、制御部１６０は境界線５３０に対応する機能があるか否かを決定する。境界線５３０に対応する機能がある場合、制御部１６０はその機能と関連した視覚的なヒントを提供する。例えば、表示部１１０は制御部１６０の制御下で、左右矢印５５０を境界線５３０の上に表示することができる。また、表示部１１０は制御部１６０の制御下で、左右矢印５５０が左右に揺れるアニメーションを表示することができる。また、表示部１１０は制御部１６０の制御下で、境界線５３０を他のオブジェクト（即ち、メッセージリスト５１０及び詳細内容５２０）と区別するよう表示することができる。また、表示部１１０は制御部１６０の制御下で、境界線５３０が左右に揺れるアニメーションを表示することができる。ユーザはこのような視覚的なヒントを通じて境界線５３０がインタラクティブオブジェクトであることを認知することができる。また、ユーザはこのような視覚的なヒントを通じて境界線５３０の機能が何かを認知することができる。一方、視覚的なヒントは該当機能が何かを説明している情報、オブジェクトにタギングされたタグ情報を含むことができる。

図１１を参照すると、ユーザは境界線５３０をタッチする。これに応答して制御部１６０は視覚的な効果を提供することができる。例えば、表示部１１０は左右矢印５５０をタッチ前より一層濃く表示することができる。

ユーザが境界線５３０に人差し指５４０をタッチし、左または右に移動させれば、これに応答して制御部１６０は２領域の幅を調節する。

図１２を参照すると、表示部１１０は制御部１６０の制御下で、通話のためのキーパッド６１０を画面に表示する。

図１３を参照すると、ユーザは“３ＤＥＦ”が表示されたキー６１１に人差し指６２０を接近させる。これに応答して、タッチパネル１１１はホバリングイベントを発生する。タッチパネル１１１は、ホバリングイベントを制御部１６０に伝達し、制御部１６０はホバリングが検出されたオブジェクトがキー６１１であることを認識する。そして、制御部１６０はホバリングが認識された時点からカウントを始める。キー６１１でホバリングが解除されていない場合（即ち、キー６１１に対するホバリングが維持されている場合）、制御部１６０はカウント時間が予め設定された時間値（例、２００ｍｓ）を超過したか否かを判断する。カウント時間が予め設定された時間値を超過した場合、制御部１６０はキー６１１と関連した視覚的なヒントを提供する。例えば、表示部１１０はキー６１１にマッピングされている連絡先の名前、「ジェームズ」をキー６１１の上に表示する。ユーザはこのような視覚的なヒント、「ジェームズ」を通じて「ジェームズ」のスピードダイヤル（ｓｐｅｅｄ ｄｉａｌ）が番号‘３’に設定されていることを認知することができる。また、ユーザはスピードダイヤルとこれにマッピングされた連絡先が何かを暗記していなくても、このような視覚的なヒントを通じてスピードダイヤルを用いることができる。

図１４及び図１５を参照すると、ユーザはキー６１１を人差し指６２０でタッチする。タッチが一定時間（例えば、１ｓ）維持されれば、制御部１６０は「ジェームズ」の電話番号に通話を試みるよう無線通信部１４０を制御する。そして、制御部１６０は通話実行イメージ６３０を表示するよう表示部１１０を制御する。

図１６を参照すると、表示部１１０は制御部１６０の制御下で、通話のためのキーパッド７１０を画面に表示する。

図１７を参照すると、ユーザはスピードダイヤルが３０番帯の連絡先を確認するために、“３ＤＥＦ”が表示された第１キー７１１を人差し指７２０でタップする。これに応答して制御部１６０は番号‘３’を表示するよう表示部１１０を制御する。

図１８を参照すると、ユーザは“５ＪＫＬ”が表示された第２キー７１２に人差し指７２０を接近させる。これに応答して、タッチパネル１１１はホバリングイベントを発生する。タッチパネル１１１はホバリングイベントを制御部１６０に伝達し、制御部１６０はホバリングが検出されたオブジェクトが第２キー７１２であることを認識する。そして、制御部１６０はホバリングが認識された時点からカウントを始める。キー６１１でホバリングが解除されていない場合、制御部１６０はカウント時間が予め設定された時間値（例、２００ｍｓ）を超過したか否かを判断する。カウント時間が予め設定された時間値を超過した場合、制御部１６０は第１キー７１１及び第２キー７１２、即ちスピードダイヤル、３５と関連した視覚的なヒントを提供する。例えば、表示部１１０はスピードダイヤル、３５にマッピングされている連絡先の名前、「サミー」を第１キー７１２の上に表示する。

ユーザは第２キー７１２を人差し指７２０でタッチする。タッチが一定時間（例えば、１ｓ）維持されれば、制御部１６０は「サミー」の電話番号に通話を試みるよう無線通信部１４０を制御する。

図１９を参照すると、表示部１１０は制御部１６０の制御下で、第１ペン字（タッチ入力手段により入力された文字）８１０と第２ペン字８２０を画面に表示する。この際、第１ペン字８１０が第２ペン字８２０より先に作成されたことと仮定する。ユーザは戻しボタン８３０にペン８４０を接近させる。これに応答して、タッチパネル１１１はホバリングイベントを発生する。タッチパネル１１１はホバリングイベントを制御部１６０に伝達し、制御部１６０はホバリングが検出されたオブジェクトが戻しボタン８３０であることを認識する。そして、制御部１６０は戻しボタン８３０と関連した視覚的なヒントを提供する。例えば、表示部１１０は制御部１６０の制御下で、第２ペン字８２０を第１ペン字より薄く（または、太く）表示する。また、表示部１１０は制御部１６０の制御下で、２つのペン字８１０、８２０の属性（例、色相、明度、明るさ、または形態など）が相違するよう表示させることができる。これによって、ユーザは戻しのターゲットが第２ペン字８２０であることを認知することができる。ユーザが戻しボタン８３０をペン８４０でタップすると、これに応答して制御部１６０は第２ペン字８２０を画面から削除する。

第２ペン字８２０の削除後、ユーザは再実行ボタンにペンを接近させる。すると、制御部１６０は再実行ボタンと関連した視覚的なヒントを提供する。例えば、表示部１１０は制御部１６０の制御下で、第２ペン字８２０を第１ペン字より薄くまた表示することができる。ユーザが再実行ボタンをペンでタップすると、これに応答して制御部１６０は第２ペン字８２０を第１ペン字８１０と同一な明度で画面にまた表示する。

一方、上記の例示において、ヒントは視覚的なヒント以外に、聴覚的なヒントや触覚的なヒントを含むことができる。

図２０は隠されたインタラクティブオブジェクトと関連した視覚的な情報を提供する方法を説明するためのフローチャートである。図２１から図２３は、視覚的な情報提供方法の一例を説明するための画面である。

‘隠されたインタラクティブオブジェクト’はその上に積層したイメージにより遮られてユーザが見ることができないオブジェクトを意味する。その上に積層したイメージの表示が終了すれば、‘隠されたインタラクティブオブジェクト’は表示できる。ここで、上に積層したイメージは、ウェブページ、写真、メッセージ、メニュー、テキストなど、多様である。

図２０を参照すると、ステップＳ９１０で制御部１６０はイメージをインタラクティブオブジェクトの上に表示するよう表示部１１０を制御する。図２１を参照すると、例えば、イメージは写真と黒い地色の背景を含むイメージ１０１０でありうる。

ステップＳ９２０で、制御部１６０は隠されたインタラクティブオブジェクトに対する人差し指１０３０のホバリングが検出されたか否かを判断する。

隠されたインタラクティブオブジェクトに対する人差し指１０３０のホバリングが検出された場合、ステップＳ９３０で制御部１６０は隠されたインタラクティブオブジェクトをイメージの上に表示するよう表示部１１０を制御する。図２２を参照すると、例えば、隠されたインタラクティブオブジェクトはインジケータ１０２０でありうる。

隠されたインタラクティブオブジェクトが呼び出（即ち、表示）された後、ステップＳ９４０で制御部１６０は呼び出されたオブジェクトに対するタッチジェスチャーが検出されたか否かを判断する。

呼出されたオブジェクトに対してタッチジェスチャーが検出されない場合、ステップＳ９５０で制御部１６０は呼び出されたオブジェクトに対するホバリングが解除されたか否かを判断する。

呼び出されたオブジェクトに対するホバリングが解除された場合、プロセスはステップＳ９１０に戻される。即ち、制御部１６０は呼び出されたオブジェクトの表示を終了する。

呼び出されたオブジェクトに対してタッチジェスチャーが検出された場合、ステップＳ９６０で制御部１６０はタッチジェスチャーに応答して、呼び出されたオブジェクトに対応する機能を遂行する。

図２３を参照すると、ユーザがインジケータ１０２０を人差し指１０３０でタッチし、その状態で下にドラッグすると、制御部１６０はこれに応答してインジケータの領域を拡張する。

前述したような本発明によるフィードバック提供方法は、多様なコンピュータを通じて遂行できるプログラム命令で具現されてコンピュータにより読み出し可能な記録媒体に記録できる。記録媒体は、プログラム命令、データファイル、データ構造などを含むことができる。また、プログラム命令は本発明のために特別に設計され構成されたもの、またはコンピュータソフトウェア当業者に公知されて使用可能なものでありうる。また、記録媒体には、ハードディスク、フロッピー（登録商標）ディスク、及び磁気テープのような磁気媒体（Ｍａｇｎｅｔｉｃ Ｍｅｄｉａ）、ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体（Ｏｐｔｉｃａｌ Ｍｅｄｉａ）と、フロプティカルディスク（Ｆｌｏｐｔｉｃａｌ Ｄｉｓｋ）のような磁気−光媒体（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ Ｍｅｄｉａ）と、ＲＯＭと、ＲＡＭと、フラッシュメモリなどのハードウェア装置とが含まれうる。また、プログラム命令にはコンパイラーにより作られるもののような機械語コードだけでなく、インタープリターなどを使用してコンピュータにより実行できる高級言語コードが含まれることができる。 ハードウェア装置は、本発明を遂行するために１つ以上のソフトウェアモジュールとして作動するよう構成できる。

以上、本発明の実施形態について詳細に説明したが、本発明は上述の実施形態に限定されるものではなく、本発明の技術的範囲から逸脱しない範囲内で多様に変更実施することが可能である。

１００ 携帯端末
１１０ 表示部
１１１ タッチパネル
１２０ キー入力部
１３０ 格納部
１４０ 無線通信部
１５０ オーディオ処理部
１６０ 制御部
１７０ ペン

Claims (22)

1. 画面に設置されたタッチパネルを有する端末におけるフィードバック提供方法であって、
   オブジェクトを前記画面に表示するステップと、
   前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、
   前記ホバリングに応答して前記オブジェクトと前記タッチ入力手段との間の距離である深さ値に対応する視覚的なフィードバックを提供するステップと、
   を有することを特徴とする、フィードバック提供方法。
2. 前記視覚的なフィードバックを提供するステップは、
   前記タッチ入力手段のホバリングが検出されたオブジェクトを他のオブジェクトと区別して表示するステップを含むことを特徴とする、請求項１に記載のフィードバック提供方法。
3. 前記視覚的なフィードバックを提供するステップは、
   前記タッチ入力手段のホバリングが検出されたオブジェクトの属性を前記深さ値によって異なるよう表示するステップを含むことを特徴とする、請求項１に記載のフィードバック提供方法。
4. 前記オブジェクトの属性は、
   明度、色相、明るさ、サイズ、及び形態のうち、少なくとも１つを含むことを特徴とする、請求項３に記載のフィードバック提供方法。
5. 前記視覚的なフィードバックを提供するステップは、
   前記オブジェクトと前記タッチ入力手段との間の距離が近いほど前記タッチ入力手段のホバリングが検出されたオブジェクトを濃く表示するステップを含むことを特徴とする、請求項１に記載のフィードバック提供方法。
6. 前記ホバリングに応答して聴覚的なフィードバック及び触覚的なフィードバックのうち、１つ以上を提供するステップをさらに含むことを特徴とする、請求項１に記載のフィードバック提供方法。
7. 前記タッチ入力手段は
   少なくとも指、静電式タッチペン、及び電磁気式タッチペンのいずれか１つを含むことを特徴とする、請求項１に記載のフィードバック提供方法。
8. 画面に設置されたタッチパネルを有する端末におけるフィードバック提供方法であって、
   オブジェクトを前記画面に表示するステップと、
   前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、
   前記ホバリングに応答して前記オブジェクトに対応する機能と関連した視覚的なフィードバックを提供するステップと、
   を有することを特徴とする、フィードバック提供方法。
9. 前記視覚的なフィードバックを提供するステップは、
   前記オブジェクトに対応する機能と関連したアニメーションを表示するステップを含むことを特徴とする、請求項８に記載のフィードバック提供方法。
10. 前記オブジェクトに対応する機能と関連したアニメーションを表示するステップは、
    前記オブジェクトが２表示領域を区分する境界線の場合、前記境界線が揺れるアニメーションを表示するステップを含むことを特徴とする、請求項９に記載のフィードバック提供方法。
11. 前記視覚的なフィードバックを提供するステップは、
    前記オブジェクトが番号キーの場合、前記番号キーにマッピングされている連絡先を表示するステップを含むことを特徴とする、請求項８に記載のフィードバック提供方法。
12. 前記視覚的なフィードバックを提供するステップは、
    前記オブジェクトが戻しボタンまたは再実行ボタンの場合、前記タッチ入力手段により前後して入力された文字を区別して表示するステップを含むことを特徴とする、請求項８に記載のフィードバック提供方法。
13. 画面に設置されたタッチパネルを有する端末におけるフィードバック提供方法であって、
    オブジェクトを前記画面に表示し、イメージを前記オブジェクトの上に表示するステップと、
    前記オブジェクトに対するタッチ入力手段のホバリングを検出するステップと、
    前記ホバリングに応答して前記オブジェクトを前記イメージの上に表示するステップと、
    前記オブジェクトが前記イメージの上に表示されている状態で、前記オブジェクトに対する前記タッチ入力手段のタッチジェスチャーを検出するステップと、
    前記タッチジェスチャーに応答して前記オブジェクトの機能を遂行するステップと、
    を有することを特徴とする、フィードバック提供方法。
14. 前記オブジェクトの機能を遂行するステップは、
    前記オブジェクトがインジケータの場合、前記インジケータの領域を拡張して表示するステップを含むことを特徴とする、請求項１３に記載のフィードバック提供方法。
15. オブジェクトを画面に表示する表示部と、
    前記表示部の画面に設置されるタッチパネルと、
    前記表示部及び前記タッチパネルを制御する制御部と、を有し、
    前記制御部は、
    前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトと前記タッチ入力手段との間の距離である深さ値に対応する視覚的なフィードバックを提供するよう前記表示部を制御することを特徴とする、端末。
16. 前記制御部は、
    前記タッチ入力手段のホバリングが検出されたオブジェクトを他のオブジェクトと区別して表示するよう制御することを特徴とする、請求項１５に記載の端末。
17. 前記制御部は、
    前記タッチ入力手段のホバリングが検出されたオブジェクトの属性を前記深さ値によって相違するよう表示するよう制御することを特徴とする、請求項１５に記載の端末。
18. 前記制御部は、
    前記オブジェクトと前記タッチ入力手段との間の距離が近いほど前記タッチ入力手段のホバリングが検出されたオブジェクトを濃く表示するよう制御することを特徴とする、請求項１５に記載の端末。
19. オブジェクトを画面に表示する表示部と、
    前記表示部の画面に設置されるタッチパネルと、
    前記表示部及び前記タッチパネルを制御する制御部と、を有し、
    前記制御部は、
    前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトに対応する機能と関連した視覚的なフィードバックを提供するよう前記表示部を制御することを特徴とする、端末。
20. オブジェクトを画面に表示しイメージを前記オブジェクトの上に表示する表示部と、
    前記表示部の前記画面に設置されるタッチパネルと、
    前記表示部及び前記タッチパネルを制御する制御部と、を有し、
    前記制御部は、
    前記タッチパネルから前記オブジェクトに対するタッチ入力手段のホバリングを検出し、前記ホバリングに応答して前記オブジェクトを前記イメージの上に表示するよう制御することを特徴とする、端末。
21. 前記制御部は、
    前記オブジェクトが前記イメージの上に表示されている状態で、前記オブジェクトに対する前記タッチ入力手段のタッチジェスチャーを検出し、前記タッチジェスチャーに応答して前記オブジェクトの機能遂行を制御することを特徴とする、請求項２０に記載の端末。
22. 前記制御部は、
    前記オブジェクトがインジケータの場合、前記インジケータの領域を拡張して表示するよう制御することを特徴とする、請求項２１に記載の端末。

Images