[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP6625191B2 - コンピュータデバイスのためのユーザインターフェイス - Google Patents

コンピュータデバイスのためのユーザインターフェイス Download PDF

Info

Publication number
JP6625191B2
JP6625191B2 JP2018209919A JP2018209919A JP6625191B2 JP 6625191 B2 JP6625191 B2 JP 6625191B2 JP 2018209919 A JP2018209919 A JP 2018209919A JP 2018209919 A JP2018209919 A JP 2018209919A JP 6625191 B2 JP6625191 B2 JP 6625191B2
Authority
JP
Japan
Prior art keywords
screen
swipe
edge
app
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018209919A
Other languages
English (en)
Other versions
JP2019040622A (ja
Inventor
マーク・シャトルワース
アイボ・ウィーバース
ミカ・メスカネン
オレン・ホレブ
カラム・プリングル
ジョン・リー
オットー・グリーンスレイド
マーカス・ハスラム
イバンカ・マジック
シー・ズー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canonical Ltd
Original Assignee
Canonical Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canonical Ltd filed Critical Canonical Ltd
Publication of JP2019040622A publication Critical patent/JP2019040622A/ja
Application granted granted Critical
Publication of JP6625191B2 publication Critical patent/JP6625191B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/66Substation equipment, e.g. for use by subscribers with means for preventing unauthorised or fraudulent calling
    • H04M1/667Preventing unauthorised calls from a telephone set
    • H04M1/67Preventing unauthorised calls from a telephone set by electronic means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Description

本発明は、コンピュータデバイスのためのユーザインターフェイスに関し、とりわけスマートフォンまたはタブレット端末等のタッチ式デバイスのためのユーザインターフェイスに関する。
今日、我々はさまざまなタイプのコンピュータデバイス(テレビ、ラップトップパソコン、タブレット、電話など)を使用している。たとえ同一企業の製品であっても、そのインターフェースは大きく異なることがある。これは、ユーザがこうしたデバイス間を迅速に移行することを困難にしており、ユーザはこれらのデバイスとの新たなインタラクションスキルを学ばなければならないため、技術的に洗練されていないユーザや、単に新たなインタラクションスキルを学ぶために時間と労力を費やしたくないユーザにとって苛立ちの原因となる。さらに、新たなタイプのデバイス毎に新たなインタラクションデザインアプローチを考案する必要があるため、上記タイプのデバイスのデザイン工程を必要以上に遅速化および危険にしてしまう。また、ソフトウェアのほとんどは各種フォームファクタに使い回すことができないので、開発者にとってデバイスのアプリケーションを書くことがより困難になる。この非効率性は、一部、こうした多様なタイプのデバイス間において、基礎となるオペレーティングシステムが共通でない、または共有でないために生じるものであり、さらに、ラップトップPCのような大型デバイス用に設計されたユーザインターフェースをスマートフォン上で表示させようとしても使用不能であるので、典型的なスマートフォンの小型画面で作業するインタラクションデザイナが直面する問題は非常に多い。
総体的に、(a)スマートフォンの高速な片手操作を可能にし、(b)スマートフォンから、両手タッチでのインタラクションが典型的なタブレットまで効率的に適応でき、(c)PCに典型的なキーボードおよびポインタ入力を収容するように円滑に適応でき、(d)単純な遠隔制御で使用できるテレビ形式に適応できる、1つの統合されたインターフェースファミリを作り出してしまうインタラクションデザインの問題は非常に大きいものであり、現在までその解決に成功していない。
本特許明細書では、さまざまなアイデアおよび機能だけでなく、そのクリエイティブな表現についても説明する。そのため、本特許文献の開示の一部には著作権を主張する先の文献が含まれるので、ここにその旨の注意を記載する。著作権:Canonical Limited、2012、2013(17U.S.C第401条に準拠する)。全てのスクリーンショット、アイコン、ルックアンドフィール、および、本特許明細書で例証および記載されたユーザインターフェースおよびユーザインタラクションに関連するその他全ての保護可能な表現に対して著作権保護を主張する。
本著作権所有者は、WIPO(世界知的所有権機関)または米国特許商標庁のファイルまたは記録において明白であるため、本特許文献または本特許開示のいずれによる複製への異議はないが、その他全ての著作権を保留する。したがって、いかなる著作権の下においても明示または黙示のライセンスは許可されない。
EP2059868B1号およびEP2059868A2号には、フォト管理用タッチ画面ディスプレイを装備した携帯型電子デバイスと、携帯型電子デバイスで1組の写真画像に対応するサムネイル画像のアレイを表示するコンピュータ実現方法とが開示されている。このデバイスは、アレイ内のサムネイル画像にユーザが接触したことを検出すると、この画像に対応した、表示中のサムネイル画像のアレイをユーザ選択の写真画像と置き換える。ユーザ選択の写真画像は、対応するサムネイル画像よりも大きなスケールで表示される。この携帯型デバイスは、スクロールジェスチャに従って、ユーザ選択の写真画像の代わりに別の写真画像を表示する。スクロールジェスチャは、ユーザがタッチ画面ディスプレイに実質的に水平方向に接触する動作を備える。
第1の態様において、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、タッチセンシティブディスプレイの4つのエッジのいずれからのスワイプインを検出する命令を含んでおり、検出したスワイプに応答して、デバイスを、特定のスワイプ開始エッジ(例えば左、右、上、下)に応じた方法で動作させる、1つ以上のコンピュータプログラムと
を備えた、スマートフォン、タブレット、その他のコンピュータデバイスを提供する。
本明細書では、以下の領域におけるイノベーションについて説明する。
A.エッジジェスチャ(Edge Gestures)
B.レンジドジェスチャ(Ranged Gestures)
C.ウェルカムスクリーン(Welcome Screen)
D.ロック解除メカニズム
E.Ubuntu検索エクスペリエンス
F.Ubuntuのホーム画面
G.Ubuntuの「サイドステージ」
H.スケーラブルで反応的なUbuntuのユーザインターフェース(UI)。
このセクションでは、これらのイノベーションについて説明する。
[A.エッジジェスチャ]
Ubuntu UX(ユーザエクスペリエンス、ユーザ体験)における中心的な発明は、システムのインタラクション、設定、アプリケーション、制御において各エッジが担う役割を設計することである。Ubuntu UXでは、画面のレイアウトは以下を確実に得るようにデザインされている。
・電話からタブレット、PC、テレビまでのエクスペリエンスのスムーズなスケーリング
・画面上でコンテンツおよびアプリケーションに利用可能なスペースを最大化し、さらに、物理的またはソフトウェア上の「システムボタン」の必要性を排除した生産的なタッチインタラクション。
そのデザインの最良の表現は「エッジマジック」である。Ubuntu UXでは、また特にタッチバージョンのUbuntu UXでは、画面のエッジが重要、特徴的、かつ革新的な役割を果たす。
[A.1 アプリケーションの起動および切替が左右のエッジから実行される]
左エッジからのスワイプインは、常に、アプリケーションへのアクセスに使用される。これは、電話(片手使用)およびタブレット(両手使用)の両方のインターフェースにおいて容易であり、電話(Web OS搭載)の下エッジよりも、アプリケーションのためにより広いスペースを提供し、画面下における水平ドック(Mac OSまたはWindows7(登録商標))と比べて画面の消費がかなり少ない。左エッジから(例えば左エッジからの短いスワイプインで)アクセスできる、アプリケーションアイコンの垂直なバーである「ランチャ」によって、お気に入りの、および実行中のアプリケーションに直接アクセスできる。本明細書では、ランチャを「ランチャ(Launcher)」、「ランチャ(launcher)」、「アプリランチャ」と呼ぶ。「ホーム画面」アプリページ(デバイス上のアプリのグリッドであり、どのアプリが実行中であり、どれが閉じられているかを示し、さらに、サーバから入手できる、ユーザに潜在的に関連するアプリを表示する)によって、より多くのアプリケーションに到達することができる。このホーム画面アプリページへは、左エッジから(例えば、左エッジからの長いスワイプインにより)直接アクセスすることもできる。そのため、左エッジはあらゆるアプリケーションへの入口として一貫して機能する。ランチャバーは、さらに「ホーム画面」用のアイコンを含み、ホーム画面は頻繁に使用するアプリケーションアイコン、ユーザが最近発信または受信した通話(または不在着信になった通話、これにより、ユーザは、これらの不在着信へのコールバックを直接開始するべく、不在着信をリストしたアイテムにタッチするだけで簡単にコールバックできる)を示す。ホーム画面は完全にカスタマイズ可能でもあるため、例えば「最近追加した音楽」、新しくリリースされた映画、オンラインラジオ、ウィキベディア、オンラインストアなどを含むことができる。
これに対し、右エッジからのスワイプインは、前に使用し、依然として実行中のアプリケーションにアクセスする。これにより、前のアプリケーションに戻る便利な方法が得られる。「次のアプリに切り替える」、「1つ前のアプリに戻る」(つまり、ランチャバーにアクセスするために左エッジからスワイプインし、指を上または下へ動かして、ランチャ内の特定のアプリアイコン上で指を離すことによりそのアプリに切り替わり、これに対し、右エッジからのスワイプインにより1つ前のアプリに戻る)ために対向したエッジを使用することは、Ubuntu独特のものであり、使い易さの利便性を提供し、ユーザは動作を素早く覚えられ、自然に感じる。
[A.2 システム設定および状態が上エッジに反映される]
上エッジは、1組の状態インジケータをホストし、システム全体の設定および特徴(典型的には、ネットワーク、バッテリ、時計およびカレンダ、音量などのためのアイコンが上エッジの右側に配置される)、ならびにシステムまたはシステム全体の機能(メッセージングおよび検索機能など。これら機能のアイコンは、典型的には上エッジの左側に配置される)にアクセスする手段を提供する。
[A.3 下エッジからアプリケーションコントロールにアクセスする]
Ubuntuは、画面の下エッジを、アプリケーションのコントロールにアクセスする方法としてユニークに定義しており、典型的に、これらのコントロールは各アプリケーションに特化したさまざまな形式において実現される。例えば、ビデオプレーヤアプリケーションでの再生コントロールおよびタイムライン、画像エディタアプリケーション上にアクションボタンを設けたツールバー、ゲームアプリケーション用のゲームメニューは全て、下エッジからのスワイプアップによって現れるバー、ウィンドウ、領域に含めることができるコントロールの例である。
一貫してエッジをアプリケーションコントロールへの入口として使用することにより(ユーザはこうしたコントロールにアクセスする標準的な方法があることを知っているため)、アプリケーション開発者は、これらのコントロールをデフォルトとしてインターフェースから排除することができる。これには、アプリケーションコンテンツのためにより広いスペースが確保され、Ubuntuが電話のような小型の画面上で従来のシステムよりも広々と感じられるという恩恵がある。
当該のコントロールはボタンであっても、または音声コントロールであってもよい。例えば、検索可能なコマンドインターフェースであるUbuntu HUDも、下エッジから呼び出される。HUDにより、ユーザは、単純なタッチツールバーまたは他のクロームベースの(オンスクリーンボタン)インターフェースに適応できないアプリケーションのためのコントロールにアクセスできるようになる。このメカニズムは、従来のHUDと類似して、ユーザが集中している主な関心事から気を逸らさせることなくユーザに情報を表示するため、HUD(ヘッドアップディスプレイ)と呼ばれる。
本明細書は、左から右へ記述する言語(Left to Right Language)ユーザの観点から書かれている。これらのケース、または右から左へ記述する言語(Right to left languages)では、UXは左右反転する(したがって、左が右になる)。
エッジ動作およびコンベンションのデザインは、タッチデバイスのためのUbuntu UXイノベーションの中心となる重要なイノベーションである。これは、Ubuntuを従来のシステム(エッジを他の目的で使用したものも含む)から際立たせる。例えば、Nokia N9では、ホーム画面へ戻るために汎用のエッジジェスチャを使用し、Palm Web OS搭載電話では、お気に入りのアプリケーションにアクセスするために下エッジを使用した。しかし、Ubuntuは、画面エッジの限られたリソースの著しく豊富な使用パターンを提供し、これらをユニークな形に組み合わせ、従来のどのシステムよりも充実した機能性を持つ、より使い易いシステムを作り出す。
[B.レンジドジェスチャ]
タッチデバイス用のUbuntu UXにおける別の素晴らしいイノベーションはレンジドジェスチャ(Ranged Gesture)の使用である。レンジドジェスチャとは、ジェスチャの終点、またはジェスチャがどれだけ進行するかに応じて多様な成果が得られるジェスチャを意味する。進行性ジェスチャといっても、コントロールをスライダに沿って滑らせて、可変的な結果を得るものだけではない。我々が意味するジェスチャとは、ジェスチャの大きさにより(距離、長さ、方向、経路、始点、終点など)、任意数の非常に異なる結果が得られるもののことである。
レンジドジェスチャは、シングルリソースである画面のエッジを、多様な成果または機能への入口にすることができるため、Ubuntu UXにおいて重要である。さらに、レンジドジェスチャにより、ユーザは、これら全ての機能間を高速かつより流動的な方法で移動でき、また、上級ユーザは複数の「ステップ」または「タップ」または「スワイプ」を1つの方向付けられたジェスチャに組み合わせることができる。
レンジドジェスチャは、ステージを含むことができる。(ユーザはジェスチャを延伸させることで一連のモードを実行でき、ジェスチャを終了することで、現在使用中のモードから特定のアクションを選択する、または後続のジェスチャによりさらに選択を続けることが可能になる)。さらに、ジェスチャが異なる一連の方向に流れ、異なるオプションを出現させる分岐経路を含むこともできる。
[B.1 アプリケーションエッジ(左エッジ)レンジドジェスチャ]
左エッジまでのスワイプは、いくつかのステージから成るレンジドジェスチャである。最初の左エッジスワイプにより、単純にランチャが現れる。ランチャの最初のヒントは、エッジをスワイプバックするか、ヒントが出てきたばかりの時に指を離すことで、元に戻すことができる。しかしながら、お気に入りのアプリを設けたランチャを表示させるには、小さなスワイプで十分である。このステージにてリリースするとランチャが可視化されたまま残り、さらなるタッチまたはスワイプまたはタップによる操作が可能になる。
より長いスワイプは、ランチャ上のより直近のアプリケーション(つまり、ユーザの指のタッチ経路に最も近いアイコンのアプリケーションと、ホーム画面アイコン)を選択し、ユーザは、接点またはタッチ点を上下に動かすことで、最初にエッジを横断した時に指に一番近かったもの以外の特定のアプリケーションを選択でき、選ばれた(しかしまだ実際に選択されていない)アプリは典型的に近隣のアイコンより大きなアイコンで表示される。このアプローチにより、起動させるまたは切り替えるアプリをランチャ上で流動的に選択できるようになる。選んだ特定アプリのアイコン上でタッチをリリースすると、そのアプリケーションが選択される。
レンジドジェスチャ中に、ランチャ内のアイコン上で停止すると、そのアプリケーションのクイックリストが表示され、これによりレンジドジェスチャが分岐して、クイックリスト内のアイテムを追えるようになる。これによって、エッジスワイプから開始するシングルジェスチャで、特定のアプリケーションのクイックリスト内の特定のアイテムに流動的にアクセスできるようになる。アプリケーション用のクイックリストは、ユーザがそのアプリの特徴または機能または制御に容易にアクセスできるようにするための、アプリにおける特別な特徴である。例えば、アプリが電子メールメッセージングアプリである場合には、クイックリストは、新規の電子メールメッセージの作成を開始するものであってよい。
ジェスチャがアイコン上で停止するのではなく、ランチャを超えて素早く右側へ移動した場合は、ホーム画面のアプリページを表示させる新たなステージに達する。このステージは、ランチャ内にない(お気に入りまたは実行中の)アプリケーション、あるいはインストールされていないアプリケーションへのアクセスを可能にする。
そのため、レンジドジェスチャにより、左エッジが、デバイス上のアプリケーション(お気に入り、実行中、インストール済み、未インストール)への包括的な入口を提供できるようになる。
[B.2 右エッジのレンジドジェスチャ]
右エッジは、可視「サイドステージ」を実装した電話、タブレットなどのタッチデバイス上で1つ前にフォーカスされていたアプリケーション(つまり、ユーザが使用していた1つ前のアプリケーション)へのアクセスを制御するレンジドジェスチャを有する(「サイドステージ」については、本明細書中、以下でより完全に説明している)。
ジェスチャの、右エッジまでスワイプする最初のステージは、1つ前のアプリケーションのヒントか、前にフォーカスされていたアプリケーションがない旨のヒントを表示させる。ジェスチャのこの初期部分で離しても影響はなく、システムをヒントが出る前の状態に戻す(誤って1つ前のアプリケーションに切り替えてしまうアクションを防止するよう機能する)。
ジェスチャを継続することで、1つ前のアプリケーションの表示を、電話上でフォーカスされていたアプリ、またはタブレットの「サイドステージ」内でフォーカスされたアプリとしてコミットする(ディスプレイの他の部分に何が表示されているかに関係なく、「サイドステージ」がどのようにアプリを表示するかについての後述の説明を参照のこと)。
サイドステージが表示されたタブレット上で右スワイプを実行して、まずサイドステージにヒントを出現させ、次にサイドステージをオーバレイ表示するべくコミットし、最後に、画面をメインステージとサイドステージに分割するべくコミットする。
[B.3 システム(上)エッジのレンジドジェスチャ]
上エッジは、レンジドジェスチャにより、システムサービス、設定、検索へのアクセスを提供する。
Ubuntu UXの上エッジレンジドジェスチャの通常と異なる点は、画面の上エッジ右側にて、中心的なシステムインジケータをバックアップする情報に非常に迅速かつ流動的にアクセスできることである。
既存の電話では、システムインジケータとのインタラクトは難しい。iPhone iOS6およびこれ以前のバージョンでは、特別なアプリケーション、つまり設定アプリを探してから切り替えを行う必要がある。設定アプリは、システム設定へのアクセスを提供する(さらに、その後にアプリケーション設定を提供する)。
Ubuntuでは、上エッジから設定に容易に到達することができる。設定は上エッジの右側にあるため、最初の上エッジ右部分のスワイプによって、画面外に位置した(フル画面アプリケーションの場合)システムインジケータが現れ、最も近いものが選択される。これは、方向を反転させ、上エッジを超えて画面の外まで上方へスワイプバックすることで反転させることができる。この時点で、レンジドジェスチャを分岐することができ、左または右へ移動すると(指を持ち上げず)、特定のシステムインジケータの選択が可能になり、下方へ移動すると、選択したインジケータ上のフォーカスを確認できる。
これにより以下が可能になる。
・あらゆる特定のシステム設定またはインジケータへの高速アクセス
・さまざまなシステム情報の迅速な検査(例えば、「どのネットワークを使用しているか?、どんな新規メッセージが届いているか?」)
さらに、上エッジの左部分は検索に特化している。画面左上でジェスチャを開始することで、さまざまなシステム検索オプションへのアクセスが得られる。
[B.4 アプリケーションが(下)エッジレンジドジェスチャを制御する]
Ubuntuの下エッジは、アプリケーションコントロールへのアクセスおよび制御を提供する。非常に異なる目的のために非常に異なるデザインを追求しているアプリケーションの場合には、これらのコントロールの性質は変わってくる。しかし、総体的には、下エッジスワイプで、アプリケーションに適した形式のコントロールを隠したり出現させたりすることができるべきである。これらのコントロールはツールバー、再生制御(再生、一時停止、戻る、早送り)、タイムラインであるか、または、アプリケーションの状態(例えばゲームの一時停止、メニューオプションの表示)の変更に関連したものであってよい。
同様に下エッジはレンジドジェスチャを有する。最初のエッジの下までのスワイプにより、コントロールにヒントが現れるが、これは、スワイプを方向転換して、下エッジから元に戻るか、またはヒントがコミットされて現れたコントロールに変わる前に指を離すことで反転させることができる。コントロールが現れてからジェスチャを継続すると、新たなステージが現れる。このステージは、HUD(テキストおよび音声での検索が可能なアプリケーション制御システム)を起動させる機能を含む。HUDアイコン上、またはこのジェスチャのその他さまざまなエンドポイントの1つの上で指を離すと、その成果がコミットされる。
[C.ウェルカムスクリーン]
ユーザがデバイスを起動させると、デバイスが、ユーザおよびそのアクティビティをウェルカムスクリーンに美しく、洗練された形で反映させる。これは、ユーザの個人的な、またはデバイスに特化したデータのデータビジュアライゼーションである。
[C.1 アプリ情報や壁紙ではないデータビジュアライゼーション]
ウェルカムスクリーン上にデータビジュアライゼーションを表示することは革新的である。既存の電話およびタブレットデバイスでは、ロック画面に個人的な画像(壁紙)を使用する、または、いくつかのケースでは、アプリケーションの状態(例えば「5通の新規メッセージ」)を表示させることが一般的である。Ubuntuについてさらに革新的なのは、データビジュアライゼーションを審美的に表現された、複数ソースからの(つまり、アプリケーション、オンラインサービス、デバイスからの)データの合成体にできることである。
データビジュアライゼーションはインタラクティブであってもそうでなくてもよく、また、このインタラクションに基づいて、アプリケーションまたはコンテンツの起動を誘発し、これによりデバイスをロック解除するものであってもそうでなくてもよい。
データビジュアライゼーションは、個人のアート作品、壁紙と、またはその一部と組み合わせることができ、パレットに芸術作品から描画でき、これにより、ビジュアライゼーションと壁紙を美的に快適な形で組み合わせることが可能になる。
データビジュアライゼーションは、事業者、OEM(または他の任意のパートナー)、Ubuntu自体によって、さまざまなオプションから選択する、ランダムに選ぶ、動的に更新することが可能である。さらに、ユーザが自分のビジュアライゼーションをデザインして、インストールすることもできる。
[D.ロック解除メカニズム]
この「ウェルカムスクリーン」は、既存の電話およびタブレットに見られる「ロック画面」と類似の目的を持ち、つまり、不注意による機密情報の開示を防止し、さらに、デバイスがユーザにより操作されていない時、また恐らくはハンドバッグやポケットの内部と接触した時に生じる誤った入力を防止する。しかしながら、ウェルカムスクリーンは、以下に示す多くの点で独特および革新的である。
・既存のロック画面では、デバイスはロックされた状態とロック解除された状態でその動作が非常に異なっている。例えば、通常はホーム画面を表示させるためのボタンが、デバイスがロックされた状態ではこれを行えない。画面のエッジを使用してアプリケーション、コントロール、設定間を移動できるUbuntu電話およびタブレットでは、ウェルカムスクリーンが他のあらゆるアプリケーションと全く同様に動作する。デバイスをロック解除するには、エッジの1つを使用して(つまり、エッジの1つからスワイプインして)、所望のアプリケーションまたは設定へ直接移動する。従来の電話では、まずロック解除をしてからでないと何もできなかった。Ubuntuでは、どこからでもスタートでき、アクセス制御も必要な時にしか求められない。
・ウェルカムスクリーンが表示されている時に、任意のお気に入りのアプリケーションを起動させることができる。既存のロック画面では、ロック時に起動できるアプリケーションはいくつかあるが(カスタマイズは可能)、しかし、そのアプリケーションを起動させるメカニズムはロックされた状態とロック解除された状態とで非常に異なっていた。例えば、iPhone 4S上では、ロック解除メカニズム(スライディングスイッチ)と、ロック時にカメラを起動させるメカニズムがあるが、これらは、ホーム画面で実施される通常のカメラアプリケーション起動メカニズムとは完全に異なる。Ubuntuのアプローチは、ロック状態とロック解除状態との間で一貫している。
・エッジジェスチャに基づいたUbuntu電話およびタブレット上では、お気に入りのアプリケーションを起動させるためのロック解除、ホーム画面のロック解除、電話をロックした時に実行中であったアプリケーションのロック解除、システム設定変更のロック解除は明確に区別されている。既存のロック画面では、ロック解除を行うと、電話をロックした時に何をしていたかに応じて、ホーム画面またはアプリケーションへ移動する。
次に、本発明の実現を添付の図面を参照しながら説明する。
図1は、コンピュータデバイスの画面上におけるアプリケーションのためのユーザインターフェースの主要なレイアウトの一例を示す。 反応的かつスケーラブルであるユーザインターフェースの主要なレイアウトの一例を示す。 下コントロールを実装したスマートフォンユーザインターフェースの一例を示す。 下コントロールを実装したスマートフォンユーザインターフェースの例を示す。 下コントロールを実装したタブレットユーザインターフェースの一例を示す。 HUDインターフェースの一例に関連した(A)〜(E)の一連のデバイス画面構成を示す。 HUDインターフェースの一例に関連した(A)〜(D)の一連のデバイス画面構成を示す。 HUDインターフェースの実施例に関連した、検索入力ボックスとアプリスタックが表示されたデバイス画面構成を示す。 ホーム画面にて、左上の角からスワイプダウンすると検索が下りてくる一例を示す。 編成された検索結果の一例を示す。 (B)の折り畳まれた領域「お気に入りの人」から離れるためにスクロールダウンすると、(A)の「お気に入りの人」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「お気に入りの人」から離れるためにスクロールダウンすると、(A)の「お気に入りの人」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「実行中のアプリ」から離れるためにスクロールダウンすると、(A)の「実行中のアプリ」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「最近」から離れるためにスクロールダウンすると、(A)の「最近」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「最近連絡を取った人」から離れるためにスクロールダウンすると、(A)の「最近連絡を取った人」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「お気に入り」から離れるためにスクロールダウンすると、(A)の「お気に入り」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「最近」から離れるためにスクロールダウンすると、(A)の「最近」領域が折り畳まれる一例を示す。 (B)の折り畳まれた領域「最近」から離れるためにスクロールダウンすると、(A)の「最近」領域が折り畳まれる一例を示す。 メッセージアイコンからスワイプダウンすると、メッセージリストが下りてくる一例を一連の(A)〜(I)に示す。 メッセージアイコンからスワイプダウンすると、メッセージリストが下りてくる一例を一連の(A)〜(B)に示す。 予め作成されたメッセージのリストの一例を示し、この中からクイックリプライが選択され、送信される。 ユーザがテキストメッセージを送信する、またはコールバックするために選択できる拡大した領域の一例(A)を示す。 タップされたノートが拡大し、ノートの内容を編集するためのタッチ画面キーボードが提供される一例を一連の(A)〜(C)で示す。 タップされたノートが拡大し、ノートの内容を編集するためにタッチ画面キーボードが提供される一例を一連の(A)〜(B)で示す。 会話領域ページに不在着信およびメッセージが示された一例を(A)に示し、SMSメッセージングがメッセージングという独自のアプリケーションに分岐させ、既に通話を会話履歴の一部として示していない一例を(B)に示す。 一連の(A)〜(D)が、画面左エッジからの短いスワイプによって現されたランチャバーの例を示した一例を示す。 一連の(A)〜(C)が、スクロールダウンしているランチャバーと((A)〜(B))、アプリの名称を表示しているアプリアイコンと((B)〜(C)、この例では「電話」アプリ)の例を示した一例を示す。 ランチャアイコンを長押ししてアプリ名が示された一例を示す。 ランチャアイコンを長押ししてアプリ名が示された一例を示す。 一連の画面画像(A)〜(E)を含む一例を示す。(A)では、ユーザがランチャバーからアプリケーション「ノートパッド」を選ぶ。(B)では、画面がノートパッドアプリケーション画面出力を表示している。(C)では、ユーザは画面右エッジから指をスワイプして、1つ前のアプリケーション「イベント」に戻っている。(C)、(D)では、1つ前のアプリケーション「イベント」からの画面出力が画面の右側から戻ってきている。(E)では、アプリケーション「イベント」からの出力が表示されている。 コンタクト画面が、コンタクト画面用の通話画面に変更する例を、一連の(A)〜(B)で示す。 画面左エッジからの長いスワイプによりアプリページが現れる一例を一連の(A)〜(B)で示す。 画面右エッジからのスワイプによりホームページが現れる一例を一連の(A)〜(D)で示す。 一連の(A)〜(C)について、画面右エッジからのスワイプによりホームページが現れる一例を示す。 (A)から開始する一連の(A)〜(E)で、一連の設定ページが現れる一例を示す。 画面(A)から開始する画面(B)〜(E)で、(B)〜(E)に示した設定画面が現れる一例を示す。 タブレットコンピュータ画面上のバッテリ設定画面の一例を示す。 (A)〜(C)の一連の画面画像を含む一例を示す。(A)では、「イベント」アプリケーションからの出力を表示している。(B)では、ユーザが画面右エッジから指を水平にスワイプして、「ノート」のサイドステージがビュー内に引き出されている。(C)では、「ノート」のサイドステージがビュー内に引き出された状態にある。 サークル内の各ドットが今月の各日付を表し、ハイライトされたドットが今日を示すインフォグラフィックを含むウェルカムスクリーンの一例を示す。 タブレット上のウェルカムスクリーンの一例を示す。
本発明の1つの実現はUbuntuタッチである。このセクションでは、Ubuntu Touchについてより詳細に説明する。
[A.1「エッジジェスチャ」]
Ubuntuでは、エッジからスワイプインすることにより、デバイスに、スワイプインしたスワイプ開始エッジ(例えば左、右、上、下)に応じた動作をさせる(例えば、ユーザインターフェース(UI)、グラフィック、オブジェクトを表示させる、アプリを開く、コントロールパネルを開く、機能を呼び出すなど)。Ubuntuにおいて、エッジスワイプ動作の豊富さと直観的単純性は重要な要素である。Ubuntuは多様なジェスチャ(表現形態)を使用するが、ジェスチャは、デバイスのタッチ画面を用いたシングルタッチ式のインタラクションである。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:コンテンツおよびアプリケーションに利用できる画面上のスペースを最大化するデバイスインターフェースをどのように設計できるか?」
Ubuntuの「エッジジェスチャ」は、この問題に対して多くの関連する解決法を例証する。例えば、Ubuntuでは、右エッジからのスワイプにより、これまでに使っていたアプリに戻る。したがって、例えばFacebookアプリの使用中に何か(ダイアリイベントなど)を素早く調べる必要が生じた場合には、左エッジからの短いスワイプによってランチャバーを左エッジから表示させてから、下へ滑らせてダイアリアプリ上で指を離して簡単にダイアリアプリを起動させ、イベントをチェックした後、今度は右エッジからスワイプしてFacebookアプリに戻ることができる。この、左エッジからのスワイプにより迅速にアプリを開くこと(またはタスク化)と、右エッジからのスワイプにより1つ前のアプリに戻ることとの組み合わせにより、インタラクションを非常に高速化、効率化、および直観的にすることが可能である。
この特定の特徴は、問題とその解決に関連して書き直すこともできる。
「課題ステートメント:新たなアプリを迅速かつ片手で起動し、その後、前のアプリに復帰できるデバイスインターフェースをどうデザインできるか?」
これへの解決法は、「開始/起動」機能と「戻る」機能を画面の対向するエッジから内側へスワイプジェスチャによって制御できるスマートフォン、タブレット、またはその他のコンピュータデバイスとして一般化できる。1つの実現において、左エッジからの右スワイプにより「開始」が始動され、これによりランチャが表示される。反対に、右エッジからのスワイプは前に開いたアプリを表示させるので、「戻る」機能として働く。さらに右エッジから左スワイプすることで、ユーザは、以前に使用した全てのアプリを直前に使用したものから先頭に、スクロールさせながら閲覧することができる。
ランチャベースのロック解除によって、あらゆるお気に入りのアプリを起動させるためにランチャを直接ロック解除したり、クイックリスト(アプリ内の特定の特徴。例えば、電子メールメッセージアプリの場合には、クイックリストは新規電子メールの作成の開始であってよい)をロック解除することができる。
Ubuntuの別の特徴は、画面右上にシステムステータスアイコンと、時間および日付、音量、ネットワーク、メッセージング、バッテリなどの機能アイコンとが表示されることである。ユーザは、列の上で指を動かし、所望のアイコンからスワイプダウンする(または、直接アイコンにタッチしてからプルダウンする)ことでアイコンを選択し、そのアイコンに関連する設定をリストした画面を表示させることができるので、現在使用しているアプリから離れることなく迅速にアップデートを行える。そのため、例えば、ネットワークアイコンがある場合には、スワイプによりこのネットワークアイコンに到達してからスワイプダウンし、「機内モード」、「WiFiを有効化」、また、3Gネットワークに接続したり通信事業者を選択するためのチェックボックスといった従来のネットワークパラメータを表示させる。ユーザは、現在使用中のアプリケーションを離れることなく、これらの任意のものを迅速にチェックおよび変更することができる。これは、例えば、設定を見るために現在有効なアプリを離れ、電話に収集した設定用の特定のアイコンを探し、そのアイコンをタップする必要があるiPhoneでの設定到達方法とは異なる。Ubuntu UI上で実現されるこの解決法は電話の単純性に付加され、Ubuntu UIのテーマに従う。さらに、これにより「エクササイズ」を排除したより効率的なユーザエクスペリエンスが提供される。(エクササイズはUX目標の到達に不要な作業であり、これは、理想的かつ完璧で、摩擦がなく、最適な認知的負荷を伴ったユーザインタラクションに対する、まさに税金または「エクササイズ」である。)
ステータスアイコンを単純にスワイプアップして隠せば、画面を100%、アプリのために使用できるので、コンテンツに十分集中できるようになる。ステータスアイコンは短いスワイプダウンで再び表示させることができる。これは、スマートフォンのように画面が小さいデバイスでは非常に便利である。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:ユーザが、実行中の主要アプリから離れることなく、電話上のシステムパラメータを調べ、さらに変更できるようにするためにはどうするか?」
これへの解決法は、ユーザがエッジ付近にあるシステムステータスアイコンを選択し、これをスワイプダウンして(例えば、アイコンに直接タッチしてからプルダウンする)、そのアイコンに関連する設定がリストされた画面を表示させることで、設定を迅速に更新し、次に、設定ページをスワイプバックして、実行中の現在のアプリを表示させることが可能な、スマートフォン(またはその他のパーソナルコンピュータデバイス)として一般化できる。同様に、このアプローチを反転させ、下エッジからのスワイプアップにより、アイコンに関連する設定をリストした画面を表示させることもできる。
Ubuntuの別の特徴は、アプリ用のオンスクリーンコントロールに付与されたスペースを最適化する方法である。Ubuntuでは、これらのコントロールは下エッジに設けられており、下エッジから短くスワイプアップした場合にのみ表示され、その後、コントロール上から下エッジへのスワイプダウンによって隠される。このデザインはスペース管理に関連しているので、アプリの主要ビジュアルエクスペリエンスがほとんどの時間、画面を100%占めることが可能になり、さらに、コントロールを必要な時のみ迅速かつ直感的に有効化できるようになる。
このアプローチは、ユーザがホーム画面、ウェルカムスクリーンを見ている場合にも、または複数の開かれたアプリケーションをサッと閲覧している場合にも使用され、また、アプリケーション内だけでなく外部においても使用される。全ての場合において、下エッジからの短いスワイプアップにより適切なコントロールが表示される。このスペースの節約により、見た目がよりきれいでシンプルになり、ユーザが必要とするその時だけ重要な情報を提供できるようになる。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:ユーザがインタラクトできるアプリコントロールを、貴重な画面「不動産」を占有せずに提供する必要性をどのように調整できるか?」
これへの解決法は、アプリコントロールがエッジ(例えば下エッジ)に配置されているが、表示されるのはこのエッジから短くスワイプアップした場合だけで、その後はスワイプダウンにより隠される、スマートフォン、タブレット、またはその他のコンピュータデバイスとして一般化できる。
[A.2 エッジ動作の要約]
主要なエッジ動作のいくつかは次の通り要約できる。
・左エッジからのスワイプでランチャが出現し、さらにスワイプすることで、実行中アプリのホームページが出現する。
・右エッジからのスワイプで一番最近のアプリが出現し、さらにスワイプすることで、それよりも前に使用したアプリが出現する。
・上エッジからのスワイプで、上エッジ右側に表示されたシステムアイコンのシステムステータスパラメータが出現し、システムステータスパラメータはスワイプアップで再び隠される。
・下エッジからのスワイプで、アプリ特化のコントロールと、そのアプリ用の音声制御パラメータとが出現する。これらはスワイプダウンで再び隠される。
これらのアイテムを、スワイプで出現させるまで隠すことで、画面を整然とした状態に保てるため、最大量の画面「不動産」を実行中のアプリケーションに費やすことができる。計算演算システムを実行中のスマートフォンよりも、スマートフォン自体が大きく、そしてスペース豊富に感じられる。
上で述べたように、これらのジェスチャのいくつかは「レンジドジェスチャ」であり(セクションCの「Ubuntuにおけるスワイピングおよびレンジドジェスチャ」を参照)、つまり、スワイプを継続することでさらなる(関連した)機能/画面などを出現させる。
アプリへのコントロール入力を音声によって行うことも可能であり(以下の「HUDパラメータ」を参照)、下エッジからの長いスワイプアップにより、そのアプリケーション用の音声対応HUD検索インターフェースが開く。
[A.3 ウェルカムスクリーンにおけるエッジインタラクション]
Ubuntuのエッジジェスチャ(各エッジが、全アプリケーションにわたって一貫した、またデバイスがロックされているいないに関わらず一貫した、明確な目的を持つ)の幅広い使用は、エッジの重要性、その機能、または使用方法を知らない新規ユーザに、使い易さに関する問題を生じさせる。また、インターフェースの審美性と開放感を減じかねない「クローム」(ボタンや、エッジのその他の視覚的表示)を意図的に無くしたことで、ユーザにとっては、エッジを探索する際の案内が非常に少なくなっている。
Ubuntuは、この問題への多くの解決法を実現する。
・ウェルカムスクリーン上における加速度計ベースのエッジヒント
・加速度計やその他の動作追跡のためのセンサを装備したデバイスでは、スマートフォンが動くと画面のエッジに視覚的ヒントが示される。例えば、スマートフォンを振ることで、ランチャの一部分が、あたかも画面の外に「放たれ」、振ることによって「軽く動いて」画面上に若干出てきた感じで画面の左エッジに示される。これと同じようなヒントによって、Ubuntuユーザエクスペリエンスにおける特定の目的を持った右エッジ、下エッジ、上エッジにユーザの注意を向けさせることができる。
・タッチエクスプロレーションによって起動されたヘルプ
・「空白」または「ボタンの無い」ウェルカムスクリーンに直面したユーザは、画像または視覚化されたデータにタッチしたり、ウェルカムスクリーンをスワイプ、タップするか、または撫でてみて、どうなるか様子を見る。こうしたジェスチャによる画面のロック解除で誤ってロック解除してしまう可能性があるため望ましくない。この問題を解決するために、Ubuntuのデザインでは、「エッジ学習」ゲームを実行する機能を含んだ、エッジドライブ方式のUbuntuエクスペリエンスにユーザを慣れさせる「ヘルプ」エクスペリエンスを完全にトリガしながら、こうしたジェスチャの回数を計測するプログレスバーを示す。
・エッジ学習ゲーム
・エッジベースのユーザエクスペリエンスにユーザを慣れさせる1つの方法は、ヘルプエクスペリエンスから起動でき、デバイスを最大限に利用するために必要なエッジの使用をユーザに奨励するゲームを提供することである。
[A4. エッジジェスチャの主要概念]
このセクションでは、「エッジジェスチャ」の主要概念を要約する。「エッジジェスチャ」の主要概念は次の通りである。
スマートフォン、タブレット、またはその他のコンピュータデバイスであって、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、タッチセンシティブディスプレイの4つのエッジのうちの任意のエッジからのスワイプインを検出せよとの命令を含み、特定のスワイプイン開始エッジ(例えば左、右、上、下)に応じた方法でデバイスを動作させる、1つ以上のコンピュータプログラムとを備えている。
オプションによるこれ以外の実現特徴は次を含み、その各々は他の任意の特徴と組み合わせることができる。
・デバイスは、特定のスワイプイン開始エッジによって異なる特定タイプのUIグラフィック、1つまたは1組のオブジェクトを表示することで、特定のスワイプイン開始エッジに応じた方法で動作する。
・デバイスは、デバイスが何を表示しているかに関わらず、検出したスワイプに対し常に一貫した方法で応答する。
・デバイスは、画面の1つのエッジからのスワイプインを検出し、検出したスワイプに応答して、直接またはさらなる介入ステップ後に、1組または1群のアプリアイコンであるアプリランチャを開くか、アプリを開始するかあるいは切り替えを行う。
・デバイスは、画面の1つのエッジからのスワイプインを検出し、検出したスワイプに応答して、1つ前に開いたアプリに戻る。
・デバイスは、左エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後にアプリを開き、また、右エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後に、前に使用した実行中のアプリを表示する。
・デバイスは、ウェルカムスクリーンの表示中には、右エッジからのスワイプインを検出し、直接またはさらなる介入ステップ後に、デバイスホームページを表示する。
・左エッジからの右スワイプにより「開始」が始動されて、アプリケーションランチャが出現し、反対に、右エッジからの左スワイプにより、それまでに開いたアプリが出現する、つまり「戻る」機能として働く。
・さらなる右エッジからの左スワイプに応答して、命令により、前に使用した全てのアプリケーションを、直前に使用したものを筆頭にスクロールバックさせる。
・デバイスは、1つのエッジの付近に配置されたシステムステータスをユーザが選択したことを検出でき、また、アイコンからのスワイプアウェイ(例えば、ユーザがアイコンに直接タッチしてからプルダウンすること)に応答して、デバイスは命令により、そのアイコンに関連する設定をリストした画面を表示して、ユーザが設定を迅速に更新し、その後にスワイプで設定ページをエッジに戻し、実行中の現在のアプリケーションを示すことができるようにする。システムステータスアイコンは画面の上エッジ、例えば上エッジ右側に配置されてよい。
・命令により、デバイスは、1つのエッジからの短いスワイプアップに応答して、アプリコントロールを表示し、このアプリコントロールは、アプリの実行中、およびデバイス画面の制御中に、スワイプアップ開始と同じエッジの付近に表示され、また、同エッジへのスワイプバックにより再び隠される。アプリコントロールは、画面の下エッジに配置できる。
・封筒アイコンなどのメッセージアイコンからのスワイプに応答し、命令により、デバイスは、1つ以上のメッセージをリストしたパネルまたはウィンドウ、あるいは領域を表示する。
・メッセージをリストしたパネル、ウィンドウ、領域からユーザがメッセージを選択したことに応答して、応答用のパネル、ウィンドウ、領域が表示される。
・選択されたメッセージが不在着信通知である場合には、ユーザが、メッセージを残した人物に折り返し電話をする、その人物に返信メッセージを書いて送信する、予め作成しておいた返信を選択してその人物に送信する、の中から1つ以上を実行できるようにするためのボタンまたはアイコンが、応答用のパネル、ウィンドウ、領域に含まれる。
・デバイスは、ユーザがアプリランチャのアプリのアイコン上で停止したことを検出すると、これに応答し、そのアプリの特徴、機能、制御に関連した1つ以上のユーザインターフェースオブジェクトである該アプリ用「クイックリスト」を表示する。
・1つのエッジからのスワイプインは、タッチ画面のエッジまたは外側から始めなければならない。
・デバイスは加速度計を含み、プロセッサは加速度計から動作信号を受信し、閾値を超える信号に応答して、現在表示中の画面とは別の画面をほんの一部分だけヒントとしてユーザに対し表示する。閾値はデバイスを振ることに関連していてよい。
その他の態様には以下がある。
次のステップを備え、タッチセンシティブディスプレイを装備したコンピュータデバイスにて実行される方法は、
(i)タッチセンシティブディスプレイの4つのエッジのうちの任意のエッジからのスワイプインを検出するステップを備え、検出したスワイプに応答して、
(ii)デバイスに、特定のスワイプイン開始エッジ(例えば左、右、上、下)に応じた方法で動作させるステップをさらに備えている。
・デバイスは、スワイプイン開始エッジによって異なる特定タイプのUIグラフィック、1つまたは1組のオブジェクトを表示することにより、特定のスワイプイン開始エッジに応じた方法で動作する。
非一時的なコンピュータ可読記憶媒体は1つ以上のプログラムを記憶し、1つ以上のプログラムは、タッチセンシティブディスプレイ装備のコンピュータデバイスによって実行されると、デバイスに以下を実行させる命令を備えており、
(i)タッチセンシティブディスプレイの4つのエッジのうちの任意のエッジからのスワイプインを検出し、検出したスワイプに応答して、
(ii)デバイスに、特定のスワイプイン開始エッジ(例えば、左、右、上、下)に応じた方法で動作させる。
スマートフォン、タブレット、その他のコンピュータデバイスは、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリ内に記憶されており、1つ以上のプロセッサによって実行されるように構成されており、タッチセンシティブディスプレイの対向する任意の2つのエッジからのスワイプインを検出させる命令を含み、検出したスワイプに応じて、デバイスに特定のスワイプイン開始エッジに応じた方法で動作させる、1つ以上のコンピュータプログラムとを備え、
デバイスは、左エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後にアプリを開き、また、右エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後に、これまでに使用した、まだ実行中のアプリを表示する。
・左エッジからの右スワイプにより、アプリケーションランチャを左エッジから出現させることで「開始」が始動する。
・デバイスは、さらに右エッジからの左スワイプに応答して、前に使用した全てのアプリを、直前に使用したものを筆頭にスクロールバックさせる。
・左エッジからの右スワイプにより、アプリケーションランチャを出現させることで「開始」が始動し、反対に、右エッジからの左スワイプは、以前に開いたアプリケーションを出現させる、つまり「戻る」機能として働く。
・1つのエッジからのスワイプインは、タッチ画面ディスプレイのエッジ、または外側から始めなければならない。
・スワイプの検出に応答して、検出したスワイプの長さに応じ、2つ以上の異なる成果または機能が誘発されるか、呼び出される。
・検出した長さは、スワイプのパラメータ、距離、長さ、方向、経路、終点、目的地のうちの1つ以上の関数であってよい。
・1つのエッジからのスワイプが第1の成果を生じ、ユーザが同エッジからのスワイプインを継続すると、別の成果につながる。典型的に、2つ以上の異なる成果または機能は、関連またはつながりのある成果である。
・スワイプが画面上の事前に定義された領域を選択するためにこの領域まで続けられると、特定の成果が得られる。
・デバイスは、左エッジからさらに右への継続したスワイプインを検出すると、実行中の全てのアプリのアイコンを含んだホーム画面を表示する。
・タッチ画面からのリリースアップはコミットジェスチャである。
・スワイプには、ユーザの指がタッチ画面と接触し続けながら、スクリーン上の1つ以上の方向へ移動することを必要とする。
ある方法は、次のステップを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される:
(i)タッチセンシティブディスプレイの対向する任意の2つのエッジからのスワイプインを検出するステップ。デバイスは、スワイプの検出に応答して、特定のスワイプイン開始エッジに応じた方法で動作する。
(ii)デバイスは、左エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後に、アプリを開き、また、右エッジからのスワイプインに応答して、直接またはさらなる介入ステップ後に、これまでに使用した、実行中のアプリを表示する。
[B.1 レンジドジェスチャ]
Ubuntuは、動作セットを「レンジドジェスチャ」に一意に編成するので、ユーザは、ジェスチャを何回完了したかに基づいて、特定のジェスチャから複数の動作にアクセスすることができる。
多くの場合、例えば次のような関連性のある動作の集合が存在する。
・ランチャを表示する;
・ランチャ内の特定のアイテムを表示する;
・ランチャ内の特定のアイテムのクイックリストを表示する;
・実行中の全てのアプリを表示する;
・インストールされ利用可能な全てのアプリを表示する。
これらの動作の各々は、1つ以上のアプリケーションに関連している。Ubuntuでは、ユーザは左エッジまでのスワイプを何回行ったかに応じて、これらの動作の各々を実行できる。これらの動作は「レンジドジェスチャ」として編成されている。最初の左エッジまでのスワイプにより、ランチャ(実行中およびお気に入りの全アプリのアイコンを示す)が表示され、このジェスチャを続けることで、ランチャ上の特定のアイテムを(起動または切り替えのために)選択でき、あるアプリのアイコン上でタッチを停止すると、そのアプリのクイックリストが開き、さらに右へスワイプを(同じ流動的なジェスチャで)続けることで、全てのインストールされたアプリが表示される(これらは、ホーム画面の「アプリ」ページの一部として示される。ホーム画面は、利用可能であってまだインストールされていないアプリも表示する)。
多くの従来のタッチインターフェースの動作方法は、スクリーン上での1つのジェスチャまたは動作は1つの事のみを意味する。これは例えば、iPhone上で指を左から右へ、または右から左へスライドさせると、アプリケーションのページをサッとフリックして閲覧できる。Ubuntuは、これとは異なり、いくつかの意味を1つのジェスチャに組み合わせた。ジェスチャの成果は、そのジェスチャを何回完了したかに応じて異なる。
スマートフォンのロック解除特徴を排除する場合と同様に、レンジドジェスチャは「エクササイズ」を排除する。その結果、所要ステップが少なくなるだけでなく、特定のビューに到達するまでの時間量も短縮される。例えば、異なるビューへの到達までに数ステップを要する場合にiPhoneとAndroidの電話がどのように動作するかを比較すると、Ubuntu UI上では、数個の異なるビューへの到達までに1ステップしか必要でなく、そのため、アプリケーション起動時、ウェルカムスクリーンからその他の任意のビューへの変更時、アプリケーション間のスワップ時(これらは全て1つのジェスチャで行える)に「エクササイズ」が減少される。アプリケーションを見つけて起動することが、電話のあらゆるビューから1つの動作で行える。レンジドジェスチャの補助によって所望のアプリケーションが見つかったら、アプリケーションアイコン上で指を離すだけで起動が開始する。これは、例えばiPhoneのような別の電話と異なる点である。Windows8とAndroidでは、アプリケーションアイコン上でシングルタップするだけでよく、これらの電話上でアプリケーションを起動するためにはこれ以外のジェスチャは必要ない。
レンジドジェスチャの補助があることで、電話上の物理ボタンはもはや不要であるため、排除できる。例えば、ホーム画面に戻ったり、アプリ間をスワップするためのボタンを1つのみ設けたiPhoneを使用している場合、Ubuntuを導入すれば、これらの動作は全て、指1本の単純なストロークで行えるため、このボタンは必要なくなる。
Ubuntuでは、レンジドジェスチャは3つの明確な形態を持つ。
・進行的な非選択ジェスチャ‐ジェスチャの進行と共に異なる成果または結果が誘発され;ユーザが画面上のどの領域でジェスチャを終了するかは重要でない。
・進行的な選択ジェスチャ‐ジェスチャの進行と共に異なる成果または結果が誘発され;ユーザが画面上のどの領域でジェスチャを終了するかが重要であり、例えば、ユーザがジェスチャを進行させ特定の領域を選択すると、特定の結果が誘発される。
・選択的ジェスチャ
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:単純で覚えやすいジェスチャよりも興味深い「動作」の方が多いため、効率的なタッチ中心のインターフェースをどのようにデザインできるか?」
これへの解決法は、ジェスチャ入力が1つのジェスチャの量(例えば距離、長さ、方向、経路、開始点、終点、目的地)に応じて異なり、誘発される成果もこの量に応じて異なる(しかし、典型的につながりはある)スマートフォン(またはその他のパーソナルコンピュータデバイス)として一般化できる。レンジドジェスチャは、通り越すページを縮小することで達成でき、例えば、左エッジから右エッジまでスワイプすると、スワイプの継続に応じてアプリページが縮小する。
[B.2 レンジドジェスチャの主要概念]
このセクションでは、「レンジドジェスチャ」の主要概念を要約する。「レンジドジェスチャ」の主要概念は次の通りである。
スマートフォン、タブレットまたはその他のコンピュータデバイスは、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶され、1つ以上のプロセッサで実行されるように構成されており、また、シングルジェスチャ入力を検出させ、検出したシングルジェスチャ入力に応答して、検出したジェスチャ入力の量に応じた2つ以上の異なる成果または機能を誘発または呼び出させる命令を含む、1つ以上のコンピュータプログラムとを備える。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・検出量は、ジェスチャ入力のパラメータ(距離、長さ、方向、経路、終点、目的地)のうちの1つ以上の関数である。
・ジェスチャ入力は1つのエッジからのスワイプである。
・1つのエッジからのスワイプは第1の成果を生じ、ユーザが同じエッジからのスワイプインを続けると、異なる成果が得られる
・2つ以上の異なる成果または特徴は、関連またはつながりのある成果である。
・ジェスチャ入力を画面上の事前に定義された領域を選択するべくこの領域まで継続すると、特定の成果が得られる。
・1つのエッジからのスワイプは、別のエッジからのスワイプと比較して異なる成果を生じる。
・左エッジからの短いスワイプの検出により、デバイスは、1セットのアプリアイコンであるアプリランチャを表示する、または現す。
・さらに右への短いスワイプの継続を検出すると、デバイスが、実行中の全てのアイコンを含んだホーム画面を表示する。
・システム情報機能用のシステム情報アイコンからの短いスワイプアウェイは、システム情報機能に関連したウィンドウ枠、ウィンドウ、領域を表示させ、このスワイプを継続すると、ウィンドウ枠、ウィンドウ、領域が拡大して、システム情報機能のためのユーザ選択可能なパラメータを含む。システム情報アイコンは上エッジ右側に位置してよい。
・アプリが開いた状態で1つのエッジから短いスワイプを行うと、そのアプリに関連した機能が表示され、さらに、そのスワイプを継続して画定されたターゲット領域を選択すると、検索機能が呼び出される。短いスワイプは、下エッジからのスワイプアップであってよい。
・デバイスはタブレットデバイスであり、1つのエッジからの短いスワイプによって領域(「サイドステージ」)が表示され、このサイドステージは、画面のその他の部分に何が表示されているかに関わらず、任意のアプリ、ユーティリティ、機能を表示できる領域であり、1つのエッジからの短いスワイプを継続すると、以前に開いたアプリが表示される。この短いスワイプは右エッジからのスワイプであってよい。
・アプリランチャ内のアプリ用アイコン上でユーザが停止したことを検出すると、デバイスは、そのアプリの特徴または機能または制御に関連した1つ以上のユーザインターフェースオブジェクトである「クイックリスト」を表示する。
・タッチ画面からリリースアップするとコミットジェスチャとなる。
・あるジェスチャ入力は、ユーザの指がタッチ画面に接触し続け、スクリーン上で1つ以上の方向へ移動することを要する。
その他の態様は次の通りである。
方法は、以下のステップを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される。
(a)シングルジェスチャ入力を検出するステップ。このシングルジェスチャ入力の検出に応答して、
(b)検出されたジェスチャ入力の量に応じて、2つ以上の異なる成果または機能が誘発または呼び出される。
1つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であり、1つ以上のプログラムは、タッチセンシティブディスプレイ装備のコンピュータデバイスによって実行されると、デバイスに、
(a)シングルジェスチャ入力を検出させる命令と、さらに、このシングルジェスチャ入力の検出に応答して、
(b)検出されたこのジェスチャ入力の量に応じ、2つ以上の異なる成果または機能を誘発または呼び出させる命令とを備えている。
[C.1 ウェルカムスクリーン]
このウェルカムスクリーンは、ユーザの個人的なデータをグラフィカルに表示する画像データビジュアライゼーションまたはインフォグラフィックであり、1つの実現では、これは、多数のドット、例えば各々が(ユーザ選択可能またはカスタマイズ可能な)アクティビティまたは状態を表す30個の白色の小型のドットを円形配置したものであり、特定のドットに関連付けられたアクティビティは、ドットに隣接した半透光性のサークルのサイズで表示される。全体的な印象としては、花のような何らかの有機体である。
ドットは、受信したツイート数、受信した電子メール数、今日歩いた距離、残りの通話可能分数、休止状態での残り時間などといったアイテムに関連していてよい。データビジュアライゼーションを実現するための方法は多数存在する。例えば、システムが数秒毎に複数のドット間を循環し、短いテキスト記述で表した現在のドットの意図をサークル内部にラベル付けし、1つのドットから次のドットへ移動する時には常に、使用のカラーパレットを微妙に変化させる。あるいは、各ドットが特定の日付を表し、画面が今日のドットの異なる変数間を数秒毎(またはこれよりも長い時間毎)に循環してもよい。
そのため、ウェルカムスクリーンは定期的に進化、更新を繰り返し、その外観は、特に、特定のドットに関連した上に重なる各々の半透光性サークルのサイズが、特定の時間に特定のユーザに特化することで、特定のユーザにとって完全に個人的かつ一意なものになる。しかし、このウェルカムスクリーンはユーザを情報で圧倒することがないようにデザインされている(議論の余地はあるが、Windows Phoneのようなその他のオペレーティングシステムとは異なる)。特に、中心的な情報コンテンツ、具体的には任意の所与のドットに関連した円のサイズを、基本的に情報をグラフィックではなくテキストで伝えるWindows PhoneやWindows8のタイルベースのシステムとは違って、テキストではなくグラフィックで表示しており、非常に迅速に理解されることが可能である。保護されたシンプルなインターフェースを用いることで、Ubuntu Phoneのウェルカムスクリーンは例えばiPhoneのウェルカムスクリーンよりもずっと多くの情報を示すことができる。
そのため、Ubuntuのウェルカムスクリーンは、テキストを多用することなく多くのデータを視覚的に捉えることができ、取入れる情報をより理解し易くしているため、ユーザは、興味を持ったデータや重要なデータの概要を最小の認知的負荷で高速に得ることができる。これは、ランダムな通知が次々と配置されてしつこく、実際にスクリーンに表示されている情報のどれが重要なのかをわかりにくくしているiPhoneの画面と比較できる。
デフォルトのUbuntuウェルカムスクリーンは視覚認識の力を利用している。眼は、スクリーン上のどこに特定の情報があるか、また、どのグラフィカルサークルが何のデータを表しているかを即座に知る。これにより、ざっと外観する場合に、スマートフォンのユーザは、内容を全く読まなくても、スクリーン上のサイズの異なるサークルを単に認識するだけでよいため、時間の節約となる。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:ユーザのスマートフォンについての複数のパラメータの重要なパフォーマンスまたは状態情報を、ユーザがスマートフォンに一切触ったりインタラクトする必要なく、迅速に理解できるようにユーザに提供するにはどうするか?」
これへの解決法は、デバイスまたはその1人以上のユーザに関連した多数の変数の各々を表す、(潜在的に動的な)インフォグラフィックまたは(潜在的に動的な)データビジュアライゼーションを備えたウェルカムスクリーンを表示するスマートフォン、タブレット、またはその他のコンピュータデバイスとして一般化できる。変数は、複数ソースからのデータ、アプリケーション、オンラインサービス、デバイスの合成であってよい。
1つの実現は、各変数に(a)幾何または図形内の位置、(b)図形中の変数の位置と近似し、変数の値と共にサイズが変化する形状、を割り当てることによって、デバイスの状態に関連した多数の変数(受信したツイート数、受信した電子メール数、今日歩いた距離、残りの通話可能分数、休止状態での残り時間、またはその他ユーザが興味を持つあらゆるもの)の各々をグラフィカルに表示する動的なデータビジュアライゼーションまたはインフォグラフィックを備えたウェルカムスクリーンを表示する、スマートフォン、タブレット、またはその他のパーソナルコンピュータデバイスである。
1つの実現では、幾何学図形は円形であり、各形状は円の一部(典型的に影付き)で、頭または花弁のような形であるため、例えば、ユーザが10ツイートと電子メール20通を受信した場合には、ツイートに関連した影付きのサークルの部分が、電子メールに関連した部分よりも小さくなる。また、ツイートを受信すると、関連する影付きサークルのサイズが大きくなり、Facebookコメントは別の変数であってよく、Facebookコメント数が多くなると、関連する影付きサークルが急速に膨張するという特典が得られる。その他多くのデータビジュアライゼーションの変数を使用できる。
同様に、ユーザは、多様な変数を持つ幾何学図形(例えば円形)における位置に迅速に慣れるだろう。例えば、残りの通話可能時間変数をサークルの一番上に位置したドットにすることで、ユーザは、この変数に関連した形状のサイズをサッと見るだけで、残りの通話時間量が大体わかるということを即座に知ることができる。例えば、AppleのiOSでは、多くのインタラクションステップ(電話をロック解除する、「設定」アイコンを探して選択する、「一般」オプションを探して選択する、「利用量」オプションを探して選択する)を経た後でないとこの情報にアクセスできない。
Ubuntuはマルチユーザプラットフォームとして設計されており、電話およびタブレットとしてのUbuntuのデザインは、これをユーザがウェルカムスクリーンに切り替えられることで表現している。タブレット上で、ユーザはリストとして、匿名のゲストアカウントと共に示される。電話上では、ユーザリストをオンデマンドで示すことができる(例えば、ウェルカムスクリーンの下エッジを使用する)。こうすることにより、1つのデバイスで、複数のユーザと複数のユーザカウントの両方を、「仕事」と「ホーム」などの別々の目的でサポートできる。
新しいインターフェースの最初の一見は、そのインターフェースが幅広いユーザ基盤に受け入れられるかどうかを決める重要な要素であり、このウェルカムスクリーンは、ユーザにもっと使ってみたいと思わせる、遊戯的で、好奇心をそそり、魅力的なインターフェースを提供し、ユーザをデバイスに引き付けるための第1段階である。このインターフェースなら、ユーザは、パッと見て電話に関連する重要な変数の状態を理解することができる。
[C.2 ウェルカムスクリーンの主要概念]
このセクションでは、ウェルカムスクリーンの主要概念を要約する。ウェルカムスクリーンの主要概念は次の通りである。
スマートフォン、タブレット、またはその他のコンピュータデバイスは、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、デバイスまたはその1人以上のユーザに関連した多数の変数の各々をグラフィカルに表す画像インフォグラフィックまたはデータビジュアライゼーションを備えたウェルカムスクリーンを表示させる命令を含んだ、1つ以上のコンピュータプログラムとを備える。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・インフォグラフィックまたはデータビジュアライゼーションは動的である。
・インフォグラフィックまたはデータビジュアライゼーションはリアルタイムで動的に更新を行う。
・変数は、複数ソースからのデータ、アプリケーション、オンラインサービス、デバイスの合成であってよい。
・データビジュアライゼーションは、デバイスのユーザにとって個人的および一意なものである。
・データビジュアライゼーションは、1か月間毎日といった特定の期間に特有のものである。
・データビジュアライゼーションは、多様なタイプの変数を網羅するために、循環する、または循環されることができる。
・変数は、受信したツイート数、受信した電子メール数、今日歩いた距離、残りの通話分数、休止状態での残り時間、またはその他ユーザが興味を持つあらゆるもの、のうち1つ以上を含む。
・ユーザは、ウェルカムスクリーンに含めるための、多様なアクティビティおよび状態を定義できる。
・デバイスは、幾何学またはその他の形における位置、形状、空間、体積を各変数に割り当てることによって、多数の変数の各々をグラフィカルに表示する。
・デバイスは、変数の値と共にサイズが変化する形状を各変数に割り当てることによって、多数の変数の各々をグラフィカルに表示する。
・デバイスは、変数の値と共に色調が変化または変更する色を各変数に割り当てることによって、多数の変数の各々をグラフィカルに表示する。
・幾何学図形は円形であり、それぞれの形が影付きサークルの一部である。
・データビジュアライゼーションは、特定の時間に特定のユーザにとって個人的および一意なものである。
・データビジュアライゼーションは、特定の時間とさらに場所とにおいて、特定のユーザにとって個人的および一意なものである。
・ウェルカムスクリーンは、デバイスが所定の時間だけアイドル状態になった後、または、最初に起動された時に表示されるデフォルト画面であり、ホーム画面ではない。
・インフォグラフィックまたはデータビジュアライゼーションは、各変数に(a)幾何または図形内の位置、(b)図形中の変数の位置と近似し、変数の値と共にサイズが変化する形状、を割り当てることによって、デバイスに関連した多数の変数の各々(受信したツイート数、受信した電子メール数、今日歩いた距離、残りの通話可能分数、休止状態での残り時間、またはその他ユーザが興味を持つあらゆるもの)をグラフィカルに表示する。
・1つのエッジからスワイプインすることで、電話をロック解除する、または電話へのアクセスを可能にし、さらに、デバイスに特定のスワイプ開始エッジ(例えば左、右、上、下)に応じた動作(例えば、画面または画面の一部を表示する、機能を呼び出す)を行わせる。
・ユーザは、右エッジからのスワイプにより、ウェルカムスクリーンで前に使用した状態、つまりデバイスをロックする前の状態をロック解除でき、この後、デバイスが、ユーザを入れる前に、ユーザ設定に応じてピンコードまたはパスフレーズの入力を要求する。
・ウェルカムスクリーンで、ユーザは左エッジからスワイプしてランチャを起動させ、直接起動できるお気に入りおよび実行中のアプリを示すことができる。また、起動されたアプリケーションによっては、使用するためにピンコードまたはパスフレーズの入力を要求されることがある。
・カメラアプリを起動する場合、ピンコードまたはその他の証明の入力は不要であるが、電子メールクライアントには必要である。
・ウェルカムスクリーンで、ユーザは右エッジからのスワイプによりホームページを出現させることができる。
・ウェルカムスクリーンが表示されたら、ユーザは上からスワイプダウンしてシステムインジケータを表示させることができる。
その他の態様は以下の通りである。
方法は以下のステップを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される。
(a)デバイスまたはその1人以上のユーザに関連した多数の変数の各々をグラフィカルに表示する画像インフォグラフィックまたはデータビジュアライゼーションを備えたウェルカムスクリーンを表示するステップ。
1つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、この1つ以上のプログラムは、タッチセンシティブディスプレイ装備のコンピュータデバイスによって実行されると、デバイスまたはその1人以上のユーザに関連した多数の変数の各々をグラフィカルに表示する画像インフォグラフィックまたはデータビジュアライゼーションでウェルカムスクリーンを表示させる命令を備えている。
[D.1 ロック解除メカニズム]
従来の電話インターフェースは、特定のロック画面(具体的には未使用時に電話が戻り表示する画面)を必要とし、ロック画面はユーザによる故意のジェスチャでロック解除できる何らかのロックを表示する(AppleのiOSでは、ロック画面に、デバイスをロック解除するためにユーザがチャネルに沿ってスライドさせる、小さくて白いレクタングルの「スライドしてロック解除」が設けられている)。ロック画面は電話の不注意な使用を防止するため、必須条件とされている。
しかし、Ubuntuでは画面のエッジが特定の目的を持ち、1つのエッジからのスワイプにより電話をロック解除するよう機能するだけでなく、デバイスの高速かつ効率的な使用を可能にする別の便利な処理も始動できるため、専用のロック画面は不要である。そのため、Ubuntuを用いれば、デバイスがロック状態に戻ってからも(例えば、ウェルカムスクリーンが表示された状態)、専用のロック画面自体はなく、デバイスをロック解除するにはエッジからスワイプする必要があるため、誤った起動が発生し難い。その代わり、デバイスは1つのエッジからのスワイプによって単純にロック解除できる。
ユーザ設定によっては、ユーザは右エッジからのスワイプにより、ウェルカムスクリーンにおいて以前に使用した状態(デバイスがロックされる前)を「ロック解除」でき、これにより、ユーザを入れる前にピンコードまたはパスフレーズの入力要求を行う。さらに、デバイスの前面に指紋センサが統合されていれば生体識別(音声または指紋など)の統合も可能であり、この場合、ユーザは指で指紋センサ上をスワイプし、このまま続けて左エッジからスワイプすることでランチャを開くことができ、全てをたった1つの流動的な動作によって行える。
さらに、ユーザは、ウェルカムスクリーン上で左からのスワイプにより、直接起動できるランチャ(お気に入りおよび実行中のアプリを備える)を表示させることができ、また、これを使用するためにピンコードまたはパスフレーズの入力を要求される場合がある。例えば、カメラアプリにはピンコードは不要であるが、電子メールクライアントには必要である。
さらに、ユーザはウェルカムスクリーン上で上からスワイプすることで、システムインジケータを表示させることができる。このうちいずれかは、フルアクセスするためにピンコードまたはパスフレーズの入力を要求する場合がある。
したがって、ウェルカムスクリーン上で右エッジから短くスワイプすることで、お気に入りアプリをアプリアイコンのカラムとして表示でき、ランチャバー内のこのアプリアイコンのカラム上で指を上下に滑らせ、起動させたいアプリの上で指を離すと、デバイスがロック解除され、当該のアプリが起動する。このランチャバーには、お気に入りだけでなく実行中のアプリも含めることができ、実行中のアプリへのクイックアクセスが可能になる(実行中でなくなったアプリはランチャバーから消える)。また、全てのお気に入りおよび実行中のアプリを示すスペースが不十分な場合には、お気に入りではないアプリがアイコンスタックとして示され、このアイコンスタックはドラッグアップすることでアコーディオンのように伸張する。
したがって、最も重要なロック解除動作は、左からの短いスワイプインによりランチャバーをドラッグオープンし、このランチャバー上で指を上下に滑らせ、所望のアプリ上で指を離してコミットするものである。これは、指を起動したいアプリまたはホーム画面アイコン上で離すまで画面上につけたままで、1つの流動的な動作によって実行できる。
その他のエッジからのスワイプでもロック解除ができる。右エッジからの短いスワイプインは電話をロック解除し、ユーザが最後に作業していたアプリを表示させる(すると、ある程度のセキュリティ度が課される。例えば、最後に作業したアプリが、ミュージックプレーヤといった低セキュリティのアプリとして指定されている場合は即座に開けるが、コンタクトリストなどのより機密性の高いアプリでは、そのアプリに進むために何らかの認証が必要である)。
右エッジ上からの短いスワイプダウンにより、システム設定および状態にアクセスする。ユーザは、例えば画面上エッジまでスワイプしてシステム設定を呼び出した後に、左または右へ側方に滑らせて、右エッジのさまざまなシステム情報アイコンの中から「ネットワーク」アイコンを選択し、次にスワイプダウンして「ネットワーク」パラメータ情報を表示させ、これにアクセスできるが、この全ての動作を、指を持ち上げることなく1つの流動的なジェスチャで行える。
右上に位置するその他のシステム情報アイコンには、メッセージ(ユーザは、メッセージ上をタップしてそのメッセージを選択し、次に、「コールバック」または「メッセージ」ボタンをタップして、直接、コールバックまたはメッセージバックできる)、音声(消音、または音量変更を行える)、バッテリ(充電残量の確認、画面の明るさの変更を行える)が含まれている。
電話をロック解除する方法のデザイン選択は、Ubuntuウェルカムスクリーンのエレガントさおよびシンプルさ、ならびに全てのUbuntuのエクスペリエンスと並行するものである。ここでのアプローチは、「余計なものはない方が確実に良い」である。
上で述べたように、他のスマートフォンと比較しての違いは、可動的で、かつインタラクションを求めてくるものがウェルカムスクリーン上にない点である。例えば、電話をロック解除するためにはユーザがインタラクティブバーを左から右へスワイプする必要があるiPhoneと比較すると、新規のUbuntuを用いれば、この種のロック解除職人のビジュアライゼーションはもはや必要ない。Ubuntuは、UI内の、ロック解除のように見えるあらゆるオブジェクトを全て排除し、代わりに、画面の各エッジを電話の別のビューにアクセスするために利用している。こうすることで、Ubuntu UIは画面スペースをフルに利用し、電話ロック解除の特定のタスクを実行する上での中間ステップを排除している。
電話の他のビューにアクセスするためのエッジの使用は、Android(2010年以降)が、画面上を指でドラッグダウンして新たなウィンドウを開くことにより電話をロック解除する方法や、Windows8 phoneが、画面を上方へ短くフリックしてロック解除する方法と似ている。Ubuntuフォンとの1つの重要な違いは、指を下へ引き下げたり、一方向へ短くフリックしたりするだけでなく、電話の全てのエッジを使用でき、各々のエッジが各状態へのロック解除を実行することである(例えば、左エッジからのスワイプは、ランチャを介してお気に入りアプリをロック解除し、右エッジからのスワイプは、以前に使用したアプリをロック解除する)。
したがって、Ubuntu Phoneのロック解除動作は単純に1つのエッジからのスワイプであるため、関連するロック解除動作を設けた明確なロック画面というものは必要ない。この処理について、ユーザがまず画面のロック解除を行うAppleiOS6およびこれ以前のバージョンと、Ubuntu Phoneとで以下のようにさらに正しく比較することができる。
(i)タッチダウンし、次に、
(ii)ロック解除用の白いレクタングルをそのチャネルに沿ってドラッグして、
(iii)アンロックを離すと、次に、電話がオプションでキーパッドを表示する
(iv)このキーパッドで、数字パスコードを枠内に入力すると、この時点で、
(v)デバイスは利用可能なアプリの枠を表示するので、ユーザは、
(vi)所望のアプリアイコンをタップして、そのアプリを開く(もしくは、アプリアイコンが直接見えている場合には、)
(vii)所望のアイコンが見つかるまで、連続したアイコンページをスワイプする)。
したがって、Apple iOSでは、ユーザは、ロック状態の電話から、所望のアプリが開かれ実行されている電話に到達するまでに、典型的に6〜7つもの離散的なステップを経なければならないということである。しかし、Ubuntuであれば、電話の表面を指でたった1回、流動的な動作を行うだけで、電話をロック解除し、お気に入りアプリのランチャを開き、所望のアプリを選択することができ、さらにオプションのキーパッドを使って認証も行える。これは遥かに高速で、親指またはスワイプおよび滑り動作を行う指のある片手で実行できる。
Ubuntuは、フルランチャをデフォルト画面からユニークに提供する(例えば、定義された時間にわたりアクティビティがなかった際に表示される画面、具体的には電話のウェルカムスクリーン)。つまり、ユーザはロック解除をし、任意のお気に入りのアプリケーションへ直接進める(しかも、1つのジェスチャで)ということである。従来の電話では、まずロック解除してから、起動するお気に入りのアプリを選りすぐらなければならなかった。ロック画面によっては、ユーザをカメラまたは類似のベンダ選択によるアプリセットへ誘導する専用のショートカットを設けたものもあるが、デフォルト(または起動)画面から全てのユーザのお気に入りアプリを直接提供するのはUbuntuが初めてである。
Ubuntuが、ユーザのお気に入りアプリ用のランチャバーを設けている事実は、エクササイズ(「エクササイズ」とは、UX目標に到達する上で不必要な作業であり、認知的負荷を最適化した、理想的かつ完全で、摩擦のないユーザインタラクションへのまさに税金または「エクササイズ」である)を減らすための要因でもある。電話入手後しばらく経つと、アプリケーションが入ったページがいくつかできてしまうため、どのアプリケーションがどのページに入っているかを忘れ易くなる。電話にお気に入りアプリのセクションを設けていることで、ユーザは所望のアプリケーションを素早く、容易に開くことができる。
Ubuntuは、さらに、ランチャ上の各アイテムのための「クイックリスト」メニューを提供する。これらのアイテムはロック画面から直接使用することもできるので、ランチャ内の任意のお気に入りアイテムの特定の画面に直接行くことが可能であり、最初にデバイスをロック解除してから、次にアイテムを選択し、そのアイテムについての画面または動作を選択するという工程が不要である。使い易さの観点からすると、やはりこれも効率性、単純さ、電話へのエクササイズの低減に言及されるものである。
さらに、他のデバイスでは、電話をロック解除した時には、常に同じビューが表示される(ホームビューまたは画面をオフにした時に有効だったビュー)。Ubuntuではこの限りではない。電話のロック解除のための余計な手順を排除したため、電話が全くロックされていないかのように、色々なビューにアクセスすることが可能である。その結果、Ubuntuフォンでは、ユーザは不要な中間ステップを経ずに即座に所望のビューに到達できるので、適切なエッジからのスワイプインにより(さらに、「レンジドジェスチャ」の使用時には、適切な長さまたは量のスワイプインにより)、エクササイズが排除される。
このロック解除特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:ユーザが、ロック画面から電話上のお気に入りアプリケーションへ可能な限り素早くアクセスできるようにするにはどうするか?」
これへの解決法は、1つのエッジからのスワイプインにより電話をロック解除し、さらに、デバイスにコンテンツ(例えば、アプリランチャバー、ホーム画面、1つ以上のアプリ)を表示させて、ユーザがそのコンテンツと即座にインタラクとできる、スマートフォン(またはその他のパーソナルコンピュータデバイス)として一般化できる。
1つの実現において、ユーザは、左エッジからの短いスワイプインでランチャバー(ユーザのお気に入りアプリを集めて)を開き、このランチャバー上で指を所望のアプリまで上または下に動かし、所望のアプリを(指を離すことにより)コミットして、そのアプリを起動させることができる。このアプローチは、ブラウザなどの、認証が全く必要ないアプリに有効である。例えばFacebookなどのその他のアプリでは、アプリに入る前に通常の方法で認証をする必要がある。
このセクションで述べた1つのインタラクション特徴は、左エッジからの短いスワイプインでランチャバーを表示させる方法であるが、ユーザが左エッジからのスワイプインを継続するとランチャが消え、代わりにホーム画面のアプリセクションが表示される。これは、「レンジドジェスチャ」と呼ぶものの一例である。
[D.2 ロック解除メカニズムの主要概念]
このセクションでは、ロック解除メカニズムの主要概念を要約する。ロック解除メカニズムの主要概念は、次の通りである。
スマートフォン、タブレット、その他のコンピュータデバイスは、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶され、1つ以上のプロセッサによって実行されるように構成されており、さらに、1つ以上のエッジからのスワイプインを検出して、検出したスワイプに応答し、デバイスをロック解除させる、または画面からデバイスにアクセスできるようにさせる命令を含む、1つ以上のコンピュータプログラムとを備えている。
オプションによるこれ以外の実現特徴は以下を含み、その各々はその他の任意の特徴と組み合わせることができる。
・デバイスがロック解除された画面はウェルカムスクリーンである。
・ユーザは、ウェルカムスクリーンにおいて、1つのエッジ(例えば右エッジ)からのスワイプによりロック解除し、以前に使用していた状態、つまりデバイスをロックする前の状態に戻ることができる。
・ユーザ設定によっては、エッジからスワイプすると、ユーザを入れる前にピンコードまたはパスフレーズの入力を要求される。
・ウェルカムスクリーン上で、1つのエッジ(例えば左エッジ)からスワイプすると、ランチャが現れ、直接起動できるお気に入りおよび実行中のアプリが表示され、また、起動されたアプリケーションによっては、その使用のためにピンコードまたはパスフレーズの入力を要求されることがある。
・カメラアプリを起動する場合はピンコードまたはその他の認証を入力する必要はないが、電子メールクライアントでは必要である。
・ウェルカムスクリーンが表示されたら、ユーザは1つのエッジからスワイプ(例えば上エッジからのスワイプダウン)を行い、システムインジケータを表示させることができる。
・少なくともウェルカムスクリーンから、1つのジェスチャとして連続して行える1つ以上のエッジからのスワイプインを用いてデバイスにアクセスしたり、デバイスをロック解除し、お気に入りアプリコレクションの中の任意のアプリを直接開くことができる。
・デバイスをロック解除したりデバイスにアクセスするためだけの特定のロック解除動作を設けていないが、代わりに、どのロック解除またはアクセス動作も、デバイスをロック解除またはデバイスにアクセスするだけでなく、第2の目的も果たす。
・第2の目的は以下のうちの1つであってよい:アプリランチャを開く、ホーム画面またはホーム画面のアプリページを開く、検索バーを開く、1つ以上のシステム情報機能に関する情報を表示する、アプリ専用機能またはアイコンを表示する、前に開いた画面を表示する。
・デバイスをロック解除する、またはデバイスにアクセスするための汎用のアクセス制御インタラクションがない代わりに、アクセス制御インタラクションが確実に必要な機能、設定、アプリだけにしか要求されない。
・デバイスの状態に関係なく、アクセス制御インタラクションが不要で、1つのエッジジェスチャを使用するだけで開くまたは呼び出すことができるスワイプイン機能、設定、アプリは複数ある。
・ロック解除後に表示されるUIグラフィックは、アプリランチャバー、ホーム画面、1つ以上のアプリ、システムアイコン、アプリ関連機能のうちの1つである。
・左エッジからの短いスワイプインによって、少なくともユーザのお気に入りアプリを集めたランチャバーが開き、次に、ランチャバー上で指を上または下に滑らせて所望のアプリまで移動し、次に所望のアプリをコミットして(例えばアプリ上で指を離して)起動させる。
・ランチャバーはユーザのお気に入りアプリと、さらに実行中の全てのアプリとを含む。
・任意の2つ以上のエッジからスワイプすると、あらゆる画面をロック解除できる。
・任意の3つ以上のエッジからスワイプすると、あらゆる画面をロック解除できる。
・4つのエッジのいずれかからのスワイプにより、任意の画面をロック解除できる。
・画面上での1つのタッチアンドリリースというシングルジェスチャで、ロックされた画面からアプリを直接開くことができる。
・ブラウザやカメラなどといった複数のパブリック(例えばパスワードでロックされていない)アプリは、シングルジェスチャ(例えばタッチアンドリリース動作)で開くことができる。
・1つ以上のアイテムのためのクイックリストアイテムを1つのタッチアンドリリース動作で開くことができる。このアプリケーション用クイックリストは、ユーザがアプリの特徴、機能、制御に迅速にアクセスできるようにするための特殊な特徴である。
・デバイスは、ユーザがどのエッジからロック解除するかに応じて各状態へのロック解除を行う。
・メッセージリストを備えたシステム情報をロック解除すれば、ユーザは、メッセージ上をタップしてメッセージを選択し、「コールバック」または「メッセージ」ボタンをタップして、直接、コールバックまたはメッセージバックを行えるようになる。
・サウンドパラメータを備えたシステム情報をロック解除すれば、消音または音量変更を行えるようになる。
・バッテリパラメータを備えたシステム情報をロック解除すれば、充電残量を確認したり、画面の明るさを変更できるようになる。
・1つのエッジからのスワイプインは、デバイスをロック解除したり、デバイスへのアクセスを可能にし、さらに、デバイスに、特定のスワイプ開始エッジ(例えば左、右、上、下)に応じたグラフィカルユーザインターフェースオブジェクトを表示させる。
その他の態様は以下の通りである。
1つ以上のエッジからのスワイプインを検出するステップと、次に、検出したスワイプに応答して、ロック解除する、またはデバイスへのアクセスを可能にするステップとを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される方法。
1つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であり、この1つ以上のプログラムは、タッチセンシングディスプレイを備えたコンピュータデバイスによって実行されると、デバイスに、1つ以上のエッジからのスワイプインを検出させ、次に、検出したスワイプに応答して、ロック解除させる、または画面からデバイスへのアクセスを可能にする命令を備える。
[E.1 Ubuntu検索エクスペリエンス]
オンラインまたはデバイス上でのコンテンツおよびアプリケーションの検索はUbuntu UXの中枢である。検索は、「Scope」と呼ばれる、広範囲の検索およびデータプレゼンテーションツールのためのフロントエンドであるホーム画面から行う。
Ubuntu検索エクスペリエンスにはホーム画面のどのページからでもアクセスでき、これにより、そのページを実行しているScopeの検索にアクセスする。ホーム画面のホームページは、デフォルトでは、利用可能な全ての検索スコープにわたりインテリジェントな検索を行うユニバーサルな検索システムである。そのため、ホーム画面のホームページはデバイスまたはオンライン上(例えば、適当であれば、オンラインマーチャント店内。電話がネットワーク事業者から供給されている場合には、検索は事業者の店舗または関連するマーチャントからの一致を表すことも可能)であらゆるものを見つけることができる。これは、例えばアプリ、コンテンツ、ローカルに記憶されたファイル、ネットワーク上で遠隔に記憶されたファイル、サードパーティからの製品およびサービスを網羅するグローバル検索である。
Ubuntuはユーザが何を探しているか、どこで検索するのが最適かを把握する。したがって、検索バーに「Tolkien」(トールキン)と入力すると、電話、タブレットが接続している遠隔サーバが、「The Hobbit(ザ・ホビット)」、「The Lord of the Rings(ロードオブザリング)」のビデオを購入するページを送ってくる。ホーム画面はこれらの映画を公開している近隣の映画館や、さらにトールキンの著作本を表示できる。ユーザは、この各々をタップで選択して、オンラインマーチャントのウェブサイトへ行き、購入するか、または、システムが、画面上の「購入する」ボタンで購入を開始するように構成されていてよい。別の応用形は、ユーザに対して色々なオンラインマーチャントからの本などを表示して、ユーザがどのマーチャントから購入するかを選べるようになっている。
こうして、全ての検索結果が知的かつ自動的に分類されて1つの場所に表示されたが、これらは全てUbuntuオペレーティングシステムが検索したものであるので、ブラウザのようなアプリとは異なる。これは、例えば、広く使用されているブラウザSafari内で実行される非常に広く使用されているGoogleのような検索エンジンとは異なり、Ubuntuオペレーティングシステムの必須部分であるため、例えばネットワーク事業者が100%の自信を持って顧客に提供できると確信できる機能性である。Googleは、どんな場合でも、検索結果をモバイル検索に適したカテゴリに知的かつ自動的に分類することはない(さらにUbuntuはロケーションベースのフィルタリングを使用し、例えば、ユーザの現在所在地から妥当な近距離にある、トールキン原作映画を放映中の映画館のみを表示したり、その他にも、ショッピング、食べ物、飲み物、カルチャー、エンターテインメントの結果をUbuntuで同様にロケーションフィルタ処理することができる)。
Ubuntuの検索バーはホーム画面上でのアクセスし易さのために、ユーザの観点からして便利なツールである。用語「バー」は、検索を定義するユーザ入力を受信するだけのもの、および/または、結果を表示するまたは表すものまで含む、あらゆる検索関連の画面またはツールに言及するために使用される。また、バー形状のデータ入力領域を設けた画面またはツールに限定されない。
UbuntuのUIは、現在どのアプリケーションにフォーカスしていようと、1ステップのみで到達できるため、検索ツールをより効率的にする(上エッジの左部分をスワイプダウンすると、常に検索エクスペリエンスを呼び出すことができる)。特定の検索スコープを選択できるようにしているのはレンジドジェスチャである(デフォルトで、何でも検索できるHomeスコープを使用する)。
ユーザは検索したい言葉を入力したら、後はUbuntuに任せればよい。これは、例えば、検索ツールへの到達までに、ホームボタンを2回押すか、アプリページ数枚をサッとフリックするといった数ステップを経て実際のツールに到達するiOSと比較することができる。iPhoneでは、ユーザがオンラインで何かを検索したい場合、検索する言葉を入力してからさらなるステップを経る必要がある。
Ubuntu UXはスッキリとしてシンプルな外観の下で、基本的にはPCであるため、最大幅のUbuntuサービスを利用できる。例えば、(Ubuntuの)全てのアプリにはクラウドがビルトインされているため、全ての写真および設定は自動的にバックアップされ、全ての音楽はバックアップおよび検索が可能で、ログインするあらゆるUbuntuデバイスからオンラインで利用でき、さらに、1回のタップで、ウェブ上でコンテンツを共有することができる。
[E.2 Ubuntu HUD検索バー]
Ubuntu HUDは、Ubuntuのタッチアプリケーションの複雑な制御をサポートする、独特で革新的なメカニズムである。これは主に「サーチドリブンエクスペリエンス」であり、ユーザは、シンプルなタッチツールバーに入りきらないアプリケーションや、その他のクロームベース(画面上にボタンのある)のインターフェースの制御にアクセスできるようになる。このメカニズムは、従来のHUDと類似して、ユーザが集中している主な関心事から気を逸らさせることなくユーザに情報を表示するため、HUD(ヘッドアップディスプレイ)と呼ばれる。
HUDは、下エッジのレンジドジェスチャで呼び出すことができる。HUDは下エッジからアクセスされる可視(クローム)アプリケーション制御の延長であるので、これはUbuntuのアプリケーション制御のための下エッジの使用と調和する。
HUDは、最近の動作を、最新のまたは人気のある動作を履歴形式で、頻繁な動作をツールバー形式で提供し、さらに、「終了」、「やり直し」、「アプリ設定」のようないくつかの標準動作を提供する。また、アプリ機能のインテントドリブンな探索を可能にする検索機能も提供する。検索はテキスト入力または音声入力で行える。そのため、HUDでは、ユーザが「したいことを言えば」、アプリケーションが潜在的な動作を提示してくれる。
Ubuntuでは、HUDとのユーザインタラクションを測定し、検索、結果およびユーザ動作を報告し、さらに、そのデータを遠隔的に分析して、最も関連性の高い結果を優先させることが可能である。Ubuntuは、特定のユーザの過去の検索履歴に基づいて、検索結果を自動的に順序付けることもできる。HUDでは、アクションに、その影響を形成するパラメータを設けることができるため、ユーザはダイアログボックスを(例えばドロップダウンメニューから)呼び出して、この別個のダイアログボックスで作業する必要がない。ピッカ、スライダ、入力部、およびその他のウィジェットをHUDに統合すれば、上記のパラメータの入力部を提供できる。このアプローチは音声対応にすることも可能である。そのため、HUDは、従来のメニューおよび従来のダイアログボックスの機能を、Ubuntuのユニークで独特であるタッチフレンドリなメカニズムに組み込む。HUDで検索を行う場合、さまざまな実行中のアプリケーションまたはシステムサービスにおけるアクションを検索できるので便利である。HUDの上部に現れる「アプリスタック」は、現在のHUD検索と潜在的に一致する実行中のアプリケーションを示し、一致するアクションを有するアプリはどれかを示し、そのアプリに直接ジャンプする機能を提供する。ユーザは、従来どおり複数のアプリにわたって検索を行うことができるが、これに加えて、一致を表示したアプリを明確に選択できるようになる。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:ユーザを圧倒しない方法で結果を提示する(典型的に統合型の)検索への容易なアクセスをどうすれば提供できるか?」
これへの解決法は以下として一般化できる。
デバイスオペレーティングシステムにより、ユーザがホーム画面以外の画面から、タッチ画面への1つのタッチジェスチャで検索バーに到達できるスマートフォン、タブレット、またはその他のコンピュータデバイス。
Ubuntuは、さらに、ユーザ入力を追加のキーワード/辞書/用語集/シソーラスに対して一致させる「同義語あいまい一致エンジン」を使用して、検索関連性を向上させる。Ubuntuは、また、システムサービス(スクリーンショット)、ならびに実行中のアプリケーションアクションを検索することができる。
HUDの呼び出しに下エッジを使用するUbuntuのデザインは、ユーザが、タブレットのメインステージにあるアプリとサイドステージにあるアプリの両方について、同じジェスチャでHUDにアクセスできることを意味する。
[E.3 Ubuntuの検索およびHUDの主要概念]
このセクションでは、Ubuntuの検索およびHUDの主要概念を要約する。Ubuntuの検索およびHUDの主要概念は以下の通りである。
スマートフォン、タブレット、またはその他のコンピュータデバイスであって、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサにより実行されるように構成されており、また、スワイプジェスチャ検出させ、検出したスワイプジェスチャに応答して検索バーを表示させる命令を含む、オペレーティングシステムコンピュータプログラムとを備えている。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・検索バーに到達するために、まず、1つのエッジからのスワイプを開始する。
・このスワイプは左エッジからの長いスワイプであり、頂部に検索バーを設けたホーム画面を出現させる。
・検索バーにより、複数のデータソースにかけて一般検索を行うことができる。
・データソースはデバイスの内部および外部両方のものである。
・検索バーへは、上エッジからの短いスワイプダウンで到達する。
・簡易検索と、開いたアプリ内で利用できるアクションとに限定された特定の検索バーを設けている。
・検索バーに到達するには、下エッジから定義された領域までスワイプアップする。スワイプジェスチャがこの領域に届くとこの領域にアイコンまたはシンボルが表示される。
・デバイスは、定義された領域を選択したことを、例えばこの領域に届いたためにユーザが指を離したことにより検出して、開いたアプリの特徴または機能を制御するアイテムと共に検索バーを表示する。
・ユーザは、現在のアプリ内で、テキスト入力または音声制御によって特徴またはアクションを検索できる。
・検索結果は、他のアプリのどれが検索された特徴またはアクションを含んでいるかもリストする。
・検索された特徴またはアクションを含む他のアプリは1組のアイコンとして示される。
・検索で表示されたアプリへは、そのアプリのアイコンを選択することで直接ジャンプできる(例えば、検索結果から直接、起動またはアクセスできる)。
・検索で表示された1組のアプリ(これに加え、インジケータおよび他のアクションソース)は「アプリスタック」として可視化される。「アプリスタック」は、検索バーの頂部にわたって表示された1組のアプリアイコンであり、ユーザは従来どおり複数のアプリ間を検索できるが、さらに、一致が表示されたアプリを明確に選択できるようになっている。
・統合型の検索関連性は、ユーザ入力を追加のキーワード/辞書/用語集/シソーラスに対して一致させる同義語あいまい一致エンジンを使用することで向上する。
・検索結果とのユーザインタラクションを測定または分析できる、または遠隔的に分析できるため、検索結果を、過去の使用回数解析に基づいて最も関連する結果を優先するように自動的に再順序付けすることが可能である。
・検索結果を、特定のユーザの過去の検索履歴に基づいて自動的に順序付けすることが可能である。
・任意の検索についてどのアプリなどが一致したかを知得し、アプリに直接ジャンプする機能。
・ホーム画面は統合型の検索バーを設けている。
・デバイスがホーム画面を表示していない時でも、スワイプジェスチャが行われるとこれを検出できる。
・検索バーへは、下エッジからの長いスワイプアップで到達できる。
・検索バーへは、1つのエッジからスワイプ(例えば左エッジからの長いスワイプ)し、上部にアプリ検索を設けたホーム画面のアプリケージを表示させることで到達できる。
・検索バーへは、虫眼鏡などの、検索バーのアイコンからのスワイプにより到達できる。
・検索バーのアイコンは上エッジにある。
・一般検索のための検索機能は、デバイスの内部および外部両方の複数のデータソースにかけて動作し、検索結果は、例えば人物、場所、ビデオ、本、映画などの複数のカテゴリに自動的に分類され、場所、過去の検索履歴、ソーシャルグラフなどを使用してその関連性がランク付けされる。
・複数のメニュー機能または特徴を検索バーにて検索でき、検索バーを設けたユーザインターフェース領域、パネル、ウィンドウ内に表出させることができ、さらに、機能または特徴の全ての可変パラメータを、このユーザインターフェース領域、パネル、ウィンドウ内から選択または制御できるため、ユーザは(例えばドロップダウンメニューから)別個のダイアログボックスを呼び出して、この別個のダイアログボックスで作業する必要がない。
その他の態様は以下の通りである。
スワイプジェスチャを検出するステップと、検出したスワイプジェスチャに応答して、検索バーを表示させるステップとを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスで実行される、方法。
スマートフォン、タブレット、またはその他のコンピュータデバイスであって、任意または複数のメニュー機能が検索バー内に表示され、この機能の全ての変数パラメータを、検索バー内から選択または制御することができるため、ユーザは(例えばドロップダウンメニューから)別個のダイアログボックスを呼び出して、この別個のダイアログボックスで作業する必要がない。
検索にて表示された任意のアプリへ直接ジャンプできる(例えば、検索結果から直接起動またはアクセスできる)、スマートフォン、タブレット、またはその他のコンピュータデバイス。
ユーザ入力を追加のキーワード/辞書/用語集/シソーラスに対して一致させる同義語あいまい一致エンジンを使用することで統合型の計算関連性を向上させた、スマートフォン、タブレット、その他のコンピュータデバイス。
[F1 Ubuntuのホーム画面]
ランチャ(バーまたはカラムとして配置)は典型的に10個のアイコンを含んでいる。下部にはホーム画面のアイコンがある。ユーザがこのアイコンを選択すると(例えば、左エッジからの短いスワイプによりランチャをドラッグアウトし、次に、一番下の「ホーム画面」アイコンまで下に滑らせてから、ホーム画面アイコンをリリースする)、ホーム画面が表示される。アプリページに到達するには、左エッジから長くスワイプすると、電話上の全てのアプリがリストされたアプリ画面が現れる。画面上にかけて右フリックするとホーム画面が現れる。
このホーム画面は、頻繁に使用するアプリケーションのアイコン、最近の発信・着信コールのアイコン(または不在着信のアイコン、これにより、コールバックを直接開始するために不在着信をリストしたアイテムにタッチするだけで簡単にコールバックできる)を示す。ホーム画面はフルカスタマイズも可能なため、例えば、「最近追加した音楽」、新しくリリースされた映画、オンラインラジオ、Wikipedia、オンラインストアなどを含むことができる。実際には、ユーザは数百もの異なるフィルタから選択し、ホーム画面に配置できる。典型的な1つのインストールでは、ホーム画面は、ユーザが画面上でフリックアップまたはフリックダウンにより到達できる多数のセクションに分割される。このセクションには、頻繁に使うアプリ、お気に入りの人、最近連絡を取った人、最近の音楽、オンライン上で人気のビデオがある。
ここでも、中間ステップおよびエクササイズが低減されている。ホーム画面では、ユーザは、例えばコールバックしたい場合に、不在着信およびその他の最近の通話と即座にインタラクトできる;画面をフリックアップまたはフリックダウンして「最近連絡を取った人」セクションまでスクロールさせる;このセクションには不在着信の発信者名がリストされており;これにタッチすると「通話」ボタンが表示され、ユーザが「通話」ボタンにタッチすると、自動的に当該の人物への音声通話が開始する。このシンプルで効率的な工程は、電話アイコンを見つけ、タップし、最近の通話タブを見つけ、タップした後に、電話をかけたいコンタクト上をタップするというより従来的なアプローチと比較することができる。
電話の左エッジからのスワイプによりホーム画面に非常に容易に到達できるため、iOSにある専用のハードウェアホームボタンや、Androidにあるソフトボタンは必要ない。さらに、iOSやAndroidでは、ユーザがアプリケーションを切り替えたい時には常に専用のホームボタンが必要となり、ユーザは、まずホームボタンを押してアプリのグリッドを呼び出し、これをタップして選択しなければならない。しかし、Ubuntuでは、アプリの切り替えは、上述した左エッジからの1つの流動的なスワイプジェスチャで(上述のセクション「B.スワイプでUbuntuをロック解除する」参照)、または右エッジからの同様のスワイプジェスチャで(下記の「E.Ubuntuのさらなるエッジ動作」参照)行える。
ユーザはホーム画面上で側方にスワイプすると、最もよく使用する情報が現れ(例えば、最もよく通信する人のページ。各掲載者の項目にはTwitterまたはFacebookの投稿データを添付できる)、その他「最もよく聴く音楽」のページ、また「最もよく使用するアプリ」ページが現れる。ユーザは1つのジェスチャでこれらのページへジャンプできる。左エッジから画面全体を横切ってスワイプすると、インストールした全てのアプリと、利用可能なアプリとをリストしたアプリページが開く。
要するに、典型的なインストールにおいて、ホーム画面からの右スワイプによりホーム画面のアプリページへ、さらに右スワイプすることでビデオへ行くことができる。左スワイプにより「人(コンタクト)」へ、さらに右スワイプすることで音楽へ行くことができる。
アプリページには、インストールされた全てのアイコンと、ダウンロードできるアプリとが入っているため、具体的には、実行中のアプリ、頻繁に使用するアプリ、インストールされたアプリ、ダウンロードできるアプリ、のそれぞれのためのセクションが設けられている。特別なアプリストアに行く必要がなく、全てのアプリは同じ1つの場所に集められる。これは、ユーザにとって、アプリのより論理的な配布方法であるため、これによりユーザの精神的労力を低減し、体験を容易で楽なものにする。
Ubuntuはウェブ、HTML5、ネイティブアプリをサポートする。ウェブアプリ(Facebook、Gmail、Twitter、Spotifyなど)は、通知を送信し、システム特徴を使用することができる(例えば、Facebookアプリは、ローカルアプリと同様にメッセージングメニューを使用できる)。
このホーム画面特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:貴重な画面を占有し、「不動産」を覆ってしまう「ホーム」ボタンの必要をなくした上で、「ホーム」画面に到達するにはどうすればよいか?」
これへの解決法は、1つのエッジからのスワイプインにより、例えば全ての利用可能なアプリをリストしたホーム画面を表示するスマートフォン(またはその他のコンピュータデバイス)としての革新的な解決である。物理的な「ホーム」ボタンはもはや必要ない。
1つの実現では、このスワイプは左エッジからの長いスワイプインであり、ホーム画面の出現後にコミットジェスチャ(例えばリリース)を行うことで、コミット後にホーム画面が表示され、また、コミットせずに左へスワイプバックすると、ホーム画面が消える。さらなる応用形では、左エッジからの短いスワイプインにより、お気に入りアプリと、ホーム画面用の選択可能なアイコンとのランチャバーが表示され、ユーザはこのホーム画面アイコンまで指を滑らせてからリリースすることでホーム画面を選択できる。他のソフトタイプのホーム画面アイコンとは異なり、これは特に要求された時だけ呼び出されるものであり、その呼び出しと選択は非常に迅速に、流動的な片手動作で行える。
[F.2ホーム画面の主要概念]
このセクションでは、「ホーム画面」の主要概念を要約する。「ホーム画面」の主要概念は以下の通りである。
1.スマートフォン、タブレット、またはその他のコンピュータデバイスであって、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)1つ以上のコンピュータプログラムとを備え、この1つ以上のコンピュータプログラムは、コンピュータメモリに記憶され、1つ以上のプロセッサによって実行されるように構成されており、ディスプレイの1つのエッジからのスワイプインを検出し、検出したスワイプに応答して、ホーム画面を表示させる命令を含んでおり、ホーム画面は、デバイスがこの1つのエッジからのスワイプインの直前にどの画面を表示していたかに関係なく、実行中のアプリと、不在着信などのユーザ通知とをリストする。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・1つのエッジからのスワイプインによりホーム画面が表示されるため、1つのジェスチャを検出するだけでよい。
・1つのエッジからのスワイプインによりホーム画面が表示されるため、1つのジェスチャと、コミットまたは選択動作とを検出するだけでよい。
・このスワイプは左エッジからの長いスワイプである。
・左エッジからの短いスワイプによりアプリランチャが表示され、このスワイプを継続すると、ホーム画面アプリページが表示される。
・反対方向への長いスワイプが検出されると、ホーム画面が、この左エッジへ戻る反対方向へのスワイプの継続と共に徐々に排除される。
・ホーム画面コンテンツはユーザによるカスタマイズが可能である。
・ホーム画面は、最近追加された音楽、新しくリリースされた映画、オンラインストアのうちの1つ以上を含む。
・ホーム画面は不在着信通知を含んでおり、ユーザが電話アプリで作業することなく電話をかけ直せるようになっている。
・デバイスは専用の物理的な「ホーム」ボタンを設けていない。
・ホーム画面は、全てのインストール済みのアプリと、ダウンロードできるアプリとをリストしたアプリセクションを含む。
・ホーム画面から右スワイプするとホーム画面アプリページが現れ、さらに右スワイプを続けるとビデオが現れる。
・左スワイプにより、「人(コンタクト)」が現れ、さらに右スワイプを続けると音楽が現れる。
・左エッジからの短いスワイプインにより、さまざまなアプリ用のアイコンと、ホーム画面用のアイコンとを含んだランチャバーが表示される。
その他の態様は以下の通りである。
ディスプレイの1つのエッジからのスワイプインを検出するステップと、検出したスワイプに応答して、該エッジからのスワイプイン直前にデバイスがどの画面を表示していたかに関係なく、実行中のアプリと、不在着信などのユーザ通知とをリストしたホーム画面を表示するステップとを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される方法。
[G.1 Ubuntu「サイドステージ」]
Ubuntuは、電話アプリをタッチ画面(タブレット、またはタッチPC)の右エッジにユニークに配置する。これにより、電話にタッチするタイプのアプリケーションと全く同じ方法で、右手および親指によりタッチできる電話と同様のスペースが得られる。タブレットと電話とのアプリの右手感覚は同一である。タブレットおよび電話画面の右上にインジケータが表示される。電話と同様のスペース(「サイドステージ」と呼ばれる)はあらゆる実行中のアプリ(あらゆる電話アプリを含む)を表示できるため、1つのアプリを実行中のメインセクションと、別のアプリ(例えば電話アプリ)を実行中のサイドステージという、ディスプレイの2つのセクションにかけてのマルチタスキングが可能であり、サイドステージは図中では第1アプリに重なって示されているが(例えば、下にある、メインセクションで実行中のアプリのある部分がちょうど可視化されるよう、サイドステージに半透明効果が付加されている)、あるいは分割画面形式で示すこともできる。さらに、サイドステージはスマートフォン画面と同じ形式および比率を持つため、電話アプリをサイドステージ内で正確に実行するためにスケーリングまたは形式変更をする上での問題はない。
さらなる特徴として、電話画面の右エッジ動作を「1つ前のアプリ」として(つまり、右エッジからの短いスワイプにより、ユーザが使用していたアプリが表示される)、また、タブレット上では「電話スペースを表示」として(つまり、タブレット上の右エッジからの短いスワイプにより「サイドステージ」が表示される)定義し、あるいは、このスワイプをさらに継続すると、電話スペース内に表示されているものの上に、またはこれに置き換えて、1つ前のアプリが表示される。これにより、電話とタブレットの右エッジの整合性が得られ、いずれの場合でも右エッジからのスワイプにより使用していた1つ前のアプリが表示される。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:どうすれば、電話アプリケーションをタブレットまたはタッチPC環境の一部として上手く実行させることができるか?
これへの解決法は、右エッジからのスワイプインに応答して、電話アプリが、右エッジのスペース内、またはデバイス(タブレットまたはタッチPC)側部の全体的に矩形(または電話形状)のスペース内に表示される、タブレットまたはPCのようなコンピュータデバイスとして一般化できる。これにより、電話にタッチするタイプのアプリケーションと全く同じ方法で、アプリを右手および親指でタッチできるようになる。
[G.2 サイドステージの主要概念]
このセクションでは、「サイドステージ」の主要概念を要約する。「サイドステージ」の主要概念は以下の通りである。
タブレットまたはPCのようなコンピュータデバイスは、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサによって実行されるように構成されており、右エッジからのスワイプインを検出すると、これに応答して、1つ以上のアプリ、ユーティリティ、機能を、デバイス右側のウィンドウ、ウィンドウ枠、領域内に表示させる命令を含む、1つ以上のコンピュータプログラムとを備えている。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・ウィンドウ、ウィンドウ枠、領域は、電話ディスプレイ形状のような矩形である。
・ウィンドウ、ウィンドウ枠、領域(「サイドステージ」と呼ばれる)は実行中のアプリ(任意の電話アプリを含む)、ユーティリティ、機能を表示できるため、ディスプレイの2つのセクションにかけてのマルチタスキングが可能である。
・メインセクションは1つのアプリを、サイドステージは別のアプリまたはユーティリティまたは機能を実行する。
・メインセクションは、ビデオプレーヤ、ウェブブラウザ、ワードプロセッサのようなプロダクティビティアプリケーション、ソーシャルネットワークアプリ、検索エンジンのうちのいずれかを実行し、サイドステージは、テキストメッセージングアプリ、電話ダイヤラ機能、電子メールアプリ、インスタントメッセンジャ、システム設定ユーティリティのうちのいずれかを実行する。
・サイドステージはスマートフォン画面と同じ形式および比率を持つため、電話アプリをサイドステージ内で実行するためにスケーリングまたは形式変更をする上での問題はない。
・アプリは電話アプリである。
・矩形スペース内で実行中のアプリは、メインセクション上で実行中のアプリに重なっている(半透明効果により可視)。
・画面は2つのセクションに分割され、その各々が異なるアプリを実行している。
・右エッジからのスワイプにより、ウィンドウ、ウィンドウ枠、領域が表示される。
・この右エッジからのスワイプを継続すると、1つ前のアプリが表示される。
その他の態様は以下の通りである。
方法は、右エッジからのスワイプインを検出すると、デバイスの右側にあるウィンドウ、ウィンドウ枠、領域内に1つ以上のアプリ、ユーティリティ、機能を表示するステップを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される。
先のセクションでは、電話およびタブレット向けのUbuntuに注目した。しかし、Ubuntuの重要な属性は、電話からタブレット、デスクトップ、テレビへスムーズにスケーリングするインターフェースを備えたシングルオペレーティングシステムである。
[H.1 スケーラブルで反応性の高いUbuntu UI]
タッチイネーブル形式のUbuntuは、1つの統合型のUbuntuオペレーティングシステムにかけて動作しているインターフェースファミリを補足して完成させる。このインターフェースには以下がある。
・Ubuntu TV−シンプルな(6ボタン、4エッジ)遠隔制御部とのある距離でのインタラクションに理想的である。
・Ubuntuデスクトップ−キーボードと、マウスまたはトラックパッドのようなポインタとを使用した、コンテンツおよび本格的な計算タスクの作成に理想的である。
・Ubuntuフォンおよびタブレット−タッチ式の片手(電話)または両手(タブレット)操作に理想的であり、豊富なデスクトップアプリケーションにアクセスする明確なメカニズムを備える。
このユーザインターフェースファミリのコンバージェント(集束型)設計の大きな恩恵は、1つのOSで全てのフォームファクタに適切なインターフェースを提供できることにより、適切なアクセサリにドッキングさせた別のフォームファクタに代わりのインターフェースを提供するコンバージェンスデバイスの作成が可能になることである。
さらに、多数の異なるデバイスタイプで実行できる、または、デバイスを別のフォームファクタインターフェースを呈する手段を提供するアクセサリにドッキングさせた場合に、1つの形式から別の形式へスムーズに遷移できる、1つのアプリケーションを書くこともできるようになる。これにより、例えば、スマートフォンまたはタブレットをキーボード、マウス、ディスプレイに接続すればPCとして使用でき、スマートフォンまたはタブレットが従来のPCの全ての計算リソースを提供するようになるので、全ての電話およびPC機能を提供する1つのデバイス(我々はこれを「スーパーフォン」カテゴリと呼ぶ)を企業顧客に提供することが可能になる。
したがって、Ubuntuスーパーフォンまたはタブレットは、統合型のシンクライアント機能によるWindowsアプリケーションへのアクセスの提供を含む、充実したコンプリートなデスクトップ環境を提供できる。
シングルバージョンのオペレーティングシステムは多数のデバイス間で使用でき、必要なデバイスの総数が少なくなるため、コンバージェントなデバイスにより、複雑性と、さらに管理、試験、サポートの経費とが大幅に減少する。オペレーティングシステムのコンバージェンスはフラグメンテーション(断片化)を防ぐ。例えば、Windowsエコシステムでは、互換性の度合いと管理処理がそれぞれ異なるWindows PC、WindowsRT、Windows Phoneを用いる。
コンバージェントデザインとは、これら全てのデバイス上で実行されるUbuntuが、PC OS(オペレーティングシステム)のフル機能を備えることを意味する。そのため、Ubuntuフォンのアプリは、CPUの全コアと、電話のGPUフルネイティブなOpenGL(オープングラフィックスライブラリ(Open Graphics Library))およびGPU(グラフィック処理ユニット)のOpen GL ES(組み込みシステム用のOpenGL)とを、これらがUbuntuPCアプリケーションであるかのように利用することができる。これに対し、iOSおよびMacOS用に書かれたアプリは、大きく異なる制約、ツール、機能に直面する。
Ubuntuのアプローチは、全てのデバイスタイプ向けの同一の、統合型オペレーティングシステムと、各カテゴリに最適化され、しかし多くの共通した特徴を共有する、整合性のあるインターフェースファミリといった、コンバージェンスの恩恵を例証する。全てのデバイスタイプ向けの1つの統合型OSの技術的恩恵は、アプリ開発者(アプリケーションを書き、電話、タブレット、デスクトップ、テレビ、およびその他のあらゆるコンピュータデバイス上で実行することができる人物)と、大企業顧客およびネットワークオペレータ(サーバ、クラウド、デスクトップ上のUbuntuに既に使用しているものと全く同じツールを使用してUbuntuフォンを管理できる人物)にとって特に魅力的である。
UbuntuのUIは、電話、タブレット、PC、テレビといった一連のフォームファクタ間で変換される際に明確でユニークな恩恵をもたらす特別な方法でアレンジされている。これらのフォームファクタの各々における、インジケータ、メニュー、ランチャ、通知、サイドステージ、画面のエッジの使用といったアイテムの配置は、一連のフォームファクタ全体について最適に一貫している。このアレンジメントにより、デバイスは1つのフォームファクタ(例えばタブレット)から別のフォームファクタ(例えばPC)へ、アイテムの配置および動作における歪みまたは変更が最小な状態で、変換することができる。
ユーザエクスペリエンスを考慮すれば、Ubuntu UIが、外観やコントロールを変更することなく複数のデバイス間でスケーラブルであり、Ubuntu製品全体にわたり一貫性が維持されるという明確な利点がある。ユーザは、デバイス上のインターフェースについて学んだ後は、何の労力もなく別のデバイス上での作業に進むことができるため、独自の制御を持ったまた別のインターフェースについて学ぶための時間を節約でき、その結果、全体験がユーザフレンドリーで効率的なものとなる。
デバイス間でインターフェースの外観が同一なだけでなく、実際のシステムも同一である。電話をコンピュータとして使用できることはスマートかつ便利であり、ユーザは何処にいようと必要なものを簡単に表示させられるようになる。
この特徴は、問題とその解決に関連して書き直すことが可能である。
「課題ステートメント:電話から、タブレット、デスクトップ、テレビまでスムーズに調整できるUIをどのようにデザインするか?」
「スムーズな調整」とは、UIが電話からタブレット、デスクトップ、テレビへと拡大する際の、UIのエレメントの提示または配置における歪みまたは変更のことである。これへの解決法は、電話からタブレット、ラップトップ、デスクトップ、テレビへスケーリングしても、特定の中心的なインタラクション要素が同じ画面位置に維持されることで、全ての画面サイズおよびデバイスタイプにわたり一貫したUIを提供するコンピュータデバイスとして一般化できる。
主要なインタラクション要素は以下を含む。
・ランチャバー(左エッジの縦方向下に向かって位置し、左エッジからの短いスワイプインにより現れる)。そのため、アプリケーションランチャは全てのフォームファクタ(電話、タブレット、テレビ、PC)において常に左側にある。この左エッジは電話上では長いエッジ、タブレットおよびデスクトップ上では短いエッジであるが、しかし、電話とタブレットのいずれを使用する場合でも、この左エッジは何かを始めるのに一般的に最も直感的に快適な場所である。
・HUD検索バー(上部にわたって水平に位置しており、ホーム画面を選択すると現れる)。
・右上のシステムインジケータアイコン。
・右エッジにはインタラクション要素を置かないまま保つ(例えば、タブレットに電話アプリを実行するための「サイドステージ」範囲を収納するため、上述の「G.1 Ubuntuサイドステージ」を参照)。
この構成は、全てのフォームファクタ(スマートフォン、タブレット、デスクトップ、テレビ)にわたって一貫している。
[H.2 Ubuntu UIにおける解像度独立]
Ubuntuを実行するデバイスは、サイズが小型の電話から50インチのテレビまで、解像度が低解像度の電話から高解像度のモニタまたはタブレットまでと多様である。
これらのデバイスは解像度と画素密度も非常に多様で、解像度320×240〜3840×2160、画素密度100〜400dpi以上となっている。
Ubuntuは、これらのサイズと解像度にわたるUIに対応しており、一定のエクスペリエンスを維持するためのフレームワークを備えている。これは、UI要素の整合性を整える助けとなるのに十分高い解像度独立単位を定義することで為される。
ディスプレイはグリッド内で水平、垂直方向の両方に分割されており、UI要素サイズは、画素ではなくグリッドユニット(単位dp(x))で共通に定義される。
画素密度および視距離に応じて、各デバイスは、システム設定グリッドユニットに対する実画素の一意な独自の比率を持つ。
例えば、解像度1280×720のディスプレイを搭載した4.7インチの電話では、18画素/グリッドユニットとなる。解像度2560×1600、10インチのタブレットでは、20画素/グリッドユニットとなる。解像度1920×1080、5インチの電話では、27画素/グリッドユニットとなる。正確な画素/グリッドユニット設定は、各々の特定のデバイスについて個別に定義される。
デバイスのサイズおよび配向に応じて、グリッドユニットのロウとカラムの数は異なる。例えば、縦位置にある電話では典型的に40カラム、横位置にある、解像度2560×1600の10インチのタブレットには128カラムである。
当社のUI要素は、実画素でのサイズの定義を避けることにより、デバイス間で自動的なスケーリングを可能にし、デバイス間で類似した外観の大きさを維持する。さらに、グリッドユニットは物を均等に整列する助けも行い、見た目に心地よい形で整列した、均等な余白、UI要素の大きさおよび位置を定義し易い。
最後に、グリッドは、デザイナとで開発者が連絡を取り合う場合に重要である。アプリデザイナは、既にグリッドが定義された当社のテンプレートの1つを使ってデザインを開始すれば、全てのUI要素をグリッドに整列させることができる。デザインソフトウェアでのデザインが完成したら、グリッドをオーバレイ表示したデザインを保存することで、グリッドユニットにおける各要素の大きさと位置が明瞭に示されるため、開発者向けに詳細な仕様を書く必要がない。これにより、開発者の視点から見たUI実現における誤差を減らすことができる。
[H.3 デザインアセットの自動スケーリング]
当社のフレームワークでは、ベクトルアセットとビットマップアセットのどちらも使用することができる。ベクトルアセット(SVG−スケーラブルなベクトルグラフィック)は、本来、解像度独立であり、あらゆる大きさおよび解像度に完璧にスケーリングされる。
ビットマップアセットの場合は、超高解像(30px/gu)のオリジナルのビットマップアセットの組を1つだけ作成し、このアセットを「filename@30.png」として保存する。当社のフレームワークは、これらを各デバイスに合った正確な画素密度にまで(高品位のフィルタリングアルゴリズムを使用して)自動的に縮小するため、開発者は1組のアセットを準備するだけでよい。
しかしながら、数種類のディスプレイに異なるレベルの詳細を用意したい場合にはそれも可能であり、また、異なるpx/GU比率のアセットを別々に(すなわち、asset1@12.png、ASset1@18.png、ASset1@30.pngのように)保存することができる。フレームワークは現在のデバイスのpx/GU設定に最も近いファイルを自動的に選び、必要であればこのpx/GUに正確に合致するようにスケーリングを行う。
[H.4 スケーラブルUIの主要概念]
このセクションでは、スケーラブルUIの主要概念を要約する。スケーラブルUIの概念は以下の通りである。
(a)ディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサにより実行されるように構成されており、スマートフォンからタブレット、ラップトップ、デスクトップ、テレビまでのデバイスサイズスケールと同じ画面位置に留まるようにデザインされたUI要素を生成せよとの命令を含み、全ての画面サイズおよびデバイスタイプにわたって一貫したUIを提供する、1つ以上のコンピュータプログラムとを備える、コンピュータデバイス。
オプションによるこれ以外の実現特徴は以下を含み、その各々は他の任意の特徴と組み合わせることができる。
・中心的なインタラクション要素は、関連するアプリを開く、または関連するアプリに切り替えるように選択できるアプリアイコンが含まれたランチャバーを含む。
・ランチャバーは、左エッジに下に向かって縦に位置決めされており、左エッジからの短いスワイプインによって現れる。
・中心的なインタラクション要素は検索バーを含む。
・検索バーは画面上部に水平方向に位置決めされている。
・検索バーはホーム画面を選択することで現れる。
・ホーム画面は、デバイスの左エッジからの長い(例えば特定の長さよりも長い)スワイプが検出されると表示される。
・中心的なインタラクション要素はシステムインジケータアイコンを含む。
・システムインジケータアイコンは画面の上エッジにある。
・中心的なインタラクション要素は、右エッジにインタラクション要素を置かずに維持する。
その他の態様は以下の通りである。
デバイスサイズがスマートフォンからタブレット、ラップトップ、デスクトップ、テレビとスケーリングする際に、画面位置に留まるようにデザインされたUI要素を生成するステップと、対応する全ての画面サイズおよびデバイスタイプにわたり一貫したUIを提供するステップとを備え、タッチセンシティブディスプレイ装備のコンピュータデバイスにて実行される方法。
スマートフォン、タブレット、またはその他のコンピュータデバイスであって、
(a)タッチセンシティブディスプレイと、
(b)1つ以上のプロセッサと、
(c)コンピュータメモリと、
(d)コンピュータメモリに記憶されており、1つ以上のプロセッサにより実行されるように構成されており、画面解像度に関係のない論理グリッドユニットサイズを使用してデザインされたUI要素を生成させる命令を含む、1つ以上のコンピュータプログラムとを備える。
・画素密度および視距離に応じて、各デバイスは、そのデバイスのシステム設定で定義された論理グリッドユニット毎の一意の比率を有する。
上述のステップ、技術、処理は、標準的な周知のプログラミング技術を用いて実現できる。上述の実施形態の新規性の一部は、特定のプログラミング技術にあるのではなく、上で述べた結果を達成するための既述のステップ、技術、処理にある。本発明の一部を形成するソフトウェアプログラミングコードは、典型的に永久的な非一時的記憶デバイスに記憶されている。ソフトウェアプログラミングコードは、ディスケット、ハードドライブ、CD ROMのようなデータ処理システムと併用されるさまざまな従来の媒体のいずれかにおいて具現化できる。このコードは、このような媒体上で配布されるか、または1つのコンピュータシステムのメモリまたは記憶デバイスから何らかのネットワーク上で他のコンピュータシステムへ配布され、このシステムのユーザによって使用されてよい。ソフトウェアプログラムコードを上で具現化する技術および方法、および/または、ソフトウェアコードをネットワーク上で配布する技術および方法は周知であるため、ここではこれ以上説明しない。
例証の要素のそれぞれは、および例証における要素の組み合わせは、特定の機能またはステップ、技術、処理を実行する汎用ハードウェアおよび/または専用ハードウェアベースのシステムによって、あるいは、汎用ハードウェアおよび/または専用ハードウェアの組み合わせ、さらにコンピュータ命令とによって実現できることが理解されるだろう。
これらのプログラム命令をマシン製造のためにプロセッサに提供することで、プロセッサ上で実行される命令が、例証で特定した機能を実現する意味を作り出す。コンピュータプログラム命令は、プロセッサ上で実行されるこの命令が、例証で特定した機能を実現するステップを提供できるようにするために、プロセッサによって実行される一連の演算ステップにコンピュータ実現処理を生成させるように、プロセッサにより実行される。したがって、図面は、特定した機能を実行する手段の組み合わせ、特定した機能を実行するステップの組み合わせ、特定した機能を実行するプログラム命令手段をサポートする。
[I.図面に関連した詳細な説明]
携帯型コンピュータデバイス(例えば、タブレットコンピュータまたはスマートフォン)などのコンピュータデバイスの画面上のアプリケーションのためのユーザインターフェースの中心的なレイアウトを提供する。画面の上部にメニューバーを設けている。メニューバーの下に、ページタイトルが含まれたヘッダを設けている。ヘッダの下にデバイダを設けている。デバイダの下にコンテンツエリアを設けている。全面表示では、画面の下部にツールバーを設ける。中心的なレイアウトは視覚的な識別子を提供する。図1に一例を示す。
ユーザインターフェースの中心的なレイアウトは、電話からタブレット、PC、テレビまでのデバイスにわたり反応的かつスケーラブルであってよい。多様な画面サイズの複数のデバイス(例えば、テレビ、ラップトップ、タブレット、スマートフォン)上で使用するように適合されたユーザインターフェースの一例を図2に示している。
大きさと解像度が異なるデバイスにわたりユーザインターフェースの均等なエクスペリエンスを得るために、特別なフレームワークを提供する。測定に画素を使用する代わりに、本デバイスはグリッドに分割されており、ユーザインターフェース(UI)要素の大きさはグリッドユニット内に共通に定義される。画素密度と視距離に応じ、各デバイスは独自で一意のグリッドユニット毎の実画素の比率を有する。これにより、ユーザインターフェースに解像度独立が得られる。
電話ユーザインターフェースの例では、下部コントロールが提供される。一例では、画面のしたエッジからの短いスワイプアップにより、ブラウザの下部コントロール(例えば「戻る」、「進む」)が現れる。ユーザインターフェース画面の一例を図3に示す。さらなる例(A)、(B)を図4に示す。これらはどちらも接触のビューに関連する。画面下エッジからのスワイプアップにより、下コントロール(例えば「戻る」、「編集」)が現れる。下コントロールはピクチャビューにも提供することができ、画面下エッジからの短いスワイプアップにより現れる。
タブレットのユーザインターフェースの例では、下コントロールが設けられている。一例では、ブラウザの下コントロール(例えば「戻る」、「進む」)は、画面下エッジからの短いスワイプにより現れる。また、一例では、ギャラリーの下コントロール(例えば「戻る」、「進む」)は、画面下エッジからの短いスワイプアップにより現れる。図5に一例を示す。一例では、ピクチャビューの下コントロールは、画面下エッジからの短いスワイプアップにより現れる。サイドステージ内の会話ビューの下コントロールは、画面下エッジからの短いスワイプアップにより現れる。
検索可能な命令インターフェースが提供される。このメカニズムは、従来のHUDと同様、ユーザに対し、集中している主な関心事から移動させることなく情報を表示できるので、HUD(「ヘッドアップディスプレイ」)と呼ばれる。一例では、HUDはスマートフォンに提供されている。一例では、アプリのHUDに到達するには、画面下からのスワイプアップにより、下コントロールおよびHUDアイコンを表示させる。HUDアイコン上で指をリリースすると、HUDと、その利用可能な特徴、例えばアプリケーション内のコントロールまたはアクションを検索するための特徴とが現れる。HUDを再び隠すには、HUDの頂部からスワイプダウンする。図6に一例を示す。図6は、(A)から(E)までの一連のデバイス画面構成を示している。図6の例では、(A)においてディスプレイは画像を含む。(B)では、画面下からのスワイプアップに応答して、下コントロールとHUDアイコンが表示される。HUDアイコン上で指を離すと、(C)のHUDインターフェースが表示される。HUDインターフェースはユーザのスワイプに応答して下方へ移動するので、ユーザが画面上からスワイプすると、HUDが(D)に示すように隠れる。(E)では、(A)の画面が戻っている。
一例では、HUDがタブレットに提供される。アプリのHUDに到達するには、ユーザはまず画面下からスワイプアップして、下コントロールとHUDアイコンを表示させる。HUDアイコン上で指を離すと、HUDと、その利用可能な特徴、例えば色バランスの変更とが現れる。HUDを再び隠すには、HUDの頂部からスワイプダウンする。図7に一例を示す。図7は、一連のデバイス画面構成(A)〜(D)を示す。図7の例では、ディスプレイは(A)の画像を含む。(B)では、画面下からのスワイプアップに応答して、下コントロールと、さらにHUDアイコンとが表示される。HUDアイコン上で指を離すと、(C)にて画面の左手側にHUDインターフェースが現れる。(D)では、HUDインターフェースはユーザのスワイプに応答して下方へ移動するので、ユーザが画面頂部からスワイプすると、画面がHUDを隠し始める((D)画面の画像が(A)〜(C)と比べ90度回転する)。最後の画面(図示せず)では、(A)の画面が戻る。
一例では、スマートフォン、タブレット、ラップトップ、デスクトップ、モニタ、テレビ画面といったデバイスにHUDが提供される。HUDでは、ユーザは、現在のアプリの特徴を、テキスト入力または音声制御のいずれかなどによって検索する。検索により、何か利用可能であるかが表示されるが、この特徴が、開いているその他のアプリのうちのどのアプリで利用できるのかも示される。同じ特徴を持ったその他のアプリを示すために、ユーザインターフェースは、HUDの頂部に1組のアイコンとして見られるアプリスタックを使用できる。図8に一例を示す。図8は、検索入力ボックスとアプリスタックを示している。
検索機能が提供される。一例では、ホーム画面の左上の角からスワイプダウンすると検索が下りてくる。図9Aに一例を示す。ここから、ローカルな検索と、インターネット上でのグローバルな検索の両方を実行できる。検索結果は、概覧し易くするために適切なカテゴリに編成される。図9Bに、編成された検索結果の例を示す。
スマートフォン用のホームページが提供される。ホームページは、ホームページをスクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内へ戻されるとこの領域が再び拡張するものであってよい。ホームページは、画面で右から左へスワイプするとアプリページが現れ、左から右へスワイプするとソーシャルスコープが現れるものであってよい。図10にその一例を示しており、ここでは、(B)内の折り畳まれた領域「お気に入りの人」から離れるべくスクロールダウンすると、(A)内の「お気に入りの人」領域が折り畳まれる。
タブレット用のホームページが提供される。ホームページは、ホームページをスクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内へ戻されるとこの領域が再び拡張するものであってよい。ホームページは、画面の右から左へスワイプするとアプリページが現れ、左から右へスワイプするとソーシャルスコープが現れるものであってよい。図11にその一例を示しており、ここでは、(B)内の折り畳まれた領域「お気に入りの人」から離れるべくスクロールダウンすると、(A)内の「お気に入りの人」領域が折り畳まれる。
スマートフォン用のアプリページが提供される。アプリページは、アプリページをスクロールダウンするとビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内へ戻されるとこの領域が再び拡張するものであってよい。アプリページは、画面を右から左へスワイプするとビデオページが現れ、左から右へスワイプするとホームページが戻るものであってよい。
タブレット用のアプリページが提供される。アプリページは、スクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。アプリページは、画面を右から左へスワイプするとビデオページが現れ、左から右へスワイプするとホームページが戻るものであってよい。図12にその一例を示しており、ここでは、(B)内の折り畳まれた領域「実行中のアプリ」から離れるべくスクロールダウンすると、(A)内の「実行中のアプリ」領域が折り畳まれる。
スマートフォン用のビデオページが提供される。ビデオページは、スクロールダウンするとビュー外にスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。ビデオページは、画面で左から右へスワイプするとアプリページが戻るものであってよい。
タブレット用のビデオページが提供される。ビデオページは、スクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。ビデオページは、画面で左から右へスワイプすると、アプリページが戻るものであってよい。図13にその一例を示しており、ここでは、(B)内の折り畳まれた領域「最近」から離れるべくスクロールダウンすると、(A)内の「最近」領域が折り畳まれる。
スマートフォン用のソーシャルスコープページが提供される。ソーシャルスコープページは、ソーシャルスコープページをスクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。画面を左から右へスワイプすると、ミュージックページが現れる。右から左へスワイプすると、ホームページが戻る。図14にその一例を示しており、ここでは、(B)内の折り畳まれた領域「最近連絡を取った人」から離れるべくスクロールダウンすると、(A)内の「最近連絡を取った人」領域が折り畳まれる。
タブレット用のソーシャルスコープページが提供される。ソーシャルスコープページは、スクロールダウンすると、ビュー外へスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。画面を左から右へスワイプするとミュージックページが現れる。右から左へスワイプするとホームページが戻る。図15にその一例を示しており、ここでは、(B)内の折り畳まれた領域「お気に入り」から離れるべくスクロールダウンすると、(A)内の「お気に入り」領域が折り畳まれる。
スマートフォン用のミュージックページが提供される。ミュージックページは、スクロールダウンすると、ビュー外にスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。画面を右から左へスワイプすると、ソーシャルスコープ画面が戻る。図16にその一例を示しており、ここでは、(B)内の折り畳まれた領域「最近」から離れるべくスクロールダウンすると、(A)内の「最近」領域が折り畳まれる。
タブレット用の音楽ページが提供される。ミュージックページは、スクロールダウンすると、ビュー外にスクロールされた領域が折り畳まれ、スクロールバックでビュー内に戻されるとこの領域が再び拡張するものであってよい。画面を右から左へスワイプすると、ソーシャルスコープ画面が戻る。図17にその一例を示しており、ここでは、(B)内の折り畳まれた領域「最近」から離れるべくスクロールダウンすると、(A)内の「最近」領域が折り畳まれる。
スマートフォン用のメッセージページが提供される。ユーザは、画面右上のメッセージアイコンから指でスワイプダウンすることで、メッセージリストを下ろすことができる。図18にその一例を示しており、メッセージアイコンを指でスワイプダウンすると、(A)から(I)への一連の動作でメッセージリストが下りてくる。
タブレット用のメッセージページが提供される。ユーザは、画面右上のメッセージアイコンから指でスワイプダウンすることで、メッセージリストを下ろすことができる。図19にその一例を示しており、メッセージアイコンを指でスワイプダウンすると、(A)から(B)への一連の動作でメッセージリストが下りてくる。
スマートフォン用のメッセージページが提供される。メッセ―ジページはメッセージインタラクションを提供できる。例えば、ユーザはドロップダウン式メッセージリストから、不在着信に直接コールバックする、メッセージを書く、または予め作成しておいた返信を用いてクイックリプライを送信することを選ぶことができる。メッセージリストからは、不在着信のskype通話およびメッセージ、電子メール、Facebookメッセージを含む(しかしこれに限定されない)数種類のメッセージに返信することができる。図20にその一例を示し、ここでは、クイックリプライでの送信用に選択できる予め作成されたメッセージのリストを示している。
タブレット用のメッセージページが提供される。メッセージページはメッセージインタラクションを提供できる。例えば、ユーザはドロップダウン式メッセージリストから、不在着信に直接コールバックする、メッセージを書く、または予め作成しておいた返信を用いてクイックリプライを送信することを選ぶことができる。メッセージリストからは、不在着信のskype通話およびメッセージ、電子メール、Facebookメッセージを含む(しかしこれに限定されない)数種類のメッセージに返信することができる。一例では、ユーザは電子メールに返信することができる。
スマートフォン用のメッセージページが提供される。アコーディオン機能を設けることで、メッセージを選択すると、その上および/または下のメッセ―ジが押し出されて、返信を構成する範囲のスペースを空けることができる。図21にその例を示す。一例では(例えば(A)を参照)、ユーザが選択できるテキストメッセージの送信またはコールバックの範囲が拡大する。一例では(例えば(B)を参照)、テキストメッセージを入力するためのテキストボックスが、メッセージリストのうちの1通のメッセージ内に開かれる。さらなる例では、予め作成された返信のリストをクイックリプライテキストの中から選択できる範囲が開かれる。
タブレット用のメッセージページが提供される。アコーディオン機能を設けることで、メッセージを選択すると、その上および/または下のメッセ―ジが押し出されて、返信を構成する範囲のスペースを空けることができる。一例では、ユーザが選択できるテキストメッセージの送信またはコールバックの範囲が拡大する。一例では、テキストメッセージを入力するためのテキストボックスが、メッセージリストのうちの1通のメッセージ内に開かれる。さらなる例では、予め作成された返信のリストをクイックリプライテキストの中から選択できる範囲が開かれる。
スマートフォン用のノートページが提供される。アコーディオン機能を設けることで、ノートをタップすると(アコーディオンのように)拡大し、容易に編集できるようになる。図22にその一例を示す。図22では、一連の(A)から(C)までにおいて、ノートをタップすると拡大し、ノートコンテンツを編集するためのタッチ画面キーボードが提供される。
タブレット用のノートページが提供される。アコーディオン機能を設けることで、ノートをタップするとアコーディオンのように拡大し、容易に編集できるようになる。ノートをタップすると拡大し、ノートコンテンツを編集するためのタッチ画面キーボードが提供される。図23にその一例を示す。図23では、一連の(A)から(B)までにおいて、ノートをタップすると拡大し、ノートコンテンツを編集するためのタッチ画面キーボードが提供される。
スマートフォン用の会話領域ページが提供される。1つの実現では、会話領域ページは不在着信およびメッセージを示す。図24の(A)にその一例を示す。代替的な実現では、SMSメッセージングが、メッセージングという独自のアプリケーションに分割し、それ以上、通話を会話履歴の一部として表示しなくなる。図24の(B)にその一例を示す。タブレット用の会話領域ページが提供される。1つの実現では、会話領域ページは不在着信とメッセージを示す。
スマートフォン用のランチャバーが提供される。ランチャバーは電話の全てのビュー、つまりウェルカムスクリーン、ホーム画面、アプリ内部から利用できる。ランチャバーは画面左エッジからの短いスワイプで現れる。指をアプリアイコン上で保持すると、そのアプリの名称が現れる。ランチャバーはお気に入りおよび開かれたアプリを示すことができる。図25にその一例を示す。図25では、一連の(A)から(D)は、画面左エッジからの短いスワイプにより現れたランチャバーの一例を示す。図26にその一例を示す。図26では、一連の(A)から(C)は、スクロールダウン((A)〜(B))と、アプリの名称が現れたアプリアイコン((B)〜(C)、この例では「電話」アプリのもの)とのランチャバーの一例を示す。
スマートフォン用のランチャバーが提供される。代替的な実現では、ランチャアイコンを長押しすることで、アプリの名称が示され、さらにクイックリストも示すことができる。図27にアプリ「ブラウザ」の一例を示す。ランチャからランチャアイコンを消すためのオプションを設けることができる。さらに、アイコンを長押し、これをランチャ内の新たな場所へドラッグアンドドロップすることで、ランチャアイコンを再配列することが可能である。
タブレット用のランチャバーが提供される。ランチャバーはタブレットの全てのビュー、つまりウェルカムスクリーン、ホーム画面、アプリ内部から利用できる。ランチャバーは画面左エッジからの短いスワイプで現れる。指をアプリアイコン上で保持すると、そのアプリの名称が現れる。図28にその一例を示す。ランチャバーはお気に入りおよび開かれたアプリを示すことができる。
スマートフォン用のランチャバーが提供される。アプリ間で戻ることができる。お気に入りのアプリケーションを開始するには、ランチャバーからアプリケーションを選ぶ。1つ前のアプリに戻るには、画面を右エッジから側方へスワイプする。図29に、(A)から(E)までの一連の画面画像を呈したその一例を示す。(A)で、ユーザはランチャバーから「ノートパッド」アプリケーションを選ぶ。(B)で、画面がノートパッドアプリケーション画面の出力を表示する。(C)で、ユーザは画面を右エッジから側方へスワイプして1つ前の「イベント」アプリケーションに戻る。(C)、(D)では、1つ前の「イベント」アプリケーションから出力された画面が、画面右側から戻って来ている。(E)では、「イベント」アプリケーションから出力された画面を示している。
スマートフォン用のナビゲーション機能が提供される。実現において、ユーザはヘッダ(例えば「コンタクト」と表示されている部分)内で指を水平方向にスワイプすると、ユーザの単純な指のタップにより画面間の移動および変更を補助するナビゲーション機能画面が表示される。図30に一連の(A)〜(B)の一例を示す。ここではコンタクト画面がコンタクト画面用のコール画面に変更している。
スマートフォンまたはタブレット用の左エッジスワイプ機能が提供される。電話とタブレットの両方で、ホーム画面にある時を除き、画面左エッジからの長いスワイプによりアプリページが現れる。図31に一連の(A)〜(B)の一例を示す。
スマートフォン用の右エッジスワイプ機能が提供される。ウェルカムスクリーンの表示中に、画面右エッジからの左スワイプによりホームページが表示される。図32に一連の(A)〜(D)の一例を示す。ウェルカムスクリーンを除く全てのビューにおいて、画面右エッジからの左スワイプにより、1つ前に使用していた、開かれた状態のアプリが現れる。
タブレット用の右エッジスワイプ機能が提供される。電話上での場合は、画面右エッジからの左スワイプにより1つ前に使用していた、開かれた状態アプリが、タブレットのサイドステージ内に現れる。ウェルカムスクリーンを除く、また、サイドステージの表示中を除く全てのビューにおいて、画面右エッジからの左スワイプにより、1つ前に使用していた、開かれた状態のアプリが現れる。ウェルカムスクリーンの表示中、画面右エッジからの左スワイプによりホームページが現れる。図33に、一連の(A)〜(C)の一例を示す。
スマートフォン用の「リーチングインジケータ(reaching indicators)」が提供される。一例では、インジケータアイコンからのスワイプダウンにより、そのアイコンに関連した設定が下りてくる。ユーザは、スワイプダウンする時に指を離さずに水平に動かすことで、表示させるインジケータを選ぶ。インジケータバーをタップすると、下りてくるインジケータのヒントが表示される。タブヘッダをタップしてさらに多くのインジケータタブを表示させ、その中の1つをタップして選択することで、インジケータ画面間を移動することも可能である。図34にその一例を示す。図34では、一連の(A)〜(E)を示している。(A)では、サウンドアイコンがスワイプダウンされて、画面(B)が提示される。スワイプダウン時に指を離さず水平に動かすと、表示させるインジケータを選ぶことができるので、指を水平に動かすことにより一連の画面(B)〜(E)が提示される。図34は、インジケータが表示されている画面右エッジからのスワイプダウンによって利用できるビューの一例を示す。
スマートフォンでの1つの実現において、インジケータアイコンが見られる画面の頂部をタップすることで、設定の概要に到達できる。これにより、ユーザを他の設定ビューへ誘導できる設定画面が表示される。「設定の概要」画面が提供される。インジケータにアクセスするには、上エッジから下方および側方へスワイプする。タブヘッダをタップしてさらに多くのタブを表示させ、そのうちの1つをタップして選択することで、インジケータ画面間を誘導することもできる。専用の設定アプリから詳細なシステム設定にアクセスでき、この設定アプリへは、いくつかの個別のインジケータ画面上のショートカットをタップすることで、また、アプリケーションスコープからシステム設定アプリを開くことでアクセスできる。
1つの実現において、画面頂部のアイコンをタップすると、対応した設定画面が提供される。図35に、スマートフォンの設定の例を示す。図35では、一連の(A)〜(B)を示す。(A)では、サウンドアイコンが見られる画面頂部のサウンドアイコンをタップすると、画面(B)が提示される。画面(A)から開始し、画面頂部のネットワークアイコンをタップすると、画面(C)が提示される。画面(A)から開始し、画面頂部のバッテリアイコンをタップすると、画面(D)が提示される。画面(A)から開始し、画面頂部の日付・時間アイコンをタップすると、画面(E)が提示される。
タブレット用のリーチングインジケータが提供される。一例では、(例えば、画面の左上の)インジケータアイコンからのスワイプダウンにより、そのアイコンに関連する設定が表示される。ユーザは、スワイプダウン時に指を離さずにそのまま水平に動かすことで、表示させるインジケータを選ぶことができる。インジケータバーをタップすると、下りてくるインジケータのヒントが表示される。タブヘッダをタップしてさらに多くのインジケータタブを表示させ、その中の1つをタップして選択することで、インジケータ画面間を移動することも可能である。図36は、タブレットコンピュータ画面上でのバッテリ設定画面の一例を示す。
タブレットの1つの実現において、設定の概要へは、インジケータアイコンが見られる画面頂部をタップすることで到達できる。これにより、ユーザを他の設定ビューへ誘導できる設定画面が表示される。
タブレットコンピュータ画面上にタブレットサイドステージが提供される。一例では、タブレットのサイドステージは、ユーザが指を画面右エッジから水平にスワイプすることで、ビュー内へ引き出すことができる。図37に、(A)〜(C)の一連の画面画像を提示した一例を示す。(A)では、「イベント」アプリケーションからの出力が表示されている。(B)では、ユーザが指を画面右エッジから水平にスワイプすることで、「ノート」サイドステージがビュー内へ引き出されている。(C)では、「ノート」サイドステージがビュー内へ引き出されている。一例では、タブレットのサイドステージは2つの異なる形で表示できる。つまり、メインビューの頂部に表示するか、または画面を分割する形で表示でき、これにより、メインビューは所与の新たなスペース内に合致するようにリスケールされる。
タブレットサイドステージはマルチタスキングを可能にする。例えば、電話をかけながら音楽のブラウジングもしくはビデオ鑑賞、テキストの書き込み、システム設定の変更、または自分のギャラリーを閲覧しながら注釈を書き込むことができる。異なる多くのことを同時に行えるようになる。タブレットサイドステージにより、サイドステージ内に並んでいる前に使用したアプリを、画面右エッジからのスワイプを使ってざっと見ることができるようになる。
スマートフォンにウェルカムスクリーンが提供される。ウェルカムスクリーンは、サークル内の各ドットが現在の月のそれぞれの日にちを表し、その日のドットがハイライトされた、インフォグラフィックを含む。中央のサークルの周囲にあるハイライトされたサークルは、一例では、特定の時間内に受信したツイート数を表す。図38にその一例を示す。その他のデータもこの方法で示すことができる。
タブレットにウェルカムスクリーンが提供される。ウェルカムスクリーンは、背景写真、色、表示されたデータによってカスタマイズすることができる。図39にその一例を示す。タブレットは、プライベートなものを含めて複数のアカウントを設けられるが、さらに、誰でも使用できるゲストアカウントも設けてよい。ゲストアカウントの場合は、ウェルカムスクリーンにインフォグラフィックを備えなくてもよい。
[注意点]
上で参照した構成は、単に本発明の原理のためのアプリケーションの例証にすぎないことが理解されるべきである。本発明の趣旨および範囲から逸脱しない多数の修正および代替的な配置が考案され得る。ここまで、本発明を、現在のところ最も実用的で好適と考えられるその実施例を用いて、綿密かつ詳細に図示および完全に説明してきたが、ここで述べた本発明の趣旨および概念から逸脱せずに多くの修正が可能であることが当業者には明白となるだろう。

Claims (9)

  1. スマートフォン、タブレット、またはその他の演算デバイスであって、
    複数のエッジによって画定される境界を有するタッチスクリーンと、
    メモリに記憶され、1つ以上のプロセッサによって実行されるように構成され、スクリーンのエッジからの直線的なスワイプインを検出する命令を含む1つ以上のコンピュータプログラムとを含み、
    滑らかな動きによる直線的なスワイプの程度に依存し、かつスクリーンの表示内容またはデバイスのロック状態に依存し、スワイプが2つ以上の異なる成果または機能のトリガ、または呼び出しにつながり、
    直線的なスワイプが左エッジからの第1スワイプ部を含む場合、ランチャが表示され、
    直線的なスワイプが左エッジからの滑らかな動きの第2スワイプ部をさらに含み、かつスクリーンの表示内容がウェルカムスクリーンである場合、ホームスクリーンが表示され、
    直線的なスワイプが右エッジからのスワイプを含み、かつスクリーンの表示内容がウェルカムスクリーンである場合、直近に使用されたアプリが表示され、
    ウェルカムスクリーンが、円形に配置された30個の小さなドットを含むロックスクリーンであり、各ドットは動作または状態を表し、動作または状態は各ドットに隣接する半透明な円の大きさによって示され、
    直線的なスワイプが右エッジからのスワイプを含み、かつデバイスがアンロック状態である場合、使用された全てのアプリが最後に使われたものから順番に表示される、デバイス。
  2. 1つのエッジからの直線的なスワイプが第1の成果を起こし、ユーザがそのエッジからのスワイプインを継続した場合、異なる成果が起こる、請求項1に記載のデバイス。
  3. ジェスチャ入力がスクリーン上の所定領域へ継続され、その領域が選択された場合、特定の成果が起こる、請求項1に記載のデバイス。
  4. 1つのエッジからのスワイプが、異なるエッジからのスワイプと比べて異なる成果を起こす、請求項1に記載のデバイス。
  5. 直線的なスワイプが右上エッジからの第1スワイプ部を含み、1つのシステム情報機能に関連する画面をそのアプリが走っている間表示させ、第2スワイプダウン部の継続は、そのアプリが走っている間その機能のユーザ選択可能パラメータを含むように画面を拡張させる、請求項1に記載のデバイス。
  6. 1つのアプリが開いている間、直線的なスワイプが下エッジからの第1スワイプアップ部を含み、そのアプリが走っている間そのアプリに関連する機能画面の表示を起こし、直線的なスワイプの第2スワイプアップ部の継続は、定義された目標領域を選択し、そのアプリが走っている間検索機能が呼び出される、請求項1に記載のデバイス。
  7. 直線的なスワイプが右エッジからの第1スワイプ部を含み、長方形領域を表示させ、直線的なスワイプの第2スワイプ部の継続は、以前開かれたアプリを表示させる、請求項1に記載のデバイス。
  8. タッチスクリーンから指を離すことが決定ジェスチャである、請求項1に記載のデバイス。
  9. 直線的なスワイプが、ユーザの指が1つまたはそれ以上の方向にスクリーン上を動きながらタッチスクリーンに連続的に接触することを含む、請求項1に記載のデバイス。
JP2018209919A 2013-01-02 2018-11-07 コンピュータデバイスのためのユーザインターフェイス Active JP6625191B2 (ja)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
GBGB1300031.0A GB201300031D0 (en) 2013-01-02 2013-01-02 Ubuntu UX innovations
GB1300031.0 2013-01-02
GBGB1302901.2A GB201302901D0 (en) 2013-01-02 2013-02-19 Ubuntu tablet
GB1302901.2 2013-02-19
US201361788842P 2013-03-15 2013-03-15
GBGB1304696.6A GB201304696D0 (en) 2013-01-02 2013-03-15 User interface for a computing device
US61/788,842 2013-03-15
GB1304696.6 2013-03-15

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015550149A Division JP6433915B2 (ja) 2013-01-02 2013-12-23 コンピュータデバイスのためのユーザインターフェイス

Publications (2)

Publication Number Publication Date
JP2019040622A JP2019040622A (ja) 2019-03-14
JP6625191B2 true JP6625191B2 (ja) 2019-12-25

Family

ID=47716350

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015550149A Active JP6433915B2 (ja) 2013-01-02 2013-12-23 コンピュータデバイスのためのユーザインターフェイス
JP2018209919A Active JP6625191B2 (ja) 2013-01-02 2018-11-07 コンピュータデバイスのためのユーザインターフェイス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015550149A Active JP6433915B2 (ja) 2013-01-02 2013-12-23 コンピュータデバイスのためのユーザインターフェイス

Country Status (10)

Country Link
US (12) US20140189607A1 (ja)
EP (2) EP3629144A1 (ja)
JP (2) JP6433915B2 (ja)
KR (3) KR101985291B1 (ja)
CN (2) CN111538406B (ja)
ES (1) ES2763410T3 (ja)
GB (3) GB201300031D0 (ja)
HK (1) HK1217793A1 (ja)
WO (1) WO2014106739A1 (ja)
ZA (1) ZA201505153B (ja)

Families Citing this family (419)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9483755B2 (en) 2008-03-04 2016-11-01 Apple Inc. Portable multifunction device, method, and graphical user interface for an email client
JP5756752B2 (ja) 2008-07-03 2015-07-29 セルカコール・ラボラトリーズ・インコーポレイテッドCercacor Laboratories, Inc. センサ
US8700072B2 (en) 2008-12-23 2014-04-15 At&T Mobility Ii Llc Scalable message fidelity
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
USD701514S1 (en) * 2011-10-10 2014-03-25 Net Power And Light, Inc. Display screen or portion thereof with graphical user interface
US20130305354A1 (en) * 2011-12-23 2013-11-14 Microsoft Corporation Restricted execution modes
US8874162B2 (en) 2011-12-23 2014-10-28 Microsoft Corporation Mobile device safe driving
US9363250B2 (en) 2011-12-23 2016-06-07 Microsoft Technology Licensing, Llc Hub coordination service
US10937097B1 (en) 2012-02-06 2021-03-02 Acorns Grow Incorporated Systems and methods for creating excess funds from retail transactions and apportioning those funds into investments
US8781906B2 (en) 2012-02-06 2014-07-15 Walter Cruttenden Systems and methods for managing consumer transaction-based investments
USD716825S1 (en) * 2012-03-06 2014-11-04 Apple Inc. Display screen or portion thereof with graphical user interface
USD832782S1 (en) 2015-12-30 2018-11-06 Energous Corporation Wireless charging device
USD773506S1 (en) 2014-12-30 2016-12-06 Energous Corporation Display screen with graphical user interface
US9508169B2 (en) 2012-09-14 2016-11-29 Google Inc. Method and apparatus for contextually varying amounts of imagery on a map
USD747331S1 (en) * 2012-11-06 2016-01-12 Sony Computer Entertainment Inc. Display panel or screen with graphical user interface
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
USD757057S1 (en) * 2012-11-30 2016-05-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
GB201300031D0 (en) 2013-01-02 2013-02-13 Canonical Ltd Ubuntu UX innovations
AU349995S (en) * 2013-01-09 2013-07-31 Samsung Electronics Co Ltd Display screen for an electronic device
KR101822463B1 (ko) 2013-01-21 2018-01-26 삼성전자주식회사 복수 개의 아이콘들을 화면상에 배치하는 장치 및 이의 운용 방법
CN103970469B (zh) * 2013-02-05 2015-12-23 腾讯科技(深圳)有限公司 移动终端返回主屏幕的方法及移动终端
KR101428365B1 (ko) * 2013-02-25 2014-08-08 주식회사 팬택 모바일 기기의 홈 스크린에서 위젯을 제공하는 방법 및 시스템
US20140245214A1 (en) * 2013-02-28 2014-08-28 Hcl Technologies Limited Enabling search in a touchscreen device
US11176614B1 (en) 2013-03-14 2021-11-16 Acorns Grow Incorporated Systems and methods for creating excess funds from retail transactions and apportioning those funds into investments
USD928190S1 (en) 2013-03-14 2021-08-17 Acorns Grow Incorporated Mobile device screen or portion thereof with an animated graphical user interface
USD972577S1 (en) 2013-03-14 2022-12-13 Acorns Grow Inc. Mobile device screen with a graphical user interface
USD927509S1 (en) 2013-03-14 2021-08-10 Acorns Grow Incorporated Mobile device screen or portion thereof with graphical user interface
USD969818S1 (en) 2013-03-14 2022-11-15 Acorns Grow Inc. Mobile device screen with graphical user interface
US9626100B2 (en) * 2013-04-15 2017-04-18 Microsoft Technology Licensing, Llc Dynamic management of edge inputs by users on a touch device
KR102157270B1 (ko) * 2013-04-26 2020-10-23 삼성전자주식회사 펜을 이용하는 사용자 단말 장치 및 그 제어 방법
USD733732S1 (en) * 2013-05-14 2015-07-07 Microsoft Corporation Display screen with graphical user interface
US10019710B2 (en) 2013-05-16 2018-07-10 Avant-Garde Ip Llc System, method and article of manufacture to facilitate a financial transaction without unlocking a mobile device
US9324068B2 (en) 2013-05-16 2016-04-26 Avant-Garde Ip Llc System, method and article of manufacture to facilitate a financial transaction without unlocking a mobile device
US10217103B2 (en) 2013-05-16 2019-02-26 Avant-Garde Ip Llc System, method and article of manufacture to facilitate a financial transaction without unlocking a mobile device
USD738911S1 (en) * 2013-05-29 2015-09-15 Microsoft Corporation Display screen with icon
US10481769B2 (en) * 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
USD738889S1 (en) * 2013-06-09 2015-09-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD745049S1 (en) 2013-06-09 2015-12-08 Apple Inc. Display screen or portion thereof with graphical user interface
US11726631B2 (en) * 2013-08-24 2023-08-15 Tara Chand Singhal Apparatus and method for a simplified menu screen in handheld mobile wireless devices
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
CN110262711B (zh) 2013-09-03 2023-03-03 苹果公司 用户界面中的用户界面对象操作
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
USD788795S1 (en) * 2013-09-03 2017-06-06 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD754692S1 (en) * 2013-09-13 2016-04-26 Airwatch Llc Electronic device display screen with graphical user interface for a calendar application
USD746301S1 (en) * 2013-11-14 2015-12-29 Microsoft Corporation Display screen with graphical user interface
USD762680S1 (en) * 2013-12-18 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD798888S1 (en) 2013-12-23 2017-10-03 Canonical Limited Touchscreen device with graphical user interface
KR101548228B1 (ko) * 2013-12-27 2015-08-28 주식회사 케이티 사용자 상태에 기반하여 사용자 인터페이스를 동기화하는 동기화 기기 및 동기화 방법
CA156714S (en) * 2014-01-28 2019-08-02 Jvl Ventures Llc Handheld electronic device
USD757768S1 (en) * 2014-02-21 2016-05-31 Titus Inc. Display screen with graphical user interface
KR102255274B1 (ko) * 2014-02-21 2021-05-24 삼성전자주식회사 사용자 인터페이스를 제공하는 방법 및 이를 수행하기 위한 플렉시블 디바이스
USD765092S1 (en) 2014-03-03 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US9665162B2 (en) * 2014-03-25 2017-05-30 Htc Corporation Touch input determining method which can determine if the touch input is valid or not valid and electronic apparatus applying the method
USD805066S1 (en) 2014-04-10 2017-12-12 Energous Corporation Laptop computer with antenna
USD757800S1 (en) * 2014-04-15 2016-05-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
WO2015172071A1 (en) * 2014-05-08 2015-11-12 Tank Design, Inc. Systems and methods for location-dependent electronic communications
US9912795B2 (en) 2014-05-16 2018-03-06 Avant-Garde Ip Llc Dynamically replaceable lock screen wallpaper
USD769892S1 (en) 2014-05-30 2016-10-25 Apple Inc. Display screen or portion thereof with graphical user interface
US9916079B2 (en) * 2014-06-05 2018-03-13 Openpeak Llc Method and system for enabling the sharing of information between applications on a computing device
USD752607S1 (en) * 2014-06-17 2016-03-29 Tencent Technology (Shenzhen) Company Limited Display screen or portion thereof with animated graphical user interface
USD759666S1 (en) 2014-06-23 2016-06-21 Google Inc. Display screen or portion thereof with an animated graphical user interface
USD754169S1 (en) * 2014-06-23 2016-04-19 Google Inc. Portion of a display panel with an animated computer icon
CN111782130B (zh) 2014-06-24 2024-03-29 苹果公司 用于在用户界面中导航的列界面
AU2015280056B2 (en) 2014-06-24 2018-04-26 Apple Inc. Application menu for video system
KR102608294B1 (ko) 2014-06-24 2023-11-30 애플 인크. 입력 디바이스 및 사용자 인터페이스 상호작용
EP3161581A1 (en) 2014-06-27 2017-05-03 Apple Inc. Electronic device with rotatable input mechanism for navigating calendar application
USD764511S1 (en) * 2014-06-30 2016-08-23 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD807898S1 (en) 2014-07-15 2018-01-16 Google Llc Display screen or portion thereof with an animated graphical user interface
JP6428011B2 (ja) * 2014-07-16 2018-11-28 富士ゼロックス株式会社 セキュリティ管理装置及びプログラム
EP4439231A2 (en) 2014-07-21 2024-10-02 Apple Inc. Remote user interface
CN104076986B (zh) * 2014-07-25 2015-12-09 上海逗屋网络科技有限公司 一种用于多点触摸终端的触摸控制方法与设备
US11507931B1 (en) 2014-07-31 2022-11-22 Block, Inc. Payout payment platform
WO2016022204A1 (en) 2014-08-02 2016-02-11 Apple Inc. Context-specific user interfaces
US9703820B2 (en) * 2014-08-05 2017-07-11 Adobe Systems Incorporated Customized and automated dynamic infographics
CN105404438B (zh) * 2014-08-13 2019-10-15 小米科技有限责任公司 背景模糊方法、装置及终端设备
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
TWD178887S (zh) * 2014-09-01 2016-10-11 蘋果公司 顯示螢幕之圖形使用者介面之部分
EP4089534A1 (en) 2014-09-02 2022-11-16 Apple Inc. User interface for receiving user input
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
US10235014B2 (en) 2014-09-02 2019-03-19 Apple Inc. Music user interface
WO2016036414A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
KR20160027775A (ko) * 2014-09-02 2016-03-10 삼성전자주식회사 터치 입력 처리 방법 및 그 장치
TWI676127B (zh) * 2014-09-02 2019-11-01 美商蘋果公司 關於電子郵件使用者介面之方法、系統、電子器件及電腦可讀儲存媒體
EP4209872A1 (en) 2014-09-02 2023-07-12 Apple Inc. Phone user interface
USD871426S1 (en) * 2014-09-02 2019-12-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD769937S1 (en) * 2014-09-09 2016-10-25 Ge Intelligent Platforms, Inc. Display screen with graphical alarm icon
USD786920S1 (en) * 2014-09-09 2017-05-16 Ge Intelligent Platforms, Inc. Display screen with graphical alarm icon
CN105446608A (zh) * 2014-09-25 2016-03-30 阿里巴巴集团控股有限公司 信息搜索方法、信息搜索装置及电子装置
USD765670S1 (en) * 2014-10-07 2016-09-06 Microsoft Corporation Display screen with graphical user interface
USD768650S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD768648S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD766925S1 (en) * 2014-11-14 2016-09-20 Microsoft Corporation Display screen with animated graphical user interface
USD768649S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD789954S1 (en) 2014-12-09 2017-06-20 Jpmorgan Chase Bank, N.A. Display screen or portion thereof with a graphical user interface
USD789388S1 (en) * 2014-12-09 2017-06-13 Jpmorgan Chase Bank, N.A. Display screen or portion thereof with a graphical user interface
USD786281S1 (en) * 2014-12-09 2017-05-09 Jpmorgan Chase Bank, N.A. Display screen or portion thereof with a graphical user interface
USD766952S1 (en) 2014-12-09 2016-09-20 Jpmorgan Chase Bank, N.A. Display screen or portion thereof with a graphical user interface
US9990613B1 (en) 2014-12-12 2018-06-05 Square, Inc. Bill payment using direct funds transfer
USD765695S1 (en) * 2014-12-30 2016-09-06 Energous Corporation Display screen with graphical user interface
USD781892S1 (en) * 2015-01-20 2017-03-21 Microsoft Corporation Display screen with graphical user interface
USD805102S1 (en) 2015-01-27 2017-12-12 Twitter, Inc. Media sharing device with graphical user interface
KR20160098752A (ko) * 2015-02-11 2016-08-19 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법 및 컴퓨터 판독가능 기록매체
USD791784S1 (en) * 2015-02-20 2017-07-11 Google Inc. Portion of a display panel with a graphical user interface with icons
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
USD780785S1 (en) 2015-03-27 2017-03-07 Twitter, Inc. Display screen with graphical user interface for live video sharing
US10088993B2 (en) 2015-04-01 2018-10-02 Ebay Inc. User interface for controlling data navigation
USD765118S1 (en) 2015-04-13 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD777751S1 (en) * 2015-04-30 2017-01-31 Cinematique LLC Display panel or portion thereof with animated graphical user interface
USD777752S1 (en) * 2015-04-30 2017-01-31 Cinematique LLC Display panel or portion thereof with animated graphical user interface
US10333872B2 (en) * 2015-05-07 2019-06-25 Microsoft Technology Licensing, Llc Linking screens and content in a user interface
USD797774S1 (en) * 2015-05-14 2017-09-19 Lg Electronics Inc. Cellular phone with graphical user interface
USD761294S1 (en) * 2015-05-19 2016-07-12 Ustocktrade LLC Display screen or portion thereof with stock trading graphical user interface
USD789395S1 (en) * 2015-05-19 2017-06-13 Ustocktrade LLC Display screen or portion thereof with stock trading graphical user interface
CN104793890A (zh) * 2015-05-22 2015-07-22 北京育益宝科技有限公司 通过操作平板电脑特定物理按键直达应用软件界面的方法
USD792890S1 (en) 2015-05-22 2017-07-25 Acorns Grow Incorporated Display screen or portion therof with a financial data graphical user interface
KR20160139376A (ko) * 2015-05-27 2016-12-07 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
USD765700S1 (en) 2015-06-07 2016-09-06 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN104866110A (zh) * 2015-06-10 2015-08-26 深圳市腾讯计算机系统有限公司 一种手势控制方法,移动终端及系统
US11442617B1 (en) * 2015-06-12 2022-09-13 Intuit, Inc. Committing data in electronic devices using swiping gestures
CN106357718B (zh) * 2015-07-13 2019-12-24 阿里巴巴集团控股有限公司 信息处理方法、装置、电子终端、网络端设备及系统
USD768689S1 (en) * 2015-07-27 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD765708S1 (en) * 2015-07-27 2016-09-06 Microsoft Corporation Display screen with animated graphical user interface
CN105159524A (zh) * 2015-08-03 2015-12-16 小米科技有限责任公司 界面显示方法及装置
USD863332S1 (en) * 2015-08-12 2019-10-15 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US10368137B2 (en) * 2015-08-17 2019-07-30 Vudu, Inc. System for presenting video information and method therefor
EP3337583B1 (en) 2015-08-20 2024-01-17 Apple Inc. Exercise-based watch face
USD793441S1 (en) * 2015-08-20 2017-08-01 S-Printing Solution Co., Ltd. Display screen or portion thereof with graphical user interface
USD793442S1 (en) * 2015-08-20 2017-08-01 S-Printing Solution Co., Ltd. Display screen or portion thereof with graphical user interface
USD801355S1 (en) * 2015-08-24 2017-10-31 Microsoft Corporation Display screen with graphical user interface
CN106484388B (zh) * 2015-09-02 2021-06-04 腾讯科技(深圳)有限公司 用户界面的实现方法和装置
USD788161S1 (en) 2015-09-08 2017-05-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10503361B2 (en) 2015-09-30 2019-12-10 Samsung Electronics Company, Ltd. Interactive graphical object
USD787539S1 (en) * 2015-10-06 2017-05-23 N3N Co., Ltd. Display screen or portion thereof with a graphical user interface
KR102124004B1 (ko) * 2015-10-15 2020-06-17 삼성전자주식회사 터치 스크린 기반 이동 디바이스에 대한 잠금의 설정 및 해제 방법 및 그에 따른 이동 디바이스
CA172517S (en) 2015-10-22 2019-07-17 Gamblit Gaming Llc Display screen with a graphical user interface
WO2017073811A1 (ko) * 2015-10-29 2017-05-04 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
USD775652S1 (en) * 2015-11-18 2017-01-03 Microsoft Corporation Display screen with graphical user interface
CN105487748B (zh) * 2015-11-20 2020-12-18 腾讯科技(深圳)有限公司 显示图标的方法和装置、存储介质以及计算机终端
CN105353964A (zh) * 2015-11-27 2016-02-24 广东欧珀移动通信有限公司 输入控制方法、装置和终端设备
USD795926S1 (en) * 2015-12-17 2017-08-29 The Procter & Gamble Company Display screen with icon
USD800768S1 (en) * 2015-12-24 2017-10-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
KR102429740B1 (ko) 2015-12-24 2022-08-05 삼성전자 주식회사 터치 이벤트 처리 방법 및 그 장치
USD800767S1 (en) * 2015-12-24 2017-10-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD832783S1 (en) 2015-12-30 2018-11-06 Energous Corporation Wireless charging device
USD797133S1 (en) 2016-01-07 2017-09-12 Invisalert Solutions, LLC Display screen with graphical user interface
USD778941S1 (en) * 2016-01-08 2017-02-14 Apple Inc. Display screen or portion thereof with graphical user interface
USD778942S1 (en) 2016-01-11 2017-02-14 Apple Inc. Display screen or portion thereof with graphical user interface
USD798323S1 (en) * 2016-01-21 2017-09-26 Maestro Presentation Systems, LLC Display screen with graphical user interface
KR102451469B1 (ko) * 2016-02-03 2022-10-06 삼성전자주식회사 외부 전자 장치를 제어하기 위한 방법 및 전자 장치
USD813888S1 (en) * 2016-02-04 2018-03-27 Coway Co., Ltd. Display screen with graphical user interface
USD789948S1 (en) * 2016-02-11 2017-06-20 Sears Brands, L.L.C. Display screen or portion thereof with graphical user interface
USD791169S1 (en) * 2016-02-11 2017-07-04 Sears Brands, L.L.C. Display screen or portion thereof with graphical user interface
USD789946S1 (en) * 2016-02-11 2017-06-20 Sears Brands, L.L.C. Display screen or portion thereof with graphical user interface
USD789975S1 (en) * 2016-03-16 2017-06-20 Kyphon SÀRL Display screen with animated graphical user interface
USD823315S1 (en) * 2016-03-30 2018-07-17 Square, Inc. Display screen having a graphical user interface
US20180157385A1 (en) * 2016-03-31 2018-06-07 Jamdeo Canada Ltd. System and method for menu interface presentation
USD824940S1 (en) * 2016-04-05 2018-08-07 Ora Inc. Display screen with graphical user interface for a mobile electronic device
TWD186234S (zh) * 2016-04-05 2017-10-21 北京橙鑫數據科技有限公司 應用於行動通訊顯示螢幕之圖形化使用者介面
US10567312B2 (en) 2016-04-11 2020-02-18 Facebook, Inc. Techniques for messaging bot controls based on machine-learning user intent detection
US20170293955A1 (en) * 2016-04-11 2017-10-12 Facebook, Inc. Techniques for messaging agent customization
US10528244B2 (en) 2016-04-29 2020-01-07 Microsoft Technology Licensing, Llc Details pane of a user interface
CN105975155A (zh) * 2016-05-06 2016-09-28 乐视控股(北京)有限公司 显示屏幕任务界面切换设备、方法以及移动终端
KR102338357B1 (ko) * 2016-05-18 2021-12-13 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
USD801985S1 (en) * 2016-05-27 2017-11-07 Samsung Electronics Co., Ltd. Display screen with graphical user interface
USD811433S1 (en) * 2016-06-10 2018-02-27 Apple Inc. Display screen or portion thereof with animated graphical user interface
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
DK201670616A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670621A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
USD910648S1 (en) * 2016-06-13 2021-02-16 Apple Inc. Display screen or portion thereof with graphical user interface
CN106445273A (zh) * 2016-07-11 2017-02-22 深圳市金立通信设备有限公司 一种显示方法及终端
CN106201632B (zh) * 2016-07-29 2020-04-28 维沃移动通信有限公司 一种应用程序的访问方法及移动终端
CN106293741B (zh) * 2016-08-10 2020-02-04 百度在线网络技术(北京)有限公司 一种为应用商店生成非专属页面的方法和装置
USD803871S1 (en) * 2016-08-12 2017-11-28 Salesforce.Com, Inc. Display screen or portion thereof with animated graphical user interface
USD804520S1 (en) * 2016-08-12 2017-12-05 Salesforce.Com, Inc. Display screen or portion thereof with animated graphical user interface
US10798044B1 (en) 2016-09-01 2020-10-06 Nufbee Llc Method for enhancing text messages with pre-recorded audio clips
US10063929B1 (en) * 2016-09-01 2018-08-28 Nufbee Llc Community controlled audio entertainment system
US20180075444A1 (en) 2016-09-12 2018-03-15 Square, Inc. Processing a mobile payload
USD837227S1 (en) 2016-09-12 2019-01-01 Square, Inc. Display screen with graphical user interface for a mobile device
US20180077096A1 (en) * 2016-09-13 2018-03-15 Mark A. DeMattei Messaging environment for mobile device with multitask toolbar, search engine and keyboard control access to apps and centralized functionality
AU2017326335B2 (en) 2016-09-14 2022-03-10 Invisalert Solutions, LLC Tamper resistant clasp and wristband apparatus and associated patient monitoring system and method of use
USD810770S1 (en) * 2016-09-21 2018-02-20 Uipco, Llc Display panel or portion thereof with graphical user interface
US11233760B2 (en) 2016-09-21 2022-01-25 Facebook, Inc. Module ranking for a modular inbox
US10356029B2 (en) 2016-09-21 2019-07-16 Facebook, Inc. Methods and systems for presenting modules in an inbox interface
AU2017330211B2 (en) 2016-09-23 2020-05-21 Apple Inc. Watch theater mode
USD846591S1 (en) 2016-10-07 2019-04-23 Bred Ventures Inc. Display screen or portion thereof with a score leaderboard graphical user interface
USD830374S1 (en) * 2016-10-07 2018-10-09 Bred Ventures Inc. Display screen or portion thereof with a graphical user interface
USD831033S1 (en) * 2016-10-07 2018-10-16 Bred Ventures Inc. Display screen or portion thereof with a graphical user interface
US11966560B2 (en) 2016-10-26 2024-04-23 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
CN106502564A (zh) * 2016-10-31 2017-03-15 成都轻松益家电子商务有限公司 一种基于手势滑动快速检索的方法
USD844644S1 (en) * 2016-11-10 2019-04-02 Google Llc Computer with icons in a graphical user interface
USD798899S1 (en) * 2016-12-23 2017-10-03 Beijing Kingsoft Internet Security Software Co., Ltd. Mobile terminal display screen with a graphical user interface
CN106790813A (zh) * 2016-12-29 2017-05-31 努比亚技术有限公司 一种对移动终端边缘区域进行功能调整的方法和装置
US10904211B2 (en) 2017-01-21 2021-01-26 Verisign, Inc. Systems, devices, and methods for generating a domain name using a user interface
USD864226S1 (en) 2017-02-22 2019-10-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD847849S1 (en) * 2017-02-28 2019-05-07 Yahoo Japan Corporation Display screen with graphical user interface
USD838740S1 (en) * 2017-03-06 2019-01-22 United Services Automobile Association (Usaa) Portion of a display panel with an animated graphical user interface
USD838741S1 (en) * 2017-03-06 2019-01-22 United Services Automobile Association (Usaa) Portion of a display panel with an animated graphical user interface
US10360359B2 (en) 2017-03-07 2019-07-23 International Business Machines Corporation Enabling single finger tap user authentication and application launch and login using fingerprint scanning on a display screen
USD866575S1 (en) * 2017-03-20 2019-11-12 Exfo Inc. Display screen, or portion thereof, with graphical user interface for multi-fiber connector, fiber inspection probe testing
USD837244S1 (en) * 2017-03-27 2019-01-01 Vudu, Inc. Display screen or portion thereof with interactive graphical user interface
USD916712S1 (en) 2017-04-21 2021-04-20 Scott Bickford Display screen with an animated graphical user interface having a transitional flower design icon
USD845336S1 (en) 2017-05-03 2019-04-09 Google Llc Display screen or portion thereof with graphical user interface
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
US10203866B2 (en) * 2017-05-16 2019-02-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
DK179555B1 (en) 2017-05-16 2019-02-13 Apple Inc. USER INTERFACE FOR A FLASHLIGHT MODE ON AN ELECTRONIC DEVICE
KR20220138007A (ko) * 2017-05-16 2022-10-12 애플 인크. 사용자 인터페이스들 사이에 내비게이팅하고 제어 객체들과 상호작용하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
US10466889B2 (en) 2017-05-16 2019-11-05 Apple Inc. Devices, methods, and graphical user interfaces for accessing notifications
US11036387B2 (en) 2017-05-16 2021-06-15 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
USD865782S1 (en) * 2017-05-26 2019-11-05 Open Text Sa Ulc Display screen or portion thereof with computer-generated graphical dashboard transition
USD851664S1 (en) 2017-05-26 2019-06-18 Open Text Sa Ulc Display screen or portion thereof with computer-generated graphical bouncing screen transition
USD841677S1 (en) 2017-06-04 2019-02-26 Apple Inc. Display screen or portion thereof with graphical user interface
USD822711S1 (en) 2017-06-05 2018-07-10 Apple Inc. Display screen or portion thereof with graphical user interface
WO2018226989A1 (en) * 2017-06-09 2018-12-13 Alibaba Group Holding Limited Displaying images associated with apps based on app processing task progress statuses
USD894208S1 (en) * 2017-06-29 2020-08-25 Google Llc Display screen or portion thereof with transitional graphical user interface
JP1602696S (ja) * 2017-06-29 2018-04-23
CN107273035B (zh) * 2017-06-30 2020-10-16 北京亿播客信息技术有限公司 应用程序推荐方法及移动终端
US11366872B1 (en) * 2017-07-19 2022-06-21 Amazon Technologies, Inc. Digital navigation menus with dynamic content placement
US10365719B2 (en) 2017-07-26 2019-07-30 Google Llc Haptic feedback of user interface scrolling with synchronized visual animation components
USD844649S1 (en) 2017-07-28 2019-04-02 Verisign, Inc. Display screen or portion thereof with a sequential graphical user interface
USD882602S1 (en) 2017-07-28 2020-04-28 Verisign, Inc. Display screen or portion thereof with a sequential graphical user interface of a mobile device
CN107506121A (zh) * 2017-08-17 2017-12-22 惠州Tcl移动通信有限公司 一种按键控制方法、存储介质及智能终端
USD847856S1 (en) * 2017-08-17 2019-05-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD862509S1 (en) * 2017-08-23 2019-10-08 Amazon Technologies, Inc. Display screen or portion thereof having a graphical user interface
CN107343109A (zh) * 2017-08-25 2017-11-10 深圳天珑无线科技有限公司 用户终端的状态处理方法及用户终端
USD873284S1 (en) 2017-09-09 2020-01-21 Apple Inc. Electronic device with graphical user interface
USD987669S1 (en) 2017-09-11 2023-05-30 Apple Inc. Electronic device with graphical user interface
USD900146S1 (en) * 2017-09-27 2020-10-27 Toyota Research Institute, Inc. Mobile display screen or portion thereof with a graphical user interface
USD846567S1 (en) 2017-10-06 2019-04-23 Apple Inc. Electronic device with graphical user interface
US10613710B2 (en) * 2017-10-22 2020-04-07 SWATCHBOOK, Inc. Product simulation and control system for user navigation and interaction
USD876446S1 (en) * 2017-10-23 2020-02-25 Samsung Electronics Co., Ltd. Portable communication terminal with animated graphical user interface
CN109782995A (zh) * 2017-11-10 2019-05-21 群迈通讯股份有限公司 电子装置、屏幕的控制方法及系统
USD876459S1 (en) * 2017-12-04 2020-02-25 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD868810S1 (en) * 2017-12-04 2019-12-03 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD876458S1 (en) * 2017-12-04 2020-02-25 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
CN108021319B (zh) * 2017-12-07 2021-06-29 北京小米移动软件有限公司 试用智能设备的方法和装置
USD875132S1 (en) * 2017-12-15 2020-02-11 Beijing Bytedance Network Technology Co., Ltd. Display screen or portion therefof with a graphical user interface
JP1627359S (ja) * 2017-12-15 2019-03-25
USD867382S1 (en) * 2017-12-15 2019-11-19 Beijing Bytedance Network Technology Co., Ltd. Display screen or portion thereof with a graphical user interface
JP1627362S (ja) * 2017-12-15 2019-03-25
JP7080636B2 (ja) * 2017-12-28 2022-06-06 Dynabook株式会社 システム
CN108062190B (zh) * 2017-12-28 2020-06-09 维沃移动通信有限公司 一种应用运行状态控制方法及移动终端
USD884719S1 (en) * 2017-12-29 2020-05-19 Facebook, Inc. Display screen with graphical user interface
CN116882987A (zh) * 2018-01-05 2023-10-13 创新先进技术有限公司 一种支付方法、装置及设备
USD865778S1 (en) * 2018-01-08 2019-11-05 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD851114S1 (en) * 2018-01-08 2019-06-11 Modulus Media Systems, Inc. Display screen with user interface
WO2019149848A1 (en) * 2018-02-05 2019-08-08 Alkymia Method for interacting with one or more of software applications using a touch sensitive display
EP3521990A1 (en) * 2018-02-05 2019-08-07 Alkymia Method for interacting with one or more of software applications using a touch sensitive display
JP7192214B2 (ja) * 2018-02-19 2022-12-20 コニカミノルタ株式会社 表示装置、表示装置の制御方法、およびプログラム
US20190258373A1 (en) * 2018-02-21 2019-08-22 Apple Inc. Scrollable set of content items with locking feature
KR102604570B1 (ko) * 2018-03-23 2023-11-22 삼성전자주식회사 사용자 입력 지원 방법 및 이를 지원하는 전자 장치
USD888741S1 (en) * 2018-04-11 2020-06-30 Tianjin Bytedance Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
USD882609S1 (en) * 2018-05-04 2020-04-28 Google Llc Display screen with transitional graphical user interface
USD884009S1 (en) * 2018-05-04 2020-05-12 Google Llc Display screen with transitional graphical user interface
USD896823S1 (en) * 2018-05-04 2020-09-22 Google Llc Display screen with transitional graphical user interface
USD886139S1 (en) * 2018-05-04 2020-06-02 Google Llc Display screen with transitional graphical user interface
USD879116S1 (en) * 2018-05-07 2020-03-24 Google Llc Display screen or portion thereof with transitional graphical user interface
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
EP3576002B1 (en) * 2018-05-31 2021-06-02 Tata Consultancy Services Limited Method and system for providing security features in a smart phone
USD861033S1 (en) 2018-06-03 2019-09-24 Apple Inc. Electronic device with icon
US11966578B2 (en) * 2018-06-03 2024-04-23 Apple Inc. Devices and methods for integrating video with user interface navigation
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
USD860242S1 (en) 2018-06-03 2019-09-17 Apple Inc. Electronic device with graphical user interface
USD880495S1 (en) 2018-06-03 2020-04-07 Apple Inc. Electronic device with graphical user interface
USD875743S1 (en) 2018-06-04 2020-02-18 Apple Inc. Display screen or portion thereof with graphical user interface
USD884019S1 (en) 2018-06-25 2020-05-12 Eaze Solutions, Inc. Portion of a display screen with a transitional carousel graphical user interface for display of edible cannabis items
USD890808S1 (en) 2018-06-25 2020-07-21 Eaze Solutions, Inc Portion of a display screen with a transitional carousel graphical user interface for display of vaporizer cartridges
USD877192S1 (en) * 2018-06-25 2020-03-03 Eaze Solutions, Inc. Display screen with a transitional graphical user interface regarding the display, sale, and delivery of cannabis items
USD882624S1 (en) 2018-06-25 2020-04-28 Eaze Solutions, Inc. Portion of a display screen with a transitional carousel graphical user interface for display of cannabis flower items
USD906359S1 (en) 2018-07-05 2020-12-29 Invisalert Solutions, Inc. Display screen with graphical user interface
USD879820S1 (en) * 2018-07-11 2020-03-31 Hologic, Inc. Display panel or portion thereof with a graphical user interface
KR102519800B1 (ko) * 2018-07-17 2023-04-10 삼성디스플레이 주식회사 전자 장치
USD928799S1 (en) * 2018-07-19 2021-08-24 Acorns Grow Incorporated Mobile device screen or portion thereof with graphical user interface
USD890198S1 (en) 2018-08-21 2020-07-14 Facebook, Inc. Display screen with graphical user interface
USD894921S1 (en) * 2018-08-21 2020-09-01 Facebook, Inc. Display screen with graphical user interface
US11017164B1 (en) 2018-08-27 2021-05-25 Facebook, Inc. Systems and methods for collecting multiple forms of digital content using a single landing screen
US10942978B1 (en) 2018-08-27 2021-03-09 Facebook, Inc. Systems and methods for creating interactive metadata elements in social media compositions
USD892824S1 (en) * 2018-08-30 2020-08-11 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US11025582B1 (en) 2018-09-05 2021-06-01 Facebook, Inc. Systems and methods for creating multiple renditions of a social media composition from inputs to a single digital composer
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
USD898640S1 (en) * 2018-10-26 2020-10-13 Bushwacker, Inc. Vehicle fender flare
CN109614021A (zh) * 2018-10-29 2019-04-12 阿里巴巴集团控股有限公司 交互方法、装置及设备
US11409430B2 (en) * 2018-11-02 2022-08-09 Benjamin Firooz Ghassabian Screen stabilizer
CN109413500B (zh) * 2018-11-05 2020-12-15 四川长虹电器股份有限公司 一种定制电视机主场景的方法
USD964401S1 (en) * 2018-11-06 2022-09-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD964400S1 (en) * 2018-11-06 2022-09-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US11406892B2 (en) 2018-12-04 2022-08-09 Sony Interactive Entertainment Inc. Information processing apparatus
USD905089S1 (en) * 2018-12-13 2020-12-15 Volvo Car Corporation Display screen or portion thereof with animated graphical user interface
WO2020132682A1 (en) 2018-12-21 2020-06-25 Streamlayer Inc. Method and system for providing interactive content delivery and audience engagement
USD947233S1 (en) 2018-12-21 2022-03-29 Streamlayer, Inc. Display screen or portion thereof with transitional graphical user interface
USD997952S1 (en) 2018-12-21 2023-09-05 Streamlayer, Inc. Display screen with transitional graphical user interface
USD939562S1 (en) * 2018-12-28 2021-12-28 Industrial Technology Research Institute Display screen with graphical user interface
USD940187S1 (en) * 2018-12-28 2022-01-04 Industrial Technology Research Institute Display screen with graphical user interface
US20200223071A1 (en) * 2019-01-10 2020-07-16 Seismic Holdings, Inc. Exosuit systems and methods with accessory device support
US11372527B2 (en) * 2019-01-22 2022-06-28 Ford Global Technologies, Llc Dash cards user interface
KR20200100958A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 어플리케이션을 프리페치하는 전자 장치 및 방법
US11567655B2 (en) 2019-02-21 2023-01-31 Acorns Grow Incorporated Secure signature creation on a secondary device
US10732789B1 (en) 2019-03-12 2020-08-04 Bottomline Technologies, Inc. Machine learning visualization
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
EP3928194A1 (en) 2019-03-24 2021-12-29 Apple Inc. User interfaces including selectable representations of content items
CN114302210B (zh) * 2019-03-24 2024-07-05 苹果公司 用于查看和访问电子设备上的内容的用户界面
EP4443850A2 (en) 2019-03-24 2024-10-09 Apple Inc. User interfaces for a media browsing application
USD902947S1 (en) 2019-03-25 2020-11-24 Apple Inc. Electronic device with graphical user interface
CN109918001B (zh) * 2019-03-28 2022-07-29 北京小米移动软件有限公司 界面显示方法、装置及存储介质
US11005803B1 (en) * 2019-03-29 2021-05-11 Snap Inc. Messaging system with post-reply state after viewing message from feed
USD951267S1 (en) * 2019-04-09 2022-05-10 Streamlayer, Inc. Display screen with a transitional graphical user interface for an interactive content overlay
USD914051S1 (en) 2019-04-22 2021-03-23 Facebook, Inc. Display screen with an animated graphical user interface
USD912697S1 (en) 2019-04-22 2021-03-09 Facebook, Inc. Display screen with a graphical user interface
USD912693S1 (en) 2019-04-22 2021-03-09 Facebook, Inc. Display screen with a graphical user interface
USD913314S1 (en) 2019-04-22 2021-03-16 Facebook, Inc. Display screen with an animated graphical user interface
USD914058S1 (en) 2019-04-22 2021-03-23 Facebook, Inc. Display screen with a graphical user interface
USD914049S1 (en) 2019-04-22 2021-03-23 Facebook, Inc. Display screen with an animated graphical user interface
USD930695S1 (en) 2019-04-22 2021-09-14 Facebook, Inc. Display screen with a graphical user interface
USD913313S1 (en) 2019-04-22 2021-03-16 Facebook, Inc. Display screen with an animated graphical user interface
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
WO2020227330A1 (en) 2019-05-06 2020-11-12 Apple Inc. Restricted operation of an electronic device
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
US10817142B1 (en) 2019-05-20 2020-10-27 Facebook, Inc. Macro-navigation within a digital story framework
USD926781S1 (en) 2019-05-28 2021-08-03 Apple Inc. Display screen or portion thereof with graphical user interface
US10757054B1 (en) 2019-05-29 2020-08-25 Facebook, Inc. Systems and methods for digital privacy controls
US11388132B1 (en) 2019-05-29 2022-07-12 Meta Platforms, Inc. Automated social media replies
US11797606B2 (en) 2019-05-31 2023-10-24 Apple Inc. User interfaces for a podcast browsing and playback application
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
USD913315S1 (en) 2019-05-31 2021-03-16 Apple Inc. Electronic device with graphical user interface
US11106342B1 (en) * 2019-06-03 2021-08-31 Snap Inc. User interfaces to facilitate multiple modes of electronic communication
USD914739S1 (en) 2019-06-05 2021-03-30 Facebook, Inc. Display screen with an animated graphical user interface
USD914705S1 (en) * 2019-06-05 2021-03-30 Facebook, Inc. Display screen with an animated graphical user interface
USD924255S1 (en) * 2019-06-05 2021-07-06 Facebook, Inc. Display screen with a graphical user interface
USD912700S1 (en) 2019-06-05 2021-03-09 Facebook, Inc. Display screen with an animated graphical user interface
USD917533S1 (en) 2019-06-06 2021-04-27 Facebook, Inc. Display screen with a graphical user interface
USD918264S1 (en) 2019-06-06 2021-05-04 Facebook, Inc. Display screen with a graphical user interface
USD914757S1 (en) 2019-06-06 2021-03-30 Facebook, Inc. Display screen with an animated graphical user interface
USD916915S1 (en) 2019-06-06 2021-04-20 Facebook, Inc. Display screen with a graphical user interface
CN110248027B (zh) * 2019-06-21 2020-10-09 广东虹勤通讯技术有限公司 一种提高手持终端单手操作便捷性的方法和系统
CN113760427B (zh) 2019-08-09 2022-12-16 荣耀终端有限公司 显示页面元素的方法和电子设备
USD922405S1 (en) * 2019-08-29 2021-06-15 Google Llc Display screen or portion thereof with graphical user interface
DK180684B1 (en) 2019-09-09 2021-11-25 Apple Inc Techniques for managing display usage
AU2020344682A1 (en) 2019-09-11 2022-04-21 Invisalert Solutions, Inc. Wireless patient monitoring compliance system
USD930679S1 (en) * 2019-10-02 2021-09-14 Google Llc Display screen with transitional graphical user interface
USD938975S1 (en) 2019-10-02 2021-12-21 Google Llc Display screen with transitional graphical user interface
USD939546S1 (en) * 2019-10-02 2021-12-28 Google Llc Display screen with transitional graphical user interface
USD949887S1 (en) * 2019-10-02 2022-04-26 Google Llc Display screen with transitional graphical user interface
USD941327S1 (en) * 2019-10-02 2022-01-18 Google Llc Display screen with transitional graphical user interface
USD930680S1 (en) * 2019-10-02 2021-09-14 Google Llc Display screen with transitional graphical user interface
USD938976S1 (en) 2019-10-02 2021-12-21 Google Llc Display screen with transitional graphical user interface
USD941304S1 (en) 2019-10-30 2022-01-18 Ford Global Technologies, Llc Vehicle display panel with user interface
CN110764671B (zh) * 2019-11-06 2022-07-12 北京字节跳动网络技术有限公司 信息展示方法、装置、电子设备和计算机可读介质
USD927521S1 (en) 2019-12-09 2021-08-10 Acorns Grow Incorporated Mobile device screen or portion thereof with a graphical user interface
US11231833B2 (en) * 2020-01-10 2022-01-25 Lenovo (Singapore) Pte. Ltd. Prioritizing information when app display size is reduced
US12114974B2 (en) 2020-01-13 2024-10-15 Masimo Corporation Wearable device with physiological parameters monitoring
US20230073831A1 (en) 2020-02-03 2023-03-09 Sony Group Corporation Electronic device, information processing method, and program
US11188202B2 (en) 2020-03-10 2021-11-30 Apple Inc. Devices, methods, and graphical user interfaces for interacting with user interface objects corresponding to applications
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
CN111669631A (zh) * 2020-05-08 2020-09-15 联通(福建)产业互联网有限公司 一种基于5g电视的云桌面系统
USD951977S1 (en) * 2020-05-08 2022-05-17 Slack Technologies, Llc Display screen or portion thereof with animated graphical user interface
DK181103B1 (en) 2020-05-11 2022-12-15 Apple Inc User interfaces related to time
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
US11526256B2 (en) 2020-05-11 2022-12-13 Apple Inc. User interfaces for managing user interface sharing
USD942489S1 (en) * 2020-06-18 2022-02-01 Apple Inc. Display screen or portion thereof with graphical user interface
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
USD942490S1 (en) * 2020-06-24 2022-02-01 Apple Inc. Display screen or portion thereof with graphical user interface
US20220011347A1 (en) * 2020-07-13 2022-01-13 Rohde & Schwarz Gmbh & Co. Kg Instrument for analyzing an input signal
US20220084670A1 (en) * 2020-09-14 2022-03-17 Alyssa Jones Digital healthcare systems and methods for patient care
US11769048B2 (en) * 2020-09-15 2023-09-26 Microsoft Technology Licensing, Llc Recommending edges via importance aware machine learned model
USD1028999S1 (en) 2020-09-17 2024-05-28 Streamlayer, Inc. Display screen with transitional graphical user interface
USD973711S1 (en) * 2020-09-22 2022-12-27 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Display screen with transitional graphical user interface
USD973710S1 (en) * 2020-09-22 2022-12-27 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Display screen with transitional graphical user interface
KR102382210B1 (ko) * 2020-09-29 2022-04-01 엘에스일렉트릭(주) 취약점 테스트 제공 시스템 및 방법
CN114327319A (zh) * 2020-09-30 2022-04-12 武汉斗鱼网络科技有限公司 一种屏幕切换的处理方法、装置、设备和存储介质
USD946037S1 (en) * 2020-10-19 2022-03-15 Splunk Inc. Display screen or portion thereof having a graphical user interface for a process control editor
USD1003318S1 (en) * 2020-10-27 2023-10-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
CN112423084B (zh) * 2020-11-11 2022-11-01 北京字跳网络技术有限公司 热点榜单的显示方法、装置、电子设备和存储介质
US11734061B2 (en) 2020-11-12 2023-08-22 Automation Anywhere, Inc. Automated software robot creation for robotic process automation
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
USD1010674S1 (en) * 2020-12-31 2024-01-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Display screen or portion thereof with transitional graphical user interface
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
USD973693S1 (en) * 2021-01-08 2022-12-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD978168S1 (en) * 2021-01-08 2023-02-14 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD973692S1 (en) * 2021-01-08 2022-12-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD973690S1 (en) * 2021-01-08 2022-12-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD973691S1 (en) * 2021-01-08 2022-12-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
US11182508B1 (en) 2021-02-23 2021-11-23 Polyverse Corporation Enhanced version retention systems and methods
USD1011368S1 (en) * 2021-04-29 2024-01-16 Joyo Technology Pte. Ltd. Display screen or a portion thereof with graphical user interface
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
USD1019689S1 (en) * 2021-05-22 2024-03-26 Airbnb, Inc. Display screen with animated graphical user interface
US11461481B1 (en) 2021-06-04 2022-10-04 Polyverse Corporation Encrypted to be executed software code and execution environment apparatuses, systems, and methods
USD1024097S1 (en) * 2021-06-16 2024-04-23 Beijing Bytedance Network Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
US11216299B1 (en) 2021-07-06 2022-01-04 Polyverse Corporation Computing environment multi-aliasing systems and methods
US11354405B1 (en) 2021-07-06 2022-06-07 Polyverse Corporation Code snippet mobilization systems and methods
USD1026028S1 (en) * 2021-08-30 2024-05-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD1034634S1 (en) * 2021-09-13 2024-07-09 Everi Payments Inc. Display screen with graphical user interface
USD1044831S1 (en) * 2021-11-03 2024-10-01 Huawei Technologies Co., Ltd. Display screen or portion thereof with graphical user interface
US11861084B2 (en) * 2021-11-18 2024-01-02 International Business Machines Corporation Splitting a mobile device display and mapping content with single hand
USD1023049S1 (en) * 2021-11-25 2024-04-16 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD1024128S1 (en) * 2021-11-25 2024-04-23 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD1028001S1 (en) * 2021-12-01 2024-05-21 Coinbase, Inc. Display screen with transitional graphical user interface
USD1002657S1 (en) * 2021-12-09 2023-10-24 Reliaquest Holdings, Llc Display screen or portion thereof with a graphical user interface
US20230236547A1 (en) 2022-01-24 2023-07-27 Apple Inc. User interfaces for indicating time
USD1034631S1 (en) * 2022-03-15 2024-07-09 Google Llc Display screen or portion thereof with transitional graphical user interface
US11842028B2 (en) 2022-05-06 2023-12-12 Apple Inc. Devices, methods, and graphical user interfaces for updating a session region
EP4273677A1 (en) 2022-05-06 2023-11-08 Apple Inc. Devices, methods, and graphical user interfaces for updating a session region
USD1019691S1 (en) * 2022-05-13 2024-03-26 Travelshift ehf. Display screen with graphical user interface
USD1038143S1 (en) * 2022-05-13 2024-08-06 Travelshift ehf. Display screen with graphical user interface
USD1019685S1 (en) * 2022-05-13 2024-03-26 Travelshift ehf. Display screen with graphical user interface
USD1032632S1 (en) * 2022-06-08 2024-06-25 Prevue Holdings, Llc. Display screen with graphical user interface
USD1021930S1 (en) 2022-06-17 2024-04-09 Bottomline Technologies, Inc. Display screen with an animated graphical user interface
USD1027987S1 (en) * 2022-07-07 2024-05-21 Amber AI Limited Display screen or portion thereof with graphical user interface
CN117519540A (zh) * 2022-07-28 2024-02-06 北京小米移动软件有限公司 调节分屏窗口的方法、装置、电子设备及存储介质
CN118113206B (zh) * 2024-04-30 2024-07-19 深圳市欧度利方科技有限公司 一种平板电脑分屏智能控制方法及系统

Family Cites Families (145)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5632009A (en) 1993-09-17 1997-05-20 Xerox Corporation Method and system for producing a table image showing indirect data representations
US5513342A (en) 1993-12-28 1996-04-30 International Business Machines Corporation Display window layout system that automatically accommodates changes in display resolution, font size and national language
US5847706A (en) 1995-11-30 1998-12-08 Hewlett Packard Company Sizeable window for tabular and graphical representation of data
US5751283A (en) 1996-07-17 1998-05-12 Microsoft Corporation Resizing a window and an object on a display screen
US6473102B1 (en) * 1998-05-11 2002-10-29 Apple Computer, Inc. Method and system for automatically resizing and repositioning windows in response to changes in display
US6335743B1 (en) 1998-08-11 2002-01-01 International Business Machines Corporation Method and system for providing a resize layout allowing flexible placement and sizing of controls
US6983424B1 (en) * 2000-06-23 2006-01-03 International Business Machines Corporation Automatically scaling icons to fit a display area within a data processing system
US7289614B1 (en) * 2000-09-29 2007-10-30 Palmsource, Inc. Making a call from an address list or a call history list
US7181699B2 (en) 2001-06-13 2007-02-20 Microsoft Corporation Dynamic resizing of dialogs
JP2003087701A (ja) * 2001-09-07 2003-03-20 Kenwood Corp 表示装置、及び表示方法
US7274382B2 (en) 2003-07-16 2007-09-25 Plut William J Customizable background sizes and controls for changing background size
US7224963B2 (en) 2003-10-17 2007-05-29 Sony Ericsson Mobile Communications Ab System method and computer program product for managing themes in a mobile phone
US7398478B2 (en) 2003-11-14 2008-07-08 Microsoft Corporation Controlled non-proportional scaling display
US7370284B2 (en) 2003-11-18 2008-05-06 Laszlo Systems, Inc. User interface for displaying multiple applications
US7180531B2 (en) 2004-02-27 2007-02-20 Microsoft Corporation Method and apparatus for enabling application program compatibility with display devices having improved pixel density
US8065629B1 (en) 2004-06-22 2011-11-22 Apple Inc. Displaying icon layouts in different resolutions
US7797645B2 (en) * 2005-01-21 2010-09-14 Microsoft Corporation System and method for displaying full product functionality using minimal user interface footprint
US20060199616A1 (en) 2005-03-03 2006-09-07 Agere Systems Inc. Mobile communication device having automatic scrolling capability and method of operation thereof
ES2397734T3 (es) 2005-08-25 2013-03-11 Gambro Lundia Ab Aparato médico e interfaz de usuario para un aparato médico
KR20070028148A (ko) * 2005-09-07 2007-03-12 삼성전자주식회사 컴퓨터 및 컴퓨터시스템
US7873356B2 (en) 2005-09-16 2011-01-18 Microsoft Corporation Search interface for mobile devices
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
WO2007095505A2 (en) * 2006-02-10 2007-08-23 Access Systems Americas, Inc. Method and apparatus for displaying notifications
CN1811686A (zh) 2006-02-17 2006-08-02 魏新成 手机触摸屏上的任务栏和标题菜单工具栏
US8745526B2 (en) * 2006-03-14 2014-06-03 Blackberry Limited Screen display in application switching
US7712039B2 (en) 2006-03-31 2010-05-04 Microsoft Corporation Setting control using edges of a user interface
US8014760B2 (en) 2006-09-06 2011-09-06 Apple Inc. Missed telephone call management for a portable multifunction device
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8255811B2 (en) 2006-12-20 2012-08-28 International Business Machines Corporation Providing auto-sorting of collaborative partners or components based on frequency of communication and/or access in a collaboration system user interface
US20080189627A1 (en) * 2007-02-07 2008-08-07 Microsoft Corporation Execution of application based on task selection
US8351989B2 (en) * 2007-02-23 2013-01-08 Lg Electronics Inc. Method of displaying menu in a mobile communication terminal
CN101311891A (zh) * 2007-05-24 2008-11-26 德信无线通讯科技(北京)有限公司 一种滑动式解锁屏的方法
US20090106648A1 (en) * 2007-10-19 2009-04-23 Microsoft Corporation Positioning content using a grid
US20090160778A1 (en) 2007-12-19 2009-06-25 Nokia Corporation Apparatus, method and computer program product for using variable numbers of tactile inputs
EP3846506B1 (en) * 2008-01-30 2023-07-12 Google LLC Notification of mobile device events
US8341557B2 (en) * 2008-09-05 2012-12-25 Apple Inc. Portable touch screen device, method, and graphical user interface for providing workout support
US8863038B2 (en) * 2008-09-08 2014-10-14 Qualcomm Incorporated Multi-panel electronic device
CN101408822B (zh) * 2008-11-13 2012-01-11 宇龙计算机通信科技(深圳)有限公司 一种解锁方法、系统及内置解锁系统的移动终端
CN101408832A (zh) * 2008-11-26 2009-04-15 深圳华为通信技术有限公司 一种键盘动态解锁方法和电子设备
CN101446883B (zh) * 2008-12-02 2011-11-23 宇龙计算机通信科技(深圳)有限公司 通过触摸式屏幕控制移动设备的方法及移动设备
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US8331992B2 (en) * 2008-12-19 2012-12-11 Verizon Patent And Licensing Inc. Interactive locked state mobile communication device
WO2010077255A1 (en) 2008-12-31 2010-07-08 Abbruzzese Jared E Mobile set top box
IT1396229B1 (it) * 2009-01-14 2012-11-16 Mode Dispositivo ottico di interazione con sistemi ad interfaccia grafica con schermo a griglia di pixel
US8566044B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US8446377B2 (en) * 2009-03-24 2013-05-21 Microsoft Corporation Dual screen portable touch sensitive computing system
US8539382B2 (en) * 2009-04-03 2013-09-17 Palm, Inc. Preventing unintentional activation and/or input in an electronic device
KR101537706B1 (ko) 2009-04-16 2015-07-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US9241062B2 (en) * 2009-05-20 2016-01-19 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US8836648B2 (en) * 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
TWI402741B (zh) * 2009-05-27 2013-07-21 Htc Corp 解除螢幕鎖定的方法、行動電子裝置及電腦程式產品
US9400769B2 (en) 2009-08-06 2016-07-26 Hewlett-Packard Development Company, L.P. Document layout system
US9563350B2 (en) * 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
EP2341450A1 (en) * 2009-08-21 2011-07-06 Mikko Kalervo Väänänen Method and means for data searching and language translation
CA2714523A1 (en) * 2009-09-02 2011-03-02 Sophia Learning, Llc Teaching and learning system
US8565731B2 (en) * 2009-09-30 2013-10-22 Apple Inc. Missed communication handling
US9338274B2 (en) 2009-10-02 2016-05-10 Blackberry Limited Method of interacting with electronic devices in a locked state and handheld electronic device configured to permit interaction when in a locked state
US9424444B2 (en) 2009-10-14 2016-08-23 At&T Mobility Ii Llc Systems, apparatus, methods and computer-readable storage media for facilitating integrated messaging, contacts and social media for a selected entity
EP2360665A3 (en) * 2009-11-26 2012-03-28 LG Electronics Mobile terminal and control method thereof
US8988356B2 (en) * 2009-12-31 2015-03-24 Google Inc. Touch sensor and touchscreen user input combination
US8230339B2 (en) * 2010-03-02 2012-07-24 Oracle International Corporation Hierarchical data display
US9058186B2 (en) * 2010-04-07 2015-06-16 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
CN101853131A (zh) * 2010-05-27 2010-10-06 中兴通讯股份有限公司 一种实现锁屏的方法及装置
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
KR101684970B1 (ko) 2010-08-18 2016-12-09 엘지전자 주식회사 이동단말기 및 그 제어방법
TWI441072B (zh) 2010-09-21 2014-06-11 Altek Corp 觸控螢幕解鎖方法及其具有攝像功能之電子裝置
EP3451123B8 (en) 2010-09-24 2020-06-17 BlackBerry Limited Method for conserving power on a portable electronic device and a portable electronic device configured for the same
KR101685991B1 (ko) * 2010-09-30 2016-12-13 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
EP2437151B1 (en) * 2010-10-01 2020-07-08 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
US8749484B2 (en) * 2010-10-01 2014-06-10 Z124 Multi-screen user interface with orientation based control
US10235034B2 (en) * 2010-11-18 2019-03-19 Google Inc. Haptic feedback to abnormal computing events
KR101808625B1 (ko) 2010-11-23 2018-01-18 엘지전자 주식회사 콘텐츠 제어 장치 및 그 방법
CN102566850A (zh) 2010-12-14 2012-07-11 上海三旗通信科技股份有限公司 一种移动终端综合管理系统
CN102075619A (zh) 2010-12-15 2011-05-25 华为终端有限公司 触摸屏手机的解锁方法和触摸屏手机
US9178981B2 (en) * 2010-12-22 2015-11-03 Lg Electronics Inc. Mobile terminal and method of sharing information therein
EP2474894A1 (en) 2011-01-06 2012-07-11 Research In Motion Limited Electronic device and method of controlling same
US20120180001A1 (en) 2011-01-06 2012-07-12 Research In Motion Limited Electronic device and method of controlling same
US9423878B2 (en) * 2011-01-06 2016-08-23 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9015641B2 (en) * 2011-01-06 2015-04-21 Blackberry Limited Electronic device and method of providing visual notification of a received communication
US20120179998A1 (en) * 2011-01-12 2012-07-12 Nesladek Christopher D Touch screen user interfaces
US20120200514A1 (en) * 2011-02-07 2012-08-09 Allen James M Graphical Caregiver Interface With Swipe to Unlock Feature
JP5782810B2 (ja) * 2011-04-22 2015-09-24 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
AU2011202182B1 (en) 2011-05-11 2011-10-13 Frequency Ip Holdings, Llc Creation and presentation of selective digital content feeds
WO2012148087A2 (ko) * 2011-04-29 2012-11-01 주식회사 케이티 외부 디바이스와 도킹 연결되는 휴대 단말 및 화면 변경 방법
US9606643B2 (en) 2011-05-02 2017-03-28 Microsoft Technology Licensing, Llc Extended above the lock-screen experience
US10222974B2 (en) * 2011-05-03 2019-03-05 Nokia Technologies Oy Method and apparatus for providing quick access to device functionality
US8793624B2 (en) * 2011-05-18 2014-07-29 Google Inc. Control of a device using gestures
US9658766B2 (en) * 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US9104440B2 (en) * 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US20120304131A1 (en) * 2011-05-27 2012-11-29 Jennifer Nan Edge gesture
US20120304132A1 (en) * 2011-05-27 2012-11-29 Chaitanya Dev Sareen Switching back to a previously-interacted-with application
US20120304107A1 (en) * 2011-05-27 2012-11-29 Jennifer Nan Edge gesture
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US20120299968A1 (en) 2011-05-27 2012-11-29 Tsz Yan Wong Managing an immersive interface in a multi-application immersive environment
US9158445B2 (en) * 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
KR101825799B1 (ko) * 2011-06-05 2018-03-22 애플 인크. 다수의 애플리케이션들로부터 수신된 통지들을 디스플레이하기 위한 시스템들 및 방법들
KR101810884B1 (ko) * 2011-06-07 2017-12-20 삼성전자주식회사 디바이스에서 제스처를 이용한 웹브라우저 인터페이스 제공 장치 및 방법
US9009096B2 (en) 2011-07-12 2015-04-14 Ebay Inc. Recommendations in a computing advice facility
US20130060754A1 (en) 2011-09-01 2013-03-07 International Business Machines Corporation Feature Search Request Management
US20130061180A1 (en) 2011-09-04 2013-03-07 Microsoft Corporation Adjusting a setting with a single motion
KR101590386B1 (ko) * 2011-09-07 2016-02-01 네이버 주식회사 검색 서비스 제공 장치 및 방법
KR101563150B1 (ko) * 2011-09-09 2015-10-28 주식회사 팬택 잠금 화면에서 단축 기능을 제공하는 방법 및 그를 이용한 휴대용 단말기
US8887081B2 (en) * 2011-09-24 2014-11-11 VIZIO Inc. Touch display unlock mechanism
US20130082974A1 (en) * 2011-09-30 2013-04-04 Apple Inc. Quick Access User Interface
US9342235B2 (en) * 2011-10-03 2016-05-17 Kyocera Corporation Device, method, and storage medium storing program
KR102197462B1 (ko) * 2011-10-04 2020-12-31 구글 엘엘씨 디바이스 상의 결합된 활동 히스토리
EP4167552A1 (en) * 2011-10-17 2023-04-19 BlackBerry Limited Methods and apparatus for searching a message store
US9442942B2 (en) * 2011-10-20 2016-09-13 Nokia Technologies Oy Method, apparatus and computer program product for dynamic and visual object search interface
US9645733B2 (en) * 2011-12-06 2017-05-09 Google Inc. Mechanism for switching between document viewing windows
CN102566818A (zh) 2011-12-17 2012-07-11 鸿富锦精密工业(深圳)有限公司 具有触摸屏的电子设备及其屏幕解锁方法
US10182141B2 (en) * 2011-12-22 2019-01-15 Nokia Technologies Oy Apparatus and method for providing transitions between screens
US9626742B2 (en) 2011-12-22 2017-04-18 Nokia Technologies Oy Apparatus and method for providing transitions between screens
KR20130093721A (ko) * 2011-12-23 2013-08-23 삼성전자주식회사 디스플레이 장치 및 그 잠금 해제 방법
US20130305354A1 (en) * 2011-12-23 2013-11-14 Microsoft Corporation Restricted execution modes
KR101522399B1 (ko) 2011-12-23 2015-05-22 주식회사 케이티 휴대 단말에서 외부 디스플레이 기기로의 화면 표출 방법 및 그 휴대 단말
JP5775445B2 (ja) * 2011-12-27 2015-09-09 京セラ株式会社 装置、方法、及びプログラム
US8996729B2 (en) * 2012-04-12 2015-03-31 Nokia Corporation Method and apparatus for synchronizing tasks performed by multiple devices
JP6034401B2 (ja) * 2011-12-28 2016-11-30 ノキア テクノロジーズ オーユー アプリケーションのオープン・インスタンスの提供
US9372978B2 (en) 2012-01-20 2016-06-21 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
US10001906B2 (en) * 2012-02-06 2018-06-19 Nokia Technologies Oy Apparatus and method for providing a visual indication of an operation
US9128605B2 (en) * 2012-02-16 2015-09-08 Microsoft Technology Licensing, Llc Thumbnail-image selection of applications
US8890825B2 (en) 2012-02-20 2014-11-18 Nokia Corporation Apparatus and method for determining the position of user input
US20130219340A1 (en) 2012-02-21 2013-08-22 Sap Ag Navigation on a Portable Electronic Device
US8539375B1 (en) * 2012-02-24 2013-09-17 Blackberry Limited Method and apparatus for providing a user interface on a device enabling selection of operations to be performed in relation to content
US9081498B2 (en) 2012-02-24 2015-07-14 Blackberry Limited Method and apparatus for adjusting a user interface to reduce obscuration
US8902182B2 (en) 2012-02-24 2014-12-02 Blackberry Limited Electronic device and method of controlling a display
US20130230840A1 (en) * 2012-03-05 2013-09-05 Devendra Parkar Learning system accessory using portable handheld devices
US9639174B2 (en) * 2012-03-09 2017-05-02 Paypal, Inc. Mobile device display content based on shaking the device
US8847903B2 (en) 2012-04-26 2014-09-30 Motorola Mobility Llc Unlocking an electronic device
US9405832B2 (en) * 2012-05-31 2016-08-02 Apple Inc. Application search query classifier
US20130332831A1 (en) * 2012-06-07 2013-12-12 Sony Corporation Content management user interface that is pervasive across a user's various devices
CN102760042A (zh) * 2012-06-18 2012-10-31 惠州Tcl移动通信有限公司 一种基于图片脸部识别进行解锁的方法、系统及电子设备
US9256351B2 (en) 2012-07-20 2016-02-09 Blackberry Limited Method and electronic device for facilitating user control of a menu
US9201585B1 (en) 2012-09-17 2015-12-01 Amazon Technologies, Inc. User interface navigation gestures
US8732624B2 (en) 2012-09-20 2014-05-20 Google Inc. Protection for unintentional inputs
EP2923260B1 (en) * 2012-11-20 2020-05-06 Jolla OY A graphical user interface for a portable computing device
US10108720B2 (en) * 2012-11-28 2018-10-23 International Business Machines Corporation Automatically providing relevant search results based on user behavior
US10761672B2 (en) * 2012-12-28 2020-09-01 Facebook, Inc. Socialized dash
GB201300031D0 (en) 2013-01-02 2013-02-13 Canonical Ltd Ubuntu UX innovations
CN103111891B (zh) 2013-02-28 2015-05-20 昌辉汽车电器(黄山)股份公司 一种钥匙双面铣槽夹具
US20140245214A1 (en) * 2013-02-28 2014-08-28 Hcl Technologies Limited Enabling search in a touchscreen device
US9658740B2 (en) * 2013-03-15 2017-05-23 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9851896B2 (en) * 2013-12-17 2017-12-26 Google Inc. Edge swiping gesture for home navigation
JP6549865B2 (ja) 2015-03-13 2019-07-24 株式会社ミヤコシ インクジェット印字装置の制御方法

Also Published As

Publication number Publication date
US11245785B2 (en) 2022-02-08
EP2941687B1 (en) 2019-11-20
ES2763410T3 (es) 2020-05-28
JP6433915B2 (ja) 2018-12-05
EP3629144A1 (en) 2020-04-01
JP2019040622A (ja) 2019-03-14
US10142453B2 (en) 2018-11-27
US20140189549A1 (en) 2014-07-03
US20140189578A1 (en) 2014-07-03
US20140189608A1 (en) 2014-07-03
US20140189523A1 (en) 2014-07-03
US20140189575A1 (en) 2014-07-03
US20140189577A1 (en) 2014-07-03
CN111538406B (zh) 2024-04-02
KR102113697B1 (ko) 2020-05-22
US20190098126A1 (en) 2019-03-28
JP2016511854A (ja) 2016-04-21
US20140189588A1 (en) 2014-07-03
KR20150104587A (ko) 2015-09-15
GB201300031D0 (en) 2013-02-13
US20140189573A1 (en) 2014-07-03
KR20190059995A (ko) 2019-05-31
WO2014106739A1 (en) 2014-07-10
US9930160B2 (en) 2018-03-27
ZA201505153B (en) 2017-08-30
GB201304696D0 (en) 2013-05-01
KR102291401B1 (ko) 2021-08-23
US10122838B2 (en) 2018-11-06
US20220150344A1 (en) 2022-05-12
US11706330B2 (en) 2023-07-18
HK1217793A1 (zh) 2017-01-20
KR101985291B1 (ko) 2019-06-04
KR20200055807A (ko) 2020-05-21
CN105103111B (zh) 2020-04-03
US20140189607A1 (en) 2014-07-03
US20140189606A1 (en) 2014-07-03
EP2941687A1 (en) 2015-11-11
GB201302901D0 (en) 2013-04-03
CN111538406A (zh) 2020-08-14
CN105103111A (zh) 2015-11-25

Similar Documents

Publication Publication Date Title
JP6625191B2 (ja) コンピュータデバイスのためのユーザインターフェイス
US20230152940A1 (en) Device, method, and graphical user interface for managing folders
EP2715499B1 (en) Invisible control

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181114

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191029

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191119

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191126

R150 Certificate of patent or registration of utility model

Ref document number: 6625191

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250