[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR100260867B1 - 터치스크린포인팅디바이스의분리및합체를위한방법및시스템 - Google Patents

터치스크린포인팅디바이스의분리및합체를위한방법및시스템 Download PDF

Info

Publication number
KR100260867B1
KR100260867B1 KR1019970042566A KR19970042566A KR100260867B1 KR 100260867 B1 KR100260867 B1 KR 100260867B1 KR 1019970042566 A KR1019970042566 A KR 1019970042566A KR 19970042566 A KR19970042566 A KR 19970042566A KR 100260867 B1 KR100260867 B1 KR 100260867B1
Authority
KR
South Korea
Prior art keywords
pointing device
user
finger
virtual pointing
touchscreen
Prior art date
Application number
KR1019970042566A
Other languages
English (en)
Other versions
KR19980032332A (ko
Inventor
조니 엠. 쉬에
Original Assignee
포만 제프리 엘
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 포만 제프리 엘, 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 포만 제프리 엘
Publication of KR19980032332A publication Critical patent/KR19980032332A/ko
Application granted granted Critical
Publication of KR100260867B1 publication Critical patent/KR100260867B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

장치, 방법 및 메모리는 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 하나 이상의 일부를 분리하고 합체한다. 상기 방법은 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 것을 포함한다. 상기 방법은 또한 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스의 검출에 응답하여, 터치스크린을 따른 손가락 또는 스타일러스가 이동함에 따라 가상 포인팅 디바이스의 제1 부분만을 분리하는 것을 포함하되, 적어도 제1 기능은 상기 제1 부분과 연관되어 있다. 상기 방법은 마지막으로 상기 제1 부분 대신에 가상 포인팅 디바이스에 새로운 부분을 합체하는 것을 포함한다.

Description

터치스크린 포인팅 디바이스의 분리 및 합체를 위한 방법 및 시스템{Breakaway and Re-Grow Touchscreen Pointing Device}
본 발명은 포인팅 디바이스 및 포인터(pointing devices and pointers)에 관한 것으로, 더 상세하게는 제한없이 터치스크린 시스템 상에서 사용하기 위한 포인팅 디바이스에 관한 것이다.
종래, 사용자는 "마우스"를 사용하여 데스크톱 및 그 컴퓨터 시스템의 오퍼레이팅 시스템과 인터페이스한다. 마우스는 유선 또는 적외선 신호에 의해 컴퓨터 시스템에 접속된 특수한 하드웨어 입력 디바이스이다. 전형적으로, 상기 마우스는 그 상부에 하나 이상의 푸시 버튼과 그 바닥에 컴퓨터 시스템 옆의 표면을 따라 롤(roll along a surface)하도록 설계된 롤러를 갖는다. 사용자가 마우스의 롤러를 표면 위에서 이동시킬 때, 컴퓨터 시스템의 디스플레이 상에 위치된 마우스 포인터는 마우스의 롤러의 이동을 트랙(tracks)한다. 사용자가 포인터를 오브젝트의 위와 같은 소정의 위치에 위치시키면, 사용자는 마우스가 프로그램되어 있는 방식에 따라 오브젝트를 불러 들이거나 오픈(invoke or open the object)하기 위해 마우스 푸시 버튼중 하나를 클릭하거나 또는 여러번 클릭한다.
사용자는 마우스 및 마우스 포인터의 동작을 커스텀화(customize)할 수 있다. 종래의 일부 오퍼레이팅 시스템에 의해 유지되는 커스텀화 메뉴를 통해, 사용자는 예를 들어 하나의 기능(a first function)을 불러오기 위해 한 마우스 버튼의 한번의 클릭의 지정(the assignment of a single click of a first moue button)과, 다른 기능(a second function)을 불러오기 위해 다른 마우스 버튼의 한번의 클릭의 지정을 커스텀화할 수 있다. 또한, 사용자는 마우스 포인터를 디스플레이 스크린 상에 나타내는 것을 커스텀화할 수 있다. 예를 들어, 한 사용자는 마우스 포인터가 작은 화살표로 표시되기를 선호하는 반면에, 다른 사용자는 마우스 포인터가 깜박이는 큰 화살표로 표시되기를 선호할 수 있다. 이와 유사하게, 일부 사용자는 고속의 마우스 포인터(즉, 마우스 롤러를 적게 움직여도 마우스 포인터가 크게 이동하는)를 선호하는 반면에, 다른 사용자는 저속의 마우스 포인터를 선호할 수 있다. 이와 같은 특징은 마우스 포인터의 "민감도(sensitivity)"라고 불리운다.
이와 같은 유형의 마우스 및 마우스 포인터 동작이 각각의 개별적인 사용자를 위해 커스텀화될 수 있다. 그러나, 대부분의 오퍼레이팅 시스템은 한 시스템 상에서 오로지 하나의 사용자를 위해서만 커스텀화를 제공할 수 있다. 따라서, 다수-사용자 시스템의 경우, 사용자는 이전의 셋팅으로부터 마우스를 다시 커스텀화하여야만 한다. 이것은 전형적으로 사용자가 버튼 동작을 특수한 기능에 맵핑하는 마우스 셋팅 화일 또는 국부 데이타베이스(the user editing a mouse setting file or local database)를 편집하는 것을 포함한다. X11과 같은 일부 시스템은 이것을 수행하기 위한 특수한 init 화일을 갖는다.
종래의 마우스는 몇 가지 단점 및 한계가 있다. 예를 들어, 마우스는 손이 매우 작거나 매우 큰 사람 모두가 마우스를 적절히 사용할 수 없도록 부피가 크고, 크기가 고정되어 있으며, 컴퓨터 시스템에 영구히 고정되어 있지 않으며, 부식되며, 마우스를 사용하는 사용자가 특수한 마우스 동작(즉, 어떤 마우스 버튼과 몇 번의 클릭으로 기능이 호출되는 가)을 알 것을 필요로 한다. 따라서, 많은 고객 지향시스템(즉, ATM 머신)과 다수-사용자 시스템은 마우스를 사용하지 않는다. 대신에, 다수-사용자 시스템의 추세는 터치스크린을 사용하는 것이다.
종래의 터치스크린에서는 종래의 마우스 및 마우스 포인터 대신에 사용자의 손가락 또는 포인팅 디바이스 (예를 들면, 스타일러스(stylus))를 사용할 수 있게 한다. 예를 들어, 종래의 터치스크린은 열에 민감하고(heat sensitive), 소리에 민감하며, 압력에 민감하거나 또는 움직임에 민감한 그리드/검출기를 이용하여 터치스크린 상에 놓인 손, 손가락, 또는 스타일러스를 검출한다. 그러나, 종래의 터치스크린은 몇 가지 한계와 단점이 있다. 예를 들어, 마우스 포인터와는 달리, 손가락은 크기가 다르며, 따라서, 데스크톱은 가장 큰 손가락을 수용하기 위해 연속하는 오브젝트 아이콘과 텍스트를 멀리 떨어져 위치시켜야만 한다. 또한, 사용자는 종래의 마우스와 마우스 포인터에서 발견되는 것과 같은 커스텀화 특징을 선택할 수 없다. 더우기, 하나의 포인팅 디바이스와 커서만이 존재하기 때문에, 컷(cut) 및 페이스트와 같은 임의의 기능을 터치스크린으로 수행하기가 힘들다.
따라서, 오브젝트 아이콘이 상호 가까이 놓이는 것을 가능하게 하며 사용자 커스텀화를 가능하게 하면서 터치스크린 기술을 이용하는 새로운 포인팅 디바이스의 요구가 절실하다. 사용자 커스텀화는 포인팅 디바이스를 몇개의 브렌치(branches)로 스플릿/분리(split/breakway)하는 능력을 가지며, 이로 인해 컷과 페이스트와 같은 기능이 보다 용이하게 수행되게 한다.
장치, 방법 및 메모리는 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 하나 이상의 일부를 분리하고 합체한다. 상기 방법은 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 제1 단계를 포함한다. 상기 가상 포인팅 디바이스는 기능을 호출하도록 설계된 영역인 하나 이상의 손가락 지문 (또는 스타일러스) 터치패드로서 간주될 수 있다. 디스플레이되고 가상 포인팅 디바이스와 연관된 커서는 예를 들면, 오브젝트 아이콘 위에 위치될 수 있다. 사용자가 손가락 지문 영역을 불러 들이면 (즉, 한번의 클릭), 상기 손가락 지문 영역과 연관된 기능이 오브젝트 아이콘으로 향해질 것이다. 따라서, 상기 방법은 또한 가상 포인팅 디바이스의 적어도 제1 부분 (즉, 손가락 지문 영역) 상에 놓인 적어도 하나의 손가락 또는 스타일러스의 검출에 응답하여, 터치스크린을 따른 손가락 또는 스타일러스의 움직임에 따라 가상 포인팅 디바이스의 제1 부분만을 분리하는 제2 단계를 구비하되, 적어도 제1 기능은 제1 부분과 연관되어 있다. 제3 단계는 상기 제1 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체하는 것을 포함한다.
도 1은 본 발명과 함께 사용하기 위한 종래의 하드웨어 구성을 도시하는 도면.
도 2는 본 발명에 따른 가상 포인팅 디바이스(a virtual pointing device)를 도시하는 도면.
도 3은 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 4는 도 2에 도시된 가상 포인팅 디바이스의 변형도.
도 5는 도 2에 도시된 가상 포인팅 디바이스의 다른 도면.
도 6은 본 발명에 따른 가상 포인팅 디바이스의 특성을 정의하기 위한 메뉴도.
도 7은 본 발명에 따른 형태 메뉴(a shape menu), 기능 정의 메뉴(define functionality menu), 및 포인터 정의 메뉴(define pointer menu)를 도시하는 도면.
도 8은 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 9는 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 10은 사용자의 손가락에 의해 폴더 오브젝트(folder object) 위의 그 현재 위치로 드래그되었던 분리 손가락 지문 터치패드(breakway fingerprint touchpad)를 도시하는 도면.
도 11은 스필릿 포인터 기능(split pointer functionality)을 구현하는 이벤트-구동 순서도의 형태의 상세 논리도.
도 12는 가상 포인팅 디바이스 상으로 다시 그로운(regrown)되어, 분리 손가락 지문을 교체하는 손가락 지문 터치패드를 도시하는 도면.
<도면의 주요 부분에 대한 부호의 설명>
12 : 시스템 버스
100 : 컴퓨팅 시스템
200 : 터치스크린
210 : 손바닥 지문 영역
215 : 엄지 손가락 지문 영역
215, 220, 230, 235, 240, 280, 420, 430, 435, 440, 1020, 1200 : 손가락 지문 영역
250, 450 : 포인터
422 : 오브젝트 아이콘
600 : 디스플레이 주 메뉴
620 : 형태 메뉴
640 : 스플릿 포인터 버튼
1000 : 가상 포인팅 디바이스
1022 : 커서
1030 : 폴더 오브젝트
1060 : 중지 버튼
바람직한 실시예는 터치스크린을 이용하며, 도 1에 도시된 컴퓨팅 시스템(100)과 같은 임의의 적당한 하드웨어 컨피그레이션에서 또는 선택적으로 랩톱 또는 노트패드 컴퓨팅 시스템에서 실시될 수 있다. 컴퓨팅 시스템(100)은 표준 마이크로프로세서와 같은 임의의 적당한 중앙 처리 장치(10), 및 시스템 버스(12)를 거쳐 상호 접속된 임의의 수의 다른 오브젝트를 구비한다. 예시하기 위해, 컴퓨팅 시스템(100)은 판독 전용 메모리(ROM)(16), 랜덤 액세스 메모리(RAM)(14), 및 I/O 어댑터(18)를 거쳐 시스템 버스(12)에 접속된 주변 메모리 디바이스(즉, 디스크 또는 테이프 드라이브(20))와 같은 메모리를 포함한다. 컴퓨팅 시스템(100)은 시스템 버스(12)를 종래의 터치스크린 디스플레이 디바이스(38)에 접속시키기 위한 터치스크린 디스플레이 어댑터(36)를 더 구비한다. 또한, 사용자 인터페이스 어댑터(22)는 시스템 버스(12)를 키보드(24), 스피커(28), 마우스(26) 및 터치패드(32) (도시되지 않음)와 같은 다른 사용자 제어장치에 접속시킬 수 있다.
본 기술 분야의 숙련자는 종래의 터치스크린의 동작 방법, 종래의 터치스크린 디바이스 드라이버와 오퍼레이팅 시스템의 통신 방법, 및 사용자가 터치스크린을 이용하여 그래픽 사용자 인터페이스에서 오브젝트의 조작을 초기화시키는 종래 방법을 익히 알고 있다. 예를 들어, 터치스크린 기술은 컴퓨터 스크린을 덮는 가요성 멤브레인(a flexible membrane) 내부에 위치된 전자 센서, 적외선 신호의 그리드, 또는 유리 또는 플라스틱을 통해 반사된 음파의 변화를 감지함으로서 접촉(touch)을 검출하는 방법을 포함한다. 현재의 터치스크린 기술을 사용하여, 사용자는 터치스크린을 접촉한 다음, 손가락을 풀다운 메뉴 아래로 드래그하여 해당 메뉴 내의 오브젝트를 선택함으로서 풀 다운 메뉴의 디스플레이를 초기화시킬 수 있다.
바람직한 실시예의 그래픽 사용자 인터페이스(GUI)와 오퍼레이팅 시스템은 컴퓨터 판독가능 매체 내에 놓이며, 하나 이상의 사용자 또는 한 사용자로 하여금 터치스크린 디스플레이 디바이스 상에 디스플레이된 오브젝트 아이콘과 텍스트의 조작을 초기화시킬 수 있게 하는 터치스크린 디바이스 드라이버를 구비한다. ROM(16), RAM(14), 디스크 및/또는 테이프 드라이브(20)(즉, 자기 디스켓, 자기 테이프, CD-ROM, 광 디스크 또는 다른 적당한 기억 매체)와 같은 임의의 적당한 컴퓨터 판독가능 매체는 GUI와 오퍼레이팅 시스템을 보유할 수 있다.
바람직한 실시예에서, COSETM(커먼 오퍼레이팅 시스템 인바이런먼트) 데스크톱 GUI는 사용자를 AIXTM오퍼레이팅 시스템에 인터페이스한다. GUI는 상기 오퍼레이팅 시스템에 일체화되어 내장된 것으로 간주될 수 있다. 선택적으로, 임의의 적당한 오퍼레이팅 시스템 또는 테스크톱 환경이 이용될 수 있다. 다른 GUI 및/또는 오퍼레이팅 시스템의 예는 X11TM(X 윈도우) 그래픽 사용자 인터페이스, Sun의 SolarisTM오퍼레이팅 시스템, 및 Microsoft의 Window 95TM오퍼레이팅 시스템을 포함한다. 설명의 편의상, GUI와 오퍼레이팅 시스템이 단지 CPU(10)를 지시하고 명령하지만, GUI와 오퍼레이팅 시스템은 다음과 같은 특징 및 기능을 수행하는 것으로 기술될 것이다.
도 2를 참조하면, 터치스크린(200)은 예를 들어, 손바닥과 손가락 지문의 열, 압력 또는 소리에 민감한 종래의 적당한 임의의 터치스크린을 포함한다. 본 예에서, 사용자는 그/그녀의 우측 손(도시되지 않음)을 터치스크린(200) 상에 놓는다. 설명의 편의상, 비록 임의의 적당한 터치스크린 기술이 사용될 수 있지만, 바람직한 실시예는 소리 패턴을 검출하는 터치스크린을 사용하는 것으로 설명될 것이다. 그/그녀의 손을 터치스크린(200) 상에 놓는 사용자에 응답하여, 터치스크린(200)은 손바닥 지문 영역(210), 엄지 손가락 지문 영역(215), 손가락 지문 영역(220, 230, 235, 및 240) 및 영역(280)으로부터의 소리를 포함하여 사용자 손의 소리 패턴을 검출한다. 선택적으로, 단지 손의 일부(즉, 손가락만) 및/또는 독특한 물체(즉, 스타일러스)가 손 지문을 검출하는데 대체될 수 있다. 더우기, 하나 이상의 손 또는 물체가 한번에 검출될 수 있다.
터치스크린(200)이 도 2에 도시된 것과 유사한 하나 이상의 손/손가락 패턴을 검출하면, OS는 사용자(들)을 식별하려고 시도한다. 이렇게 하기 위해, OS는 손바닥 지문 영역(210)의 X, Y좌표와 손바닥 지문 영역(210)의 X, Y 선단을 따라 손바닥 지문 영역(210)으로부터 각각의 손가락 지문 영역(215, 220, 230 및 240)의 거리를 측정한다. OS는 손바닥 지문 영역(210)의 최좌측 및 최상부 지점의 교차점을 제1 기준점(255)으로 정의한다. OS는 엄지 손가락 지문(215)에서 상기 제1 기준점(255)까지 가장 긴 거리를 측정한다. 이와 유사하게, OS는 각각 손가락 지문 영역(220 및 230)에서 제1 기준점(255)까지 가장 긴 거리를 측정한다.
동일한 방식으로, OS는 손바닥 지문 영역(210)의 최우측 및 최상부 지점의 교차점을 제2 기준점(260)으로 정의하고, 이로 인해 손가락 지문 영역(240)에서 제2 기준점(260)까지 가장 긴 거리가 결정된다. 마지막으로, OS는 손바닥 지문 영역(210)의 X 및 Y 좌표(265 및 270)를 측정한다. 보다 정확히 하기 위해, 각 손가락 지문의 크기가 측정될 수 있다.
다음에, OS는 상기 손지문에 대해 저장된 신원이 존재하는 지를 판단하기 위해 새로이 결정된 측정값이 임의의 기존 측정값과 일치시키기 위해 메모리에 저장된 사용자 화일 데이타베이스(도시되지 않음)를 검색한다. 더 상세하게, OS는 네개의 거리 측정값과 손바닥 지문(210)의 X, Y 좌표를 사용자 화일 데이타베이스에 저장된 임의의 기존 측정값과 비교한다. 그러나, 본 기술 분야의 숙련자는 본 발명의 영역과 정신을 벗어나지 않고 특정 사용자(또는 사용자의 물체)의 손지문(또는 물체 지문)을 식별하는데 무수히 많은 수단이 존재한다는 것을 알 것이다. 예시 목적으로, 단지 손바닥 지문 영역(210)의 폭만이 일치가 존재하였는 지를 판단하는데 사용될 수 있다.
만일 OS가 사용자가 정의한(또는 디폴트) 허용가능한 공차(본 발명에 설명됨)내에서 일치를 발견하면, OS는 존재한다면 선정된 커스텀화 특징을 위해 사용자 화일을 판독하고, 상기 선정된 커스텀화 특징을 이용하여 터치스크린(200) 상에 위치된 손(또는 손의 일부) 밑에 가상 포인팅 디바이스(a virtual pointing device)를 생성한다. 부수적으로, 본 기술 분야의 숙련자는 가상 포인팅 디바이스의 다음에 디스플레이된 사용자 id 레이블 또는 가상 포인팅 디바이스의 특정 컬러 쉐이딩을 통해 사용자 일치의 보조적인 확인이 이루어질 수 있다는 것을 알 수 있다. 따라서, 예를 들어, 사용자의 엄지 손가락(즉, 엄지 손가락 지문 영역(215)), 손가락(즉, 손가락 지문 영역(220, 230, 235 및 240)), 및 손바닥(즉, 손바닥 지문 영역(210)) 밑의 터치스크린(200)의 영역이 "활성화(activated)"되고, 따라서 그와 같이 "활성화된" 영역의 사용자 손가락, 엄지 손가락, 및/또는 손바닥의 임의의 정의된 움직임이 임의의 기능을 불러 오게 한다. 그러나, 만일 OS가 손지문을 인식하지 못하면, OS는 기능의 디폴트 세트를 사용하여 손 또는 손의 일부 밑에 디폴트 가상 포인팅 디바이스를 구축할 수 있거나 또는 사용자는 커스텀화된 가상 포인팅 디바이스(본 발명에 서술됨)를 생성할 수 있다.
도 5는 사용자(들)가 가상 포인팅 디바이스(들)를 이동시키고 동작시키는 방법을 도시한다. 사용자의 손이 터치스크린(200)과 실질적으로 접촉하도록 사용자가 그/그녀의 손을 터치스크린(200) 위에서 슬라이드(slides)함에 따라, OS는 터치스크린(200) 상의 사용자의 이동하는 손의 위치를 검출하고, 이에 응답하여 가상 포인팅 디바이스의 "활성화된" 영역을 손(또는 손의 일부) 밑에 있는 영역으로 연속적으로 재정의한다. 따라서, 가상 포인팅 디바이스는 사용자 손의 이동과 함께 및 그것에 따라 이동한다. 예를 들어, 만일 "활성화된" 영역이 터치스크린 픽셀 좌표[X1, Y1, X2, Y2, X3, Y3 및 X4, Y4](도시되지 않음) 내에 포함된 영역으로서 초기에 정의되고 사용자가 해당 영역에서 터치스크린 픽셀 좌표[X5, Y5, X6, Y6, X7, Y7 및 X8, Y8]로 손가락을 이동시키면, "활성화된" 영역은 그와 같이 새로운 좌표로 이동한다.
OS는 포인터(250)가 가상 포인팅 디바이스와 일렬로 이동하도록 포인터(250)를 가상 포인팅 디바이스의 활성화된 영역(이 경우, 손가락 지문 영역(230) 위) 근처에 위치시킨다. 따라서, 사용자는 포인터(250)가 소정의 오브젝트 아이콘 위에 위치하도록 예를 들어, 가상 포인팅 디바이스 즉, 포인터(205)를 이동시킬 수 있다. 선택적으로, 사용자는 그의 손을 단순히 들어 소정의 위치에 놓을 수 있는데, 이로 인해 OS는 새로운 위치(본 발명에 서술됨)에서 사용자의 손 밑에 가상 포인팅 디바이스를 재생성할 것이다.
사용자는 사용자의 손가락, 엄지 손가락 및/또는 손바닥의 움직임을 통해 가상 포인팅 디바이스를 동작시킨다. 예시로, 사용자는 그/그녀의 엄지 손가락을 든 다음 상기 엄지 손가락을 임의의 소정 시간(즉, 2초)내에 엄지 손가락 지문 영역(215) 위에 다시 놓음 ("한번의 클릭킹(a single clicking)"이라고 함)으로서 포인터(250) 밑에 위치된 오브젝트 아이콘에 초점을 집중시키는 "포커스 기능(focus function)(245)"을 불러 올 수 있다. 이와 유사하게, 사용자는 그/그녀의 세번째 손가락을 들어 임의의 소정 시간 내에 세번째 손가락 지문 영역(235) 위에 다시 놓음으로서 "페이스트(paste)" 기능을 불러 올 수 있다.
각각의 손가락, 손바닥, 및 엄지 손가락 동작 및 연관된 기능/명령은 특정하게 정의되고 특정 기능(본 발명에서 상세히 서술됨)을 불러 오기 위해 나중에 재정의될 수 있다. OS는 손가락 동작(즉, 한번의 클릭(a single click)을 표현하는 "(1)"; 두번의 클릭(a double click)을 표현하는 "(2)" 등)과 대응하는 기능/명령(즉, 포커스(focus)(245), 오픈(open)(257), 선택후 해제(select until release)(259), 페이스트(paste)(261) 및 디폴트 메뉴(default menu)(263))을 가리키기 위해, 각각의 손가락 지문/엄지 손가락 지문 영역 위에 다이얼로그(a dialog)를 디스플레이한다.
디폴트 기능/명령, 손가락 동작 및 포인터는 다음과 같이 바람직한 실시예에 정의된다. 엄지 손가락 영역(215) 위에서 엄지 손가락을 한번 클릭하면 OS는 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 포커스 기능(245)을 불러 온다. 손가락 지문(220) 상에서 손가락을 한번 클릭하거나 또는 엄지 손가락 지문 영역(215)을 두번 클릭하면 OS는 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 오픈 기능(230)을 불러 온다. 손가락 지문 영역(230)상에서 한번 클릭함으로서 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 선택후 해제 기능(259)을 불러오는 한편, 손가락 지문 영역(235)을 한번 클릭함으로서 포인터(240) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 위에 페이스트 기능(261)을 불러온다. 마지막으로, 손가락 지문 영역(240)을 한번 클릭하면 디폴트 메뉴 기능(263)을 불러온다. 디폴트 포인터(250)는 화살표 형태이고 손가락 지문 영역(230) 근처에 배치된다. 그러나, 본 기술 분야의 숙련자는 디폴트 기능, 포인터 위치, 및/또는 손가락 동작(즉, 여러번 클럭)의 임의의 조합이 디폴트 가상 포인팅 디바이스를 정의하는데 사용될 수 있다는 것을 용이하게 알 수 있다. 또한, 두개 이상의 손가락을 동시에 한번 클릭(또는 여러번 클릭)함으로서 기능/명령을 불러 올 수 있다.
도 3은 바람직한 실시예를 구현하기 위한 세부 논리를 포함하는 순서도를 도시한다. 302에서, 터치스크린(200)은 손지문(또는 물체) 또는 선택적으로 손지문의 일부로부터 소리/열/압력 등을 검출한다. 306에서, OS는 손지문을 판독하고 이전에 서술되고 도 2에 도시된 측정값을 계산한다. 310에서, OS는 손지문 측정을 위해 데이타베이스의 사용자 화일을 검색한다. 312에서, 만일 OS가 10%의 디폴트 허용값(이는 나중에 사용자에 의해 바뀔 수 있다.) 내에서 기존의 임의의 손지문 측정값을 찾으면, 320에서, OS는 해당 사용자 화일에 있는 모든 정보를 판독하고, 322에서, 사용자 화일에서 발견된 선정된 특성에 근거하여 사용자의 손(또는 손의 일부) 밑의 터치스크린 상에 가상 포인팅 디바이스를 그린다. 부수적으로, 미래에, 만일 임의의 오브젝트 및/또는 텍스트가 가상 포인팅 디바이스에 의해 선택되었으면, 이들은 가상 포인팅 디바이스(본 발명에서 서술됨)에 대해 그 이전 위치에 대한 위치에 그려질 것이다. 333에서, OS는 사용자 일치가 정확한 지에 대한 확인을 요청한다. 만일 사용자가 가상 포인팅 디바이스를 계속 사용하면, 이때 OS는 이와 같은 사용을 확인(confirmation)으로 해석한다. OS는 가상 포인팅 디바이스에 다음에 사용자 id 레이블을 디스플레이하거나 또는 선택적으로, 가상 포인팅 디바이스를 특정 컬러 쉐이딩으로 디스플레이할 수 있다. 그렇지 않고, 만일 정당한 사용자가 아닌 것으로 간주되면, 제어는 310으로 복귀하고, 여기서 OS는 다른 가능한 일치를 위해 데이타베이스를 검색한다.
324에서, OS는 예를 들어, 터치스크린 상의 손가락 지문(들), 손바닥 지문 또는 손지문을 검출하는데 실패하는 경우와 같이 4초 이상 동안 임의의 지속적인 비정상적인 동작 또는 정의되지 않은 동작이 존재하는 지를 판단한다. 만일 OS가 비정상적인 어떠한 동작도 존재하지 않음을 검출하면, OS는 326에서(도 9를 참조) 작업 이벤트 루프(work event loop)를 수행하고, 제어는 324로 복귀한다. 도 9를 참조하면, 902에서, OS는 터치스크린에 걸쳐 손의 어떠한 이동이 발생하였는 지를 판단하고, 만일 그렇다면 904에서, OS는 손의 움직임에 따라 가상 포인팅 디바이스를 이동시킨다. 906에서, OS는 기능/명령을 불러오기 위해 손가락 또는 엄지 손가락의 이동이 발생하였는지를 판단하고, 만일 그렇다면, 908에서, OS는 포인터 밑에 위치된 임의의 오브젝트/텍스트 상에 해당 기능/명령을 불러 온다. 제어는 324로 복귀한다.
도 3의 324로 돌아가, 만일 OS가 임의의 시간(즉, 4초) 동안 비정상적인 동작 또는 정의되지 않은 동작을 검출하면, 328에서, OS는 손바닥이 터치스크린에 남아 있는 동안, 모든 손가락이 터치스크린으로부터 들어 올려져 있는 지를 판단한다. 선택적으로, 본 기술 분야의 숙련자는 많은 다른 표시기가 손가락 지문이 터치스크린과 접촉하는 동안 일단의 손가락이 들어 올려져 있는 지 또는 손바닥이 들어 올려져 있는 지를 판단하는 것과 같이 "모든 손가락이 들어 올려져 있는" 표시기를 대신할 수 있다는 것을 알 수 있다. 만일 OS가 모든 손가락이 터치스크린으로부터 들어 올려져 있다고 판단하면, 330에서, OS는 가상 포인팅 디바이스의 재커스텀화를 제공하도록 사용자를 프롬프트하는 주 메뉴(600)(본 발명에 서술된 도 6을 참조)를 디스플레이한다. 344에서, OS는 330에서 이루어진 임의의 변화에 따라 새로운 가상 포인팅 디바이스를 디스플레이하고 제어를 324로 복귀한다.
328로 돌아가, 손바닥이 터치스크린과 접촉을 유지하는 동안 만일 모든 손가락이 들어 올려진 것으로 검출되지 않았다면, 342에서, 제어는 도 8로 향한다. 도 8로 돌아가, 810에서, OS는 모든 손(또는 물체)이 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 모든 손이 터치스크린으로부터 들어 올려져 있지 않았지만, 일단의 손가락, 엄지 손가락 및/또는 손바닥(그 동작은 대응하는 정의된 기능를 갖지 않는다.)을 들어 올리는 것과 같이 비정상적이거나 또는 정의되지 않은 동작이 발생하였다면, 제어는 814로 향하고, 여기서 OS는 사용자 화일에 근거하여 손밑에 가상 포인팅 디바이스를 다시 그린다. 이는 사용자에게 바로 조금전의 손/손가락 동작이 정의되지 않은 기능을 갖는다는 것을 가리킨다. 만일 모든 손이 터치스크린으로부터 들어 올려졌다면, 811에서, OS는 임의의 시간 주기 동안(즉, 5초) 그 현재 위치에서 터치스크린 상에 가상 포인팅 디바이스를 계속 디스플레이하지만, 명확한 하이버네이트된 상태(in an obvious hibernated state)에서는 손가락 지문과 손바닥 지문 영역이 터치스크린 상에 반투명한 영역(translucent areas)으로 보일 것이라는 것을 의미한다. 가상 포인팅 디바이스가 명확히 하이버네이트된 상태에 있을 때, 활성화될 때까지 (즉, 본 발명에 서술됨) 어떠한 기능도 호출될 수 없다. 812에서, OS는 그 제거를 검출하는 5초 이내에 손이 터치스크린 상에 다시 놓여졌는 지를 판단한다. 만일 손이 5초 이내에 터치스크린 상에 다시 놓여져 있지 않으면, 제어는 826(본 발명에 서술됨)로 향한다. 그러나, 만일 OS가 5초 이내에 터치스크린 상에 다시 놓여져 있는 것을 검출하면, 816에서, OS는 하나 이상의 가상 포인팅 디바이스가 동시에 사용되고 있는 지, 그리고 만일 그렇다면, 만일 하나 이상의 사용자가 터치스크린 상에 다시 손이 놓여졌을 때 그/그녀의 손을 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 그렇지 않으면, 814에서, 제어는 도 3의 322로 돌아가고, 그로 인해 OS는 다시 놓여진 손 밑에 사용자 화일에 의해 식별된 가상 포인팅을 활성화시켜 이동시킨다. 부수적으로, 만일 임의의 오브젝트 및/또는 텍스트가 손이 들어 올려졌을 때 가상 포인팅 디바이스에 의해 선택되었다면, 이들은 가상 포인팅 디바이스(본 발명에 서술됨)의 그 이전 위치에 대한 위치에서 다시 그려질 것이다.
만일 하나 이상의 사용자가 그/그녀의 손을 터치스크린으로 부터 동시에 들어 올려졌다면, 820에서, OS는 다시 놓여진 손의 손지문을 판독하고, 이전에 서술되고 도 2에 도시된 측정값을 계산한다. 822에서, OS는 손 측정 일치를 위해 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 사용자 화일을 검색한다. 만일 일치가 발견되지 않으면, 823에서, OS는 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스중 한 디바이스의 사용자 식별을 위해 사용자 화일 데이타 베이스를 검색한다. 이때 만일 OS가 그/그녀가 사용자 식별에 의해 식별된 사용자인 지를 사용자에게 문의하는 다이얼로그(도시되지 않음)를 디스플레이한다. 만일 사용자가 825에서 그/그녀가 사용자 식별에 의해 식별되었다는 것을 가리키면, 제어는 도 3의 322로 복귀되고, 이로 인해 OS는 다시 놓여진 손 밑으로 사용자 화일에 의해 식별된 가상 포인팅 디바이스를 이동시키고, 만일 임의의 오브젝트 및/또는 텍스트가 가상 포인팅 디바이스에 의해 선택되었다면, 이들은 가상 포인팅 디바이스(본 발명에서 서술됨)의 그 이전 위치에 대한 위치에서 다시 그려질 것이다. 그러나, 만일 사용자가 825에서 식별이 사용자를 식별하지 않는다는 것을 가리키면, OS는 상기 식별이 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 최종 사용자 화일인 지를 판단한다. 만일 그렇지 않으면, 제어는 823으로 돌아가고, 여기서 OS는 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 다음 사용자 화일을 검색한다. 이 프로세스는 사용자와 사용자 식별 간의 일치, 따라서 검출되어 들어 올려진 손을 갖는 대응하는 가상 포인팅 디바이스가 발견될 때까지 반복된다. 만일 OS가 최종 사용자 화일을 검색하고 어떠한 일치도 발견되지 않으면, 839에서, 제어는 도 3의 310으로 돌아가고, 여기서 OS는 사용자 손을 위해 모든 사용자 화일을 검색한다.
812로 돌아가, 만일 손이 5초 이내에 터치스크린 상에 다시 놓여지지 않았다면, 826에서, OS는 명확한 하이버네이트된 상태에서 가상 포인팅 디바이스를 계속 디스플레이하고, 828에서, 사용자가 중지하기를 원하면 다이얼로그(도시되지 않음)에서 사용자를 프롬프트한다. 만일 사용자가 중지하기를 원하면, 제어는 OS가 디스플레이로부터 가상 포인팅 디바이스를 제거하는 830으로 향한다. 만일 사용자가 중지하기를 원하지 않으면, 832에서, OS는 마우스를 "히든 하이버네이션(hidden hibernation)" 상태에 놓는데, 이는 명확한 하이버네이트된 상태(즉, 반투명한)로 터치스크린 상에 디스플레이된 마우스 이미지가 시간에 따라 소멸되기 시작하지만, 사용자가 다음에 터치스크린을 접촉할 때 바로 활성화될 수 있다. 따라서, OS는 가상 포인팅 디바이스를 명확한 하이버네이션(즉, 반투명 형태로 디스플레이된)에서 히든 하이버네이션으로 변환한다. 사용자가 할당한 시간(즉, 30분)후에, OS는 상기 시간 지연을 가상 포인팅 디바이스가 더 이상 필요없다는 것을 의미하는 것으로 해석한다. 836에서, 만일 OS가 30분 이내에 터치스크린 상에 놓인 손을 검출하면, 840에서, OS는 가상 포인팅 디바이스를 히든 하이버네이션으로 부터 끌어 내어 그것을 손 밑에 다시 그리고, 제어는 도 3의 324로 돌아간다. 그렇지 않으면, OS는 메모리(즉, RAM)로부터 현재 히든 하이버네이션 상태에 있는 가상 포인팅 디바이스를 제거한다.
도 3의 312로 돌아가, OS는 터치스크린 상에 놓인 측정된 손과 임의의 기존의 사용자 화일 간에 일치가 발견되었는 지를 판단한다. 만일 OS가 문제가 되는 손지문에 거의 일치하는 손지문 측정값을 갖는 몇몇 사용자 화일을 검출하면, 316에서, OS는 가장 가깝게 일치하는 그와 같은 사용자를 도시하는 터치스크린 상의 드롭 다운 메뉴(drop down menu) (도시되지 않음)에 디스플레이한다. 318에서, OS는 드롭 다운 메뉴로부터 사용자 신원의 일치 또는 어떠한 일치도 발견되지 않았다는 것을 가리키는 선택을 사용자가 선택(다른 손을 사용하여)하기를 대기한다. 만일 일치가 발견되면, 제어는 320 (이전에 서술됨)으로 향한다. 만일 어떠한 일치도 발견되지 않으면, 제어는 314로 향하고, 여기서 OS는 그/그녀가 커스텀화된 가상 포인팅 디바이스를 생성하기를 원하는 지를 가리키기 위해 사용자에게 문의하는 메뉴(도 5의 510을 참조)를 터치스크린 상에 디스플레이한다. 만일 사용자가 커스텀화된 가상 포인팅 디바이스 생성하기를 원하지 않으면, OS는 터치스크린 상에 그/그녀의 손을 놓도록 사용자를 프롬프트하고, 이에 응답하여, OS는 도 5에 도시된 바와 같이 사용자의 손 밑에 이전에 서술된 바와 같이 디폴트 손가락/손바닥 동작 및 손가락 지문 기능를 갖는 포괄적인(generic) 가상 포인팅 디바이스를 구축하고, 제어는 324로 진행된다.
만일 사용자가 커스텀화된 가상 포인팅 디바이스를 생성하기를 원하면, 332에서, OS는 사용자 화일을 오픈한다. 334에서, OS는 손가락 지문 및 손바닥 지문의 크기를 사용자 화일에 저장한다. 336에서, OS는 제1 기준점 (본 발명에 서술되고 도 2에 도시됨)과 첫번째 세개의 손가락의 각 손가락 지문까지 가장 먼 지점 간의 거리를 계산한다. 부수적으로, OS는 제2 기준점과 그로부터 네번째 손가락 지문까지의 거리를 계산할 수 있다. 338에서, OS는 사용자 식별을 위해 사용자를 프롬프트하며, 가상 포인팅 디바이스 형태, 포인터 위치, 동작 및 민감도, 및 손가락 지문 기능 (본 발명에 서술되고 도 6에 도시됨)와 같은 가상 포인팅 디바이스 특성을 입력하도록 사용자를 프롬프트하는 주 메뉴(600)를 디스플레이한다. 340에서, OS는 모든 정보를 사용자 화일에 저장한다. 제어는 322로 향하고, 여기서 OS는 사용자 화일에 저장된 정보에 근가하여 손 밑(또는 손의 일부)에 가상 포인팅 디바이스를 그린다.
324에서, OS는 임의의 비정상적인 동작이 발생하였는 지를 판단한다. 만일 그렇다면, 328에서, OS는 손의 모든 손가락이 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 그렇다면, 330에서, OS는 도 6에 도시된 바와 같이 주 메뉴(600)를 디스플레이하여, 가상 포인팅 디바이스의 임의의 커스텀화를 제공하기 위해 사용자를 프롬프트한다.
도 6으로 돌아가, OS가 주 메뉴(600)를 디스플레이한 후, 사용자는 그/그녀의 손을 터치스크린으로부터 제거할 수 있다. 만일 사용자가 형태 버튼(620)을 선택하면, 사용자로 하여금 가상 포인팅 디바이스의 형태를 정의/재정의할 수 있게 하는 "형태" 메뉴가 나타난다 (도 7의 700을 참조). 도 7의 형태 메뉴(700)로 돌아가, OS는 사용자에게 몇 가지 옵션을 디스플레이한다. 예를 들어, 사용자는 가상 포인팅 디바이스를 이동시키기 위해 손가락만이 터치스크린과 접촉될 필요가 있는 "손가락 전용(fingers only)" 가상 포인팅 디바이스 (본 발명에 서술된 도 4를 참조) 또는 가상 포인팅 디바이스를 이동시키기 위해 엄지 손가락과 손바닥만이 터치스크린과 접촉될 필요가 있는 손바닥 및 엄지 손가락 전용 가상 포인팅 디바이스를 선택할 수 있다. 후자의 경우, 손가락의 이동은 지정된 기능일 수 없다. 부수적으로, "엄지 손가락과 동시에 하나의 손가락" 또는 "손바닥" 가상 포인팅 디바이스가 생성될 수 있다. 그러나, OS가 손바닥이 터치스크린과 접촉하도록 유지하면서 모든 손가락을 들어 올림으로서 주 메뉴(600)(도 6을 참조)를 불러 들이기 때문에, 만일 사용자가 손바닥을 포함하지 않는 새로운 가상 포인팅 디바이스를 정의하면, 사용자는 나중에 해당 특수 가상 포인팅 디바이스의 기능를 다시 프로그램할 수 없다. 그 보다는, 사용자는 새로운 디바이스를 생성하기 위해 포괄적인 가상 포인팅 디바이스로 시작하여야만 할 것이다. 선택적으로, 본 발명의 영역을 벗어나지 않고 주 메뉴(600)를 활성화시키기 위해 다른 기법이 사용될 수 있다.
사용자는 디폴트 정확도 공차를 10％에서 다수의 미리 프로그램된 값으로 바꿀 수 있다. 이렇게 하기 위해, 사용자는 정확도 버튼(702)를 누르고, 이에 응답하여 값(즉, 4％, 8％, 20％)의 드롭-다운 리스트가 사용자의 선택을 위해 나타날 것이다. 사용자는 버튼(704)를 눌러 모든 선택을 입력/저장한다. 이에 응답하여, 도 6에 도시된 주 메뉴(600)가 다시 나타난다.
도 6으로 돌아가, 만일 사용자가 기능 정의 버튼(625)를 선택하면, 사용자로 하여금 손가락 지문/손바닥 지문 영역의 기능를 정의/재정의할 수 있게 하는 "기능 정의" 메뉴가 나타난다. 특히, 도 7의 기능 정의 메뉴(730)는 사용자가 적당한 손가락 가까이에 있는 연관된 버튼을 눌러 각각의 손가락 지문과 엄지 손가락 지문 영역의 기능을 바꿀 수 있게 한다. 예를 들어, 사용자가 버튼(732)을 누르면, 이는 그/그녀가 두번째 손가락(즉, 손가락 지문 영역(230))의 기능를 바꾸기를 원한다는 것을 가리킨다. 이에 응답하여, OS는 메모리에 저장된 선정된 기능의 드롭-다운 리스트(740)를 디스플레이한다. 사용자가 오픈 기능(742)을 선택하였으면, 이에 응답하여 OS는 다른 드롭-다운 리스트(746)를 디스플레이한다. 사용자는 오픈 기능을 불러 들이기 위해 두번째 손가락을 두번 클릭(744)하는 것을 선택하였다. 다음에 사용자는 저장 버튼(748)를 눌러 엔트리를 사용자 화일에 저장한다. 이에 응답하여, 도 6에 도시된 주 메뉴(600)가 나타난다. 그러나, 본 기술 분야의 숙련자는 이와 같은 바람직한 실시예의 정신과 영역을 벗어나지 않고 손가락 동작 및 손가락 지문 영역 기능에서의 다른 변화가 이루어질 수 있다는 것을 알 수 있다.
도 6으로 돌아가, 만일 사용자가 포인터 정의 버튼(630)을 선택하면, 사용자로 하여금 가상 포인팅 디바이스 상에 형태, 민감도, 및 위치를 정의/재정의할 수 있게 하는 "포인터 정의" 메뉴가 나타난다. 도 7의 포인터 정의 메뉴(760)으로 돌아가, 사용자는 포인터와 관련된 다수의 선택을 갖는다. 예를 들어, 사용자는 작은, 중간 또는 큰 화살표, 및/또는 깜박이는 화살표를 선택할 수 있다. 사용자는 또한 작거나 큰 포인터 민감도, 및 가상 포인팅 디바이스에 대한 포인터의 위치를 선택할 수 있다. 예를 들어, 포인터는 세번째 손가락 위에(디폴트 위치), 첫번째 손가락 또는 손바닥 밑에 놓일 수 있다. 그러나, 본 기술 분야의 숙련자는 본 바람직한 실시예의 영역과 정신을 벗어나지 않고 포인터 동작에서 많은 변화가 이루어질 수 있다는 것을 용이하게 알 수 있다. 사용자는 저장 버튼(762)을 눌러 엔트리를 저장하고, 이에 응답하여 주 메뉴(600)가 나타난다.
도 6으로 돌아가, 만일 사용자가 스플릿 포인터 버튼(640)을 선택하면, GUI는 사용자가 가상 포인팅 디바이스의 일부를 스플릿 오프/분리(split off /breakaway)한 다음 가상 포인팅 디바이스로 포인팅 디바이스의 상기 일부를 합체하거나 또는 재-결합(re-grow or re-unite)시킬 수 있게 하는 "스플릿 포인터(split pointer)" 메뉴를 디스플레이한다. 도 11은 "분리" 가상 포인팅 디바이스를 구현하기 위한 이벤트-구동 순서도의 형태인 상세 논리도를 도시한다. 이 순서도는 도 3에 도시된 상세 논리도의 단계 (330)에 일체로 될 수 있다. 단계(330)는 사용자에게 분리/스플릿 포인팅 디바이스를 생성하는 것을 포함하여, 가상 포인팅 디바이스의 기능/특징을 정의하거나 또는 재정의하는 기회를 제공한다. 1100에서, GUI는 사용자가 주 메뉴 (도 6에 도시됨)로부터 스플릿 포인팅 디바이스 버튼(640)을 선택하였는 지를 결정한다. 만일 사용자가 스플릿 포인터 버튼(640)을 선택하지 못하면, 제어는 1120으로 진행하고, 최후에는 1190으로 진행하는데, 여기서 GUI는 주 메뉴 (도 6에 도시됨)로 복귀하여 이를 디스플레이한다.
만일 사용자가 스플릿 포인터 버튼(640)을 선택하면, 1102에서, GUI는 터치스크린 상에, GUI가 가상 포인팅 디바이스에 대해 임의의 분리 손가락 지문 영역을 합체하여야 하는 지를 사용자에게 문의하는 "합체 스플릿 포인터(re-grow split pointer)" 메뉴 (도시되지 않음)를 디스플레이한다. GUI는, 사용자가 GUI와 같이 각각 가상 포인팅 디바이스에 대해 분리 손가락 지문을 합체할 것인 지 혹은 아닌 지를 가리키는 "예" 또는 "아니오" (본 발명에 상세히 설명됨)를 사용자가 선택하기를 대기한다. 1104에서, GUI는 터치스크린 상에 가상 포인팅 디바이스를 디스플레이한다 (예를 들면, 도 5의 손가락 지문 영역(215, 220, 230, 235, 및 240) 또는 도 10의 가상 포인팅 디바이스(1000)을 참조). 제어는 1120으로 진행된다.
1120에서, GUI는, GUI가 VPD를 디스플레이하기 시작한 이래, 30초 이내에 (선택적으로, 시간적인 제한이 없을 수도 있다.) 사용자가 가상 포인팅 디바이스 (VPD) (1000) (도 10에 도시됨)의 하나 이상의 손가락 지문 영역에 접촉하였는 지를 판단한다. 만일 그렇지 않다면, 제어는 1140으로 진행된다. 만일 그렇다면, 1130에서, GUI는 접촉된 것, 따라서 그것/그들을 깜박거리게 하고 새로운 커서를 그것/그들 위에 놓음으로써 선택된 손가락 지문 영역(들)을 하이라이트한다. 따라서, 사용자가 하나 이상의 손가락 지문 영역을 분리하기 시작하면, GUI는 각각의 선택된 손가락 지문 영역 위에 새로운 커서를 디스플레이한다. 그러나, 본 기술 분야의 숙련자는, 특정한 손가락 지문이 가상 포인팅 디바이스로부터 분리하도록 선택되었다는 것을 가리키는데에는 많은 종류의 표시기가 사용될 수 있다는 것을 용이하게 알 수 있을 것이다. 제어는 1140으로 진행된다.
1140에서, GUI는, 사용자가 손가락 지문 영역을 마지막으로 선택한 후 30초 (선택적으로, 시간 제한이 없을 수도 있다.)이내에 선택된 손가락 지문 영역 상에 손가락 (또는 스타일러스)을 다시 놓았는 지를 판단하고, 만일 그렇다면, GUI는 해당 손가락의 움직임을 모니터한다. 따라서, 사용자는 손가락 지문 영역 위에 손가락 (또는 스타일러스)을 놓고 상기 손가락을 원하는 위치로 이동시킴으로써 한번에 선택된 손가락 지문 영역을 분리하기 시작할 수 있다. 선택적으로, 사용자는 두개의 손가락 지문 영역 위에 두개의 손가락 (즉, 각각에 대해 한번)을 놓음으로써 두개 이상의 손가락 지문 영역을 동시에 분리할 수 있다. 만일 GUI가 선택된 손가락 지문 영역 상에 놓이거나 또는 다시 놓인 손가락을 검출하지 못하면, 제어는 1170으로 진행된다.
만일 GUI가 선택된 손가락 지문 영역 상의 적어도 한 영역 위에 있는 손가락의 열/소리/압력을 검출하였다면, 1150에서, GUI는 터치스크린을 따라 손가락의 움직임에 따라 손가락 지문 영역과 커서를 이동시킨다. 도 10은 사용자의 손가락 (도시되지 않음)에 의해 폴더 오브젝트(1030) 위의 그 현재 위치로 드래그되었던 분리 손가락 지문 영역(1020)과 새로이 생성된 커서(1022)을 도시한다. 사용자가 그/그녀의 손가락을 그로부터 제거하면 손가락 지문 영역(1020)은 계속 깜박거린다.
도 11로 돌아가, 1160에서, 사용자가 1102에서 "합체 스플릿 손가락 옵션"을 이전에 선택하였다면 GUI는 임의의 분리 손가락 지문 영역(들) 대신에 새로운 교체 손가락 지문 영역을 드로우(draws)한다. 도 12는 분리 손가락 지문 영역(1020)을 교체하기 위해 가상 포인팅 디바이스(1250) 상에 합체되고 있는 손가락 지문 영역(1200)을 도시한다. 제어는 1170으로 진행된다.
1170에서, GUI는, 사용자가 분리 손가락 지문 영역을 포함하여 임의의 손가락 지문 영역을 불러 들였는 지 (즉, 한번 클릭함, 두번 클릭함)를 판단한다. 1172에서, GUI는 손가락 지문 영역과 연관된 동작/기능을 수행한다. 예를 들면, 도 10을 참조하면, 사용자가 이전에 "컷(cut)" 손가락 지문 영역(1052)을 두번 클릭하여, 문서의 내용(1050)을 "컷" 버퍼 (도시되지 않음)에 위치시켰기 때문에, 만일 사용자가 손가락 지문 영역(1020)을 두번 클릭하면, 문서의 내용(1050)은 문서(103)로 페이스트될 것이다. 1174에서, 만일 불러 들여진 손가락 지문 영역이 분리 손가락 지문 영역이었다면, GUI는 분리 손가락 지문 영역을 VPD와 다시 결합하거나, 또는 사용자가 이전에 "합체" 옵션을 선택하였다면, 분리 손가락 지문 영역을 삭제한다. 선택적으로, GUI는, 사용자가 예를 들면 분리 손가락 지문 영역을 세번 클릭함으로써 그/그녀가 종료하였다는 것을 가리킬 때까지 분리 손가락 지문 영역과 커서를 계속 디스플레이할 수 있을 것이다. 만일 손가락 지문 영역이 브레이크가 아니었다면, 제어는 즉시 1180으로 진행된다.
1180에서, GUI는, 사용자가 취소 버튼(1030)을 선택하였는 지를 판단한다. 만일 그렇지 않으면, 제어는 1190으로 진행된다. 만일 그렇다면, GUI는 마지막 이벤트를 언두(undoes)하거나, 또는 적당하다면, 주 메뉴(도 6)를 디스플레이한다. 예를 들면, 1120에서, 만일 사용자가 잘못하여 손가락 지문 영역을 선택하였다면, 사용자는 해당 선택을 취소하기 위해 취소를 선택할 수 있다. 다른 실시예로, 1100에서, 만일 사용자가 잘못하여 스플릿 포인터 옵션을 선택하였다면, 사용자는 주 메뉴를 디스플레이하기 위해 취소 버튼을 선택할 수 있다. 그러나, 본 기술 분야의 숙련자는 본 발명의 정신을 벗어나지 않고 본 실시예에서 임의의 유형의 적당한 에러 교정이 이용될 수 있다는 것을 용이하게 알 수 있을 것이다. 제어는 1190으로 진행된다.
1190에서, GUI는, 사용자가 중지 버튼(1060)을 선택하였는 지, 1100에서 스플릿 포인터 옵션을 선택하지 않았는 지 또는 설정된 시간내에 선택하였는 지를 판단한다. 만일 이들 이벤트중 임의의 이벤트가 발생하면, GUI는 주 메뉴로 복귀하고 이를 디스플레이한다. 만일 그렇지 않으면, 제어는 1100에서 이벤트-구동 순서도의 시작으로 복귀한다.
마지막으로, 도 6으로 돌아가, 사용자는 저장/빠져나옴 버튼(635)을 눌러 저장하고 빠져나오며, 취소 버튼(615)을 눌러 모든 변경을 취소하고 디폴트 가상 포인팅 디바이스로 돌아가기 위한 옵션을 갖는다.
도 4로 돌아가, 제2 실시예에서, OS는 선정된 표준 크기의 손가락 지문 영역(420, 430, 435 및 440)과 포인터(450)를 활성화되지 않은(또는 "명확히 하이버네이트된"으로 불리우는) 가상 포인팅 디바이스로 디스플레이한다. 가상 포인팅 디바이스의 손가락 지문 영역은 오브젝트 아이콘이 그들을 통해 보여질 수 있도록 반투명하다. 가상 포인팅 디바이스를 활성화시키기 위해, 사용자는 하나 이상의 손가락을 터치스크린(400) 상의 손가락 지문 영역(420, 430, 435 및 440) 위에 놓는다. 일단 활성화되면, OS는 디폴트 기능 (즉, 각각의 손가락 지문 영역 위에 디스플레이된 디폴트 기능)을 각각의 손가락 지문 영역에 할당한다.
하나 이상의 손가락 지문 영역 위에 놓인 손가락을 검출하는 것에 응답하여, OS는 손가락 지문 영역(들)을 손가락 지문 영역 상에 놓인 손가락의 크기에 맞게 크기를 다시 조정(resizes)한다. 따라서, 예를 들면, 만일 손가락이 손가락 지문 영역보다 작으면, 해당 손가락 지문 영역은 손가락의 크기에 맞게 축소될 것이다. 이와 반대로, 만일 손가락이 손가락 지문 영역보다 크면, 손가락 지문 영역은 손가락의 크기에 맞게 확대될 것이다.
선택적으로, OS가 하나 이상의 반투명 손가락 지문 영역(420, 430, 435 및 440) 위에서 소리 패턴(또는 열, 압력 등)을 검출하면, OS는 그 위에 손가락이 놓여 있는 가상 포인팅 디바이스의 그와 같은 영역만을 활성화시킨다. 이 경우, OS는 디폴트 기능(즉, 각 손가락 지문 영역 위에 디스플레이된 디폴트 기능)을 손가락이 그것 위에 놓인 각각의 손가락 지문 영역에 할당한다. 그러나, 손가락이 그들 위에 놓이지 않은 손가락 지문 영역은 활성화되지 않을 것이며, 따라서 이들이 활성화될 때까지 그들에게 할당된 디폴트 기능을 가지지 않을 것이다. 각각의 손가락 지문 영역은 어느 때나 활성화 될 수 있다.
사용자가 그/그녀의 손가락을 터치스크린(400)위에서 슬라이드함에 따라, OS는 사용자가 이동하는 손가락 밑의 터치스크린 픽셀 좌표를 검출하고, 이에 응답하여, 가상 포인팅 디바이스의 "활성화된" 영역을 손가락 밑의 터치스크린으로 연속적으로 재정의한다. 따라서, 가상 포인팅 디바이스는 사용자의 손가락의 움직임과 함께 그리고 그것에 따라 이동한다. 그러나, 모든 손가락 지문 영역이 일시에 활성화될 수 없는 동안, 모든 손가락 지문 영역은 하나의 오브젝트로서 함께 이동할 것이다.
OS는 포인터(450)가 가상 포인팅 디바이스의 이동에 따라 움직이도록 손가락 지문 영역(420) 근처에 포인터(450)를 위치시킨다. 따라서, 예를 들어, 사용자는 포인터(450)가 소정의 오브젝트 아이콘 위에 놓이도록 가상 포인팅 디바이스를 이동시킬 수 있다. 선택적으로, 사용자는 그 손을 단순히 들어 올려 소정의 위치에 위치시키고, 이로 인해 OS는 새로운 위치에서 사용자의 손가락 밑에 가상 포인팅 디바이스를 재생성할 수 있다. 선택적으로, 손이 들어 올려졌던 때에 가상 포인팅 디바이스에 의해 선택된 임의의 오브젝트 또는 텍스트도 역시 새로운 위치에서 다시 그려질 것이다.
본 예에서, 사용자는 그/그녀의 첫번째 손을 손가락 지문 영역(420) 위에 위치시켜 가상 포인팅 디바이스의 해당 영역을 활성화시켰다. 만일 사용자가 가상 포인팅 디바이스의 손가락 지문 영역들 간의 거리의 크기를 다시 조정하기를 원하면, 사용자는 단지 개별적인 손가락을 하나씩 디스플레이된 각각의 손가락 지문 영역에 놓고(이로 인해, 그들을 활성화시킴), 다음에 가상 포인팅 디바이스의 손가락 지문 영역 간의 간격을 커스텀화하기 위해 적당하게 각 손가락을 바깥쪽/안쪽으로 또는 위쪽/아래쪽으로 슬라이드한다. 이와 같은 방식으로, 사용자는 가상 포인팅 디바이스의 형태/크기를 그/그녀의 손의 형태/크기에 맞게 커스텀화한다. 그러나, 사용자는 그/그녀가 그것을 사용할 때마다 가상 포인팅 디바이스의 형태/크기를 액티브하게 커스텀화하여야 한다.
일단 사용자가 소정의 오브젝트 아이콘(422) 위에 포인터(450)를 위치시키면, 사용자는 예를 들면 손가락 지문 영역(420) 위에서 그의 첫번째 손가락을 한번 클릭하여 초점을 오브젝트 아이콘(422)으로 운반할 수 있다. 그러나, 포괄적인 기능(또는 이전에 설정된 기능)만이 본 실시예에 사용될 수 있다.
비록 본 발명이 특정 실시예를 참조로 도시되고 서술되었지만, 본 기술 분야의 숙련자는 첨부된 특허청구의 범위에 의해서만 한정되는 본 발명의 정신과 영역으로 부터 일탈하지 않고, 형태 및 세부사항에 있어 상기 및 다른 변화가 이루어질 수 있다는 것을 알 수 있을 것이다.
본 발명에 따른 가상 포인팅 디바이스 장치 및 방법은 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 하나 이상의 일부를 분리및 합체하는 것이 가능한 사용자 커스텀화를 가능하게 하여 컷과 페이스트와 같은 기능이 보다 용이하게 수행되게 한다.

Claims (9)

  1. 적어도 터치스크린을 갖는 컴퓨터 시스템이 가상 포인팅 디바이스(a virtual pointing device)의 적어도 일부분을 분리(breakaway) 및 합체(re-grow)하도록 하기 위한 방법에 있어서,
    (a) 상기 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 단계,
    (b) 상기 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제1 부분만을 분리하는 단계 - 적어도 제1 기능이 상기 제1 부분과 연관됨 - , 및
    (c) 상기 제1 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체(re-grow)하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 새로운 부분은 그와 연관된 제1 기능을 갖는 방법.
  3. 제1항에 있어서,
    상기 가상 포인팅 디바이스에 따라 이동하는 제1 커서를 생성하는 단계, 및
    상기 제1 부분 및 손가락 또는 스타일러스에 따라 이동하는 제2 커서를 생성하는 단계
    를 더 포함하는 방법.
  4. 제1항에 있어서,
    상기 단계 (b)는 상기 제1 부분 상의 손가락 또는 스타일러스로부터의 소리, 열, 또는 압력을 검출하는 단계를 포함하는 방법.
  5. 제2항에 있어서,
    상기 가상 포인팅 디바이스의 제2 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제2 부분만을 분리하는 단계 - 적어도 제2 기능이 상기 제2 부분과 연관됨 - ,
    상기 제2 부분 및 손가락 또는 스타일러스에 따라 이동하는 제3 커서를 생성하는 단계, 및
    상기 제2 부분 대신에 상기 포인팅 디바이스에 새로운 부분을 합체하는 단계
    를 더 포함하는 방법.
  6. 제2항에 있어서,
    상기 손가락 또는 스타일러스로 상기 제1 부분을 활성화시키는 것에 응답하여, 상기 제2 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제1 기능을 불러들이는 단계
    를 더 포함하는 방법.
  7. 제6항에 있어서,
    상기 제2 커서 밑에 놓여진 적어도 상기 오브젝트 위에 제1 기능을 불러들이는 것에 응답하여, 상기 제1 부분을 삭제하는 단계
    를 더 포함하는 방법.
  8. 제4항에 있어서,
    상기 손가락 또는 스타일러스로 상기 제2 부분을 활성화시키는 것에 응답하여, 제3 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제2 기능을 불러들이는 단계, 및
    상기 제2 부분을 삭제하는 단계
    를 더 포함하는 방법.
  9. 적어도 프로세서, 메모리, 및 터치스크린을 갖는, 가상 포인팅 디바이스(a virtual pointing device)의 적어도 일부를 분리(breaking away)하기 위한 컴퓨터 시스템에 있어서,
    (a) 상기 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하기 위한 수단 - 제1 커서는 상기 가상 포인팅 디바이스와 연관됨 - ,
    (b) 상기 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제1 부분만을 분리하기 위한 수단 - 적어도 제1 기능이 상기 제1 부분과 연관됨 -, 및
    (c) 상기 제1 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체하기 위한 수단 - 상기 새로운 부분은 그와 연관된 제1 기능을 가짐 -
    을 포함하는 컴퓨터 시스템.
KR1019970042566A 1996-10-04 1997-08-29 터치스크린포인팅디바이스의분리및합체를위한방법및시스템 KR100260867B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/726,457 US5872559A (en) 1996-10-04 1996-10-04 Breakaway and re-grow touchscreen pointing device
US8/726,457 1996-10-04

Publications (2)

Publication Number Publication Date
KR19980032332A KR19980032332A (ko) 1998-07-25
KR100260867B1 true KR100260867B1 (ko) 2000-07-01

Family

ID=24918681

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970042566A KR100260867B1 (ko) 1996-10-04 1997-08-29 터치스크린포인팅디바이스의분리및합체를위한방법및시스템

Country Status (2)

Country Link
US (1) US5872559A (ko)
KR (1) KR100260867B1 (ko)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060180653A1 (en) * 1997-05-07 2006-08-17 Diebold, Incorporated ATM system and method
EP1717678B1 (en) * 1998-01-26 2017-11-22 Apple Inc. Method for integrating manual input
JP2000113220A (ja) * 1998-09-30 2000-04-21 Sony Corp 情報処理装置および方法、並びに提供媒体
US6498600B1 (en) * 1999-08-18 2002-12-24 Ericsson Inc. Electronic devices including keypads that illuminate in response to proximity of a user and methods of operating such electronic devices
US6654484B2 (en) * 1999-10-28 2003-11-25 Catherine Topping Secure control data entry system
US20040207606A1 (en) * 1999-11-08 2004-10-21 Atwood Stephen P. Sensing the size of a touch point in a touch-sensitive panel employing resistive membranes
US6910132B1 (en) 2000-09-15 2005-06-21 Matsushita Electric Industrial Co., Ltd. Secure system and method for accessing files in computers using fingerprints
US7061468B2 (en) * 2001-04-10 2006-06-13 Logitech Europe S.A. Hybrid presentation controller and computer input device
US7379053B2 (en) * 2001-10-27 2008-05-27 Vortant Technologies, Llc Computer interface for navigating graphical user interface by touch
KR100484143B1 (ko) * 2002-06-12 2005-04-18 삼성전자주식회사 터치 스크린을 사용하는 단말기에 있어서 편집 장치 및 방법
WO2005093576A1 (en) * 2004-03-28 2005-10-06 Robert Iakobashvili Visualization of packet network performance, analysis and optimization for design
CN1957319A (zh) 2004-05-03 2007-05-02 皇家飞利浦电子股份有限公司 用于与用户交互作用的图形用户接口，系统，方法和计算机程序
US7743348B2 (en) * 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US7925996B2 (en) * 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US7649526B2 (en) * 2005-12-23 2010-01-19 Apple Inc. Soft key interaction indicator
US10915242B1 (en) * 2006-12-19 2021-02-09 Philip R. Schaefer Interface to computer and other display information
US7855718B2 (en) * 2007-01-03 2010-12-21 Apple Inc. Multi-touch input discrimination
US8269727B2 (en) * 2007-01-03 2012-09-18 Apple Inc. Irregular input identification
US8130203B2 (en) 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
CN101673154B (zh) * 2008-09-10 2012-11-21 鸿富锦精密工业（深圳）有限公司 基于触摸屏的区域选择方法
US8423916B2 (en) * 2008-11-20 2013-04-16 Canon Kabushiki Kaisha Information processing apparatus, processing method thereof, and computer-readable storage medium
KR101553629B1 (ko) * 2009-05-06 2015-09-17 삼성전자주식회사 인터페이스 제공 방법
US9310907B2 (en) 2009-09-25 2016-04-12 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
WO2011037558A1 (en) * 2009-09-22 2011-03-31 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8766928B2 (en) * 2009-09-25 2014-07-01 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8799826B2 (en) * 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for moving a calendar entry in a calendar application
US8832585B2 (en) * 2009-09-25 2014-09-09 Apple Inc. Device, method, and graphical user interface for manipulating workspace views
US8612884B2 (en) * 2010-01-26 2013-12-17 Apple Inc. Device, method, and graphical user interface for resizing objects
US8539386B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for selecting and moving objects
US8539385B2 (en) * 2010-01-26 2013-09-17 Apple Inc. Device, method, and graphical user interface for precise positioning of objects
US9098182B2 (en) * 2010-07-30 2015-08-04 Apple Inc. Device, method, and graphical user interface for copying user interface objects between content regions
US9081494B2 (en) 2010-07-30 2015-07-14 Apple Inc. Device, method, and graphical user interface for copying formatting attributes
US8972879B2 (en) 2010-07-30 2015-03-03 Apple Inc. Device, method, and graphical user interface for reordering the front-to-back positions of objects
JP2012048311A (ja) * 2010-08-24 2012-03-08 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP2012226720A (ja) * 2011-04-21 2012-11-15 Shinten Sangyo Co Ltd 携帯情報端末の認証装置およびその認証方法
KR101417663B1 (ko) * 2013-07-12 2014-07-11 한양대학교 산학협력단 저 결맞음 간섭계 기반 지문 인식 프로브 및 그를 구비한 지문 인식 장치
TWI520017B (zh) * 2014-01-23 2016-02-01 艾維克科技股份有限公司 滑鼠按鍵功能設定方法及其系統
US10102310B2 (en) * 2015-05-08 2018-10-16 Siemens Product Lifecycle Management Software Inc. Precise object manipulation system and method
CN111228793B (zh) * 2020-01-21 2021-11-19 腾讯科技（深圳）有限公司 交互界面的显示方法和装置、存储介质及电子装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914624A (en) * 1988-05-06 1990-04-03 Dunthorn David I Virtual button for touch screen
US5327161A (en) * 1989-08-09 1994-07-05 Microtouch Systems, Inc. System and method for emulating a mouse input device with a touchpad input device
EP0450196B1 (en) * 1990-04-02 1998-09-09 Koninklijke Philips Electronics N.V. Data processing system using gesture-based input data
US5428367A (en) * 1991-07-08 1995-06-27 Mikan; Peter J. Computer mouse simulator having see-through touchscreen device and external electronic interface therefor
US5376946A (en) * 1991-07-08 1994-12-27 Mikan; Peter J. Computer mouse simulator device
US5164713A (en) * 1991-10-15 1992-11-17 Bain Lee L Cursor position controller for use with mouse and display systems
US5335557A (en) * 1991-11-26 1994-08-09 Taizo Yasutake Touch sensitive input control device
US5748184A (en) * 1996-05-28 1998-05-05 International Business Machines Corporation Virtual pointing device for touchscreens
US5764222A (en) * 1996-05-28 1998-06-09 International Business Machines Corporation Virtual pointing device for touchscreens

Also Published As

Publication number Publication date
US5872559A (en) 1999-02-16
KR19980032332A (ko) 1998-07-25

Similar Documents

Publication Publication Date Title
KR100260867B1 (ko) 터치스크린포인팅디바이스의분리및합체를위한방법및시스템
KR100260866B1 (ko) 터치스크린포인팅디바이스의분리를위한방법및시스템
KR100259452B1 (ko) 터치스크린용 가상 포인팅 디바이스
KR100255284B1 (ko) 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 장치, 컴퓨터 시스템의 지시 방법 및 컴퓨터 사용가능 매체를 구비한 제조 물품
KR100255285B1 (ko) 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 시스템, 컴퓨터 시스템의 지시 방법, 및 컴퓨터 사용가능 매체를 구비한 제조 물품
US5748184A (en) Virtual pointing device for touchscreens
US5764222A (en) Virtual pointing device for touchscreens
JP3504462B2 (ja) ポインティング・デバイス生成指示方法及びコンピュータ・システム
US5933134A (en) Touch screen virtual pointing device which goes into a translucent hibernation state when not in use
US5790104A (en) Multiple, moveable, customizable virtual pointing devices
US5874948A (en) Virtual pointing device for touchscreens
US5812118A (en) Method, apparatus, and memory for creating at least two virtual pointing devices
RU2559749C2 (ru) Система ввода информации касанием с тремя состояниями
US9459700B2 (en) Keyboard with ntegrated touch surface
EP0827064B1 (en) Selection device for touchscreen systems
US20060022955A1 (en) Visual expander
GB2509599A (en) Identification and use of gestures in proximity to a sensor
KR20100018883A (ko) 전자기기의 사용자 인터페이스 방법 및 장치
US20140298275A1 (en) Method for recognizing input gestures
KR20170071460A (ko) 즐겨찾기모드 조작방법 및 이를 수행하는 터치 스크린을 포함하는 장치
WO2012170410A1 (en) Keyboard with integrated touch surface

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee