KR102306535B1 - 디바이스를 제어하는 방법 및 디바이스 - Google Patents

Abstract

디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득하고, 디바이스에서 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들 중 획득된 호버링 입력 수단의 유형에 관한 정보에 대응하는 사용자 인터페이스를 디스플레이 하는 디바이스를 제어하는 방법이 개시된다.

Description

디바이스를 제어하는 방법 및 디바이스{METHOD FOR CONTROLLING DEVICE AND THE DEVICE}

본 발명은 디바이스를 제어하는 방법 및 그 디바이스에 관한 것이다.

네트워크 및 멀티미디어 기술이 발전함에 따라, 디바이스의 사용자는 서비스 제공 서버로부터 다양한 서비스를 제공받을 수 있게 되었다. 또한, 네트워크 및 멀티미디어 기술의 발전과 함께 디바이스에 관한 연구가 활발히 이루어지면서, 디바이스들은 사용자에게 여러 가지 형태의 사용자 인터페이스를 제공할 수 있다.

디바이스가 제공 가능한 서비스와 사용자 인터페이스의 형태가 다양해 지면서, 사용자가 원하는 서비스를 제공받기 위해, 디바이스를 제어하는 경우, 입력할 수 있는 사용자 입력의 형태도 다양해졌다. 최근에는 디바이스에 포함되는 센서들이 다양해 지면서, 사용자가 이용 가능한 서비스에 보다 적합한 입력 형태를 제공할 수 있도록 다양한 종류의 입력 형태를 인식하여 디바이스를 제어할 수 있는 기술이 요구되고 있다.

본 발명의 일 실시예는 디바이스에 정보를 전송하는 사용자 입력 수단에 따라 사용자 인터페이스를 제공함으로써, 사용자가 디바이스에서 제공 가능한 서비스를 보다 용이하게 이용할 수 있도록 디바이스를 제어하는 방법 및 디바이스를 제공할 수 있다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법은, 디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득하는 단계; 및 상기 디바이스에서 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들 중 상기 획득된 호버링 입력 수단의 유형에 관한 정보에 대응하는 사용자 인터페이스를 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 호버링 입력 수단의 유형에 기초하여, 서로 다른 동작에 관한 정보를 식별할 수 있는 정도를 나타내는 정밀도(resolution)를 결정하는 단계; 및 결정된 정밀도에 따라, 어플리케이션에서 수행되는 적어도 하나의 동작에 관한 정보가 출력되는 사용자 인터페이스를 디스플레이 한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 출력되는 위치가 결정된 정밀도에 대응되는 사용자 인터페이스를 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 결정된 정밀도가 임계값 이상인 경우, 적어도 하나의 동작에 관한 정보가 디바이스의 화면으로부터 호버링 입력 수단 간의 거리 차이에 따라 출력되는 사용자 인터페이스를 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 호버링 입력 수단의 유형에 기초하여 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정하는 단계; 및 복수의 사용자 인터페이스들 중에서 결정된 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 복수의 사용자 인터페이스들은, 어플리케이션 실행 시 수행되는 동작들을, 동작들 각각을 수행하는데 필요한 호버링 입력 수단의 정밀도에 따라 분류하여 출력한 사용자 인터페이스를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 어플리케이션 실행 시, 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 표시한 사용자 인터페이스를 우선적으로 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 디스플레이 하는 단계는, 호버링 입력 수단으로부터 수신 가능한 호버링 입력들이 어플리케이션 실행 시 수행 가능한 동작들 각각에 대응되지 않는 경우, 복수의 동작들에 관한 정보를 그룹으로 분류하여 출력한 사용자 인터페이스를 디스플레이 하는 단계를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법에 있어서, 복수의 사용자 인터페이스들은, 동작들에 관한 정보를 기 설정된 기간 동안 동작이 실행된 횟수 및 동작들 간의 관련도 중 적어도 하나에 따라 그룹으로 분류하여 표시한 사용자 인터페이스를 포함한다.

본 발명의 일 실시예에 따라 디바이스를 제어하는 방법은, 호버링 입력 수단의 일측면과 다른 측면의 위치 정보를 획득하는 단계; 획득된 위치 정보를 이용하여, 디바이스에 대한 호버링 입력 수단의 기울기를 결정하는 단계; 및 결정된 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정하는 단계를 더 포함한다.

본 발명의 일 실시예에 따른 디바이스는 디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득하는 센싱부; 디바이스에서 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들 중 상기 획득된 호버링 입력 수단의 유형에 대응되는 사용자 인터페이스가 출력되도록 제어하는 제어부; 및 대응되는 사용자 인터페이스를 디스플레이 하는 디스플레이부를 포함한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 호버링 입력 수단의 유형에 기초하여, 서로 다른 동작에 관한 정보를 식별할 수 있는 정도를 나타내는 정밀도(resolution)를 결정하고, 결정된 정밀도에 따라, 어플리케이션에서 수행되는 적어도 하나의 동작에 관한 정보가 출력된다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 출력되는 위치가 결정된 정밀도에 대응되는 사용자 인터페이스를 선택한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 결정된 정밀도가 임계값 이상인 경우, 적어도 하나의 동작에 관한 정보가 디바이스의 화면으로부터 호버링 입력 수단 간의 거리 차이에 따라 출력되는 사용자 인터페이스를 선택한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 호버링 입력 수단의 유형에 기초하여 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정하고, 복수의 사용자 인터페이스들 중에서 결정된 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 선택한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 복수의 사용자 인터페이스들은, 어플리케이션 실행 시 수행되는 동작들을, 동작들 각각을 수행하는데 필요한 호버링 입력 수단의 정밀도에 따라 분류하여 출력한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 어플리케이션 실행 시, 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 표시한 사용자 인터페이스를 우선적으로 선택한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 제어부는, 호버링 입력 수단으로부터 수신 가능한 호버링 입력들이 어플리케이션 실행 시 수행 가능한 동작들 각각에 대응되지 않는 경우, 복수의 동작들에 관한 정보를 그룹으로 분류하여 출력한 사용자 인터페이스를 선택한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 복수의 사용자 인터페이스들은, 동작들에 관한 정보를 기 설정된 기간 동안 동작이 실행된 횟수 및 상기 동작들 간의 관련도 중 적어도 하나에 따라 그룹으로 분류하여 표시한 사용자 인터페이스를 포함한다.

본 발명의 일 실시예에 따른 디바이스에 있어서, 센싱부는, 호버링 입력 수단의 일측면과 다른 측면의 위치 정보를 획득하고, 제어부는, 획득된 위치 정보를 이용하여, 디바이스에 대한 호버링 입력 수단의 기울기를 결정하고, 결정된 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정한다.

도 1은 본 발명의 일 실시예에 따른 디바이스를 제어하는 방법을 설명하기 위한 개념도이다.
도 2는 본 발명의 일 실시예에 따라 디바이스를 제어하는 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 일 실시예에 따라 디바이스의 입력 정밀도에 따라 사용자 인터페이스를 선택하는 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 복수의 사용자 인터페이스들을 설명하기 위한 도면이다.
도 5는 본 발명의 일 실시예에 따른 디바이스가 호버링 입력 수단(510, 520)의 유형에 따라 사용자 인터페이스 상에 표시되는 동작에 관한 정보를 변경하는 방법을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따라 디바이스가 호버링 입력 수단의 유형에 기초하여 결정된 동작의 수행 단위에 따라 동작에 관한 정보가 표시된 사용자 인터페이스를 디스플레이 하는 방법을 설명하기 위한 흐름도이다.
도 7은 본 발명의 일 실시예에 따라, 동영상 재생 어플리케이션 실행 시 호버링 입력 수단의 유형을 기초로 선택된 동작의 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 설명하기 위한 도면이다.
도 8A 및 도 8B는 본 발명의 일 실시예에 따라, 사진 폴더 어플리케이션 실행 시 호버링 입력 수단의 유형을 기초로 선택된 동작의 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따라 대형 디스플레이를 구비한 디바이스에서 감지되는 호버링 입력에 따라 사용자 인터페이스를 변경하는 방법을 설명하기 위한 도면이다.
도 10은 본 발명의 일 실시예에 따라 디바이스에서 어플리케이션 실행 시 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 출력하는 사용자 인터페이스를 디스플레이 하는 방법을 설명하기 위한 흐름도이다.
도 11은 본 발명의 일 실시예에 따라 문서 작성 어플리케이션이 실행되는 경우, 디바이스가 호버링 입력 수단의 유형에 따라 사용자 인터페이스를 선택하는 방법을 설명하기 위한 도면이다.
도 12는 본 발명의 일 실시예에 따라 디바이스에 대한 호버링 입력 수단의 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정하는 방법을 설명하기 위한 흐름도이다.
도 13은 본 발명의 일 실시예에 따라 디바이스에 대한 호버링 입력 수단의 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정하는 방법을 설명하기 위한 도면이다.
도 14 및 도 15는 본 발명의 일 실시예에 따른 디바이스의 구성을 설명하기 위한 블록도이다.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.

본 명세서에서, 어플리케이션은 특정한 업무를 수행하기 위한 일련의 컴퓨터 프로그램 집합을 말한다. 본 명세서에 기술되는 어플리케이션은 다양할 수 있다. 예를 들어, 음악 재생 어플리케이션, 동영상 재생 어플리케이션, 사진 폴더 어플리케이션, 카메라 어플리케이션, 문서 편집 어플리케이션, 메모 어플리케이션, 다이어리 어플리케이션, 폰 북 어플리케이션, 방송 어플리케이션, 운동 지원 어플리케이션, 결제 어플리케이션 등이 있을 수 있으나, 이에 한정되는 것은 아니다.

한편, 명세서 전체에서 호버링 입력은 호버링 입력 수단이 디바이스로부터 기 설정된 거리 이내에 접근하는 경우, 생성될 수 있다. 호버링 입력 수단이 디바이스에 접근함에 따라 생성되는 호버링 입력은, 디바이스와 호버링 입력 수단 간의 거리 및 호버링 입력 수단의 움직임, 호버링 입력 수단의 유형 중 적어도 하나에 따라 변경될 수 있다. 디바이스가 호버링 입력 수단에 의해 발생되는 호버링 입력을 감지하는 방법은 다양할 수 있다.

본 발명의 일 실시예에 따라, 호버링 입력 수단이 디바이스에 접근하는 경우, 디바이스의 패널 내부에 발생되는 전압의 흐름이 변경될 수 있다. 디바이스 내에서 발생되는 전압의 흐름이 변경됨에 따라, 신호가 발생될 수 있다. 디바이스는 발생되는 신호에 따라, 호버링 입력 수단이 접근한 위치의 좌표를 인식할 수 있다. 여기에서의 좌표는 2차원 평면상의 좌표 뿐만 아니라 3차원 공간 상의 좌표를 포함할 수 있다.

다른 실시예에 따라, 디바이스는 호버링 입력 수단에서 발생되는 정전기에 따라 변경되는 신호를 인식하여, 호버링 입력 수단이 접근한 위치의 좌표를 인식할 수 있다.

또 다른 실시예에 따라, 디바이스는 호버링 입력 수단이 접근함에 따라, 빛이 차단되어 진행하지 못하는 현상을 감지하여, 호버링 입력 수단이 접근한 위치의 좌표를 인식할 수 있다.

또 다른 실시예에 따라, 디바이스는 호버링 입력 수단이 접근함에 따라, 변하는 자기장을 감지하여, 호버링 입력 수단이 접근한 위치의 좌표를 인식할 수 있다.

또 다른 실시예에 따라, 디바이스는 호버링 입력 수단에서 발생되는 특정 주파수의 초음파를 감지할 수 있다. 디바이스는 초음파가 감지된 위치를 이용하여, 호버링 입력 수단이 접근한 위치의 좌표를 인식할 수 있다. 한편, 전술한 디바이스가 호버링 입력 수단을 감지하는 방법은 일 예일 뿐, 비 접촉 상태의 입력 수단을 감지할 수 있는 일반적인 근접 센싱(sensing) 기술이 디바이스에서 호버링 입력 수단을 감지하는 방법으로 이용될 수 있다.

호버링 입력 수단은 종류 및 성능에 따라 유형이 결정될 수 있다. 호버링 입력 수단에는 펜 및 손가락 등이 포함될 수 있으나, 이는 일 실시예일 뿐, 본 발명의 호버링 입력 수단이 전술한 예에 한정되는 것은 아니다.

이하 첨부된 도면을 참조하여 본 발명을 상세히 설명하기로 한다.

도 1은 본 발명의 일 실시예에 따른 디바이스(100)를 제어하는 방법을 설명하기 위한 개념도이다.

디바이스(100)는 실행되는 어플리케이션에서 수행 가능한 적어도 하나의 동작에 관한 정보가 출력되는 사용자 인터페이스를 디스플레이 할 수 있다. 여기에서, 적어도 하나의 동작에 관한 정보에는 동작을 나타내는 아이콘(20), 동작을 실행함에 따라 디바이스(100)의 화면에 출력되는 이미지, 텍스트 및 동영상 등의 컨텐트(30)가 포함될 수 있다.

도 1을 참조하면, 디바이스(100)에서 문서 편집 어플리케이션이 실행되는 경우, 문서를 구성하는 텍스트를 복사하는 동작, 텍스트를 잘라내는 동작 및 텍스트를 붙여넣는 동작을 나타내는 아이콘들(20)이 사용자 인터페이스 상에 출력될 수 있다. 도 1에서는 동작을 나타내는 아이콘들(20)이 디바이스(100)로부터 떨어진 3차원의 공간 상에 디스플레이 되지만, 이는 본 발명의 일 예일 뿐, 디바이스(100)의 화면 상에, 동작을 나타내는 아이콘(20)이 표시될 수 있다. 한편, 디바이스(100)에서 텍스트를 복사하는 동작을 수행함에 따라 선택된 텍스트(30)가 사용자 인터페이스 상에 디스플레이 될 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)는 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들을 저장할 수 있다. 복수의 사용자 인터페이스들에서는 동작에 관한 정보를 선택하기 위해 획득되어야 하는 호버링 입력의 위치가 서로 상이할 수 있다.

예를 들어, 제 1 사용자 인터페이스가 디스플레이 되는 경우, 디바이스(100)는 디바이스와의 거리가 일정 값(D1, D2, D3)인 지점에 호버링 입력 수단(10)이 위치하는 경우, 호버링 입력 수단(10)의 위치에 대응되는 동작을 선택할 수 있다. 다른 예에 따라, 제 2 사용자 인터페이스가 디스플레이 되는 경우, 디바이스(100)는 호버링 입력 수단(10)과 디바이스와의 거리 및 2차원 평면에서의 호버링 입력 수단(10)의 위치에 따라 대응되는 동작을 선택할 수 있다. 다만, 이는 본 발명의 일 실시예에 따른 복수의 사용자 인터페이스들의 일 예일 뿐, 전술한 예에 따라 사용자 인터페이스가 한정되는 것은 아니다.

본 발명의 일 실시예에 따른 복수의 사용자 인터페이스들에서는 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 각각 다른 위치에 출력될 수 있다.

한편, 디바이스(100)는 호버링 입력을 송신하는 호버링 입력 수단(10)의 유형에 따라 복수의 사용자 인터페이스들 중 어느 하나를 선택할 수 있다. 호버링 입력 수단(10)의 유형은 호버링 입력 수단의 종류 및 성능에 따라 결정될 수 있다. 호버링 입력 수단의 종류에는 펜 및 손가락 등이 포함될 수 있다.

또한, 호버링 입력 수단의 성능은 호버링 입력 수단이 사용자 인터페이스 상에 출력되는 서로 다른 정보를 식별하여 호버링 입력을 의도한 정보에 매핑시킬 수 있는지를 나타내는 정밀도에 따라 결정될 수 있다.

예를 들어, 손가락과 펜을 비교하면, 손가락의 두께와 펜의 두께 차이에 의해, 정밀도가 상이할 수 있다. 예를 들어, 손가락은 디바이스(100)에 2mm 간격을 두고 위치한 정보를 각각 식별하여 호버링 입력을 의도된 정보에 매핑시킬 수 없지만, 펜은 디바이스(100)에 2mm 간격을 두고 위치한 정보를 각각 식별하여, 호버링 입력을 의도된 정보에 매핑시킬 수 있다. 본 명세서에서는 호버링 입력 수단으로부터 수신되는 호버링 입력이 사용자 인터페이스 상의 서로 다른 정보를 식별할 수 있는 정도를 정밀도로 설명하도록 한다. 전술한 예에서, 펜의 정밀도가 손가락의 정밀도 보다 높은 것으로 설명할 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)는 복수의 사용자 인터페이스들 중에서, 출력되는 동작에 관한 정보의 위치가 결정된 호버링 입력 수단(10)의 정밀도에 대응될 수 있는 사용자 인터페이스를 선택할 수 있다. 예를 들어, 호버링 입력 수단(10)의 유형이 손가락으로 결정된 경우, 디바이스(100)는 동작에 관한 정보가 2mm 를 초과하는 간격의 거리에 따라 출력되는 사용자 인터페이스를 선택할 수 있다.

다른 예에 따라, 디바이스(100)는 어플리케이션 실행 시, 선택된 동작이 수행되는 수행 단위에 대응되는 복수의 사용자 인터페이스들을 저장할 수 있다. 예를 들어, 동영상 재생 어플리케이션이 실행되는 경우, 탐색되는 동영상의 프레임 단위가 전체 프레임 개수의 10%인 사용자 인터페이스와 1%인 사용자 인터페이스가 디바이스(100)에 저장될 수 있다.

디바이스(100)는 획득된 호버링 입력 수단(10)의 유형에 따라 동작의 수행 단위 별로 정보를 출력하는 복수의 사용자 인터페이스들 중 어느 하나를 선택할 수 있다. 예를 들어, 디바이스(100)는 상대적으로 정밀도가 낮은 손가락의 경우, 탐색되는 동영상의 프레임 단위가 전체 프레임 개수의 10%인 사용자 인터페이스를 선택할 수 있다. 또한, 디바이스(100)는 상대적으로 정밀도가 높은 펜의 경우, 탐색되는 동영상의 프레임 단위가 전체 프레임 개수의 1%인 사용자 인터페이스를 선택할 수 있다.

디바이스(100)는 스마트폰, 휴대폰, PDA(personal digital assistant), 랩톱, 미디어 플레이어, GPS(global positioning system) 장치, 스마트 워치(smart watch) 및 스마트 글라스(smart glass) 등의 웨어러블 디바이스(wearable device), 랩톱, 및 기타 모바일 또는 비모바일 컴퓨팅 장치일 수 있으나, 이에 제한되지 않는다.

도 2는 본 발명의 일 실시예에 따라 디바이스(100)를 제어하는 방법을 설명하기 위한 흐름도이다.

단계 S210에서, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단(10)의 유형에 관한 정보를 획득한다.

본 발명의 일 실시예에 따른 디바이스(100)는 호버링 입력 수단(10)이 감지됨에 따라 변경되는 정전 용량의 정도에 따라 호버링 입력 수단(10)의 유형을 결정할 수 있다. 디바이스(100)는 미리 저장된 호버링 입력 수단의 유형에 따른 정전 용량의 변경 정도에 관한 정보와 호버링 입력 수단(10)이 감지됨에 따라 변경된 정전 용량의 정도를 비교하여, 감지된 호버링 입력 수단(10)의 유형을 결정할 수 있다.

다른 예에 따라, 디바이스(100)는 호버링 입력 수단(10)으로부터 송신되는 신호를 식별하여, 호버링 입력 수단(10)의 유형을 결정할 수 있다. 또 다른 예에 따라, 디바이스(100)는 호버링 입력 수단(10)의 형태를 감지하여, 호버링 입력 수단(10)의 유형을 결정할 수 있다.

단계 S220에서, 디바이스(100)는 디바이스(100)에서 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들 중 획득된 호버링 입력 수단의 유형에 관한 정보에 대응하는 사용자 인터페이스를 디스플레이 한다.

본 발명의 일 실시예에 따른 디바이스(100)는 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들을 저장할 수 있다. 복수의 사용자 인터페이스들은 각각 복수의 동작들에 관한 정보 중 어느 하나를 선택하기 위해 획득되어야 하는 호버링 입력의 위치가 서로 상이할 수 있다.

예를 들어, 동영상 재생 어플리케이션이 실행되는 경우, 관련된 동작에는 동영상을 재생하는 동작, 동영상을 정지하는 동작, 동영상을 앞으로 감는 동작 및 동영상을 뒤로 감는 동작이 포함될 수 있다. 동영상 재생 어플리케이션에 관한 복수의 사용자 인터페이스들 중 제 1 사용자 인터페이스에서는 디바이스와의 거리가 D1, D2, D3, D4인 지점에 호버링 입력 수단(10)이 위치하는 경우, 호버링 입력 수단(10)의 위치에 대응되는 동작이 선택될 수 있다. 다른 예에 따라, 동영상 재생 어플리케이션에 관한 복수의 사용자 인터페이스들 중 제 2 사용자 인터페이스에서는 디바이스와의 거리가 D1, D3, D5, D7인 지점에 호버링 입력 수단(10)이 위치하는 경우, 호버링 입력 수단(10)의 위치에 대응되는 동작이 선택될 수 있다.

디바이스(100)는 호버링 입력 수단(10)의 성능에 따라, 복수의 사용자 인터페이스들 중 어느 하나를 선택할 수 있다. 호버링 입력 수단(10)의 성능은 호버링 입력 수단(10)의 유형마다 상이할 수 있다. 호버링 입력 수단(10)의 성능은 호버링 입력 수단이 사용자 인터페이스 상에 출력되는 서로 다른 정보를 식별하여 호버링 입력을 의도한 정보에 매핑시킬 수 있는 정도를 나타내는 정밀도에 따라 결정될 수 있다.

다른 예에 따라, 디바이스(100)는 어플리케이션 실행 시, 선택된 동작이 수행되는 수행 단위에 대응되는 복수의 사용자 인터페이스들을 저장할 수 있다. 예를 들어, 동영상 재생 어플리케이션이 실행되는 경우, 탐색되는 동영상의 프레임 단위가 전체 프레임 개수의 10%인 사용자 인터페이스와 1%인 사용자 인터페이스가 디바이스(100)에 저장될 수 있다.

디바이스(100)는 획득된 호버링 입력 수단(10)의 유형에 따라 동작의 수행 단위 별로 정보를 출력하는 복수의 사용자 인터페이스들 중 어느 하나를 선택할 수 있다. 이에 대해서는 도 7 내지 도 9를 참조하여 구체적으로 후술하도록 한다.

디바이스(100)는 디스플레이 된 사용자 인터페이스 상에서, 수신한 호버링 입력에 대응되는 동작을 선택할 수 있다. 예를 들어, 디바이스(100)는 선택된 사용자 인터페이스 상에서 위치 D2에 홀딩된 호버링 입력 수단(10)에 의해 송신되는 호버링 입력을 기초로 잘라내기 동작을 선택할 수 있다.

다른 예에 따라, 디바이스(100)는 동작의 수행 단위 별로 정보를 출력하는 사용자 인터페이스를 디스플레이 할 수 있다. 예를 들어, 동영상 재생 어플리케이션의 경우, 디바이스(100)는 화면상에, 동영상의 빨리 감기 동작이 수행되는 단위를 전체 프레임 개수의 10%의 개수씩 표시한 사용자 인터페이스를 디스플레이 할 수 있다.

도 3은 본 발명의 일 실시예에 따라 디바이스(100)의 입력 정밀도에 따라 사용자 인터페이스를 선택하는 방법을 설명하기 위한 흐름도이다.

단계 310에서, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단(10)의 유형에 관한 정보를 획득한다.

한편, 단계 310은 도 2를 참조하여 전술한 단계 210과 대응될 수 있다.

단계 320에서, 디바이스(100)는 호버링 입력 수단(10)의 유형에 기초하여, 호버링 입력 수단(10)의 정밀도를 결정할 수 있다. 정밀도는 호버링 입력 수단(10)이 사용자 인터페이스 상에 출력되는 정보들 각각을 식별하기 위해 요구되는 정보들의 위치의 차이에 따라 결정될 수 있다.

예를 들어, 손가락은 디바이스(100)에 2mm 간격을 두고 위치한 정보를 각각 식별하여 호버링 입력을 의도된 정보에 매핑시킬 수 없지만, 펜은 디바이스(100)에 2mm 간격을 두고 위치한 정보를 각각 식별하여, 호버링 입력을 의도된 정보에 매핑시킬 수 있다. 전술한 예에 따르면, 펜의 정밀도가 손가락의 정밀도에 비해 높다는 것을 확인할 수 있다.

단계 330에서, 디바이스(100)는 결정된 입력 정밀도에 따라 어플리케이션에서 수행되는 적어도 하나의 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택한다.

디바이스(100)에서 출력 가능한 복수의 사용자 인터페이스들은 각각 동작들에 관한 정보를 선택하기 위해 호버링 입력이 수신되어야 하는 위치가 상이할 수 있다. 예를 들어, 제 1 사용자 인터페이스의 경우, 서로 다른 동작들에 관한 정보를 식별하여 어느 하나의 동작을 선택하기 위해 호버링 입력이 수신되어야 하는 위치의 차이가 2mm 간격일 수 있다. 한편, 제 2 사용자 인터페이스의 경우에는 서로 다른 동작들에 관한 정보를 식별하여 어느 하나의 동작을 선택하기 위해 호버링 입력이 수신되어야 하는 위치의 차이가 3mm 간격일 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)는 2mm 간격에 따라 출력되는 동작에 관한 정보를 식별하기에 호버링 입력 수단(10)의 정밀도가 낮은 경우, 3mm 간격에 따라 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택할 수 있다. 예를 들어, 디바이스(100)는 호버링 입력 수단이 손가락인 경우, 손가락의 정밀도에 따라 3mm 간격에 따라 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택할 수 있다.

다른 예에 따라 디바이스(100)는 전술한 예와 같이 호버링 입력 수단(10)의 정밀도가 낮아, 호버링 입력 수단으로부터 수신 가능한 호버링 입력들이 동작들에 관한 정보에 각각 대응되지 않는 경우, 복수의 동작들에 관한 정보를 그룹으로 분류하여 출력한 사용자 인터페이스를 선택할 수 있다. 여기에서, 동작들에 관한 정보는 기 설정된 기간 동안 동작이 실행된 횟수 및 동작들 간의 관련도 중 적어도 하나에 따라 2개 이상의 그룹으로 분류될 수 있다.

한편, 디바이스(100)는 호버링 입력 수단(10)의 정밀도가 임계값 이상인 경우, 동작들에 관한 정보가 호버링 입력 수단(10)과 디바이스(100) 간의 거리 차이에 따라 출력되는 사용자 인터페이스를 선택할 수 있다. 디바이스(100)는 호버링 입력 수단(10)의 정밀도가 임계값 미만인 경우에는, 동작들에 관한 정보를 호버링 입력 수단(10)과 디바이스(100)간의 거리 차이와 호버링 입력 수단(10)의 2차원 평면 상에서의 위치 정보에 따라 출력되는 사용자 인터페이스를 선택할 수도 있다. 이에 대해서는 도 4를 참조하여 보다 구체적으로 후술하도록 한다.

단계 340에서, 디바이스(100)는 선택된 사용자 인터페이스를 디스플레이 한다. 디바이스(100)는 디스플레이 된 사용자 인터페이스 상에서, 수신한 호버링 입력에 대응되는 동작을 선택할 수 있다.

한편, 단계 340은 도 2를 참조하여 전술한 단계 230과 대응될 수 있다.

도 4는 본 발명의 일 실시예에 따른 복수의 사용자 인터페이스들을 설명하기 위한 도면이다.

도 4의 (a)를 참조하면, 디바이스(100)는 호버링 입력 수단인 손가락(410)으로부터 호버링 입력을 수신할 수 있다. 디바이스(100)는 호버링 입력 수단인 손가락(410)의 정밀도를 결정할 수 있다. 예를 들어, 디바이스(100)는 미리 저장된 데이터로부터 손가락(410)의 정밀도에 대한 정보를 획득할 수 있다.

디바이스(100)는 손가락(410)의 정밀도를 기초로, 손가락(410)으로부터 수신되는 호버링 입력들이 각각 의도된 동작에 관한 정보에 매핑될 수 있는 사용자 인터페이스를 선택할 수 있다. 여기에서, 손가락(410)의 정밀도는 디바이스(100)에 미리 설정된 임계값 미만으로 가정한다.

도 4의 (a)에서 디바이스(100)는 손가락(410)의 정밀도가 임계값 미만이므로, 디바이스와 호버링 입력 수단 간의 거리 및 호버링 입력 수단의 2차원 평면상에서의 위치 정보에 따라 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보 중 어느 하나가 선택될 수 있는 사용자 인터페이스를 출력할 수 있다.

디바이스(100)와 손가락(410) 간의 거리가 D1인 경우, 디바이스(100)는 제 1 그룹(420)에 포함된 동영상을 재생하는 동작, 동영상을 정지하는 동작, 동영상을 일시 정지하는 동작들 중에서 어느 하나를 선택할 수 있다. 디바이스(100)는 2차원 평면 상에서의 손가락(410)의 위치 정보를 이용하여, 동영상을 재생하는 동작, 동영상을 정지하는 동작, 동영상을 일시 정지하는 동작들 중에서 어느 하나를 선택할 수 있다. 예를 들어, 2차원 평면 상에서의 호버링 입력 수단의 위치의 좌표가 (x1, y1)인 경우, 디바이스(100)는 좌표 (x1, y1)의 위치에 대응되는 동작인 동영상을 재생하는 동작을 선택할 수 있다.

또한, 디바이스(100)와 손가락(410) 간의 거리가 D3인 경우, 디바이스(100)는 제 2 그룹(430)에 포함된 동영상을 앞으로 감는 동작 및 뒤로 감는 동작들 중에서 어느 하나를 선택할 수 있다. 디바이스(100)는 2차원 평면 상에서의 손가락(410)의 위치 정보를 이용하여, 동영상을 앞으로 감는 동작 및 뒤로 감는 동작들 중에서 어느 하나를 선택할 수 있다.

한편, 디바이스(100)는 기 설정된 기간 동안 각각의 동작이 실행된 횟수 및 동작들간의 관련도에 따라, 동작들을 그룹으로 분류할 수 있다. 예를 들어, 디바이스(100)는 사용 횟수가 높은 동작들을 동일한 그룹으로 분류할 수 있다. 또한, 디바이스(100)는 동영상을 재생하는 동작들 중에서, 재생되는 프레임을 변경시키는 동작인 앞으로 감는 동작과 뒤로 감는 동작을 동일한 그룹으로 분류할 수도 있다.

도 4의 (b)를 참조하면, 디바이스(100)는 호버링 입력 수단인 펜(440)으로부터 호버링 입력을 수신할 수 있다. 디바이스(100)는 호버링 입력 수단인 펜(440)의 정밀도를 결정할 수 있다. 예를 들어, 디바이스(100)는 미리 저장된 데이터로부터 펜(440)의 정밀도에 대한 정보를 획득할 수 있다.

디바이스(100)는 펜(440)의 정밀도를 기초로, 펜(440)으로부터 수신되는 호버링 입력들이 각각 의도된 동작에 관한 정보에 매핑될 수 있는 사용자 인터페이스를 선택할 수 있다. 여기에서, 펜(440)의 정밀도는 디바이스(100)에 미리 설정된 임계값 이상으로 가정한다.

도 4의 (b)에서 디바이스(100)는 펜(440)의 정밀도가 임계값 이상이므로, 디바이스와 호버링 입력 수단 간의 거리에 따라 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보 중 어느 하나가 선택될 수 있는 사용자 인터페이스를 출력할 수 있다.

디바이스(100)와 펜(440) 간의 거리가 D1인 경우, 디바이스(100)는 동영상을 재생하는 동작을 선택할 수 있다. 또한, 디바이스(100)와 펜(440) 간의 거리가 D2인 경우, 디바이스(100)는 동영상을 정지하는 동작을 선택할 수 있다. 디바이스(100)와 펜(440) 간의 거리가 D3인 경우, 디바이스(100)는 동영상을 일시 정지하는 동작을 선택할 수 있다. 또한, 디바이스(100)와 펜(440) 간의 거리가 각각 D4, D5인 경우, 디바이스(100)는 동영상을 뒤로 빨리 감는 동작 및 앞으로 빨리 감는 동작을 선택할 수 있다.

도 5는 본 발명의 일 실시예에 따른 디바이스(100)가 호버링 입력 수단(510, 520)의 유형에 따라 사용자 인터페이스 상에 표시되는 동작에 관한 정보를 출력하는 방법을 설명하기 위한 도면이다.

본 발명의 일 실시예에 따른 디바이스(100)는 어플리케이션 실행 시 수행되는 동작들을, 동작들 각각을 수행하는데 필요한 호버링 입력 수단의 정밀도에 따라 분류할 수 있다. 예를 들어, 디바이스(100)는 동작을 수행하는데 필요한 호버링 입력 수단의 정밀도가 높은 동작들을 분류하여. 분류된 동작들에 관한 정보가 출력되는 제 1 사용자 인터페이스를 생성할 수 있다. 다른 예를 들어, 디바이스(100)는 동작을 수행하는데 필요한 호버링 입력 수단의 정밀도가 낮은 동작들을 분류하여. 분류된 동작들에 관한 정보가 출력되는 제 2 사용자 인터페이스를 생성할 수 있다.

도 5의 (a)에는, 통화 어플리케이션이 실행되는 경우, 호버링 입력 수단(510, 520)의 유형에 따라 출력되는 서로 다른 사용자 인터페이스가 도시되어 있다. 디바이스(100)는 통화 어플리케이션 실행 시, 손가락(510)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 부재중 송수신 리스트가 표시된 사용자 인터페이스(530)를 출력할 수 있다. 또한, 디바이스(100)는 통화 어플리케이션 실행 시, 펜(520)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 디바이스(100)에 저장된 연락처의 리스트가 표시된 사용자 인터페이스(540)를 출력할 수 있다.

도 5의 (b)에는, 메일 어플리케이션이 실행되는 경우, 호버링 입력 수단(510, 520)의 유형에 따라 출력되는 서로 다른 사용자 인터페이스가 도시되어 있다. 디바이스(100)는 메일 어플리케이션 실행 시, 손가락(510)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 읽지 않은 메일들의 리스트가 표시된 사용자 인터페이스(550)를 출력할 수 있다. 또한, 디바이스(100)는 메일 어플리케이션 실행 시, 펜(520)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 디바이스(100)에서 일정 기간 동안 수신한 메일 전체의 리스트가 표시된 사용자 인터페이스(560)를 출력할 수 있다.

도 5의 (c)에는, 웹(510, 520) 어플리케이션이 실행되는 경우, 호버링 입력 수단의 유형에 따라 출력되는 서로 다른 사용자 인터페이스가 도시되어 있다. 디바이스(100)는 웹 어플리케이션 실행 시, 손가락(510)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 사용자가 방문한 사이트들이 표시된 사용자 인터페이스(570)를 출력할 수 있다. 또한, 디바이스(100)는 웹 어플리케이션 실행 시, 펜(520)으로부터 호버링 입력을 수신하는 경우, 관련된 동작들에 관한 정보 중에서, 즐겨찾기 리스트가 표시된 사용자 인터페이스(580)를 출력할 수 있다.

도 6은 본 발명의 일 실시예에 따라 디바이스(100)가 호버링 입력 수단의 유형에 기초하여 결정된 동작의 수행 단위에 따라 동작에 관한 정보가 표시된 사용자 인터페이스를 디스플레이 하는 방법을 설명하기 위한 흐름도이다.

단계 610에서, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단(10)의 유형에 관한 정보를 획득한다.

한편, 단계 610은 도 2를 참조하여 전술한 단계 210과 대응될 수 있다.

단계 620에서, 디바이스(100)는 호버링 입력 수단(10)의 유형에 기초하여, 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정한다. 여기에서, 동작의 수행 단위는 동작을 수행함에 따라 변경되는 정보의 양에 따라 결정될 수 있다. 예를 들어, 디바이스(100)에서 동영상을 앞으로 감는 동작을 수행하는 경우, 결정된 동작의 수행 단위에 따라 변경되는 프레임의 개수가 전체 프레임 개수의 10%일 수 있고, 전체 프레임 개수의 1%일 수도 있다.

한편, 호버링 입력 수단(10)의 유형에 따라 호버링 입력 수단(10)의 정밀도가 결정될 수 있다. 디바이스(100)는 호버링 입력 수단(10)의 정밀도에 대응되는 동작의 수행 단위를 결정할 수 있다. 예를 들어, 디바이스(100)는 상대적으로 정밀도가 낮은 손가락이 호버링 입력 수단인 경우, 변경되는 동영상의 프레임 개수를 전체 프레임 개수의 10%로 결정할 수 있다. 다른 예에 따라, 디바이스(100)는 상대적으로 정밀도가 높은 펜이 호버링 입력 수단인 경우, 변경되는 동영상의 프레임 개수를 전체 프레임 개수의 1%로 결정할 수 있다.

단계 630에서, 디바이스(100)는 복수의 사용자 인터페이스들 중에서, 결정된 수행 단위에 따라 동작에 관한 정보가 표시된 사용자 인터페이스를 선택한다.

예를 들어, 디바이스(100)는 동영상 재생 어플리케이션 실행 시, 변경되는 프레임의 개수가 전체 프레임 개수의 10%로 결정된 경우, 10% 단위로 분할된 프로세스바가 표시되는 사용자 인터페이스를 선택할 수 있다. 다른 예에 따라 디바이스(100)는 동영상 재생 어플리케이션 실행 시, 변경되는 프레임의 개수가 전체 프레임 개수의 1%로 결정된 경우, 1% 단위로 분할된 프로세스바가 표시되는 사용자 인터페이스를 선택할 수 있다.

한편, 전술한 예는 디바이스(100)가 결정된 수행 단위에 따라 동작에 관한 정보가 표시된 사용자 인터페이스를 선택하는 방법을 설명하기 위한 일 예일 뿐, 본 발명이 이에 한정되는 것은 아니다

단계 640에서, 디바이스(100)는 선택된 사용자 인터페이스를 디스플레이 한다. 디바이스(100)는 디스플레이 된 사용자 인터페이스 상에서, 수신한 호버링 입력에 대응되는 동작을 선택할 수 있다.

한편, 단계 640은 도 2를 참조하여 전술한 단계 230과 대응될 수 있다.

도 7은 본 발명의 일 실시예에 따라, 동영상 재생 어플리케이션 실행 시 호버링 입력 수단의 유형을 기초로 선택된 동작의 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 설명하기 위한 도면이다.

도 7의 (a)를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 손가락(710)임을 확인할 수 있다.

디바이스(100)는 손가락(710)에 대응되는 동영상을 앞으로 빨리 감는 동작의 수행 단위를 결정할 수 있다. 여기에서, 동작의 수행 단위는 동영상을 앞으로 빨리 감는 동작을 수행함에 따라 변경되는 프레임의 양에 따라 결정될 수 있다.

일 실시예에 따른 디바이스(100)는 손가락의 정밀도에 따라 동영상을 앞으로 빨리 감는 동작의 수행 단위를 결정할 수 있다. 디바이스(100)는 미리 저장된 데이터 베이스로부터 손가락이 호버링 입력 수단인 경우, 동영상을 앞으로 빨리 감는 동작의 수행 단위에 관한 정보를 결정할 수 있다. 도 7의 (a)에서, 디바이스(100)는 손가락이 호버링 입력 수단인 경우, 변경되는 동영상의 프레임 개수의 단위를 전체 프레임 개수의 10%로 결정할 수 있다.

디바이스(100)는 변경되는 프레임의 개수가 전체 프레임 개수의 10%로 결정된 경우, 복수의 사용자 인터페이스들 중에서 10% 단위로 분할된 프로세스바(720)가 표시된 사용자 인터페이스를 선택할 수 있다.

디바이스(100)는 선택된 사용자 인터페이스를 디스플레이 할 수 있다. 또한, 디바이스(100)는 사용자 인터페이스 상에서 손가락에 대응되는 위치에 표시된 프레임으로 재생되는 프레임을 변경할 수 있다. 예를 들어, 사용자 인터페이스 상에서, 손가락의 위치가 50%라고 표시된 이미지에 대응되는 경우, 디바이스(100)는 재생되는 프레임을 전체 프레임들 중에서 50%에 해당하는 위치의 프레임으로 변경할 수 있다.

도 7의 (b)를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 펜(730)임을 확인할 수 있다.

디바이스(100)는 펜(730)에 대응되는 동영상을 앞으로 빨리 감는 동작의 수행 단위를 결정할 수 있다. 여기에서, 동작의 수행 단위는 동영상을 앞으로 빨리 감는 동작을 수행함에 따라 변경되는 프레임의 양에 따라 결정될 수 있다.

일 실시예에 따른 디바이스(100)는 펜(730)의 정밀도에 따라 동영상을 앞으로 빨리 감는 동작의 수행 단위를 결정할 수 있다. 디바이스(100)는 미리 저장된 데이터 베이스로부터 펜이 호버링 입력 수단인 경우, 동영상을 앞으로 빨리 감는 동작의 수행 단위에 관한 정보를 획득할 수 있다. 도 7의 (b)에서, 디바이스(100)는 펜이 호버링 입력 수단인 경우, 변경되는 동영상의 프레임 개수의 단위를 전체 프레임 개수의 1%로 결정할 수 있다.

디바이스(100)는 변경되는 프레임의 개수가 전체 프레임 개수의 1%로 결정된 경우, 복수의 사용자 인터페이스들 중에서 1% 단위로 분할된 프로세스바(740)가 표시된 사용자 인터페이스를 선택할 수 있다.

디바이스(100)는 선택된 사용자 인터페이스를 디스플레이 할 수 있다. 또한, 디바이스(100)는 사용자 인터페이스 상에서 손가락에 대응되는 위치에 표시된 프레임으로 재생되는 프레임을 변경할 수 있다. 예를 들어, 사용자 인터페이스 상에서, 손가락의 위치가 4%라고 표시된 이미지에 대응되는 경우, 디바이스(100)는 재생되는 프레임을 전체 프레임들 중에서 4%에 해당하는 위치의 프레임으로 변경할 수 있다.

도 8A 및 8B는 본 발명의 일 실시예에 따라, 사진 폴더 어플리케이션 실행 시 호버링 입력 수단의 유형을 기초로 선택된 동작의 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 설명하기 위한 도면이다.

도 8A를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 손가락(810)임을 확인할 수 있다.

디바이스(100)는 손가락(810)에 대응되는 사진을 탐색하는 동작의 수행 단위를 결정할 수 있다. 여기에서, 동작의 수행 단위는 사진을 탐색하는 동작을 수행함에 따라 화면에 표시되는 사진의 수에 따라 결정될 수 있다.

일 실시예에 따른 디바이스(100)는 손가락(810)의 정밀도에 따라 사진을 탐색하는 동작의 수행 단위를 결정할 수 있다. 디바이스(100)는 미리 저장된 데이터 베이스로부터 손가락이 호버링 입력 수단인 경우, 사진을 탐색하는 동작의 수행 단위에 관한 정보를 결정할 수 있다. 디바이스(100)는 손가락(810)의 정밀도에 따라, 사진을 탐색하는 동작이 수행되는 경우, 출력되는 사진의 개수를 선택할 수 있는 수행 단위의 종류를 3개로 결정할 수 있다. 도 8의 (a)에서, 디바이스(100)는 디바이스(100)와 손가락(810)간의 거리가 D1인 경우, n개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 또한, 디바이스(100)는 디바이스(100)와 손가락(810)간의 거리가 D3인 경우, n/3개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 디바이스(100)는 디바이스와 손가락(810)간의 거리가 D5인 경우, n/5개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다.

도 8B를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 펜(820)임을 확인할 수 있다.

디바이스(100)는 펜(820)에 대응되는 사진을 탐색하는 동작의 수행 단위를 결정할 수 있다. 여기에서, 동작의 수행 단위는 사진을 탐색하는 동작을 수행함에 따라 화면에 표시되는 사진의 수에 따라 결정될 수 있다.

일 실시예에 따른 디바이스(100)는 펜(820)의 정밀도에 따라 사진을 탐색하는 동작의 수행 단위를 결정할 수 있다. 디바이스(100)는 미리 저장된 데이터 베이스로부터 펜(820)이 호버링 입력 수단인 경우, 사진을 탐색하는 동작의 수행 단위에 관한 정보를 결정할 수 있다.

디바이스(100)는 펜(820)의 정밀도에 따라, 사진을 탐색하는 동작이 수행되는 경우, 출력되는 사진의 개수를 선택할 수 있는 수행 단위의 종류를 3개로 결정할 수 있다. 도 8의 (b)에서, 디바이스(100)는 디바이스(100)와 펜(820)간의 거리가 D1인 경우, n개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 또한, 디바이스(100)는 디바이스(100)와 펜(820)간의 거리가 D2인 경우, n/2개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 디바이스(100)는 디바이스와 펜(820)간의 거리가 D3인 경우, n/3개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 디바이스(100)는 디바이스(100)와 펜(820)간의 거리가 D4인 경우, n/4개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다. 디바이스(100)는 디바이스와 펜(820)간의 거리가 D5인 경우, n/5개의 사진을 출력하는 사용자 인터페이스를 선택할 수 있다.

도 9는 본 발명의 일 실시예에 따라 대형 디스플레이를 구비한 디바이스(900)에서 감지되는 호버링 입력에 따라 사용자 인터페이스를 변경하는 방법을 설명하기 위한 도면이다.

도 9의 (a)를 참조하면, 디바이스(900)는 호버링 입력 수단(910)이 디바이스(900)의 대형 디스플레이의 일부분에 일정 시간 이상 위치 하는 경우, 대형 디스플레이 상에 출력되는 사용자 인터페이스의 일부를 표시하는 미니맵(920)을 생성할 수 있다. 또한, 디바이스(900)는 호버링 입력 수단(910)이 일정 시간 이상 위치하는 지점과 디바이스(900) 간의 거리 차이에 따라 생성되는 미니맵(920)의 크기를 결정할 수 있다.

도 9의 (b)를 참조하면, 디바이스(900)는 호버링 입력 수단(910)과 디바이스(900)간의 거리에 따라, 미니맵(920)에 표시되는 사용자 인터페이스의 일부분을 변경할 수 있다. 예를 들어, 디바이스(900)는 호버링 입력 수단(910)이 디바이스(900)로부터 D1의 거리에 위치하는 경우, 현재 표시된 사용자 인터페이스의 일부분으로부터 좌측 상단으로 10cm 이동시킨 사용자 인터페이스의 일부분을 미니맵(920)에 표시할 수 있다. 또한, 디바이스(900)는 호버링 입력 수단(910)이 디바이스(900)로부터 D2의 거리에 위치하는 경우, 현재 표시된 사용자 인터페이스의 일부분으로부터 좌측 상단으로 20cm 이동시킨 사용자 인터페이스의 일부분을 미니맵(920)에 표시할 수 있다.

한편, 미니맵(920)의 이동 거리가 변경되는 단위는 호버링 입력 수단(910)의 유형에 따라 결정될 수 있다. 예를 들어, 호버링 입력 수단(910)이 손가락인 경우, 디바이스(100)는 손가락과 디바이스(900)간의 거리 차이에 따라 미니맵(920)이 이동하는 거리를 10cm씩 변경할 수 있다. 한편, 다른 예에 따라, 호버링 입력 수단(910)이 펜인 경우, 디바이스(900)는 펜과 디바이스(900)간의 거리 차이에 따라 미니맵(920)이 이동하는 거리를 5cm씩 변경할 수 있다.

본 발명의 일 실시예에 따른 디바이스(900)는 미니맵(920) 이외에도, 호버링 입력에 따라 화면에 표시되는 마우스 포인터 또는 커서가 이동하는 거리를 결정할 수 있다.

도 10은 본 발명의 일 실시예에 따라 디바이스(100)에서 어플리케이션 실행 시 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 출력하는 사용자 인터페이스를 디스플레이 하는 방법을 설명하기 위한 흐름도이다.

단계 1010에서, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단(10)의 유형에 관한 정보를 획득한다.

한편, 단계 1010은 도 2를 참조하여 전술한 단계 210과 대응될 수 있다.

단계 1020에서, 디바이스(100)는 호버링 입력 수단의 유형에 대응되는 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택할 수 있다. 여기에서, 호버링 입력 수단의 유형에 대응되는 동작은 동작을 수행하는데 필요한 호버링 입력이 호버링 입력 수단에 의해 송신될 수 있는지 여부에 따라 결정될 수 있다.

예를 들어, 디바이스(100)에서 메모 어플리케이션이 실행됨에 따라 텍스트를 기록하는 동작을 수행하는 경우, 텍스트를 정확하게 기록하기 위해서는 호버링 입력 수단의 정밀도가 높아야 한다. 따라서, 텍스트를 기록하는 동작은 정밀도가 높은 펜과 대응될 수 있다. 디바이스(100)는 문서 작성 어플리케이션 실행 시, 펜이 호버링 입력으로 감지되는 경우에는 텍스트를 기록하는 동작에 관한 정보가 출력된 사용자 인터페이스를 선택할 수 있다.

한편, 이전에 작성한 문서들 중에서 어느 하나를 선택하는 동작은 입력 수단의 정밀도가 높지 않아도 수행될 수 있다. 디바이스(100)는 문서들 중 어느 하나를 선택하는 동작을 정밀도가 낮은 손가락과 대응시킬 수 있다. 디바이스(100)는 문서 작성 어플리케이션 실행 시, 손가락이 호버링 입력으로 감지되는 경우에는 문서들 중 어느 하나를 선택하는 동작에 관한 정보가 출력된 사용자 인터페이스를 선택할 수 있다.

단계 1030에서, 디바이스(100)는 선택된 사용자 인터페이스를 디스플레이 한다. 디바이스(100)는 디스플레이 된 사용자 인터페이스 상에서, 수신한 호버링 입력에 대응되는 동작을 선택할 수 있다.

한편, 단계 1030은 도 2를 참조하여 전술한 단계 230과 대응될 수 있다.

도 11은 본 발명의 일 실시예에 따라 문서 작성 어플리케이션이 실행되는 경우, 디바이스(100)가 호버링 입력 수단의 유형에 따라 사용자 인터페이스를 선택하는 방법을 설명하기 위한 도면이다.

도 11의 (a)를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 손가락(1110)임을 확인할 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)는 호버링 입력 수단의 유형에 대응되는 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택할 수 있다. 여기에서, 호버링 입력 수단의 유형에 대응되는 동작은 동작을 수행하는데 필요한 호버링 입력이 호버링 입력 수단으로부터 송신될 수 있는지 여부에 따라 결정될 수 있다.

예를 들어, 펜(1110)에 대응되는 동작들에는 수식을 입력하는 동작, 텍스트를 입력하는 동작, 도형을 그리는 동작 등이 포함될 수 있다. 전술한 동작들은 높은 정밀도가 필요한 동작들로서, 정밀도가 높은 호버링 입력 수단인 펜(1110)으로부터 호버링 입력이 디바이스(100)에 송신될 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)의 화면 상에 펜(1110)이 감지되는 경우, 디바이스(100)는 수식을 입력하는 동작, 텍스트를 입력하는 동작, 도형을 그리는 동작 각각을 나타내는 아이콘을 출력하는 사용자 인터페이스(1120)를 디스플레이 할 수 있다.

도 11의 (b)를 참조하면, 디바이스(100)는 디바이스(100)에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득할 수 있다. 디바이스(100)는 획득한 호버링 입력 수단의 유형에 관한 정보를 기초로, 호버링 입력 수단이 손가락(1130)임을 확인할 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)는 호버링 입력 수단의 유형에 대응되는 동작에 관한 정보가 출력되는 사용자 인터페이스(1140)를 선택할 수 있다. 예를 들어, 손가락(1130)에 대응되는 동작들에는 복수의 문서들 중 어느 하나를 선택하는 동작, 텍스트 입력의 실행을 취소하는 동작 등이 포함될 수 있다. 전술한 동작들은 높은 정밀도를 필요로 하지 않는 동작들로서, 정밀도가 낮은 호버링 입력 수단인 손가락(1130)으로부터 호버링 입력이 디바이스(100)에 송신될 수 있다.

본 발명의 일 실시예에 따른 디바이스(100)의 화면 상에 손가락(1130)이 감지되는 경우, 디바이스(100)는 복수의 문서들 중 어느 하나를 선택하는 동작, 텍스트 입력의 실행을 취소하는 동작 각각을 나타내는 아이콘을 출력하는 사용자 인터페이스(1140)를 디스플레이 할 수 있다.

도 12는 본 발명의 일 실시예에 따라 디바이스(100)에 대한 호버링 입력 수단의 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정하는 방법을 설명하기 위한 흐름도이다.

단계 1210에서, 디바이스(100)는 호버링 입력 수단의 일 측면과 다른 측면의 위치 정보를 획득할 수 있다. 예를 들어, 디바이스(100)는 호버링 입력 수단에서 디바이스(100)와의 거리가 가장 가까운 일 측면과 디바이스(100)와의 거리가 가장 먼 다른 측면의 위치 정보를 획득할 수 있다. 다른 예에 따라, 디바이스(100)는 호버링 입력 수단의 임의의 두 개의 측면의 위치 정보를 획득할 수도 있다.

단계 1220에서, 디바이스(100)는 획득된 위치 정보를 이용하여, 디바이스(100)에 대한 호버링 입력 수단의 기울기를 결정할 수 있다. 예를 들어, 디바이스(100)는 호버링 입력 수단의 일 측면과 다른 측면을 연결한 선과 디바이스(100) 상의 화면간의 각도에 따라 호버링 입력 수단의 기울기가 결정될 수 있다.

단계 1230에서, 디바이스(100)는 결정된 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정할 수 있다. 예를 들어, 그림 그리기 어플리케이션에서 선을 그리는 동작을 수행하는 경우, 디바이스(100)는 호버링 입력 수단의 기울기에 따라, 선의 두께를 결정할 수 있다. 다른 예에 따라, 그림 그리기 어플리케이션에서 선을 그리는 동작을 수행하는 경우, 디바이스(100)는 호버링 입력 수단의 기울기에 따라, 선의 색상을 결정할 수 있다. 이에 대해서는 도 13을 참조하여 보다 구체적으로 후술하도록 한다.

도 13은 본 발명의 일 실시예에 따라 디바이스(100)에 대한 호버링 입력 수단의 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정하는 방법을 설명하기 위한 도면이다.

도 13의 (a)를 참조하면, 디바이스(100)는 호버링 입력 수단의 일 측면과 다른 측면의 위치 정보를 획득할 수 있다. 디바이스(100)는 호버링 입력 수단에서 디바이스(100)와의 거리가 가장 가까운 일 측면(1320)과 디바이스(100)와의 거리가 가장 먼 다른 측면(1330)의 위치 정보를 획득할 수 있다.

디바이스(100)는 호버링 입력 수단의 일 측면과 다른 측면을 연결한 선과 디바이스(100) 상의 화면간의 각도(1340)를 이용하여 호버링 입력 수단의 기울기를 결정할 수 있다.

도 13의 (b)를 참조하면, 디바이스(100)는 결정된 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정할 수 있다. 디바이스(100)에서, 그림 그리기 어플리케이션에서 선을 그리는 동작을 수행하는 경우, 디바이스(100)는 호버링 입력 수단(1310)의 기울기에 따라, 선의 두께를 결정할 수 있다.

도 14 및 도 15는 본 발명의 일 실시예에 따른 디바이스(100)의 구성을 설명하기 위한 블록도이다.

도 14에 도시된 바와 같이, 본 발명의 일 실시예에 따른 디바이스(100)는, 센싱부(110), 제어부(120) 및 출력부(130)를 포함할 수 있다. 그러나 도시된 구성요소 모두가 필수구성요소인 것은 아니다. 도시된 구성요소보다 많은 구성요소에 의해 디바이스(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 디바이스(100)는 구현될 수 있다.

예를 들어, 도 15에 도시된 바와 같이, 본 발명의 일 실시예에 따른 디바이스(100)는, 센싱부(110), 제어부(120), 출력부(130) 이외에 사용자 입력부(140), 통신부(150), A/V(Audio/Video) 입력부(160), 메모리(170)를 더 포함할 수도 있다.

이하 상기 구성요소들에 대해 차례로 살펴본다.

센싱부(110)는, 디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득한다. 또한 센싱부(110)는 호버링 입력 수단의 일측면과 다른 측면의 위치 정보를 획득할 수 있다.

센싱부(110)는, 지자기 센서(Magnetic sensor)(141), 가속도 센서(Acceleration sensor)(142), 온/습도 센서(143), 적외선 센서(144), 자이로스코프 센서(145), 위치 센서(예컨대, GPS)(146), 기압 센서(147), 근접 센서(148), 및 RGB 센서(illuminance sensor)(149) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.

제어부(120)는, 통상적으로 디바이스(100)의 전반적인 동작을 제어한다. 예를 들어, 제어부(120)는, 메모리(170)에 저장된 프로그램들을 실행함으로써, 사용자 입력부(140), 출력부(130), 센싱부(110), 통신부(150), A/V 입력부(160) 등을 전반적으로 제어할 수 있다.

제어부(120)는, 획득된 호버링 입력 수단(10)의 유형에 관한 정보를 기초로, 디바이스(100)에서 실행되는 어플리케이션에 관한 복수의 사용자 인터페이스들 중에서 어느 하나를 선택한다.

제어부(120)는 호버링 입력 수단(10)의 유형에 기초하여, 호버링 입력 수단에서 서로 다른 동작에 관한 정보를 식별하여 호버링 입력을 송신할 수 있는 정도를 나타내는 정밀도(resolution)를 결정할 수 있다. 제어부(120)는 결정된 정밀도에 따라, 어플리케이션에서 수행되는 적어도 하나의 동작에 관한 정보가 출력되는 사용자 인터페이스를 선택할 수 있다.

또한, 제어부(120)는 복수의 사용자 인터페이스들 중에서 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 출력되는 위치가 결정된 정밀도에 대응되는 사용자 인터페이스를 선택할 수 있다.

제어부(120)는 결정된 정밀도가 임계값 이상인 경우, 적어도 하나의 동작에 관한 정보가 디바이스(100)의 화면으로부터 호버링 입력 수단(10) 간의 거리 차이에 따라 출력되는 사용자 인터페이스를 선택할 수 있다.

다른 예에 따라 제어부(120)는 어플리케이션 실행 시, 호버링 입력 수단(10)의 유형에 대응되는 동작들에 관한 정보를 표시한 사용자 인터페이스를 우선적으로 선택할 수 있다.

제어부(120)는 호버링 입력 수단의 유형에 기초하여 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정할 수 있다. 제어부(120)는 복수의 사용자 인터페이스들 중에서 결정된 수행 단위에 따라 동작에 관한 정보가 표시되는 사용자 인터페이스를 선택할 수 있다.

제어부(120)는 호버링 입력 수단으로부터 수신 가능한 호버링 입력들이 어플리케이션 실행 시 수행 가능한 동작들 각각에 대응되지 않는 경우, 복수의 동작들에 관한 정보를 그룹으로 분류하여 출력한 사용자 인터페이스를 선택할 수 있다.

다른 예에 따라, 제어부(120)는 센싱부(110)에서 획득된 위치 정보를 이용하여, 디바이스(100)에 대한 호버링 입력 수단(10)의 기울기를 결정할 수 있다. 제어부(120)는 결정된 기울기에 따라 어플리케이션 실행 시 수행되는 동작을 결정할 수 있다.

출력부(130)는, 제어부(120)에서 선택된 사용자 인터페이스를 디스플레이 하기 위한 것으로, 이에는 디스플레이부(131)와 음향 출력부(132), 진동 모터(133) 등이 포함될 수 있다.

디스플레이부(131)는 디바이스(100)에서 처리되는 정보를 출력한다. 예를 들어, 디스플레이부(131)는, 제어부(120)에서 선택된 사용자 인터페이스를 디스플레이 할 수 있다. 또한, 디스플레이부(131)는 선택된 사용자 인터페이스에 수신되는 호버링 입력에 따라 선택된 동작이 수행된 결과를 출력할 수 있다.

한편, 디스플레이부(131)와 터치패드가 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(131)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(131)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 그리고 디바이스(100)의 구현 형태에 따라 디바이스(100)는 디스플레이부(131)를 2개 이상 포함할 수도 있다. 이때, 2개 이상의 디스플레이부(121)는 힌지(hinge)를 이용하여 마주보게 배치될 수 있다.

음향 출력부(132)는 통신부(150)로부터 수신되거나 메모리(170)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력부(132)는 디바이스(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음, 알림음)과 관련된 음향 신호를 출력한다. 이러한 음향 출력부(132)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.

진동 모터(133)는 진동 신호를 출력할 수 있다. 예를 들어, 진동 모터(133)는 오디오 데이터 또는 비디오 데이터(예컨대, 호신호 수신음, 메시지 수신음 등)의 출력에 대응하는 진동 신호를 출력할 수 있다. 또한, 진동 모터(133)는 터치스크린에 터치가 입력되는 경우 진동 신호를 출력할 수도 있다.

사용자 입력부(140)는, 사용자가 디바이스(100)를 제어하기 위한 데이터를 입력하는 수단을 의미한다. 예를 들어, 사용자 입력부(140)에는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다.

통신부(150)는, 디바이스(100)와 외부 기기(200) 또는 디바이스(100)와 서버(300) 간의 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 통신부(150)는, 근거리 통신부(151), 이동 통신부(152), 방송 수신부(153)를 포함할 수 있다.

근거리 통신부(short-range wireless communication unit)(151)는, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(Near Field Communication unit), WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.

이동 통신부(152)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.

방송 수신부(153)는, 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 구현 예에 따라서 디바이스(100)가 방송 수신부(153)를 포함하지 않을 수도 있다.

통신부(150)는, 생성된 입력 패턴 정보에 대응되는 동작을 수행한 결과를 외부 기기(200)와 공유할 수 있다. 이때, 통신부(150)는 서버(300)를 통해서 입력 패턴 정보에 대응되는 동작을 수행한 결과를 외부 기기(200)에 전송할 수도 있고, 직접 외부 기기(200)에 입력 패턴 정보에 대응되는 동작을 수행한 결과를 전송할 수도 있다.

통신부(150)는, 외부 기기(200)에서 생성된 입력 패턴 정보에 대응되는 동작을 수행한 결과를 수신할 수 있다. 이때, 통신부(150)는 서버(300)를 통해서 외부 기기(200)의 입력 패턴 정보에 대응되는 동작을 수행한 결과를 외부 기기(200)로부터 수신할 수도 있고, 직접 외부 기기(200)로부터 외부 기기(200)의 입력 패턴 정보에 대응되는 동작을 수행한 결과를 수신할 수도 있다.

통신부(150)는, 외부 기기(200)로부터 통화 연결 요청을 수신할 수 있다.

A/V(Audio/Video) 입력부(160)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(161)와 마이크로폰(162) 등이 포함될 수 있다. 카메라(161)은 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등의 화상 프레임을 얻을 수 있다. 이미지 센서를 통해 캡쳐된 이미지는 제어부(120) 또는 별도의 이미지 처리부(미도시)를 통해 처리될 수 있다.

카메라(161)에서 처리된 화상 프레임은 메모리(170)에 저장되거나 통신부(150)를 통하여 외부로 전송될 수 있다. 카메라(161)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.

마이크로폰(162)은, 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 예를 들어, 마이크로폰(162)은 외부 디바이스 또는 화자로부터 음향 신호를 수신할 수 있다. 마이크로폰(162)는 외부의 음향 신호를 입력 받는 과정에서 발생 되는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘을 이용할 수 있다.

메모리(170)는, 제어부(120)의 처리 및 제어를 위한 프로그램을 저장할 수도 있고, 입/출력되는 데이터들(예컨대, 복수의 메뉴, 복수의 메뉴 각각에 대응하는 복수의 제 1 계층 서브 메뉴, 복수의 제 1 계층 서브 메뉴 각각에 대응하는 복수의 제 2 계층 서브 메뉴 등)을 저장할 수도 있다.

메모리(170)는 적어도 하나의 컨텐트에 관한 사용자의 생체 정보 및 상기 사용자의 컨텍스트 정보를 저장할 수 있다. 또한, 메모리(170)는 기준 감정 정보 데이터 베이스를 저장할 수 있다. 메모리(170)는 컨텐트 요약 정보를 저장할 수 있다.

메모리(170)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 디바이스(100)는 인터넷(internet)상에서 메모리(170)의 저장 기능을 수행하는 웹 스토리지(web storage) 또는 클라우드 서버를 운영할 수도 있다.

메모리(170)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(171), 터치 스크린 모듈(172), 알림 모듈(173) 등으로 분류될 수 있다.

UI 모듈(171)은, 애플리케이션 별로 디바이스(100)와 연동되는 특화된 UI, GUI 등을 제공할 수 있다. 터치 스크린 모듈(172)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 제어부(120)로 전달할 수 있다. 본 발명의 일 실시예에 따른 터치 스크린 모듈(172)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(172)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.

터치스크린의 터치 또는 근접 터치를 감지하기 위해 터치스크린의 내부 또는 근처에 다양한 센서가 구비될 수 있다. 터치스크린의 터치를 감지하기 위한 센서의 일례로 촉각 센서가 있다. 촉각 센서는 사람이 느끼는 정도로 또는 그 이상으로 특정 물체의 접촉을 감지하는 센서를 말한다. 촉각 센서는 접촉면의 거칠기, 접촉 물체의 단단함, 접촉 지점의 온도 등의 다양한 정보를 감지할 수 있다.

또한, 터치스크린의 터치를 감지하기 위한 센서의 일례로 근접 센서가 있다.

근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 사용자의 터치 제스처에는 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.

알림 모듈(173)은 디바이스(100)의 이벤트 발생을 알리기 위한 신호를 발생할 수 있다. 디바이스(100)에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 일정 알림 및 사용자 입력의 획득 등이 있다. 알림 모듈(173)은 디스플레이부(121)를 통해 비디오 신호 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(122)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(123)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.

본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.

본 발명의 일 실시예에 따른 디바이스(100)는, 사용자의 상태를 나타내는 이미지 카드를 생성하고 공유할 수 있는 사용자 인터랙션을 제공한다.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속한다.

100: 디바이스
110: 센싱부
130: 제어부
150: 출력부

Claims (21)

1. 어플리케이션이 실행되는 디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득하는 단계; 및
   상기 호버링 입력 수단의 유형에 대응되는 정밀도(resolution)에 따라, 상기 어플리케이션의 실행 시 수행 가능한 동작들에 관한 정보가 출력되는 사용자 인터페이스들 중 하나를 디스플레이 하는 단계를 포함하고,
   상기 정밀도가 기 결정된 값 이상인 경우, 상기 사용자 인터페이스들 중 제 1 사용자 인터페이스가 표시되고, 상기 정밀도가 상기 기 결정된 값 미만인 경우, 상기 사용자 인터페이스들 중 제 2 사용자 인터페이스가 표시되며,
   상기 제 1 사용자 인터페이스에서는, 상기 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 상기 디바이스와 상기 호버링 입력 수단 간의 거리에 기초하여 식별되어 표시되며,
   상기 제 2 사용자 인터페이스에서는, 상기 어플리케이션 실행 시 수행 가능한 동작들이 복수의 그룹들로 그룹핑되며, 상기 복수의 그룹들 각각은 상기 디바이스와 상기 호버링 입력 수단 간의 거리에 기초하여 식별되며, 상기 복수의 그룹들 각각에 포함된 동작들의 정보는 상기 호버링 입력 수단의 2차원 위치에 기초하여 식별되어 표시되는, 디바이스를 제어하는 방법.
2. 삭제
3. 삭제
4. 삭제
5. 제 1항에 있어서, 상기 디스플레이 하는 단계는,
   상기 호버링 입력 수단의 유형에 기초하여 상기 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정하는 단계; 및
   상기 사용자 인터페이스들 중에서 상기 결정된 수행 단위에 따라 상기 동작에 관한 정보가 표시되는 사용자 인터페이스를 디스플레이 하는 단계를 포함하는 디바이스를 제어하는 방법.
6. 제 1항에 있어서, 상기 사용자 인터페이스들은,
   상기 어플리케이션 실행 시 수행되는 동작들을, 상기 동작들 각각을 수행하는데 필요한 호버링 입력 수단의 정밀도에 따라 분류하여 출력하는 사용자 인터페이스를 포함하는 디바이스를 제어하는 방법.
7. 제 1항에 있어서,
   상기 어플리케이션 실행 시, 상기 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 표시한 사용자 인터페이스를 디스플레이 하는 단계를 더 포함하는 디바이스를 제어하는 방법.
8. 삭제
9. 제 1항에 있어서, 상기 제 2 사용자 인터페이스에서는,
   상기 어플리케이션 실행 시 수행 가능한 동작들이, 기 설정된 기간 동안 상기 동작들 각각이 실행된 횟수 및 상기 동작들 간의 관련도 중 적어도 하나에 따라 그룹핑되는 디바이스를 제어하는 방법.
10. 제 1항에 있어서,
    상기 호버링 입력 수단의 일측면과 다른 측면의 위치 정보를 획득하는 단계;
    상기 획득된 위치 정보를 이용하여, 상기 디바이스에 대한 상기 호버링 입력 수단의 기울기를 결정하는 단계; 및
    상기 결정된 기울기에 따라 상기 어플리케이션 실행 시 수행되는 동작을 결정하는 단계를 더 포함하는 디바이스를 제어하는 방법.
11. 어플리케이션이 실행되는 디바이스에 호버링 입력을 송신하는 호버링 입력 수단의 유형에 관한 정보를 획득하는 센싱부;
    상기 호버링 입력 수단의 유형에 대응되는 정밀도(resolution)에 따라, 상기 어플리케이션의 실행 시 수행 가능한 동작들에 관한 정보가 출력되는 사용자 인터페이스들 중 하나를 선택하는 제어부; 및
    상기 선택된 사용자 인터페이스를 디스플레이 하는 디스플레이부를 포함하고,
    상기 정밀도가 기 결정된 값 이상인 경우, 상기 사용자 인터페이스들 중 제 1 사용자 인터페이스가 표시되고, 상기 정밀도가 상기 기 결정된 값 미만인 경우, 상기 사용자 인터페이스들 중 제 2 사용자 인터페이스가 표시되며,
    상기 제 1 사용자 인터페이스에서는, 상기 어플리케이션 실행 시 수행 가능한 동작들에 관한 정보가 상기 디바이스와 상기 호버링 입력 수단 간의 거리에 기초하여 식별되어 표시되며,
    상기 제 2 사용자 인터페이스에서는, 상기 어플리케이션 실행 시 수행 가능한 동작들이 복수의 그룹들로 그룹핑되며, 상기 복수의 그룹들 각각은 상기 디바이스와 상기 호버링 입력 수단 간의 거리에 기초하여 식별되며, 상기 복수의 그룹들 각각에 포함된 동작들의 정보는 상기 호버링 입력 수단의 2차원 위치에 기초하여 식별되어 표시되는 디바이스.
12. 삭제
13. 삭제
14. 삭제
15. 제 11항에 있어서, 상기 제어부는,
    상기 호버링 입력 수단의 유형에 기초하여 상기 어플리케이션 실행 시 선택된 동작의 수행 단위를 결정하고, 상기 사용자 인터페이스들 중에서 상기 결정된 수행 단위에 따라 상기 동작에 관한 정보가 표시되는 사용자 인터페이스를 선택하는 디바이스.
16. 제 11항에 있어서, 상기 사용자 인터페이스들은,
    상기 어플리케이션 실행 시 수행되는 동작들을, 상기 동작들 각각을 수행하는데 필요한 호버링 입력 수단의 정밀도에 따라 분류하여 출력하는 사용자 인터페이스를 포함하는 디바이스.
17. 제 11항에 있어서, 상기 제어부는,
    상기 어플리케이션 실행 시, 상기 호버링 입력 수단의 유형에 대응되는 동작들에 관한 정보를 표시한 사용자 인터페이스를 선택하는 디바이스.
18. 삭제
19. 제 11항에 있어서, 상기 제 2 사용자 인터페이스에서는,
    상기 어플리케이션 실행 시 수행 가능한 동작들이, 기 설정된 기간 동안 상기 동작들 각각이 실행된 횟수 및 상기 동작들 간의 관련도 중 적어도 하나에 따라 그룹핑되는 디바이스.
20. 제 11항에 있어서, 상기 센싱부는,
    상기 호버링 입력 수단의 일측면과 다른 측면의 위치 정보를 획득하고,
    상기 제어부는,
    상기 획득된 위치 정보를 이용하여, 상기 디바이스에 대한 상기 호버링 입력 수단의 기울기를 결정하고, 상기 결정된 기울기에 따라 상기 어플리케이션 실행 시 수행되는 동작을 결정하는 디바이스.
21. 제 1항, 제5항 내지 제7항, 제9항 및 제 10항 중 어느 하나의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체.

Images