KR20160023523A

KR20160023523A - Method, apparatus and system for outputting an image of keyboard and a medical image which represents an object

Info

Publication number: KR20160023523A
Application number: KR1020140173244A
Authority: KR
Inventors: 양선모; 이승주
Original assignee: 삼성메디슨 주식회사
Priority date: 2014-08-22
Filing date: 2014-12-04
Publication date: 2016-03-03

Abstract

Disclosed is a method of outputting a medical image representing an object and a keyboard image. The method comprises the following steps of: outputting a medical image and a keyboard image in different regions of a single screen; performing image processing on the medical image, based on a first user input which is input via the keyboard image; and outputting a result of the image processing on the single screen.

Description

A method, apparatus and system for simultaneously outputting a medical image and a keyboard image representing a target object.

대상체를 나타내는 의료 영상과 키보드 영상을 함께 출력하는 방법, 장치 및 시스템을 개시한다.Disclosed is a method, an apparatus, and a system for outputting a medical image and a keyboard image representing a target object together.

초음파 진단 장치는 프로브(probe)의 트랜스듀서(transducer)로부터 생성되는 초음파 신호를 대상체로 조사하고, 대상체로부터 반사된 에코 신호의 정보를 수신하여 대상체 내부의 부위 (예를들면, 연조직 또는 혈류) 에 대한 적어도 하나의 영상을 얻는다. 특히, 초음파 진단 장치는 대상체 내부의 관찰, 이물질 검출, 및 상해 측정 등 의학적 목적으로 사용된다. 이러한 초음파 진단 장치는 X선을 이용하는 진단 장치에 비하여 안정성이 높고, 실시간으로 영상의 디스플레이가 가능하며, 방사능 피폭이 없어 안전하다는 장점이 있다. 따라서, 초음파 진단 장치는, 컴퓨터 단층 촬영(computed tomography, CT) 장치, 자기 공명 영상(magnetic resonance imaging, MRI) 장치 등을 포함하는 다른 영상 진단 장치와 함께 널리 이용된다.The ultrasound diagnostic apparatus irradiates an ultrasound signal generated from a transducer of a probe to a target object, receives information of an echo signal reflected from the target object, and transmits the echo signal to a site (e.g., soft tissue or blood stream) To obtain at least one image. In particular, the ultrasonic diagnostic apparatus is used for medical purposes such as observation of an object, foreign object detection, and injury measurement. Such an ultrasonic diagnostic apparatus is more stable than a diagnostic apparatus using X-ray, has an advantage that it can display images in real time, and is safe because there is no radiation exposure. Accordingly, the ultrasonic diagnostic apparatus is widely used with other imaging apparatuses including a computed tomography (CT) apparatus, a magnetic resonance imaging (MRI) apparatus, and the like.

일반적으로, 의료 영상(예를 들어, 초음파 영상)을 출력하는 장치와 사용자가 데이터를 입력하는 장치(예를 들어, 키보드)가 분리되어 있다. 따라서, 사용자가 의료 영상을 보면서 키보드를 이용하여 데이터를 정확하게 입력하는데 불편이 따른다.Generally, a device for outputting a medical image (for example, an ultrasound image) and a device for inputting data by a user (for example, a keyboard) are separated. Accordingly, it is inconvenient for a user to input data correctly using a keyboard while viewing a medical image.

대상체를 나타내는 의료 영상과 키보드 영상을 함께 출력하는 방법, 장치 및 시스템을 제공하는데 있다. 또한, 상기 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공하는 데 있다. 해결하려는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.And a method and apparatus for outputting a medical image and a keyboard image representing a target object together. The present invention also provides a computer-readable recording medium on which a program for causing the computer to execute the method is provided. The technical problem to be solved is not limited to the technical problems as described above, and other technical problems may exist.

일 측면에 따른 대상체를 나타내는 의료 영상과 키보드 영상을 함께 출력하는 방법은, 단일 화면의 서로 다른 영역에 상기 의료 영상 및 상기 키보드 영상을 각각 출력하는 단계; 상기 키보드 영상 상에 입력된 제 1 사용자 입력에 기초하여, 상기 의료 영상에 대하여 영상 처리를 수행하는 단계; 및 상기 영상 처리가 수행된 결과를 상기 단일 화면에 출력하는 단계;를 포함한다.A method of simultaneously outputting a medical image and a keyboard image representing an object according to one side includes: outputting the medical image and the keyboard image to different areas of a single screen, respectively; Performing image processing on the medical image based on a first user input inputted on the keyboard image; And outputting the result of performing the image processing on the single screen.

상술한 방법에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 적어도 일 부분에 텍스트(text)가 추가된 영상을 포함한다.In the above-described method, the result of performing the image processing includes an image in which text is added to at least a part of the medical image.

상술한 방법에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 소정 영역이 확대된 영상 또는 상기 의료 영상의 소정 영역이 축소된 영상을 포함한다.In the above-described method, the result of performing the image processing includes an image in which a predetermined area of the medical image is enlarged or an image in which a predetermined area of the medical image is reduced.

상술한 방법에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상이 복제된 영상을 포함한다.In the above-described method, the result of performing the image processing includes an image in which the medical image is copied.

상술한 방법에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 밝기(brightness)가 변경된 영상을 포함한다.In the above-described method, the result of performing the image processing includes an image in which the brightness of the medical image is changed.

상술한 방법에 있어서, 상기 영상 처리가 수행된 결과를 출력하는 단계는 상기 의료 영상과 상기 영상 처리가 수행된 결과를 상기 단일 화면에 함께 출력하는 단계를 포함한다.In the above-described method, the step of outputting the result of performing the image processing may include outputting the medical image and the result of performing the image processing together on the single screen.

상술한 방법에 있어서, 상기 키보드 영상은 적어도 하나의 미리 설정된 키보드 유형에 기초하여 생성된 영상을 포함한다.In the above-described method, the keyboard image includes an image generated based on at least one predetermined keyboard type.

상술한 방법에 있어서, 상기 의료 영상 및 상기 키보드 영상을 출력하는 단계는, 상기 단일 화면에 상기 의료 영상이 출력된 상태에서 입력된 사용자 입력에 기초하여 상기 키보드 영상을 출력하는 단계를 포함한다.In the above-described method, the step of outputting the medical image and the keyboard image may include outputting the keyboard image based on a user input inputted while the medical image is output to the single screen.

상술한 방법에 있어서, 상기 의료 영상 및 상기 키보드 영상을 출력하는 단계는, 상기 단일 화면에 상기 키보드 영상이 출력된 상태에서 입력된 사용자 입력에 기초하여 상기 의료 영상을 출력하는 단계를 포함한다.In the above-described method, the step of outputting the medical image and the keyboard image may include outputting the medical image based on the input user input in a state in which the keyboard image is output to the single screen.

상술한 방법에 있어서, 상기 의료 영상 상에 입력된 제 2 사용자 입력에 기초하여, 상기 의료 영상에 대하여 영상 처리를 수행하는 단계;를 더 포함하고, 상기 영상 처리가 수행된 결과를 출력하는 단계는 상기 제 2 사용자 입력에 기초하여 상기 영상 처리가 수행된 결과를 상기 단일 화면에 출력하는 단계를 포함한다.The method may further include performing image processing on the medical image based on a second user input inputted on the medical image, and the step of outputting the result of performing the image processing And outputting the result of performing the image processing on the single screen based on the second user input.

상술한 방법에 있어서, 상기 제 1 사용자 입력에 따라 선택된 적어도 하나의 철자(spelling)를 포함하는 적어도 하나의 단어를 상기 단일 화면에 출력하는 단계;를 더 포함한다.The method may further include outputting at least one word including at least one spelling selected according to the first user input to the single screen.

상술한 방법에 있어서, 상기 의료 영상은 상기 대상체를 향하여 조사된 초음파 신호들에 대응하는 에코 신호들을 이용하여 생성된 영상을 포함한다.In the above-described method, the medical image includes an image generated using echo signals corresponding to the ultrasound signals irradiated toward the target object.

다른 측면에 따른 컴퓨터로 읽을 수 있는 기록매체는 상술한 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체를 포함한다.A computer-readable recording medium according to another aspect includes a recording medium on which a program for causing a computer to execute the above-described method is recorded.

또 다른 측면에 따른 대상체를 나타내는 의료 영상과 키보드 영상을 함께 출력하는 장치는, 단일 화면의 서로 다른 영역에 상기 의료 영상 및 상기 키보드 영상을 각각 출력하는 입력부; 및 상기 키보드 영상 상에 입력된 제 1 사용자 입력에 기초하여, 상기 의료 영상에 대하여 영상 처리를 수행하는 영상 처리부;를 포함하고, 상기 입력부는 상기 영상 처리가 수행된 결과를 상기 단일 화면에 출력한다.An apparatus for outputting a medical image and a keyboard image together representing an object according to another aspect includes an input unit for outputting the medical image and the keyboard image to different areas of a single screen, respectively; And an image processing unit for performing image processing on the medical image based on a first user input inputted on the keyboard image, wherein the input unit outputs the result of performing the image processing on the single screen .

상술한 장치에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 적어도 일 부분에 텍스트(text)가 추가된 영상을 포함한다.In the above-described apparatus, the result of performing the image processing includes an image in which text is added to at least a part of the medical image.

상술한 장치에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 소정 영역이 확대된 영상 또는 상기 의료 영상의 소정 영역이 축소된 영상을 포함한다.In the above-described apparatus, the result of performing the image processing includes an image in which a predetermined area of the medical image is enlarged or an image in which a predetermined area of the medical image is reduced.

상술한 장치에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상이 복제된 영상을 포함한다.In the above-described apparatus, the result of performing the image processing includes an image in which the medical image is copied.

상술한 장치에 있어서, 상기 영상 처리가 수행된 결과는 상기 의료 영상의 밝기(brightness)가 변경된 영상을 포함한다.In the above-described apparatus, the result of performing the image processing includes an image in which the brightness of the medical image is changed.

상술한 장치에 있어서, 상기 입력부는 상기 의료 영상과 상기 영상 처리가 수행된 결과를 상기 단일 화면에 함께 출력한다.In the above-described apparatus, the input unit outputs the medical image and the result of the image processing together on the single screen.

상술한 장치에 있어서, 상기 키보드 영상은 적어도 하나의 미리 설정된 키보드 유형에 기초하여 생성된 영상을 포함한다.In the above-described apparatus, the keyboard image includes an image generated based on at least one predetermined keyboard type.

상술한 장치에 있어서, 상기 입력부는 상기 단일 화면에 상기 의료 영상이 출력된 상태에서 입력된 사용자 입력에 기초하여 상기 키보드 영상을 출력한다.In the above-described apparatus, the input unit outputs the keyboard image based on a user input inputted while the medical image is output to the single screen.

상술한 장치에 있어서, 상기 입력부는 상기 단일 화면에 상기 키보드 영상이 출력된 상태에서 입력된 사용자 입력에 기초하여 상기 의료 영상을 출력한다.In the above-described apparatus, the input unit outputs the medical image based on a user input inputted while the keyboard image is output to the single screen.

상술한 장치에 있어서, 상기 영상 처리부는 상기 의료 영상 상에 입력된 제 2 사용자 입력에 기초하여, 상기 의료 영상에 대하여 영상 처리를 수행하고, 상기 입력부는 상기 제 2 사용자 입력에 기초하여 상기 영상 처리가 수행된 결과를 상기 단일 화면에 출력한다.In the above-described apparatus, the image processing section performs image processing on the medical image based on a second user input inputted on the medical image, and the input section performs the image processing based on the second user input And outputs the result to the single screen.

상술한 장치에 있어서, 상기 입력부는 상기 제 1 사용자 입력에 따라 선택된 적어도 하나의 철자(spelling)를 포함하는 적어도 하나의 단어를 상기 단일 화면에 출력한다.In the above-described apparatus, the input unit outputs at least one word including at least one spelling selected in accordance with the first user input on the single screen.

상술한 장치에 있어서, 상기 의료 영상은 상기 대상체를 향하여 조사된 초음파 신호들에 대응하는 에코 신호들을 이용하여 생성된 영상을 포함한다.In the above-described apparatus, the medical image includes an image generated using echo signals corresponding to the ultrasound signals irradiated toward the target object.

또 다른 측면에 따른 대상체를 나타내는 의료 영상과 키보드 영상을 함께 출력하는 초음파 진단 시스템은, 상기 대상체를 향하여 초음파 신호들을 조사하고, 상기 초음파 신호들에 대응하는 에코 신호들을 수신하는 프로브; 및 상기 에코 신호를 이용하여 상기 의료 영상을 생성하고, 단일 화면의 서로 다른 영역에 상기 의료 영상 및 상기 키보드 영상을 각각 출력하고, 상기 키보드 영상 상에 입력된 사용자 입력에 기초하여 상기 의료 영상에 대하여 영상 처리를 수행하고, 상기 영상 처리가 수행된 결과를 상기 단일 화면에 출력하는 초음파 이미징 장치;를 포함한다.An ultrasound diagnostic system for simultaneously outputting a medical image and a keyboard image representing a target object according to another aspect includes a probe for irradiating ultrasound signals toward the target and receiving echo signals corresponding to the ultrasound signals; And generating the medical image using the echo signal, outputting the medical image and the keyboard image to different areas of a single screen, respectively, and outputting the medical image and the keyboard image based on user input inputted on the keyboard image, And an ultrasound imaging device for performing image processing and outputting the result of the image processing to the single screen.

본 발명은, 다음의 자세한 설명과 그에 수반되는 도면들의 결합으로 쉽게 이해될 수 있으며, 참조 번호(reference numerals)들은 구조적 구성요소(structural elements)를 의미한다.
도 1a 내지 도 1b는 일 실시예에 따른 초음파 진단 시스템의 예들을 도시한 도면들이다.
도 2는 일 실시예에 따른 초음파 진단 시스템의 일 예를 도시한 구성도이다.
도 3은 일 실시예에 따른 무선 프로브의 일 예를 도시한 구성도이다.
도 4는 일 실시예에 따른 의료 영상과 키보드 영상을 함께 출력하는 장치의 일 예를 도시한 구성도이다.
도 5는 일 실시예에 따른 입력부가 의료 영상과 키보드 영상을 출력하는 일 예를 설명하기 위한 도면이다.
도 6은 일 실시예에 따른 입력부가 추천 단어 목록을 출력하는 일 예를 설명하기 위한 도면이다.
도 7은 일 실시예에 따른 입력부가 텍스트가 추가된 영상을 출력하는 일 예를 설명하기 위한 도면이다.
도 8은 일 실시예에 따른 입력부가 텍스트가 추가된 영상을 출력하는 다른 예를 설명하기 위한 도면이다.
도 9는 일 실시예에 따른 입력부가 사용자에 의하여 선택된 철자를 별도의 창에 출력하는 일 예를 설명하기 위한 도면이다.
도 10a 내지 도 11b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 일 예를 설명하기 위한 도면들이다.
도 12a 내지 도 13b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 다른 예를 설명하기 위한 도면들이다.
도 14a 내지 도 17b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 또 다른 예를 설명하기 위한 도면들이다.
도 18a 내지 도 19b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 또 다른 예를 설명하기 위한 도면들이다.
도 20a 내지 도 20d는 일 실시예에 따른 입력부가 다양한 유형의 키보드 영상들을 출력하는 예를 설명하기 위한 도면들이다.
도 21a 내지 도 23b는 일 실시예에 따른 입력부에 의료 영상과 키보드 영상이 출력되는 순서를 설명하기 위한 도면들이다.
도 24는 일 실시예에 따른 의료 영상과 키보드 영상을 함께 출력하는 방법의 일 예를 설명하기 위한 흐름도이다.The present invention may be readily understood by reference to the following detailed description and the accompanying drawings, in which reference numerals refer to structural elements.
FIGS. 1A and 1B are views showing examples of an ultrasound diagnostic system according to an embodiment.
2 is a block diagram illustrating an example of an ultrasound diagnostic system according to an embodiment.
3 is a block diagram illustrating an example of a wireless probe according to an embodiment.
4 is a block diagram showing an example of an apparatus for outputting a medical image and a keyboard image together according to an embodiment.
5 is a view for explaining an example in which an input unit according to an embodiment outputs a medical image and a keyboard image.
FIG. 6 is a view for explaining an example of outputting a recommended word list by an input unit according to an embodiment.
7 is a diagram for explaining an example of outputting an image in which an input unit is added with text according to an embodiment.
8 is a diagram for explaining another example of outputting an image in which an input unit is added with text according to an embodiment.
9 is a diagram for explaining an example of outputting a spell selected by a user to a separate window according to an embodiment of the present invention.
FIGS. 10A and 11B are diagrams for explaining an example of outputting a result of performing an input image processing according to an embodiment.
FIGS. 12A to 13B are diagrams for explaining another example of outputting an image-processed result of an input unit according to an embodiment.
FIGS. 14A to 17B are diagrams for explaining another example of outputting the result of the input image processing according to the embodiment.
FIGS. 18A to 19B are diagrams for explaining another example of outputting an image-processed result of an input unit according to an embodiment.
20A to 20D are diagrams for explaining an example in which an input unit according to an embodiment outputs various types of keyboard images.
FIGS. 21A to 23B are diagrams for explaining a procedure of outputting a medical image and a keyboard image to an input unit according to an embodiment.
24 is a flowchart illustrating an example of a method of outputting a medical image and a keyboard image together according to an embodiment.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.While the present invention has been described in connection with what is presently considered to be the most practical and preferred embodiment, it is to be understood that the invention is not limited to the disclosed embodiments. Also, in certain cases, there may be a term selected arbitrarily by the applicant, in which case the meaning thereof will be described in detail in the description of the corresponding invention. Therefore, the term used in the present invention should be defined based on the meaning of the term, not on the name of a simple term, but on the entire contents of the present invention.

명세서 전체에서 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 “…부”, “…모듈” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When an element is referred to as " including " an element throughout the specification, it is to be understood that the element may include other elements as well, without departing from the spirit or scope of the present invention. In addition, the term " "... Module " or the like means a unit for processing at least one function or operation, which may be implemented in hardware or software, or a combination of hardware and software.

명세서 전체에서 "초음파 영상"이란 초음파를 이용하여 획득된 대상체(object)에 대한 영상 또는 대상체에 포함된 관심 영역을 나타내는 영상을 의미한다. 여기에서, 관심 영역은 대상체 내에서 사용자가 주의를 기울여 관찰하고자 하는 영역으로서, 예를 들어 병변(lesion)이 해당될 수 있다. 또한, 대상체는 사람 또는 동물, 또는 사람 또는 동물의 일부를 포함할 수 있다. 예를 들어, 대상체는 간, 심장, 자궁, 뇌, 유방, 복부 등의 장기, 및 혈관 중 적어도 하나를 포함할 수 있다. 또한, 대상체는 팬텀(phantom)일 수도 있으며, 팬텀은 생물의 밀도와 실효 원자 번호에 아주 근사하고 생물의 부피와 아주 근사한 물질을 의미할 수 있다. 예를 들어, 팬텀은, 인체와 유사한 특성을 갖는 구형 팬텀일 수 있다. The term "ultrasound image" as used throughout the specification refers to an image of an object obtained using ultrasonic waves or an image representing a region of interest included in a target object. Here, the region of interest is an area to which the user is careful to observe in the object, for example, a lesion may be applicable. In addition, the subject may comprise a person or an animal, or a part of a person or an animal. For example, the subject may comprise at least one of the following: liver, heart, uterus, brain, breast, organs such as the abdomen, and blood vessels. Also, the object may be a phantom, and the phantom may refer to a material that is very close to the density and the effective atomic number of the organism and very close to the volume of the organism. For example, the phantom may be a spherical phantom having characteristics similar to the human body.

또한, 명세서 전체에서 "사용자"는 의료 전문가로서 의사, 간호사, 임상 병리사, 의료 영상 전문가 등이 될 수 있으며, 의료 장치를 수리하는 기술자가 될 수 있으나, 이에 한정되지는 않는다.Also, throughout the specification, the term "user" may be a medical professional such as a doctor, a nurse, a clinical pathologist, a medical imaging specialist, or the like, but is not limited thereto.

이하에서는 도면을 참조하여 본 발명의 실시예들을 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

도 1a 내지 도 1b는 일 실시예에 따른 초음파 진단 시스템의 예들을 도시한 도면들이다. FIGS. 1A and 1B are views showing examples of an ultrasound diagnostic system according to an embodiment.

도 1a를 참조하면, 초음파 진단 시스템(1000)은 프로브(20)와 초음파 이미징 장치(100)가 유선으로 연결될 수 있다. 다시 말해, 초음파 송수신을 담당하는 프로브(20)가 케이블(110)을 통해 초음파 진단 시스템(1000)의 본체, 즉 초음파 이미징 장치(100)와 연결될 수 있다.Referring to FIG. 1A, the ultrasound diagnostic system 1000 may be connected to the probe 20 and the ultrasound imaging apparatus 100 by wire. In other words, the probe 20 for transmitting and receiving ultrasound can be connected to the main body of the ultrasound diagnostic system 1000, that is, the ultrasound imaging apparatus 100 through the cable 110.

도 1b를 참조하면, 초음파 진단 시스템(1001)은 프로브(20)와 초음파 이미징 장치(100)가 무선으로 연결될 수 있다. 다시 말해, 프로브(20)는 초음파 이미징 장치(100)와 동일한 무선 네트워크를 통해 연결될 수 있다. 예를 들어, 프로브(20)와 초음파 이미징 장치(100)는 밀리미터 웨이브(mmWave) 기반의 무선 네트워크에 결합하고, 트랜스듀서를 통해 수신된 에코 신호를 60GHz 주파수 대역에서 초음파 이미징 장치(100)에게 송신할 수 있다. 그리고, 초음파 이미징 장치(100)는 60GHz 주파수 대역에서 수신된 에코 신호를 이용하여 다양한 모드의 초음파 영상을 생성하고, 생성된 초음파 영상을 디스플레이할 수 있다. 여기에서, 밀리미터 웨이브 기반의 무선 네트워크는 WGA(Wireless Gigabit Alliance)의 WiGig 규격에 따른 무선 통신 방법이 이용될 수 있으나, 이에 한정되지 않는다.Referring to FIG. 1B, the ultrasound diagnostic system 1001 may wirelessly connect the probe 20 and the ultrasound imaging apparatus 100. In other words, the probe 20 can be connected via the same wireless network as the ultrasound imaging device 100. For example, the probe 20 and the ultrasound imaging device 100 may be coupled to a millimeter wave (mmWave) based wireless network and the echo signal received via the transducer may be transmitted to the ultrasound imaging device 100 in the 60 GHz frequency band can do. The ultrasound imaging apparatus 100 can generate ultrasound images in various modes using the echo signals received in the frequency band of 60 GHz, and display the generated ultrasound images. Here, the wireless communication method based on the WiGig standard of the Wireless Gigabit Alliance (WGA) may be used for the wireless network based on the millimeter wave, but is not limited thereto.

도 2는 일 실시예에 따른 초음파 진단 시스템의 일 예를 도시한 구성도이다. 2 is a block diagram illustrating an example of an ultrasound diagnostic system according to an embodiment.

도 2를 참조하면, 초음파 진단 시스템(1002)은 프로브(20) 및 초음파 이미징 장치(100)를 포함할 수 있다. 여기에서, 초음파 이미징 장치(100)는 초음파 송수신부(1100), 영상 처리부(1200), 통신부(1300), 디스플레이부(1400), 메모리(1500), 입력부(1600) 및 제어부(1700)를 포함할 수 있으며, 상술한 여러 구성들은 버스(1800)를 통해 서로 연결될 수 있다. Referring to FIG. 2, the ultrasound diagnostic system 1002 may include a probe 20 and an ultrasound imaging device 100. Here, the ultrasound imaging apparatus 100 includes an ultrasound transmitting / receiving unit 1100, an image processing unit 1200, a communication unit 1300, a display unit 1400, a memory 1500, an input unit 1600, and a control unit 1700 And the various configurations described above may be connected to each other via the bus 1800.

예를 들어, 초음파 진단 시스템(1002)은 카트형뿐만 아니라 휴대형으로도 구현될 수 있다. 휴대형 초음파 진단 장치의 예로는 팩스 뷰어(PACS, Picture Archiving and Communication System viewer), 스마트 폰(smartphone), 랩탑 컴퓨터, PDA, 태블릿 PC 등이 있을 수 있으나, 이에 제한되지 않는다.For example, the ultrasound diagnostic system 1002 may be implemented as a portable as well as a cart type. Examples of portable ultrasound diagnostic devices include, but are not limited to, a PACS (Picture Archiving and Communication System Viewer), a smartphone, a laptop computer, a PDA, a tablet PC, and the like.

프로브(20)는, 초음파 송수신부(1100)로부터 인가된 구동 신호(driving signal)에 따라 대상체(10)(또는, 대상체(10) 내의 관심 영역)로 초음파 신호를 송출하고, 대상체(10)(또는, 대상체(10) 내의 관심 영역)로부터 반사된 에코 신호를 수신한다. 프로브(20)는 복수의 트랜스듀서를 포함하며, 복수의 트랜스듀서는 전달되는 전기적 신호에 따라 진동하며 음향 에너지인 초음파를 발생시킨다. 또한, 프로브(20)는 초음파 진단 시스템(1002)의 본체와 유선 또는 무선으로 연결될 수 있으며, 초음파 진단 시스템(1002)은 구현 형태에 따라 복수 개의 프로브(20)들을 구비할 수 있다.The probe 20 transmits an ultrasonic signal to the object 10 (or a region of interest in the object 10) according to a driving signal applied from the ultrasonic transmitting and receiving unit 1100 and transmits the ultrasonic signal to the object 10 Or a region of interest within the object 10). The probe 20 includes a plurality of transducers, and the plurality of transducers generate ultrasonic waves that are vibrated according to an electrical signal to be transmitted and are acoustical energy. The probe 20 may be connected to the main body of the ultrasound diagnostic system 1002 in a wired or wireless manner and the ultrasound diagnostic system 1002 may include a plurality of probes 20 according to an embodiment.

송신부(1110)는 프로브(20)에 구동 신호를 공급하며, 펄스 생성부(1112), 송신 지연부(1114), 및 펄서(1116)를 포함한다. 펄스 생성부(1112)는 소정의 펄스 반복 주파수(PRF, Pulse Repetition Frequency)에 따른 송신 초음파를 형성하기 위한 펄스(pulse)를 생성하며, 송신 지연부(1114)는 송신 지향성(transmission directionality)을 결정하기 위한 지연 시간(delay time)을 펄스에 적용한다. 지연 시간이 적용된 각각의 펄스는, 프로브(20)에 포함된 복수의 압전 진동자(piezoelectric vibrators)에 각각 대응된다. 펄서(1116)는, 지연 시간이 적용된 각각의 펄스에 대응하는 타이밍(timing)으로, 프로브(20)에 구동 신호(또는, 구동 펄스(driving pulse))를 인가한다. The transmission unit 1110 supplies a driving signal to the probe 20 and includes a pulse generation unit 1112, a transmission delay unit 1114, and a pulsar 1116. The pulse generator 1112 generates a pulse for forming a transmission ultrasonic wave according to a predetermined pulse repetition frequency (PRF), and the transmission delay unit 1114 determines a transmission directionality And applies the delay time to the pulse. Each of the pulses to which the delay time is applied corresponds to a plurality of piezoelectric vibrators included in the probe 20, respectively. The pulser 1116 applies a driving signal (or a driving pulse) to the probe 20 at a timing corresponding to each pulse to which the delay time is applied.

수신부(1120)는 프로브(20)로부터 수신되는 에코 신호를 처리하여 초음파 데이터를 생성하며, 증폭기(1122), ADC(아날로그 디지털 컨버터, Analog Digital converter)(1124), 수신 지연부(1126), 및 합산부(1128)를 포함할 수 있다. 증폭기(1122)는 에코 신호를 각 채널(channel) 마다 증폭하며, ADC(1124)는 증폭된 에코 신호를 아날로그-디지털 변환한다. 수신 지연부(1126)는 수신 지향성(reception directionality)을 결정하기 위한 지연 시간을 디지털 변환된 에코 신호에 적용하고, 합산부(1128)는 수신 지연부(1166)에 의해 처리된 에코 신호를 합산함으로써 초음파 데이터를 생성한다. 한편, 수신부(1120)는 그 구현 형태에 따라 증폭기(1122)를 포함하지 않을 수도 있다. 즉, 프로브(20)의 감도가 향상되거나 ADC(1124)의 처리 비트(bit) 수가 향상되는 경우, 증폭기(1122)는 생략될 수도 있다.The receiving unit 1120 processes the echo signal received from the probe 20 to generate ultrasonic data and includes an amplifier 1122, an ADC (Analog Digital Converter) 1124, a receiving delay unit 1126, And a summing unit 1128. [ The amplifier 1122 amplifies the echo signal for each channel, and the ADC 1124 converts the amplified echo signal analog-to-digital. The reception delay unit 1126 applies the delay time for determining the reception directionality to the digitally converted echo signal and the summation unit 1128 sums the echo signals processed by the reception delay unit 1166 And generates ultrasonic data. Meanwhile, the receiving unit 1120 may not include the amplifier 1122 according to the embodiment. That is, when the sensitivity of the probe 20 is improved or the processing bit number of the ADC 1124 is improved, the amplifier 1122 may be omitted.

영상 처리부(1200)는 초음파 송수신부(1100)에서 생성된 초음파 데이터에 대한 주사 변환(scan conversion) 과정을 통해 초음파 영상을 생성한다. 한편, 초음파 영상은 A 모드(amplitude mode), B 모드(brightness mode) 및 M 모드(motion mode)에서 대상체를 스캔하여 획득된 그레이 스케일(gray scale)의 영상뿐만 아니라, 도플러 효과(doppler effect)를 이용하여 움직이는 대상체를 표현하는 도플러 영상일 수도 있다. 도플러 영상은, 혈액의 흐름을 나타내는 혈류 도플러 영상 (또는, 컬러 도플러 영상으로도 불림), 조직의 움직임을 나타내는 티슈 도플러 영상, 또는 대상체의 이동 속도를 파형으로 표시하는 스펙트럴 도플러 영상일 수 있다. The image processing unit 1200 generates an ultrasound image through a scan conversion process on the ultrasound data generated by the ultrasound transmitting / receiving unit 1100. On the other hand, the ultrasound image has a Doppler effect as well as an image of a gray scale obtained by scanning an object in an A mode (amplitude mode), a B mode (brightness mode) and an M mode And may be a Doppler image expressing a moving object by using it. The Doppler image may be a blood flow Doppler image (also referred to as a color Doppler image) representing blood flow, a tissue Doppler image representing tissue movement, or a spectral Doppler image representing a moving velocity of a subject by a waveform.

B 모드 처리부(1212)는, 초음파 데이터로부터 B 모드 성분을 추출하여 처리한다. 영상 생성부(1220)는, B 모드 처리부(1212)에 의해 추출된 B 모드 성분에 기초하여 신호의 강도가 휘도(brightness)로 표현되는 초음파 영상을 생성할 수 있다. The B mode processing unit 1212 extracts and processes the B mode component from the ultrasonic data. The image generating unit 1220 can generate an ultrasound image in which the intensity of the signal is expressed by the brightness based on the B mode component extracted by the B mode processing unit 1212. [

마찬가지로, 도플러 처리부(1214)는, 초음파 데이터로부터 도플러 성분을 추출하고, 영상 생성부(1220)는 추출된 도플러 성분에 기초하여 대상체의 움직임을 컬러 또는 파형으로 표현하는 도플러 영상을 생성할 수 있다.Similarly, the Doppler processing unit 1214 extracts a Doppler component from the ultrasound data, and the image generating unit 1220 can generate a Doppler image that expresses the motion of the object in a color or a waveform based on the extracted Doppler component.

일 실시 예에 의한 영상 생성부(1220)는, 볼륨 데이터에 대한 볼륨 렌더링 과정을 거쳐 3차원 초음파 영상을 생성할 수 있으며, 압력에 따른 대상체(10)의 변형 정도를 영상화한 탄성 영상을 생성할 수도 있다. 나아가, 영상 생성부(1220)는 초음파 영상 상에 여러 가지 부가 정보를 텍스트, 그래픽으로 표현할 수도 있다. 한편, 생성된 초음파 영상은 메모리(1500)에 저장될 수 있다.The image generating unit 1220 may generate a 3-dimensional ultrasound image through a volume rendering process on volume data, and may generate an elastic image that imaged the degree of deformation of the object 10 according to the pressure It is possible. Further, the image generating unit 1220 may display various kinds of additional information on the ultrasound image in text and graphics. Meanwhile, the generated ultrasound image may be stored in the memory 1500.

디스플레이부(1400)는 생성된 초음파 영상을 디스플레이한다. 디스플레이부(1400)는, 초음파 영상뿐 아니라 초음파 이미징 장치(1002)에서 처리되는 다양한 정보를 GUI(Graphical User Interface)를 통해 화면 상에 표시 출력할 수 있다. 한편, 초음파 진단 장치(1000)는 구현 형태에 따라 둘 이상의 디스플레이부(1400)를 포함할 수 있다.The display unit 1400 displays the generated ultrasound image. The display unit 1400 can display various information processed by the ultrasound imaging apparatus 1002 on a screen through a GUI (Graphical User Interface) as well as an ultrasound image. Meanwhile, the ultrasound diagnostic apparatus 1000 may include two or more display units 1400 according to an embodiment.

통신부(1300)는, 유선 또는 무선으로 네트워크(30)와 연결되어 외부 디바이스나 서버와 통신한다. 또한, 프로브(20)가 무선 네트워크를 통해 초음파 이미징 장치(1002)와 연결되는 경우, 통신부(1300)는 프로브(20)와 통신할 수 있다.The communication unit 1300 is connected to the network 30 by wire or wireless, and communicates with an external device or a server. Further, when the probe 20 is connected to the ultrasound imaging device 1002 through a wireless network, the communication unit 1300 can communicate with the probe 20. [

통신부(1300)는 의료 영상 정보 시스템(PACS)을 통해 연결된 병원 서버나 병원 내의 다른 의료 장치와 데이터를 주고 받을 수 있다. 또한, 통신부(1300)는 의료용 디지털 영상 및 통신(DICOM, Digital Imaging and Communications in Medicine) 표준에 따라 데이터 통신할 수 있다.The communication unit 1300 can exchange data with other medical devices in a hospital server or a hospital connected through a medical image information system (PACS). In addition, the communication unit 1300 can communicate data according to the DICOM (Digital Imaging and Communications in Medicine) standard.

통신부(1300)는 네트워크(30)를 통해 대상체(10)의 초음파 영상, 초음파 데이터, 도플러 데이터 등 대상체의 진단과 관련된 데이터를 송수신할 수 있으며, CT 장치, MRI 장치, X-ray 장치 등 다른 의료 장치에서 촬영한 의료 영상 또한 송수신할 수 있다. 나아가, 통신부(1300)는 서버로부터 환자의 진단 이력이나 치료 일정 등에 관한 정보를 수신하여 대상체(10)의 진단에 활용할 수도 있다. 나아가, 통신부(1300)는 병원 내의 서버나 의료 장치뿐만 아니라, 의사나 환자의 휴대용 단말과 데이터 통신을 수행할 수도 있다.The communication unit 1300 can transmit and receive data related to diagnosis of a target object such as an ultrasound image, ultrasound data, and Doppler data of the target body 10 via the network 30, Medical images taken by the device can also be transmitted and received. Further, the communication unit 1300 may receive information on the diagnosis history of the patient, the treatment schedule, and the like from the server and may use the diagnosis information for diagnosis of the target body 10. Further, the communication unit 1300 may perform data communication with not only a server or a medical device in a hospital, but also a doctor or a portable terminal of a patient.

통신부(1300)는 유선 또는 무선으로 네트워크(30)와 연결되어 서버(32), 의료 장치(34), 또는 휴대용 단말(36)과 데이터를 주고 받을 수 있다. 통신부(1300)는 외부 디바이스와 통신을 가능하게 하는 하나 이상의 구성 요소를 포함할 수 있으며, 예를 들어 근거리 통신 모듈(1310), 유선 통신 모듈(1320), 및 이동 통신 모듈(1330)을 포함할 수 있다.The communication unit 1300 may be connected to the network 30 by wire or wireless and may exchange data with the server 32, the medical device 34, or the portable terminal 36. The communication unit 1300 may include one or more components that enable communication with an external device and may include, for example, a local communication module 1310, a wired communication module 1320, and a mobile communication module 1330 .

근거리 통신 모듈(1310)은 소정 거리 이내의 근거리 통신을 위한 모듈을 의미한다. 본 발명의 일 실시 예에 따른 근거리 통신 기술에는 무선 랜(Wireless LAN), 와이파이(Wi-Fi), 블루투스, 지그비(ZigBee), WFD(Wi-Fi Direct), UWB(ultra wideband), 적외선 통신(IrDA, infrared Data Association), BLE (Bluetooth Low Energy), NFC(Near Field Communication) 등이 있을 수 있으나, 이에 한정되는 것은 아니다. The short-range communication module 1310 refers to a module for short-range communication within a predetermined distance. The local area communication technology according to an exemplary embodiment of the present invention may include a wireless LAN, a Wi-Fi, a Bluetooth, a ZigBee, a WFD, an ultra wideband (UWB) IrDA, Infrared Data Association), BLE (Bluetooth Low Energy), NFC (Near Field Communication), and the like.

유선 통신 모듈(1320)은 전기적 신호 또는 광 신호를 이용한 통신을 위한 모듈을 의미하며, 일 실시 예에 의한 유선 통신 기술에는 트위스티드 페어 케이블(twisted pair cable), 동축 케이블, 광섬유 케이블, 이더넷(ethernet) 케이블 등이 있을 수 있다. The wired communication module 1320 refers to a module for communication using an electrical signal or an optical signal. In the wired communication technology according to an embodiment, a twisted pair cable, a coaxial cable, an optical fiber cable, an ethernet, Cable and so on.

이동 통신 모듈(1330)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터일 수 있다. The mobile communication module 1330 transmits and receives radio signals to at least one of a base station, an external terminal, and a server on a mobile communication network. Here, the wireless signal may be various types of data according to a voice call signal, a video call signal, or a text / multimedia message transmission / reception.

메모리(1500)는 초음파 진단 장치(1000)에서 처리되는 여러 가지 정보를 저장한다. 예를 들어, 메모리(1500)는 입/출력되는 초음파 데이터, 초음파 영상 등 대상체(10)의 진단에 관련된 의료 데이터를 저장할 수 있고, 초음파 이미징 장치(1002) 내에서 수행되는 알고리즘이나 프로그램을 저장할 수도 있다. The memory 1500 stores various pieces of information to be processed in the ultrasonic diagnostic apparatus 1000. For example, the memory 1500 may store medical data related to the diagnosis of the object 10, such as input / output ultrasound data, ultrasound images, etc., and may store algorithms or programs executed in the ultrasound imaging device 1002 have.

메모리(1500)는 플래시 메모리, 하드디스크, EEPROM 등 여러 가지 종류의 저장매체로 구현될 수 있다. 또한, 초음파 이미징 장치(1002)는 웹 상에서 메모리(1500)의 저장 기능을 수행하는 웹 스토리지(web storage) 또는 클라우드 서버를 운영할 수도 있다.The memory 1500 may be implemented by various types of storage media such as a flash memory, a hard disk, and an EEPROM. The ultrasound imaging apparatus 1002 may also operate a web storage or a cloud server that performs the storage function of the memory 1500 on the web.

입력부(1600)는, 사용자로부터 초음파 이미징 장치(1002)를 제어하기 위한 데이터를 입력 받는 수단을 의미한다. 입력부(1600)의 예로는 키보드, 마우스, 터치 패드, 터치 스크린, 트랙볼, 조그 스위치 등 하드웨어 구성 및 이를 동작시키는 소프트웨어 모듈을 포함할 수 있다. 그러나, 이에 한정되는 것은 아니며, 입력부(1600)는 심전도 측정 모듈, 호흡 측정 모듈, 음성 인식 센서, 제스쳐 인식 센서, 지문 인식 센서, 홍채 인식 센서, 깊이 센서, 거리 센서 등 다양한 입력 수단을 더 포함할 수 있다.The input unit 1600 means means for receiving data for controlling the ultrasonic imaging apparatus 1002 from a user. Examples of the input unit 1600 may include a hardware configuration such as a keyboard, a mouse, a touch pad, a touch screen, a track ball, a jog switch, and a software module for operating the input / output unit 1600. The input unit 1600 may further include various input means such as an electrocardiogram measurement module, a respiration measurement module, a speech recognition sensor, a gesture recognition sensor, a fingerprint recognition sensor, an iris recognition sensor, a depth sensor, .

일 실시예에 따른 입력부(1600)는 대상체(10)(또는, 대상체(10)의 관심 영역)를 나타내는 초음파 영상과 키보드 영상을 함께 출력할 수 있다. 즉, 입력부(1600)는 단일 터치 스크린 및 이를 동작시키는 소프트웨어 모듈을 포함할 수 있고, 입력부(1600)는 단일 터치 스크린에 초음파 영상과 키보드 영상을 함께 출력할 수 있다. 여기에서, 키보드 영상은 사용자로부터 초음파 이미징 장치(1002)를 제어하기 위한 데이터(즉, 사용자 입력)를 입력 받는 키보드가 터치 스크린 상에 출력된 영상을 의미한다. 일 예로서, 키보드 영상은 일반적인 키보드에 포함된 키들이 출력된 영상이 될 수 있다. 다른 예로서, 키보드 영상은 미리 설정된 키보드 유형에 기초하여 생성된 영상이 될 수도 있다. 키보드 영상의 구체적인 예들은 도 19a 내지 도 19d를 참조하여 후술한다.The input unit 1600 according to an exemplary embodiment may output an ultrasonic image representing a target object 10 (or a region of interest of the target object 10) and a keyboard image together. That is, the input unit 1600 may include a single touch screen and a software module for operating the same, and the input unit 1600 may output the ultrasound image and the keyboard image together on a single touch screen. Here, the keyboard image is an image on which the keyboard for inputting data (i.e., user input) for controlling the ultrasound imaging apparatus 1002 from the user is output on the touch screen. As an example, the keyboard image may be an image output from keys included in a general keyboard. As another example, the keyboard image may be an image generated based on a preset keyboard type. Specific examples of the keyboard image will be described later with reference to Figs. 19A to 19D.

영상 처리부(1200)는 키보드 영상 상에 입력된 사용자 입력에 기초하여 초음파 영상에 대하여 영상 처리를 수행한다. 그리고, 입력부(1600)는 영상 처리가 수행된 결과(즉, 처리된 영상)를 단일 터치 스크린에 출력한다. 따라서, 사용자가 키보드에서 원하는 키를 선택할 때, 디스플레이부(1400)에 출력된 의료 영상과 키보드를 번갈아 보아야 하는 번거로움을 덜 수 있다. 일 실시예에 따른 입력부(1600)와 영상 처리부(1200)에 대한 구체적인 설명은 도 4를 참조하여 후술한다.The image processing unit 1200 performs image processing on the ultrasound image based on the user input inputted on the keyboard image. Then, the input unit 1600 outputs the result of performing the image processing (i.e., the processed image) to a single touch screen. Accordingly, when the user selects a desired key on the keyboard, it is possible to reduce the inconvenience of alternately viewing the medical image and the keyboard displayed on the display unit 1400. [ A detailed description of the input unit 1600 and the image processing unit 1200 according to an embodiment will be described later with reference to FIG.

제어부(1700)는 초음파 진단 장치(1000)의 동작을 전반적으로 제어한다. 즉, 제어부(1700)는 도 1에 도시된 프로브(20), 초음파 송수신부(1100), 영상 처리부(1200), 통신부(1300), 디스플레이부(1400), 메모리(1500), 및 입력부(1600) 간의 동작을 제어할 수 있다. The controller 1700 controls the operation of the ultrasonic diagnostic apparatus 1000 as a whole. That is, the control unit 1700 includes the probe 20, the ultrasonic transmission / reception unit 1100, the image processing unit 1200, the communication unit 1300, the display unit 1400, the memory 1500, and the input unit 1600 Can be controlled.

프로브(20), 초음파 송수신부(1100), 영상 처리부(1200), 통신부(1300), 디스플레이부(1400), 메모리(1500), 입력 디바이스(1600) 및 제어부(1700) 중 일부 또는 전부는 소프트웨어 모듈에 의해 동작할 수 있으나 이에 제한되지 않으며, 상술한 구성 중 일부가 하드웨어에 의해 동작할 수도 있다. 또한, 초음파 송수신부(1100), 영상 처리부(1200), 및 통신부(1300) 중 적어도 일부는 제어부(1600)에 포함될 수 있으나, 이러한 구현 형태에 제한되지는 않는다.Some or all of the probe 20, the ultrasonic transmission / reception unit 1100, the image processing unit 1200, the communication unit 1300, the display unit 1400, the memory 1500, the input device 1600, But is not limited thereto, and some of the above-described configurations may be operated by hardware. At least some of the ultrasonic transmission / reception unit 1100, the image processing unit 1200, and the communication unit 1300 may be included in the control unit 1600, but the present invention is not limited thereto.

도 3은 일 실시예에 따른 무선 프로브의 일 예를 도시한 구성도이다. 3 is a block diagram illustrating an example of a wireless probe according to an embodiment.

도 3을 참조하면, 무선 프로브(2000)는, 도 2를 참조하여 상술한 바와 같이 복수의 트랜스듀서들을 포함하며, 구현 형태에 따라 도 2의 초음파 송수신부(1100)의 구성을 일부 또는 전부 포함할 수 있다.Referring to FIG. 3, the wireless probe 2000 includes a plurality of transducers as described above with reference to FIG. 2, and may include some or all of the components of the ultrasonic transmitting / receiving unit 1100 of FIG. 2 can do.

도 3에 도시된 무선 프로브(2000)는, 송신부(2100), 트랜스듀서(2200), 및 수신부(2300)를 포함하며, 각각의 구성에 대해서는 도 2를 참조하여 상술하였는바, 자세한 설명은 생략한다. 한편, 무선 프로브(2000)는 그 구현 형태에 따라 수신 지연부(2330)와 합산부(2340)를 선택적으로 포함할 수도 있다. 3 includes a transmitting unit 2100, a transducer 2200, and a receiving unit 2300. The respective configurations of the wireless probe 2000 are described in detail with reference to FIG. 2, do. Meanwhile, the wireless probe 2000 may selectively include a reception delay unit 2330 and a summation unit 2340 according to the implementation.

무선 프로브(2000)는, 대상체(10)로 초음파 신호를 송신하고 에코 신호를 수신하며, 초음파 데이터를 생성하여 도 2의 초음파 이미징 장치(1002)로 무선 전송할 수 있다.The wireless probe 2000 can transmit ultrasonic signals to the object 10, receive echo signals, generate ultrasonic data, and wirelessly transmit the ultrasonic data to the ultrasonic imaging apparatus 1002 in Fig.

도 4는 일 실시예에 따른 의료 영상과 키보드 영상을 함께 출력하는 장치의 일 예를 도시한 구성도이다.4 is a block diagram showing an example of an apparatus for outputting a medical image and a keyboard image together according to an embodiment.

도 4를 참조하면, 장치(101)는 입력부(1601) 및 영상 처리부(1201)를 포함한다. 여기에서, 입력부(1601) 및 영상 처리부(1201)는 중 일부 또는 전부는 소프트웨어 모듈에 의해 동작할 수 있으나 이에 제한되지 않으며, 상술한 구성 중 일부가 하드웨어에 의해 동작할 수도 있다. 또한, 입력부(1601) 및 영상 처리부(1201)는 각각 제어 모듈을 포함할 수도 있고, 장치(101)에 입력부(1601) 및 영상 처리부(1201)를 제어하는 별도의 제어 모듈이 포함될 수도 있다.Referring to FIG. 4, the apparatus 101 includes an input unit 1601 and an image processing unit 1201. Here, some or all of the input unit 1601 and the image processing unit 1201 may be operated by a software module, but not limited thereto, and some of the above-described configurations may be operated by hardware. The input unit 1601 and the image processing unit 1201 may each include a control module and the device 101 may include an input unit 1601 and a separate control module for controlling the image processing unit 1201.

또한, 입력부(1601)은 도 2에 도시된 입력부(1600)와 동일하고, 영상 처리부(1201)는 도 2에 도시된 영상 처리부(1200)와 동일할 수 있다. 만약, 장치(101)가 초음파 이미징 장치라고 가정하면, 장치(101)는 입력부(1601) 및 영상 처리부(1201) 이외에, 도2에 도시된 초음파 송수신부(1100), 통신부(1300), 디스플레이부(1400), 메모리(1500) 및 제어부(1700)를 더 포함할 수 있다.The input unit 1601 is the same as the input unit 1600 shown in FIG. 2, and the image processing unit 1201 can be the same as the image processing unit 1200 shown in FIG. If the apparatus 101 is an ultrasonic imaging apparatus, the apparatus 101 may include an ultrasonic transmission / reception unit 1100, a communication unit 1300, a display unit 1330, and a display unit 1300 shown in FIG. 2, in addition to the input unit 1601 and the image processing unit 1201. [ A storage unit 1400, a memory 1500, and a control unit 1700.

입력부(1601)는 단일 화면의 서로 다른 영역에 의료 영상 및 키보드 영상을 출력한다. 예를 들어, 의료 영상은 대상체(10)(또는, 대상체(10)의 관심 영역)를 나타내는 초음파 영상일 수 있으나, 이에 한정되지 않는다. 의료 영상은, 초음파 영상 이외에도 MR 영상, X-ray 영상, CT 영상, PET 영상, OCT 영상 등 다양한 종류의 영상을 포함할 수 있다.The input unit 1601 outputs medical images and keyboard images to different areas of a single screen. For example, the medical image may be an ultrasound image representing the object 10 (or the region of interest of the object 10), but is not limited thereto. The medical image may include various types of images such as an MR image, an X-ray image, a CT image, a PET image, and an OCT image in addition to the ultrasound image.

키보드 영상은 일반적인 키보드에 포함된 키들을 나타내는 영상일 수 있으나, 이에 한정되지 않는다. 예를 들어, 키보드 영상은 미리 설정된 키보드 유형에 기초하여 생성된 영상일 수 있다. 이때, 키보드 유형은 사용자가 설정할 수도 있고, 장치(101)의 생산자 또는 판매자가 설정할 수도 있다. 일 예로서, 키보드 유형은 키보드의 형상 또는 색깔이 변경된 유형일 수 있다. 다른 예로서, 키보드 유형은 키보드에 포함된 키들이 변경된 유형일 수 있다. 또 다른 예로서, 키보드 유형은 소정의 기능들 각각에 대응하는 단축 키들이 조합된 유형일 수 있다.The keyboard image may be an image representing a key included in a general keyboard, but is not limited thereto. For example, the keyboard image may be an image generated based on a preset keyboard type. At this time, the keyboard type may be set by the user or may be set by the producer or seller of the device 101. [ As an example, the keyboard type may be of a type that the shape or color of the keyboard has been changed. As another example, the keyboard type may be a type in which the keys included in the keyboard are changed. As another example, the keyboard type may be a combination of shortcut keys corresponding to each of the predetermined functions.

그리고, 입력부(1601)은 사용자 입력을 수신한다. 여기에서, 사용자 입력은 키보드 영상 상에 입력될 수 있다. 예를 들어, 사용자가 입력부(1601)에 출력된 키보드 영상에서 하나 이상의 키를 터치함에 따라, 입력부(1601)는 사용자 입력을 수신할 수 있다.The input unit 1601 receives the user input. Here, the user input can be input on the keyboard image. For example, as the user touches one or more keys on the keyboard image output to the input unit 1601, the input unit 1601 can receive user input.

또한, 사용자 입력은 의료 영상 상에 입력될 수 있다. 예를 들어, 사용자가 입력부(1601)에 출력된 의료 영상 상에 소정의 제스쳐를 취함에 따라, 입력부(1601)는 사용자 입력을 수신할 수 있다. 본 명세서에서 기술되는 제스처에는 탭, 터치 앤드 홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 핀치, 스트레치 등이 있을 수 있다.Also, the user input may be entered on the medical image. For example, as the user takes a predetermined gesture on the medical image outputted to the input unit 1601, the input unit 1601 can receive user input. Gestures described herein may include tabs, touch and hold, double tap, drag, panning, flick, drag and drop, pinch, stretch, and the like.

영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상에 대하여 영상 처리를 수행한다. 일 예로서, 영상 처리부(1201)는 의료 영상의 일 부분에 텍스트를 추가할 수 있다. 다른 예로서, 영상 처리부(1201)는 의료 영상에서 소정의 영역을 확대하거나 축소할 수 있다. 또 다른 예로서, 영상 처리부(1201)는 의료 영상의 밝기(brightness)를 변경(또는, 조절)할 수 있다. 또 다른 예로서, 영상 처리부(1201)는 기 생성된 의료 영상을 복제할 수 있다.The image processing unit 1201 performs image processing on the medical image based on the user input. As an example, the image processing unit 1201 may add text to a portion of the medical image. As another example, the image processing unit 1201 may enlarge or reduce a predetermined area in the medical image. As another example, the image processing unit 1201 may change (or adjust) the brightness of the medical image. As another example, the image processing unit 1201 may duplicate the created medical image.

입력부(1601)는 영상 처리부(1201)에 의하여 영상 처리가 수행된 결과(즉, 영상 처리가 수행된 영상)를 출력한다. 이때, 입력부(1601)는 영상 처리가 수행되기 이전의 영상과 영상 처리가 수행된 영상을 함께 출력할 수도 있다. 또한, 입력부(1601)는 입력부(1601)에 복수의 영상들과 복수의 영상들 중에서 사용자 입력에 따라 선택된 영상을 함께 출력할 수도 있다. 또한, 입력부(1601)는 사용자 입력에 따라 선택된 철자(spelling)가 포함된 단어들을 의료 영상 및 키보드 영상과 함께 출력할 수도 있다.The input unit 1601 outputs the result of the image processing performed by the image processing unit 1201 (i.e., the image subjected to the image processing). At this time, the input unit 1601 may output the image before the image processing and the image subjected to the image processing together. In addition, the input unit 1601 may output a plurality of images and an image selected in accordance with the user input among the plurality of images to the input unit 1601. Also, the input unit 1601 may output words including the selected spelling along with the medical image and the keyboard image according to the user input.

이하, 도 5 내지 도 18b를 참조하여, 입력부(1601)가 의료 영상과 키보드 영상을 출력하고, 영상 처리부(1201)에 의하여 영상 처리가 수행된 결과를 출력하는 예들을 설명한다.Hereinafter, examples in which the input unit 1601 outputs the medical image and the keyboard image, and the result of performing the image processing by the image processing unit 1201 will be described with reference to FIGS. 5 to 18B. FIG.

도 5는 일 실시예에 따른 입력부가 의료 영상과 키보드 영상을 출력하는 일 예를 설명하기 위한 도면이다.5 is a view for explaining an example in which an input unit according to an embodiment outputs a medical image and a keyboard image.

도 5에는 입력부(1601)의 일 예가 도시되어 있다. 또한, 설명의 편의를 위하여, 입력부(1601)와 연결된 디스플레이부(1400)가 함께 도시되어 있다.FIG. 5 shows an example of the input unit 1601. FIG. For convenience of explanation, a display unit 1400 connected to the input unit 1601 is also shown.

일반적으로, 디스플레이부(1400)와 입력부(1601)은 서로 독립적으로 존재하기에, 사용자가 디스플레이부(1400)에 출력된 의료 영상(530)을 보면서 입력부(1601)를 통하여 데이터를 입력하는데 불편이 따른다. 일 예로서, 시선을 의료 영상(530)에 고정시키고 데이터를 입력하는 경우에, 의도하지 않은 키를 선택함에 따라 오류가 발생될 수 있다. 다른 예로서, 시선을 입력부(1601)에 고정시키고 데이터를 입력하는 경우에, 의도하지 않은 영상에 대하여 영상 처리가 수행될 수 있다.Generally, since the display unit 1400 and the input unit 1601 exist independently of each other, it is inconvenient for the user to input data through the input unit 1601 while viewing the medical image 530 output to the display unit 1400 Follow. As an example, in the case of fixing the line of sight to the medical image 530 and inputting data, an error may be generated by selecting an unexpected key. As another example, in the case of fixing the line of sight to the input unit 1601 and inputting the data, the image processing can be performed on the unintended image.

일 실시예에 따른 입력부(1601)는 단일 화면 상에 의료 영상(510)과 키보드 영상(520)을 함께 출력한다. 따라서, 사용자의 시선이 분산되지 않는바, 사용자는 의도한 영상에 정확하게 영상 처리를 수행하도록 데이터를 입력할 수 있다. 여기에서, 입력부(1601)에 출력된 의료 영상(510)과 디스플레이부(1400)에 출력된 의료 영상(530)은 서로 동일한 영상일 수도 있고, 서로 다른 영상일 수도 있다.The input unit 1601 according to an embodiment outputs the medical image 510 and the keyboard image 520 together on a single screen. Therefore, since the user's line of sight is not dispersed, the user can input data so as to perform image processing accurately on the intended image. Here, the medical image 510 output to the input unit 1601 and the medical image 530 output to the display unit 1400 may be the same image or different images.

한편, 입력부(1601)는 사용자가 입력한 철자가 포함하는 단어를 의료 영상(510)과 키보드 영상(520)이 출력된 단일 화면 상에 함께 출력할 수도 있다. 이하, 도 6을 참조하여 구체적으로 설명한다.Meanwhile, the input unit 1601 may output a word included in the spelling input by the user on a single screen on which the medical image 510 and the keyboard image 520 are output. Hereinafter, this will be described in detail with reference to Fig.

도 6은 일 실시예에 따른 입력부가 추천 단어 목록을 출력하는 일 예를 설명하기 위한 도면이다.FIG. 6 is a view for explaining an example of outputting a recommended word list by an input unit according to an embodiment.

도 6에는 의료 영상(610) 및 키보드 영상(620)이 출력된 화면(600)의 일 예가 도시되어 있다. 또한, 화면(600)에는 추천 단어 목록(630)이 출력되어 있다. 여기에서, 추천 단어 목록(630)은 사용자가 입력할 것으로 예상되는 단어들을 포함하는 목록을 의미한다.6 shows an example of a screen 600 on which a medical image 610 and a keyboard image 620 are output. In addition, a recommended word list 630 is output on the screen 600. FIG. Here, the recommended word list 630 indicates a list including words expected to be input by the user.

입력부(1601)는 사용자 입력에 기초하여 추천 단어 목록(630)에 포함된 단어들 중에서 어느 하나의 단어를 선택할 수 있다. 예를 들어, 입력부(1601)는 키보드 영상(620)에 포함된 키들 중에서 사용자가 선택한 키에 해당되는 철자를 이용하여 단어를 선택할 수 있다. 만약, 사용자가 “A”에 대응하는 키를 터치하였다고 가정하면, 입력부(1601)은 추천 단어 목록(630)에 포함된 단어들 중에서 “A”를 포함하는 단어를 선택할 수 있다. 예를 들어, 입력부(1601)는 추천 단어 목록(630)에 포함된 단어들 중에서 “A”를 최초의 철자로 갖는 단어를 선택할 수 있다.The input unit 1601 can select any one of the words included in the recommended word list 630 based on the user input. For example, the input unit 1601 can select a word using a spelling corresponding to a key selected by the user from the keys included in the keyboard image 620. [ If the user touched a key corresponding to "A", the input unit 1601 can select a word including "A" from the words included in the recommended word list 630. For example, the input unit 1601 can select a word having "A" as the first spelling among the words included in the recommended word list 630.

이때, 사용자가 연속하여 2 이상의 키를 터치하였다고 가정하면, 입력부(1601)는 추천 단어 목록(630)에서 순차적으로 입력된 철자들을 포함하는 단어를 선택할 수 있다. 예를 들어, 사용자가 “A”에 대응하는 키와 “B”에 대응하는 키를 순차적으로 터치하였다고 가정하면, 입력부(1601)는 “AB”를 포함하는 단어를 선택할 수 있다. 예를 들어, 입력부(1601)는 추천 단어 목록(630)에 포함된 단어들 중에서 “AB”를 최초의 두 철자들로 갖는 단어를 선택할 수 있다.At this time, assuming that the user continuously touches two or more keys, the input unit 1601 can select a word including the spellings sequentially input in the recommended word list 630. For example, assuming that the user has sequentially touched a key corresponding to "A" and a key corresponding to "B", the input unit 1601 can select a word including "AB". For example, the input unit 1601 can select a word having "AB" as the first two spellings among the words included in the recommended word list 630.

또한, 입력부(1601)는 선택된 단어를 다른 단어들과 별도의 형상 또는 컬러로 출력(631)할 수 있다. 따라서, 사용자는 여러 개의 단어들 중에서 입력부(1601)가 선택한 단어를 용이하게 식별할 수 있다. 또한, 입력부(1601)는 키보드 영상(620)에 포함된 키들 중에서 사용자가 선택(예를 들어, 키를 터치)한 철자를 화면(600)의 일 영역(640)에 출력할 수 있다.Also, the input unit 1601 may output (631) the selected word in a shape or color different from other words. Accordingly, the user can easily identify a word selected by the input unit 1601 from among a plurality of words. The input unit 1601 may output a spell that the user selects (e.g., touches a key) among the keys included in the keyboard image 620 to one area 640 of the screen 600.

한편, 영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상(620)의 적어도 일 부분에 텍스트(text)를 추가할 수 있고, 입력부(1601)는 텍스트가 추가된 영상을 출력할 수 있다. 여기에서, 텍스트는 문자를 구성하는 철자뿐 만 아니라, 숫자, 기호 등을 포함한다. 이하, 도 7 내지 도 8을 참조하여, 영상 처리부(1201)가 의료 영상에 텍스트를 추가하고, 입력부(1601)가 텍스트가 추가된 영상을 출력하는 예들을 설명한다.On the other hand, the image processing unit 1201 can add text to at least a part of the medical image 620 based on the user input, and the input unit 1601 can output the image added with the text. Here, the text includes not only spellings constituting characters, but also numerals, symbols, and the like. Hereinafter, examples in which the image processing unit 1201 adds text to a medical image and the input unit 1601 outputs an image in which text is added will be described with reference to FIGS. 7 to 8. FIG.

도 7은 일 실시예에 따른 입력부가 텍스트가 추가된 영상을 출력하는 일 예를 설명하기 위한 도면이다.7 is a diagram for explaining an example of outputting an image in which an input unit is added with text according to an embodiment.

도 7에는 텍스트(740)가 추가된 영상(710) 및 키보드 영상(720)이 출력된 화면(700)의 일 예가 도시되어 있다.7 shows an example of a screen 710 to which a text 740 is added and a screen 700 to which a keyboard image 720 is output.

입력부(1601)는 의료 영상에 텍스트(740)를 추가하는 사용자 입력을 수신할 수 있다. 예를 들어, 사용자가 화면(700)의 일 영역에 표시된 아이콘(730)을 선택(예를 들어, 터치)함에 따라, 사용자가 입력하는 텍스트(740)가 의료 영상에 추가될 수 있다.The input unit 1601 may receive a user input that adds text 740 to the medical image. For example, as the user selects (e.g., touches) the icon 730 displayed in one area of the screen 700, the text 740 entered by the user may be added to the medical image.

사용자가 아이콘(730)을 선택한 이후에 키보드 영상(720)을 통하여 텍스트(740)를 입력하면, 영상 처리부(1201)는 의료 영상에 입력된 텍스트(740)를 추가한다. 예를 들어, 사용자가 아이콘(730)을 선택한 이후에 키보드 영상(720)에 포함된 키들 중에서 “A”에 대응하는 키를 터치하였다고 가정하면, 영상 처리부(1201)는 의료 영상에 “A”를 추가한다. 예를 들어, 영상 처리부(1201)은 의료 영상의 일 영역에 텍스트(740)가 추가된 새로운 영상을 생성할 수 있다.If the user inputs the text 740 through the keyboard image 720 after selecting the icon 730, the image processing unit 1201 adds the text 740 input to the medical image. For example, assuming that the user touches a key corresponding to "A" among the keys included in the keyboard image 720 after selecting the icon 730, the image processing unit 1201 adds "A" to the medical image Add. For example, the image processing unit 1201 can generate a new image to which the text 740 is added in one area of the medical image.

이때, 텍스트(740)가 추가되는 영역은 사용자에 의하여 지정될 수도 있고, 영상 처리부(1201)가 자동적으로 선택할 수도 있다. 일 예로서, 사용자가 화면(700)에 현재 표시된 의료 영상에서 텍스트(740)가 추가되어야 하는 지점을 터치한 경우, 영상 처리부(1201)는 사용자가 터치한 지점에 텍스트(740)를 추가할 수 있다. 다른 예로서, 사용자의 개입 없이, 영상 처리부(1201)는 화면(700)에 현재 표시된 의료 영상의 중간 영역에 텍스트(740)를 추가할 수 있다.At this time, the area to which the text 740 is added may be designated by the user or may be automatically selected by the image processing unit 1201. As an example, if the user touches the point where the text 740 is to be added on the medical image currently displayed on the screen 700, the image processing unit 1201 may add the text 740 to the point touched by the user have. As another example, without user intervention, the image processing unit 1201 can add text 740 to the middle area of the medical image currently displayed on the screen 700.

영상 처리부(1201)는 영상 처리가 수행된 결과(즉, 텍스트(740)가 추가된 영상(710))를 입력부(1601)로 전송한다. 그리고, 입력부(1601)는 텍스트(740)가 추가된 영상(710)을 화면(700)의 일 영역에 출력한다.The image processing unit 1201 transmits to the input unit 1601 the result of performing the image processing (i.e., the image 710 to which the text 740 is added). Then, the input unit 1601 outputs the image 710 to which the text 740 is added to one area of the screen 700.

도 7에서는 의료 영상에 하나의 철자(740)가 추가되는 것으로 도시하였으나, 이에 한정되지 않는다. 다시 말해, 의료 영상에는 복수의 철자들이 조합된 단어, 구문 또는 문장이 추가될 수도 있다.In FIG. 7, one spelling character 740 is added to the medical image, but the present invention is not limited thereto. In other words, words, phrases or sentences combining a plurality of spellings may be added to the medical image.

한편, 사용자가 화면(700)에 표시된 아이콘(730)을 선택하지 않더라도, 입력부(1601)는 의료 영상에 텍스트(740)를 추가할 수 있다. 이하, 도 8을 참조하여, 입력부(1601)가 의료 영상에 텍스트(740)를 추가하는 다른 예를 설명한다.On the other hand, even if the user does not select the icon 730 displayed on the screen 700, the input unit 1601 can add the text 740 to the medical image. Hereinafter, another example in which the input unit 1601 adds the text 740 to the medical image will be described with reference to FIG.

도 8은 일 실시예에 따른 입력부가 텍스트가 추가된 영상을 출력하는 다른 예를 설명하기 위한 도면이다.8 is a diagram for explaining another example of outputting an image in which an input unit is added with text according to an embodiment.

도 8에는 텍스트가 추가된 영상(810) 및 키보드 영상(820)이 출력된 화면(800)의 일 예가 도시되어 있다.FIG. 8 shows an example of a screen 810 in which text is added and a screen 800 in which a keyboard image 820 is output.

사용자는 화면(800)에 표시된 아이콘(830)을 선택하지 않고서도, 의료 영상에 텍스트를 추가할 수 있다. 사용자가 의료 영상에서 텍스트가 입력되어야 하는 위치(840)를 선택한 이후에 연속적으로 철자를 입력하면, 입력부(1601)는 사용자가 터치한 위치(840)에 입력된 철자를 추가하도록 영상 처리부(1201)에 요청할 수 있다. 예를 들어, 사용자가 의료 영상에서 텍스트가 입력되어야 하는 위치(840)를 터치하고, 키보드 영상(820)에 포함된 키들 중에서 “A”에 대응하는 키를 터치하였다고 가정하면, 영상 처리부(1201)는 의료 영상의 지정된 위치(840)에 “A”를 추가한다.The user can add text to the medical image without selecting the icon 830 displayed on the screen 800. [ When the user inputs spelling continuously after selecting the location 840 where the text should be input in the medical image, the input unit 1601 inputs the spelling inputted to the position 840 touched by the user, . For example, assuming that a user touches a position 840 where a text is to be input in a medical image and touches a key corresponding to "A" among the keys included in the keyboard image 820, the image processing unit 1201, Adds " A " to the designated location 840 of the medical image.

영상 처리부(1201)는 영상 처리가 수행된 결과(즉, 텍스트가 추가된 영상(810))를 입력부(1601)로 전송한다. 그리고, 입력부(1601)는 텍스트가 추가된 영상(810)을 화면(800)의 일 영역에 출력한다.The image processing unit 1201 transmits to the input unit 1601 the result of performing the image processing (i.e., the image 810 to which the text is added). Then, the input unit 1601 outputs the image 810 to which the text is added to one area of the screen 800.

도 9는 일 실시예에 따른 입력부가 사용자에 의하여 선택된 철자를 별도의 창에 출력하는 일 예를 설명하기 위한 도면이다.9 is a diagram for explaining an example of outputting a spell selected by a user to a separate window according to an embodiment of the present invention.

도 9에는 텍스트가 추가된 영상(910) 및 키보드 영상(920)이 출력된 화면(900)의 일 예가 도시되어 있다.9 shows an example of a screen 900 to which a text image 910 and a keyboard image 920 are output.

키보드 영상(920)은 물리적인 키보드와는 달리 인접된 키들 사이의 경계가 불명확할 수 있다. 따라서, 사용자가 키를 터치할 때, 의도된 키에 인접된 키가 터치될 수도 있다.Unlike the physical keyboard, the keyboard image 920 may have unclear boundaries between adjacent keys. Thus, when a user touches a key, a key adjacent to the intended key may be touched.

사용자가 키보드 영상(920)에 포함된 어느 하나의 키를 선택한 경우에, 입력부(1601)는 선택된 키에 해당되는 철자를 별도의 윈도우(930)로 표시할 수 있다. 예를 들어, 사용자가 키보드 영상(920)에 포함된 키들 중에서 “A”에 대응하는 키를 터치하였다고 가정하면, 입력부(1601)는 “A”가 표시된 윈도우(930)를 사용자가 키를 터치한 직후부터 소정의 시간 동안 화면(900)에 출력할 수 있다.When the user selects one of the keys included in the keyboard image 920, the input unit 1601 can display the spelling corresponding to the selected key in a separate window 930. [ For example, assuming that the user has touched a key corresponding to " A " among the keys included in the keyboard image 920, the input unit 1601 displays a window 930 in which " A " It can be output to the screen 900 for a predetermined time immediately after.

도 8 내지 도 9를 참조하여 상술한 바와 같이, 입력부(1601)는 사용자가 입력한 텍스트가 추가된 영상을 화면에 출력할 수 있다. 의료 영상에 텍스트를 추가하는 것 이외에도, 영상 처리부(1201)는 사용자 입력에 기초하여 화면에 출력된 의료 영상에 대하여 다양한 방식으로 영상 처리를 수행할 수 있다. 이하, 도 10a 내지 도 19b를 참조하여, 영상 처리부(1201)가 영상 처리를 수행하고, 입력부(1601)가 영상 처리된 결과를 출력하는 예들을 설명한다.As described above with reference to FIGS. 8 to 9, the input unit 1601 can output an image to which a text entered by the user is added, on the screen. In addition to adding text to the medical image, the image processing unit 1201 can perform image processing on the medical image output on the screen based on user input in various ways. Hereinafter, examples in which the image processing unit 1201 performs image processing and the input unit 1601 outputs a result of image processing will be described with reference to FIGS. 10A to 19B. FIG.

도 10a 내지 도 11b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 일 예를 설명하기 위한 도면들이다.FIGS. 10A and 11B are diagrams for explaining an example of outputting a result of performing an input image processing according to an embodiment.

입력부(1601)는 화면(3100)에 출력된 의료 영상(3110)을 복제할 것을 요청하는 사용자 입력을 수신하고, 영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상(3110)을 복제할 수 있다. 여기에서, 의료 영상(3110)을 복제한다고 함은 영상 처리부(1201)가 의료 영상(3110)과 동일한 영상을 더 생성하는 것을 의미할 수도 있으나, 입력부(1601)가 의료 영상(3110)과 동일한 영상을 화면(3100)에 하나 더 출력하는 것을 의미할 수도 있다.The input unit 1601 receives a user input requesting to duplicate the medical image 3110 output on the screen 3100 and the image processing unit 1201 can duplicate the medical image 3110 based on the user input . Replicating the medical image 3110 may mean that the image processing unit 1201 further generates the same image as the medical image 3110. However, when the input unit 1601 receives the same image as the medical image 3110, May be output to the screen 3100. [

도 10a를 참조하면, 사용자는 키보드 영상(3120)을 통해 데이터를 입력할 수 있다. 예를 들어, 의료 영상(3110)을 복제할 것을 의미하는 용어가 “duplicate”라고 가정하면, 사용자가 키보드 영상(3120)을 통해 “d” ”u” ”p” ”l” ”i” ”c” ”a” ”t” ”e”를 입력함으로써 의료 영상(3110)이 복제될 수 있다. 또한, 사용자는 화면(3100)에 출력된 추천 단어 목록(3130)에서 “duplicate”를 선택할 수도 있다.Referring to FIG. 10A, a user may input data through a keyboard image 3120. FIG. For example, assuming that the term meaning duplicating the medical image 3110 is "duplicate", a user may enter "d" "u" "p" "l" "i" "c Medical image 3110 can be replicated by entering " a " " t " " e ". Also, the user may select " duplicate " in the recommended word list 3130 output on the screen 3100.

도 10b를 참조하면, 화면(3100)에는 기 출력된 영상(3110)과 동일한 영상(3140)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3140)과 기 출력된 영상(3110)은 화면(3100) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 10B, the same image 3140 as the previously output image 3110 may be output together with the image 3100. Here, the newly output image 3140 and the previously output image 3110 can be output in different areas on the screen 3100. [

도 11a를 참조하면, 사용자는 화면(3100) 상에 제스쳐를 취함으로써, 의료 영상(3150)을 복제할 수 있다. 예를 들어, 사용자가 의료 영상(3150)을 드래그 앤드 드롭함으로써, 의료 영상(3150)이 복제될 수 있다. 한편, 제스쳐는 드래그 앤드 드롭에 한정되지 않고, 사용자가 기 설정된 다른 제스쳐를 취함에 따라, 의료 영상(3150)이 복제될 수도 있다.Referring to FIG. 11A, the user may clone the medical image 3150 by taking a gesture on the screen 3100. FIG. For example, by dragging and dropping the medical image 3150, the medical image 3150 can be duplicated. On the other hand, the gesture is not limited to the drag and drop, and the medical image 3150 may be copied as the user takes another predefined gesture.

도 11b를 참조하면, 화면(3100)에는 기 출력된 영상(3150)과 동일한 영상(3160)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3160)과 기 출력된 영상(3150)은 화면(3100) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 11B, the same image 3160 as the previously output image 3150 may be output together with the screen 3100. FIG. Here, the newly output image 3160 and the previously output image 3150 can be output to different areas on the screen 3100.

도 12a 내지 도 13b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 다른 예를 설명하기 위한 도면들이다.FIGS. 12A to 13B are diagrams for explaining another example of outputting an image-processed result of an input unit according to an embodiment.

입력부(1601)는 화면(3200)에 출력된 의료 영상(3210)을 확대 또는 축소할 것을 요청하는 사용자 입력을 수신하고, 영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상(3210)이 확대 또는 축소된 영상을 생성할 수 있다. 이하에서는 영상 처리부(1201)가 의료 영상(3210)이 확대된 영상을 생성하는 예만을 설명할 것이나, 영상 처리부(1201)가 의료 영상(3210)이 축소된 영상을 생성하는 예는 당업자라면 쉽게 이해할 수 있다.The input unit 1601 receives a user input requesting enlargement or reduction of the medical image 3210 output on the screen 3200 and the image processing unit 1201 receives the medical image 3210 enlarged or reduced based on the user input, It is possible to generate a reduced image. Hereinafter, an example in which the image processing unit 1201 generates an enlarged image of the medical image 3210 will be described. However, an example in which the image processing unit 1201 generates a reduced image of the medical image 3210 can be easily understood by those skilled in the art .

도 12a를 참조하면, 사용자는 키보드 영상(3220)을 통해 데이터를 입력할 수 있다. 예를 들어, 의료 영상(3210)을 복제할 것을 의미하는 용어가 “zoom in”라고 가정하면, 사용자가 키보드 영상(3220)을 통해 “z” ”o” ”o” ”m” ”i” ”n”을 입력함으로써 의료 영상(3210)이 확대될 수 있다. 또한, 사용자는 화면(3200)에 출력된 추천 단어 목록(3230)에서 “zoom in”을 선택할 수도 있다.Referring to FIG. 12A, a user can input data through a keyboard image 3220. FIG. For example, suppose the term " zoom in ", which means to duplicate the medical image 3210, allows the user to input " z " n ", the medical image 3210 can be enlarged. In addition, the user may select " zoom in " in the recommended word list 3230 output on the screen 3200.

도 12b를 참조하면, 화면(3200)에는 기 출력된 영상(3210)과 동일한 영상(3240)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3240)과 기 출력된 영상(3210)은 화면(3200) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 12B, the same image 3240 as the previously output image 3210 may be output together with the screen 3200. Here, the newly output image 3240 and the previously output image 3210 can be output to different areas on the screen 3200.

도 13a를 참조하면, 사용자는 화면(3200) 상에 제스쳐를 취함으로써, 의료 영상(3250)을 복제할 수 있다. 예를 들어, 사용자가 의료 영상(3150) 상에 스트레치 제스쳐를 입력함으로써, 의료 영상(3150)이 복제될 수 있다. 한편, 제스쳐는 스트레치에 한정되지 않고, 사용자가 기 설정된 다른 제스쳐를 취함에 따라, 의료 영상(3150)이 복제될 수도 있다.Referring to FIG. 13A, the user can clone the medical image 3250 by taking a gesture on the screen 3200. [ For example, a medical image 3150 may be replicated by the user entering a stretch gesture on the medical image 3150. On the other hand, the gesture is not limited to the stretch, and the medical image 3150 may be copied as the user takes another predefined gesture.

도 13b를 참조하면, 화면(3200)에는 기 출력된 영상(3250)과 동일한 영상(3260)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3260)과 기 출력된 영상(3250)은 화면(3200) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 13B, the same image 3260 as the previously output image 3250 may be output together with the screen 3200. Here, the newly output image 3260 and the previously output image 3250 can be output to different areas on the screen 3200. [

도 14a 내지 도 17b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 또 다른 예를 설명하기 위한 도면들이다.FIGS. 14A to 17B are diagrams for explaining another example of outputting the result of the input image processing according to the embodiment.

입력부(1601)는 화면(3300)에 출력된 의료 영상들(3310, 3320) 중 어느 하나(3310)를 선택할 것을 요청하는 사용자 입력을 수신하고, 영상 처리부(1201)는 사용자 입력에 기초하여 선택된 의료 영상(3110)을 복제할 수 있다. 여기에서, 의료 영상들(3310, 3320) 중 어느 하나(3310)를 선택한다고 함은 영상 처리부(1201)가 선택된 의료 영상(3310)과 동일한 영상을 더 생성하는 것을 의미할 수도 있으나, 입력부(1601)가 선택된 의료 영상(3310)과 동일한 영상을 화면(3300)에 하나 더 출력하는 것을 의미할 수도 있다.The input unit 1601 receives a user input requesting to select one of the medical images 3310 and 3320 output on the screen 3300 and the image processing unit 1201 receives the user input requesting the selected medical The image 3110 can be duplicated. The selection of any one of the medical images 3310 and 3320 may mean that the image processing unit 1201 further generates the same image as the selected medical image 3310. However, ) May output one more image on the screen 3300, which is the same as the selected medical image 3310.

도 14a를 참조하면, 사용자는 키보드 영상(3330)을 통해 데이터를 입력할 수 있다. 예를 들어, 의료 영상들(3310, 3320) 중 좌측 영상(3310)을 선택할 것을 의미하는 용어가 “select left”라고 가정하면, 사용자가 키보드 영상(3330)을 통해 “s” ”e” ”l” ”e” ”c” ”t” ”l” ”e” ”f” “t”를 입력함으로써 좌측 영상(3310)이 선택될 수 있다. 또한, 사용자는 화면(3300)에 출력된 추천 단어 목록(3340)에서 “select left”를 선택할 수도 있다.Referring to FIG. 14A, a user can input data through a keyboard image 3330. For example, assuming that the term "select left" is used to select the left image 3310 of the medical images 3310 and 3320, the user selects "s", "e" The left image 3310 can be selected by inputting "e" "c" "t" "l" "e" "f" "t" Further, the user may select " select left " in the recommended word list 3340 output on the screen 3300. [

도 14b를 참조하면, 화면(3300)에는 기 출력된 영상들(3310, 3320) 및 선택된 영상(3350)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3350)과 기 출력된 영상들(3310, 3320)은 화면(3300) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 14B, previously displayed images 3310 and 3320 and a selected image 3350 may be output together on the screen 3300. FIG. Here, the newly output image 3350 and the previously output images 3310 and 3320 can be output to different areas on the screen 3300. [

도 15a 및 도 16a를 참조하면, 사용자는 화면(3300) 상에 제스쳐를 취함으로써, 기 출력된 의료 영상들(3360, 3370) 중 어느 하나(3360)를 선택할 수 있다. Referring to FIGS. 15A and 16A, the user can select any one of the medical images 3360 and 3370 (3360) by taking a gesture on the screen 3300.

일 예로서, 도 15a를 참조하면, 사용자가 의료 영상(3360)을 탭함으로써, 기 출력된 의료 영상들(3360, 3370) 중에서 의료 영상(3360)이 선택될 수 있다. 다른 예로서, 도 16a를 참조하면, 사용자가 의료 영상(3360)을 드래그 앤드 드롭함으로써, 기 출력된 의료 영상들(3360, 3370) 중에서 의료 영상(3360)이 선택될 수 있다. 한편, 사용자가 취하는 제스쳐는 탭 또는 드래그 앤드 드롭에 한정되지 않고, 사용자가 기 설정된 다른 제스쳐를 취함에 따라, 의료 영상(3360)이 선택될 수도 있다.As an example, referring to FIG. 15A, a medical image 3360 may be selected from pre-outputted medical images 3360 and 3370 by the user tapping the medical image 3360. FIG. As another example, referring to FIG. 16A, a medical image 3360 may be selected from previously output medical images 3360 and 3370 by the user by dragging and dropping the medical image 3360. On the other hand, the gesture taken by the user is not limited to a tap or a drag and drop, and the medical image 3360 may be selected as the user takes a predetermined other gesture.

도 15b 및 도 16b를 참조하면, 화면(3300)에는 기 출력된 영상들(3360, 3370) 및 선택된 영상(3380)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3380)과 기 출력된 영상들(3360, 3370)은 화면(3300) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 15B and FIG. 16B, previously displayed images 3360 and 3370 and a selected image 3380 may be output together on the screen 3300. FIG. Here, the newly output image 3380 and the previously output images 3360 and 3370 can be output to different areas on the screen 3300.

한편, 화면(3300)에 출력되는 의료 영상들의 개수는 2개에 한정되지 않고, 더 많은 수의 영상들이 출력될 수 있다. 도 17a를 참조하면, 화면(3300)에는 총 4개의 의료 영상들(3391, 3392, 3393, 3394)이 출력되어 있고, 사용자 입력에 따라 4개의 의료 영상들(3391, 3392, 3393, 3394) 중 어느 하나(3391)가 선택될 수 있다. 이때, 의료 영상(3391)이 선택되는 과정은 도 14a, 도 15a 및 도 16a를 참조하여 상술한 바와 같다. 예를 들어, 사용자가 의료 영상(3391)을 드래그 앤드 드롭함으로써, 4개의 의료 영상들(3391, 3392, 3393, 3394) 중에서 의료 영상(3391)이 선택될 수 있다.On the other hand, the number of medical images output to the screen 3300 is not limited to two, and a larger number of images can be output. 17A, a total of four medical images 3391, 3392, 3393, and 3394 are output on the screen 3300 and four medical images 3391, 3392, 3393, and 3394 Any one 3391 can be selected. At this time, the process of selecting the medical image 3391 is as described above with reference to Figs. 14A, 15A, and 16A. For example, the medical image 3391 may be selected from among four medical images 3391, 3392, 3393, and 3394 by dragging and dropping the medical image 3391 by the user.

도 17b를 참조하면, 화면(3300)에는 기 출력된 영상들(3391, 3392, 3393, 3394) 및 선택된 영상(3391)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3391)과 기 출력된 영상들(3391, 3392, 3393, 3394)은 화면(3300) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 17B, previously displayed images 3391, 3392, 3393, and 3394 and a selected image 3391 may be output together on the screen 3300. FIG. Here, the newly output image 3391 and the previously output images 3391, 3392, 3393, and 3394 can be output to different areas on the screen 3300.

도 18a 내지 도 19b는 일 실시예에 따른 입력부가 영상 처리된 결과를 출력하는 또 다른 예를 설명하기 위한 도면들이다.FIGS. 18A to 19B are diagrams for explaining another example of outputting an image-processed result of an input unit according to an embodiment.

입력부(1601)는 화면(3400)에 출력된 의료 영상(3410)의 밝기를 변경할 것을 요청하는 사용자 입력을 수신하고, 영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상(3410)의 밝기를 변경할 수 있다. 다시 말해, 영상 처리부(1201)은 의료 영상(3410)의 밝기보다 밝은 영상을 생성하거나, 의료 영상(3410)의 밝기보다 어두운 영상을 생성할 수 있다. 이하에서는 영상 처리부(1201)가 의료 영상(3410)의 밝기보다 어두워진 영상을 생성하는 예만을 설명할 것이나, 영상 처리부(1201)가 의료 영상(3410)의 밝기보다 밝은 영상을 생성하는 예는 당업자라면 쉽게 이해할 수 있다.The input unit 1601 receives a user input requesting to change the brightness of the medical image 3410 output to the screen 3400 and the image processing unit 1201 changes the brightness of the medical image 3410 based on the user input . In other words, the image processing unit 1201 may generate an image that is brighter than the brightness of the medical image 3410 or that is darker than the brightness of the medical image 3410. Hereinafter, an example in which the image processing unit 1201 generates an image darker than the brightness of the medical image 3410 will be described. However, an example in which the image processing unit 1201 generates an image brighter than the brightness of the medical image 3410, It is easy to understand if it is.

도 18a를 참조하면, 사용자는 키보드 영상(3420)을 통해 데이터를 입력할 수 있다. 예를 들어, 의료 영상(3410)의 밝기를 어둡게 하는 것을 의미하는 용어가 “brightness down”이라고 가정하면, 사용자가 키보드 영상(3420)을 통해 “b” ”r” ”i” ”g” ”h” ”t” ”n” ”e” ”s” ”s” ”d” ”o” ”w” ”n”을 입력함으로써 의료 영상(3410)이 복제될 수 있다. 또한, 사용자는 화면(3400)에 출력된 추천 단어 목록(3430)에서 “brightness down”을 선택할 수도 있다.Referring to FIG. 18A, a user can input data through a keyboard image 3420. FIG. For example, assuming that the term " brightness down " is used to mean dimming the brightness of the medical image 3410, it is assumed that the user inputs "b", "r", " Medical image 3410 can be replicated by entering "t" "n" "e" "s" "s" "d" "o" "w" "n". Also, the user may select "brightness down" in the recommended word list 3430 output on the screen 3400.

도 18b를 참조하면, 화면(3400)에는 기 출력된 영상(3410)과 밝기가 어두워진 영상(3440)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3440)과 기 출력된 영상(3410)은 화면(3400) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 18B, a previously output image 3410 and a brightness-reduced image 3440 may be output together on the screen 3400. FIG. Here, the newly output image 3440 and the previously output image 3410 can be output to different areas on the screen 3400. [

도 19a를 참조하면, 사용자는 화면(3400) 상에 제스쳐를 취함으로써, 의료 영상(3450)의 밝기를 조절할 수 있다. 예를 들어, 사용자가 화면(3400) 상의 소정의 영역을 드래그함에 따라 의료 영상(3450)의 밝기가 조정될 수 있다. 사용자가 소정의 영역을 드래그할 때, 입력부(1601)는 화면(3400)에 밝기 바(brightness bar)(3460)를 출력함으로써, 사용자에게 의료 영상(3450)의 밝기가 조정되고 있음을 알릴 수 있다. 또한, 입력부(1601)는 밝기 바(3460)와 인접한 영역에 의료 영상(3450)의 밝기 정도를 출력(3470)할 수도 있다.Referring to FIG. 19A, the user can adjust the brightness of the medical image 3450 by taking a gesture on the screen 3400. For example, as the user drags a predetermined area on the screen 3400, the brightness of the medical image 3450 can be adjusted. When the user drags a predetermined area, the input unit 1601 outputs a brightness bar 3460 to the screen 3400 to notify the user that the brightness of the medical image 3450 is being adjusted . Also, the input unit 1601 may output the degree of brightness of the medical image 3450 to the area adjacent to the brightness bar 3460 (step 3470).

다시 말해, 입력부(1601)는 사용자가 드래그 제스쳐를 취하는 동안에 밝기 바(3460)를 화면(3400)에 출력하고, 사용자가 드래그하고 있는 화면(3400) 상의 위치에 대응하여 의료 영상(3450)의 밝기 정도를 출력(3470)할 수 있다. 따라서, 사용자는 의료 영상(3450)의 밝기가 어떻게 변경되고 있는지 용이하게 인식할 수 있다.In other words, the input unit 1601 outputs the brightness bar 3460 to the screen 3400 while the user takes the drag gesture, and displays the brightness of the medical image 3450 corresponding to the position on the screen 3400 that the user is dragging (3470) can be output. Accordingly, the user can easily recognize how the brightness of the medical image 3450 is changing.

도 19b를 참조하면, 화면(3400)에는 기 출력된 영상(3450)과 밝기가 조정된 영상(3480)이 함께 출력될 수 있다. 여기에서, 새로 출력된 영상(3480)과 기 출력된 영상(3450)은 화면(3400) 상에서 서로 다른 영역에 출력될 수 있다.Referring to FIG. 19B, a previously output image 3450 and a brightness-adjusted image 3480 may be output together on the screen 3400. FIG. Here, the newly output image 3480 and the previously output image 3450 can be output to different areas on the screen 3400.

도 1 내지 도 19b를 참조하여 상술한 바에 따르면, 입력부(1601)는 일반적인 키보드의 형상과 동일한 키보드 영상을 화면에 출력할 수 있다. 한편, 키보드 영상은 상술한 것에 한정되지 않으며, 미리 설정된 키보드 유형에 기초한 다양한 키보드 영상들이 출력될 수 있다. 이하, 도 20a 내지 도 20d를 참조하여 키보드 영상의 예들을 설명한다.1 to 19B, the input unit 1601 can output the same keyboard image as that of a general keyboard to the screen. On the other hand, the keyboard image is not limited to the above, and various keyboard images based on the preset keyboard type can be output. Hereinafter, examples of a keyboard image will be described with reference to FIGS. 20A to 20D.

도 20a 내지 도 20d는 일 실시예에 따른 입력부가 다양한 유형의 키보드 영상들을 출력하는 예를 설명하기 위한 도면들이다.20A to 20D are diagrams for explaining an example in which an input unit according to an embodiment outputs various types of keyboard images.

도 20a를 참조하면, 화면(3500)에는 일반적인 키보드의 형상과 동일한 키보드 영상(3510)이 출력되어 있다. 이때, 사용자가 화면(3500)에 출력된 소정의 아이콘(3520)을 선택하면, 입력부(1601)는 사용자의 선택에 따라 다양한 유형들의 키보드 영상을 화면(3500)에 출력할 수 있다.Referring to FIG. 20A, a keyboard image 3510 that is the same as the shape of a general keyboard is output on the screen 3500. At this time, if the user selects a predetermined icon 3520 output on the screen 3500, the input unit 1601 can output various types of keyboard images to the screen 3500 according to the user's selection.

예를 들어, 사용자가 아이콘(3520)을 선택(예를 들어, 터치)하면, 미리 설정된 키보드 유형들이 별도의 팝업 창(3530)에 표시될 수 있다. 이때, 사용자가 미리 설정된 키보드 유형들 중에서 어느 하나를 선택하면, 입력부(1601)는 선택된 유형에 대응하는 키보드 영상을 화면(3500)에 출력할 수 있다.For example, if the user selects (e.g., touches) the icon 3520, preset keyboard types may be displayed in a separate pop-up window 3530. At this time, if the user selects any one of preset keyboard types, the input unit 1601 can output the keyboard image corresponding to the selected type to the screen 3500.

여기에서, 키보드 유형은 사용자가 별도의 설정 과정을 통해서 미리 설정할 수도 있고, 장치(101)의 생산자에 의하여 미리 설정될 수도 있다.Here, the keyboard type may be preset by the user through a separate setting process, or may be preset by the manufacturer of the device 101. [

일 예로서, 도 20b를 참조하면, 입력부(1601)는 기 출력된 키보드 영상(3510)과 다른 형상 또는 컬러를 갖는 키보드 영상(3540)을 화면(3500)에 출력할 수 있다. 여기에서, 키보드 영상(3510)과 다른 형상 또는 컬러를 갖는다는 것은 키보드 영상(3540)에 포함된 키들은 키보드 영상(3510)과 동일하나, 키보드 영상(3510)의 형상 또는 컬러가 키보드 영상(3540)의 형상 또는 컬러와 다른 것을 의미한다.For example, referring to FIG. 20B, the input unit 1601 may output a keyboard image 3540 having a shape or color different from that of the keyboard image 3510 output to the screen 3500. Here, the keyboard image 3510 is different from the keyboard image 3510 in that the keys included in the keyboard image 3540 are the same as the keyboard image 3510, but the shape or color of the keyboard image 3510 is different from the keyboard image 3540 Quot; color ").

다른 예로서, 도 20c를 참조하면, 입력부(1601)는 기 출력된 키보드 영상(3510)에 포함된 키들과 다른 키들을 포함하는 키보드 영상(3550)을 화면(3500)에 출력할 수 있다. 예를 들어, 키보드 영상(3550)은 숫자들을 나타내는 키들 만으로 구성된 영상일 수 있다. 이외에도, 키보드 영상(3550)은 기호 또는 특수 문자들을 나타내는 키들 만으로 구성된 영상일 수 있다.As another example, referring to FIG. 20C, the input unit 1601 may output a keyboard image 3550 including keys other than the keys included in the keyboard image 3510 output to the screen 3500. For example, the keyboard image 3550 may be an image composed only of keys representing numbers. In addition, the keyboard image 3550 may be an image composed of only keys representing symbols or special characters.

또 다른 예로서, 도 20d를 참조하면, 입력부(1601)는 소정의 기능을 나타내는 단축키들을 포함하는 키보드 영상(3560)을 화면(3500)에 출력할 수 있다. 예를 들어, 키보드 영상(3560)에 포함된 키들은 영상 처리부(1201)가 의료 영상을 처리하는 다양한 방식들(예를 들어, 영상에 텍스트를 추가, 영상의 확대/축소, 영상의 밝기 조정, 영상들 중 어느 하나를 선택, 영상을 복제 등) 각각을 나타내는 단축키들 일 수 있다. 따라서, 사용자가 키보드 영상(3560)에 포함된 어느 하나의 키를 선택하는 경우, 별도의 명령어 또는 제스쳐를 입력하지 않더라도, 선택된 키에 대응하는 기능이 실행될 수 있다.As another example, referring to FIG. 20D, the input unit 1601 may output a keyboard image 3560 including shortcut keys indicating a predetermined function to the screen 3500. For example, the keys included in the keyboard image 3560 may include various methods of processing the medical image (for example, adding text to the image, enlarging / reducing the image, adjusting the brightness of the image, A selection of one of the images, a reproduction of the image, etc.). Therefore, when the user selects any one of the keys included in the keyboard image 3560, the function corresponding to the selected key can be executed without inputting a separate command or gesture.

한편, 키보드 영상의 유형들은 상술한 도 20b 내지 도 20d에 한정되지 않고, 기본값으로 설정된 키보드 영상과 다른 키보드 영상을 나타내는 유형이라면 제한 없이 해당될 수 있다.On the other hand, the types of the keyboard image are not limited to the above-described FIGS. 20B to 20D, and can be applied without limitation as long as they are types indicating keyboard images different from the default keyboard images.

도 5 내지 도 20d를 참조하여 상술한 바에 따르면, 입력부(1601)의 화면에는 의료 영상과 키보드 영상이 함께 출력되어 있다. 그러나, 입력부(1601)가 화면에 의료 영상을 먼저 출력하고, 그 이후에 입력된 사용자 입력에 기초하여 키보드 영상을 출력할 수도 있다. 또한, 입력부(1601)가 화면에 키보드 영상을 먼저 출력하고, 그 이후에 입력된 사용자 입력에 기초하여 의료 영상을 출력할 수도 있다. 또한, 입력부(1601)가 사용자 입력에 기초하여 키보드 영상과 의료 영상을 한꺼번에 출력할 수도 있다. 이하, 도 21 내지 도 23을 참조하여 상세하게 설명한다.According to the above description with reference to FIGS. 5 to 20D, a medical image and a keyboard image are output together on the screen of the input unit 1601. FIG. However, the input unit 1601 may first output the medical image to the screen, and then output the keyboard image based on the input user input. Also, the input unit 1601 may first output the keyboard image to the screen, and output the medical image based on the user input thereafter. Further, the input unit 1601 may output the keyboard image and the medical image at once based on the user input. Hereinafter, this will be described in detail with reference to Figs. 21 to 23. Fig.

도 21a 내지 도 23b는 일 실시예에 따른 입력부에 의료 영상과 키보드 영상이 출력되는 순서를 설명하기 위한 도면들이다.FIGS. 21A to 23B are diagrams for explaining a procedure of outputting a medical image and a keyboard image to an input unit according to an embodiment.

도 21a를 참조하면, 화면(4000)에는 의료 영상(4010)이 출력되어 있다. 이 상태에서, 사용자는 키보드 영상을 출력할 것을 요청하는 사용자 입력을 입력할 수 있다. 예를 들어, 사용자가 화면(4000)의 일 영역에 표시된 아이콘(4020)을 선택하면, 입력부(1601)는 화면(4000)에 키보드 영상을 추가로 출력할 수 있다.Referring to FIG. 21A, a medical image 4010 is output on the screen 4000. FIG. In this state, the user can input a user input requesting to output the keyboard image. For example, when the user selects the icon 4020 displayed in one area of the screen 4000, the input unit 1601 can additionally output the keyboard image to the screen 4000.

도 21b를 참조하면, 사용자 입력에 따라 화면(4000)에 의료 영상(4030)과 키보드 영상(4040)이 함께 출력된 일 예가 도시되어 있다. 만약, 기 출력된 의료 영상(4010)의 크기로 인하여, 화면(4000) 상에 키보드 영상(4040)이 출력될 영역이 없거나 적은 경우에, 입력부(1601)는 키보드 영상(4040)을 화면(4000)에 출력함과 동시에 크기가 축소된 의료 영상(4030)을 출력할 수 있다.Referring to FIG. 21B, an example in which a medical image 4030 and a keyboard image 4040 are output together on a screen 4000 according to user input is shown. If there is no or a small area for the keyboard image 4040 to be output on the screen 4000 due to the size of the medical image 4010 already output, the input unit 1601 displays the keyboard image 4040 on the screen 4000 And output medical image 4030 whose size is reduced.

도 22a를 참조하면, 화면(4100)에는 키보드 영상(4110)이 출력되어 있다. 이 상태에서, 사용자는 의료 영상을 출력할 것을 요청하는 사용자 입력을 입력할 수 있다. 예를 들어, 사용자가 화면(4100)의 일 영역에 표시된 아이콘(4120)을 선택하면, 입력부(1601)는 화면(4100)에 의료 영상을 추가로 출력할 수 있다.Referring to FIG. 22A, a keyboard image 4110 is displayed on a screen 4100. FIG. In this state, the user can input a user input requesting to output a medical image. For example, when the user selects the icon 4120 displayed in one area of the screen 4100, the input unit 1601 may additionally output the medical image to the screen 4100.

도 22b를 참조하면, 사용자 입력에 따라 화면(4100)에 키보드 영상(4130)과 의료 영상(4140)이 함께 출력된 일 예가 도시되어 있다. 만약, 기 출력된 키보드 영상(4110)의 크기로 인하여, 화면(4100) 상에 의료 영상(4140)이 출력될 영역이 없거나 적은 경우에, 입력부(1601)는 의료 영상(4140)을 화면(4100)에 출력함과 동시에 크기가 축소된 키보드 영상(4130)을 출력할 수 있다.Referring to FIG. 22B, an example in which a keyboard image 4130 and a medical image 4140 are output together is displayed on a screen 4100 according to a user input. If there is no or only a region where the medical image 4140 is to be output on the screen 4100 due to the size of the keyboard image 4110 already output, the input unit 1601 displays the medical image 4140 on the screen 4100 And output a reduced-size keyboard image 4130. [0157] FIG.

도 23a를 참조하면, 화면(4200)에는 아무런 영상도 출력되어 있지 않다. 이 상태에서, 사용자는 의료 영상 및 키보드 영상을 함께 출력할 것을 요청하는 사용자 입력을 입력할 수 있다. 예를 들어, 사용자가 화면(4200)의 일 영역에 표시된 아이콘들(4210, 4220)을 동시에 또는 연속적으로 선택하면, 도 23b에 도시된 바와 같이, 입력부(1601)는 화면(4200)에 의료 영상(4230)과 키보드 영상(4240)을 함께 출력할 수 있다.Referring to Fig. 23A, no image is output on the screen 4200. Fig. In this state, the user can input a user input requesting to output the medical image and the keyboard image together. For example, when the user simultaneously or consecutively selects the icons 4210 and 4220 displayed in one area of the screen 4200, as shown in FIG. 23B, the input unit 1601 displays a medical image (4230) and a keyboard image (4240) together.

도 24는 일 실시예에 따른 의료 영상과 키보드 영상을 함께 출력하는 방법의 일 예를 설명하기 위한 흐름도이다.24 is a flowchart illustrating an example of a method of outputting a medical image and a keyboard image together according to an embodiment.

도 24를 참조하면, 의료 영상과 키보드 영상을 함께 출력하는 방법은 도 1, 도 2 및 도 4에 도시된 초음파 진단시스템(1000, 1001, 1002) 또는 장치(100, 101)에서 시계열적으로 처리되는 단계들로 구성된다. 따라서, 이하에서 생략된 내용이라 하더라도 도 1, 도 2 및 도 4에 도시된 초음파 진단시스템(1000, 1001, 1002) 또는 장치(100, 101)에 관하여 이상에서 기술된 내용은 도 24의 의료 영상과 키보드 영상을 함께 출력하는 방법에도 적용됨을 알 수 있다.Referring to FIG. 24, a method of outputting a medical image and a keyboard image together is performed in a time-series manner in the ultrasonic diagnostic systems 1000, 1001, and 1002 shown in FIGS. 1, 2, . Therefore, the contents described above with respect to the ultrasound diagnostic systems 1000, 1001, and 1002 or the devices 100 and 101 shown in Figs. 1, 2, and 4, And the method of outputting the keyboard image together.

5010 단계에서, 입력부(1601)는 단일 화면의 서로 다른 영역에 의료 영상 및 키보드 영상을 출력한다. 예를 들어, 의료 영상은 대상체(10)(또는, 대상체(10)의 관심 영역)를 나타내는 초음파 영상일 수 있으나, 이에 한정되지 않는다. 의료 영상은, 초음파 영상 이외에도 MR 영상, X-ray 영상, CT 영상, PET 영상, OCT 영상 등 다양한 종류의 영상을 포함할 수 있다.In step 5010, the input unit 1601 outputs the medical image and the keyboard image to different areas of a single screen. For example, the medical image may be an ultrasound image representing the object 10 (or the region of interest of the object 10), but is not limited thereto. The medical image may include various types of images such as an MR image, an X-ray image, a CT image, a PET image, and an OCT image in addition to the ultrasound image.

키보드 영상은 일반적인 키보드에 포함된 키들을 나타내는 영상일 수 있으나, 이에 한정되지 않는다. 예를 들어, 키보드 영상은 미리 설정된 키보드 유형에 기초하여 생성된 영상일 수 있다. 이때, 키보드 유형은 사용자가 설정할 수도 있고, 장치(101)의 생산자 또는 판매자가 설정할 수도 있다.The keyboard image may be an image representing a key included in a general keyboard, but is not limited thereto. For example, the keyboard image may be an image generated based on a preset keyboard type. At this time, the keyboard type may be set by the user or may be set by the producer or seller of the device 101. [

또한, 사용자 입력은 의료 영상 상에 입력될 수 있다. 예를 들어, 사용자가 입력부(1601)에 출력된 의료 영상 상에 소정의 제스쳐를 취함에 따라, 입력부(1601)는 사용자 입력을 수신할 수 있다.Also, the user input may be entered on the medical image. For example, as the user takes a predetermined gesture on the medical image outputted to the input unit 1601, the input unit 1601 can receive user input.

5020 단계에서, 영상 처리부(1201)는 사용자 입력에 기초하여 의료 영상에 대하여 영상 처리를 수행한다. 일 예로서, 영상 처리부(1201)는 의료 영상의 일 부분에 텍스트를 추가할 수 있다. 다른 예로서, 영상 처리부(1201)는 의료 영상에서 소정의 영역을 확대하거나 축소할 수 있다. 또 다른 예로서, 영상 처리부(1201)는 의료 영상의 밝기(brightness)를 변경(또는, 조절)할 수 있다. 또 다른 예로서, 영상 처리부(1201)는 기 생성된 의료 영상을 복제할 수 있다.In step 5020, the image processing unit 1201 performs image processing on the medical image based on the user input. As an example, the image processing unit 1201 may add text to a portion of the medical image. As another example, the image processing unit 1201 may enlarge or reduce a predetermined area in the medical image. As another example, the image processing unit 1201 may change (or adjust) the brightness of the medical image. As another example, the image processing unit 1201 may duplicate the created medical image.

5030 단계에서, 입력부(1601)는 영상 처리부(1201)에 의하여 영상 처리가 수행된 결과(즉, 영상 처리가 수행된 영상)를 출력한다. 이때, 입력부(1601)는 영상 처리가 수행되기 이전의 영상과 영상 처리가 수행된 영상을 함께 출력할 수도 있다. 또한, 입력부(1601)는 입력부(1601)에 복수의 영상들과 복수의 영상들 중에서 사용자 입력에 따라 선택된 영상을 함께 출력할 수도 있다. 또한, 입력부(1601)는 사용자 입력에 따라 선택된 철자(spelling)가 포함된 단어들을 의료 영상 및 키보드 영상과 함께 출력할 수도 있다.In step 5030, the input unit 1601 outputs the result of the image processing performed by the image processing unit 1201 (i.e., the image subjected to the image processing). At this time, the input unit 1601 may output the image before the image processing and the image subjected to the image processing together. In addition, the input unit 1601 may output a plurality of images and an image selected in accordance with the user input among the plurality of images to the input unit 1601. Also, the input unit 1601 may output words including the selected spelling along with the medical image and the keyboard image according to the user input.

상술한 바에 따르면, 사용자가 키보드에서 원하는 키를 선택할 때, 디스플레이부(1400)에 출력된 의료 영상과 입력부(1601)에 출력된 키보드 영상을 번갈아 보아야 하는 번거로움을 덜 수 있다.When the user selects a desired key on the keyboard, the medical image output to the display unit 1400 and the keyboard image output to the input unit 1601 can be minimized.

또한, 키보드 영상을 통해 입력된 사용자 입력에 기초하여, 영상 처리부(1201)는 의료 영상에 대하여 다양하게 영상 처리를 수행할 수 있다. 또한, 입력부(1601)의 화면에 영상 처리가 수행되기 이전의 영상과 그 이후의 영상이 함께 출력됨에 따라, 사용자가 용이하게 영상 처리의 결과를 확인할 수 있다.In addition, the image processing unit 1201 can perform various image processing on the medical image based on the user input inputted through the keyboard image. In addition, since the image before and after the image processing is performed on the screen of the input unit 1601, the user can easily check the result of the image processing.

또한, 사용자가 키보드 영상에 대한 유형을 미리 설정할 수 있는바, 사용자는 용도에 따라 적절한 키보드 영상을 출력하여 활용할 수 있다.In addition, since the type of the keyboard image can be preset by the user, the user can appropriately output the keyboard image according to the purpose.

한편, 상술한 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 방법에서 사용된 데이터의 구조는 컴퓨터로 읽을 수 있는 기록매체에 여러 수단을 통하여 기록될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 램, USB, 플로피 디스크, 하드 디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.Meanwhile, the above-described method can be implemented in a general-purpose digital computer that can be created as a program that can be executed by a computer and operates the program using a computer-readable recording medium. In addition, the structure of the data used in the above-described method can be recorded on a computer-readable recording medium through various means. The computer-readable recording medium includes a storage medium such as a magnetic storage medium (e.g., ROM, RAM, USB, floppy disk, hard disk, etc.), optical reading medium (e.g. CD ROM, do.

본원 발명의 실시 예 들과 관련된 기술 분야에서 통상의 지식을 가진 자는 상기 기재의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로, 개시된 방법들은 한정적인 관점이 아닌 설명적 관점에서 고려되어야 한다. 본 발명의 범위는 발명의 상세한 설명이 아닌 특허청구 범위에 나타나며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명의 범위에 포함되는 것으로 해석되어야 한다.It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the disclosed methods should be considered in an illustrative rather than a restrictive sense. It is intended that the present invention cover the modifications and variations of this invention provided they come within the scope of the appended claims and their equivalents.

1601: 입력부
1201: 영상 처리부1601:
1201:

Claims

A method of simultaneously outputting a medical image and a keyboard image representing a target object,
Outputting the medical image and the keyboard image to different areas of a single screen, respectively;
Performing image processing on the medical image based on a first user input inputted on the keyboard image; And
And outputting the result of performing the image processing on the single screen.

The method according to claim 1,
Wherein the result of performing the image processing includes an image in which text is added to at least a part of the medical image.

The method according to claim 1,
Wherein the result of performing the image processing includes an image in which a predetermined area of the medical image is enlarged or an image in which a predetermined area of the medical image is reduced.

The method according to claim 1,
Wherein the result of performing the image processing includes an image in which the medical image is duplicated.

The method according to claim 1,
Wherein the result of performing the image processing includes an image in which the brightness of the medical image is changed.

The method according to claim 1,
And outputting the result of performing the image processing includes outputting the medical image and the result of performing the image processing together on the single screen.

The method according to claim 1,
Wherein the keyboard image comprises an image generated based on at least one preset keyboard type.

The method according to claim 1,
Wherein the step of outputting the medical image and the keyboard image comprises outputting the keyboard image based on a user input inputted while the medical image is output to the single screen.

The method according to claim 1,
Wherein the step of outputting the medical image and the keyboard image comprises outputting the medical image based on a user input inputted while the keyboard image is output to the single screen.

The method according to claim 1,
And performing image processing on the medical image based on a second user input inputted on the medical image,
Wherein the outputting of the result of performing the image processing includes outputting the result of performing the image processing based on the second user input on the single screen.

The method according to claim 1,
And outputting at least one word comprising at least one spelling selected in accordance with the first user input to the single screen.

The method according to claim 1,
Wherein the medical image includes an image generated using echo signals corresponding to ultrasound signals irradiated to the object.

A computer-readable recording medium storing a program for causing a computer to execute the method of any one of claims 1 to 12.

An apparatus for outputting a medical image and a keyboard image together representing a target object,
An input unit for outputting the medical image and the keyboard image to different areas of a single screen, respectively; And
And an image processing unit for performing image processing on the medical image based on a first user input inputted on the keyboard image,
Wherein the input unit outputs the result of the image processing to the single screen.

15. The method of claim 14,
Wherein the result of the image processing includes an image in which text is added to at least a part of the medical image.

15. The method of claim 14,
Wherein the result of performing the image processing includes an image in which a predetermined area of the medical image is enlarged or an image in which a predetermined area of the medical image is reduced.

15. The method of claim 14,
Wherein the result of performing the image processing includes an image in which the medical image is duplicated.

15. The method of claim 14,
Wherein the result of performing the image processing includes an image in which the brightness of the medical image is changed.

15. The method of claim 14,
And the input unit outputs the medical image and the result of the image processing together on the single screen.

15. The method of claim 14,
Wherein the keyboard image comprises an image generated based on at least one preset keyboard type.

15. The method of claim 14,
Wherein the input unit outputs the keyboard image based on a user input when the medical image is output to the single screen.

15. The method of claim 14,
Wherein the input unit outputs the medical image based on a user input when the keyboard image is output to the single screen.

15. The method of claim 14,
Wherein the image processing unit performs image processing on the medical image based on a second user input inputted on the medical image,
Wherein the input unit outputs the result of performing the image processing on the single screen based on the second user input.

15. The method of claim 14,
Wherein the input unit outputs at least one word including at least one spelling selected according to the first user input on the single screen.

15. The method of claim 14,
Wherein the medical image includes an image generated using echo signals corresponding to ultrasound signals irradiated toward the object.

1. An ultrasound diagnostic system for outputting a medical image and a keyboard image representing a target object together,
A probe for irradiating ultrasonic signals toward the object and receiving echo signals corresponding to the ultrasonic signals; And
Generating the medical image using the echo signal, outputting the medical image and the keyboard image to different areas of a single screen, respectively, and outputting the medical image and the keyboard image based on the user input, And outputting the result of the image processing to the single screen.