[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

WO2010095255A1 - 情報処理装置、表示制御方法および表示制御プログラム - Google Patents

情報処理装置、表示制御方法および表示制御プログラム Download PDF

Info

Publication number
WO2010095255A1
WO2010095255A1 PCT/JP2009/053145 JP2009053145W WO2010095255A1 WO 2010095255 A1 WO2010095255 A1 WO 2010095255A1 JP 2009053145 W JP2009053145 W JP 2009053145W WO 2010095255 A1 WO2010095255 A1 WO 2010095255A1
Authority
WO
WIPO (PCT)
Prior art keywords
window
display
unit
display control
touch operation
Prior art date
Application number
PCT/JP2009/053145
Other languages
English (en)
French (fr)
Inventor
道人 垣江
Original Assignee
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士通株式会社 filed Critical 富士通株式会社
Priority to KR1020117018226A priority Critical patent/KR20110104088A/ko
Priority to JP2011500424A priority patent/JPWO2010095255A1/ja
Priority to CN2009801566606A priority patent/CN102317895A/zh
Priority to EP09840361A priority patent/EP2400378A1/en
Priority to PCT/JP2009/053145 priority patent/WO2010095255A1/ja
Publication of WO2010095255A1 publication Critical patent/WO2010095255A1/ja
Priority to US13/204,447 priority patent/US20110289449A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning

Definitions

  • This case relates to an information processing apparatus, a display control method, and a display control program.
  • a window system In an information processing apparatus equipped with GUI (Graphical User Interface), a window system is widely adopted.
  • the window system one or more windows are displayed on the operation screen.
  • the user can perform various operations such as character input and graphic drawing within the displayed window area.
  • various window operations such as moving, resizing, maximizing, minimizing (iconizing), closing, and scrolling can be performed on the displayed window.
  • the window operation can be performed using a pointing device such as a mouse.
  • a pointing device such as a mouse.
  • the user moves the window by dragging the title bar provided on the upper side of the window with the mouse.
  • the window is maximized / minimized / closed by clicking the button provided at the end of the title bar with the mouse.
  • an input device dedicated to window operation can be provided in the information processing apparatus (see, for example, Patent Document 1).
  • a device for example, a touch panel
  • the user can directly specify the position on the operation screen with a pen or a finger.
  • a handwriting input method of opening a memo input area when a predetermined memo command is entered with a pen and then closing the memo input area when a predetermined box is touched (For example, refer to Patent Document 2).
  • This case has been made in view of these points, and an object thereof is to provide an information processing apparatus, a display control method, and a display control program that improve the operability of window operations.
  • an information processing apparatus having a display unit, a detection unit, and a control unit.
  • the display unit displays one or more windows.
  • the detection unit detects a touch operation on the display unit.
  • the control unit specifies a graphic represented by the locus of the touch operation detected by the detection unit, and performs display control corresponding to the graphic for the window displayed on the display unit.
  • a display control method for an information processing apparatus provided with a display unit is provided.
  • this display control method one or more windows are displayed on the display unit.
  • a touch operation on the display unit is detected.
  • the figure represented by the locus of the touch operation is specified, and display control corresponding to the figure is performed for the window displayed on the display unit.
  • a display control program to be executed by a computer connected to a display device is provided.
  • a computer that executes the display control program displays one or more windows on the display device.
  • a touch operation on the display device is detected.
  • the figure represented by the locus of the touch operation is specified, and display control corresponding to the figure is performed for the window displayed on the display device.
  • FIG. 1 shows the example of the information processing apparatus which concerns on this Embodiment. It is a figure which shows the external appearance of a portable information terminal device. It is a block diagram which shows the hardware of a portable information terminal device. It is a block diagram which shows the function of a portable information terminal device. It is a figure which shows the example of a data structure of a window management table. It is a figure which shows the example of a data structure of a figure definition table. It is a flowchart which shows window display control. It is a figure which shows the example of a 1st figure determination. It is a figure which shows the example of 1st window operation. It is a figure which shows the example of a 2nd figure judgment.
  • FIG. 1 is a diagram illustrating an example of an information processing apparatus according to the present embodiment.
  • the information processing apparatus 1 illustrated in FIG. 1 can perform window display.
  • various apparatuses such as a laptop computer, a UMPC (Ultra Mobile Personal Computer), a PDA (Personal Data Assistance), and a mobile phone can be considered.
  • the information processing apparatus 1 includes a display unit 1a, a detection unit 1b, and a control unit 1c.
  • the display unit 1a displays an operation screen including one or more windows.
  • a liquid crystal display or an organic EL (Electro-Luminescence) display can be used as the display unit 1a.
  • the user can perform various operations by operating the window displayed on the display unit 1a.
  • the detection unit 1b detects a touch operation on the operation screen on the display unit 1a.
  • a touch panel can be used as the detection unit 1b.
  • the detection unit 1b notifies the control unit 1c of the touched position on the operation screen.
  • the position notification is performed regularly (for example, every 50 ms) or irregularly.
  • the detection unit 1b may allow the touch operation to be performed with the user's finger or allow the touch operation to be performed using a stylus pen.
  • the control part 1c specifies the figure corresponding to the locus
  • the control unit 1c can also distinguish and specify a plurality of types of figures. In that case, it is conceivable to hold a table in which graphics and shape features are associated with each other.
  • the figure to be detected may be fixed or may be set by the user.
  • control part 1c performs display control according to the specified figure with respect to the window currently displayed on the display part 1a.
  • Display control includes window maximization, minimization, closing, scrolling, and the like. For example, when “x” is specified as a graphic, the window is closed.
  • the target of display control may be all the windows displayed on the display unit 1a or a part of the windows. In the latter case, for example, it is conceivable to target only the window (active window) currently being operated.
  • one or more windows are displayed on the display unit 1a.
  • the touch operation on the display unit 1a is detected by the detection unit 1b.
  • the control unit 1c specifies a graphic represented by the detected locus of the touch operation, and performs display control corresponding to the graphic for the window displayed on the display unit 1a.
  • window operations improves the operability of window operations by the user.
  • the user can perform window operations such as maximization, minimization, close, and scroll without accurately touching a title bar or button that is displayed relatively small in the operation screen. This is particularly effective in a portable information terminal device in which the area of the operation screen cannot be made sufficiently large.
  • the display control method described above can be applied to a portable information terminal device including a detection unit other than the touch panel, and can also be applied to other types of information processing devices.
  • FIG. 2 is a diagram illustrating an appearance of the portable information terminal device.
  • the portable information terminal device 100 according to the present embodiment is a small information terminal device called UMPC and is easy to carry.
  • the portable information terminal device 100 includes housings 101 and 102.
  • the housing 101 can be opened and closed with respect to the housing 102.
  • FIG. 2 shows a state where the housing 101 is opened.
  • the housing 101 has a display 103 (not shown in FIG. 2) and a touch panel 104.
  • the housing 102 has a keyboard 105.
  • the display 103 is arranged below the touch panel 104 and displays an operation screen.
  • the operation screen displayed on the display 103 is visible from the front surface of the housing 101 through the touch panel 104.
  • the user can perform a touch operation on the touch panel 104 while viewing the operation screen displayed on the display 103.
  • the display 103 may be arranged on the upper layer side of the touch panel 104.
  • the touch panel 104 detects a touch operation.
  • the user can touch the touch panel 104 with the stylus pen 106 or a finger.
  • the touch panel 104 detects the position where the tip of the stylus pen 106 and the finger are in contact.
  • a method for detecting a touch operation for example, a method using a resistance film, a method of forming an electric field on the surface, a method using infrared rays, and the like are conceivable.
  • the position may be detected without contact.
  • the keyboard 105 is an input device having various keys such as character keys, symbol keys, numeric keys, and function keys. When any key is pressed by the user, the keyboard 105 outputs an electrical signal corresponding to the pressed key. The user can input a sentence and call a function by a key operation.
  • another input / output device may be provided in the portable information terminal device 100.
  • a speaker or a microphone may be provided in the portable information terminal device 100.
  • another input / output device can be connected to the portable information terminal device 100.
  • FIG. 3 is a block diagram showing hardware of the portable information terminal device.
  • the portable information terminal device 100 includes a CPU (Central Processing Unit) 111, a RAM (Random Access Memory) 112, an HDD (Hard Disk Drive) 113, a communication interface 114, a display processing unit 115, and an input processing unit 116. These components are provided in the housing 101 or the housing 102.
  • CPU Central Processing Unit
  • RAM Random Access Memory
  • HDD Hard Disk Drive
  • CPU 111 controls the entire operation of portable information terminal device 100. At that time, the program stored in the HDD 113 is read out, expanded in the RAM 112 and executed. Specifically, the CPU 111 starts executing an OS (Operating System) program or a window display control program when the portable information terminal device 100 is activated. Thereafter, the execution of the application program is started and ended as appropriate. Note that a plurality of CPUs may be mounted on the portable information terminal device 100 to perform distributed processing.
  • OS Operating System
  • the RAM 112 temporarily stores at least a part of programs executed by the CPU 111 and various data used for processing.
  • the CPU 111 appropriately writes and reads programs and data to and from the RAM 112. Note that another type of memory may be used instead of the RAM 112.
  • the HDD 113 stores programs executed by the CPU 111 and various data used for processing.
  • Programs stored in the HDD 113 include an OS program, a window display control program, and an application program.
  • the stored data includes window display control setting data.
  • a nonvolatile memory device such as an SSD (Solid State Drive) may be used.
  • the communication interface 114 performs data communication with other information processing apparatuses via a network. That is, the communication interface 114 encodes and modulates transmission data under the control of the CPU 111 and outputs it to the network. It also demodulates and decodes data received from the network. Note that the network accessed by the communication interface 114 may be wired or wireless.
  • the display processing unit 115 is connected to the display 103.
  • the display processing unit 115 performs image processing on the operation screen displayed on the display 103 under the control of the CPU 111 and continuously outputs image signals to the display 103.
  • the operation screen may include one or a plurality of windows.
  • the input processing unit 116 is connected to the touch panel 104 and the keyboard 105.
  • the input processing unit 116 detects an input signal indicating touch start (DOWN event), touch end (UP event), coordinates of the current touch position, and the like output from the touch panel 104. Further, an input signal indicating the pressed key output from the keyboard 105 is detected. The detected input signal is output to the CPU 111.
  • the display 103 corresponds to the display unit 1a in FIG.
  • the touch panel 104 corresponds to the detection unit 1b in FIG.
  • the CPU 111 and the RAM 112 correspond to the control unit 1c in FIG.
  • FIG. 4 is a block diagram showing functions of the portable information terminal device.
  • the portable information terminal device 100 includes a window information storage unit 120, a graphic information storage unit 130, a touch detection unit 140, a stylus monitoring unit 150, and a window operation unit 160.
  • the functions of these modules are realized by the CPU 111 developing and executing a program on the RAM 112. However, some or all of them may be realized as hardware components.
  • the window information storage unit 120 stores window management information indicating the state of each opened window.
  • the state indicated by the window management information includes a window display state and a use state.
  • the display status includes, for example, a maximized state (displayed in the maximum display area that can be secured), a minimized state (displayed as an icon), and a normal display state (state other than maximized and minimized) There is.
  • the usage state includes, for example, active (a state that is a user's operation target) and inactive (a state that is not a user's operation target).
  • the graphic information storage unit 130 stores graphic information defining window operation commands.
  • a command is defined as a figure drawn by a touch operation.
  • the graphic information includes, for example, information indicating the type of window operation and feature information for specifying a graphic from the locus of the touch operation. Examples of the window operation include window maximization / minimization / close / scroll. Note that the user may be able to update the graphic information.
  • the touch detection unit 140 acquires an input signal indicating a touch operation output from the touch panel 104 via the input processing unit 116.
  • the touch detection unit 140 detects a drag operation based on the UP event and the DOWN event. While the drag is being performed, the stylus monitoring unit 150 is notified of coordinates indicating the current touch position continuously (for example, in a cycle of 50 ms). However, the change amount from the previously notified coordinate may be notified.
  • the touch detection unit 140 may set the area for recognizing the touch operation for the window operation as the entire area on the touch panel 104 or may be limited to a part of the area. As the latter, for example, a method of limiting to the area where the foreground window or the active window is displayed can be considered. That is, a method of determining a predetermined touch operation on an area where a predetermined window is displayed as a touch operation for the window operation can be considered. In that case, a part of the trajectory may straddle the window.
  • the stylus monitoring unit 150 continuously acquires information on the current touch position from the touch detection unit 140, and temporarily stores the locus of the touch operation. For example, the coordinates of the drag operation up to a predetermined time or the drag operation up to a predetermined number of times are held. Then, the stylus monitoring unit 150 refers to the graphic information stored in the graphic information storage unit 130 and identifies the command indicated by the touch operation locus. For example, the touch operation trajectory is compared with the feature information of each command, and the most suitable command is selected. Thereafter, the stylus monitoring unit 150 instructs the window operation unit 160 to execute the window operation indicated by the identified command.
  • the window operation unit 160 controls the display state of the window. That is, when there is a window operation instruction from the stylus monitoring unit 150, the window operation unit 160 refers to the window information stored in the window information storage unit 120 and identifies the currently active window. Then, the window operation for the active window is executed, and the operation screen after the window operation is displayed on the display 103 via the display processing unit 115. Further, the window operation unit 160 updates the window information.
  • the target of the window operation may be other windows such as the frontmost window and the rearmost window instead of the active window.
  • the operation target may be selected according to the command, or the operation target may be selected according to the position where the touch operation is performed. In that case, the stylus monitoring unit 150 specifies an operation target window to the window operation unit 160.
  • the functions of the above modules can also be realized by linking multiple types of programs.
  • the functions of the touch detection unit 140 may be realized by a driver program
  • the functions of the graphic information storage unit 130 and the stylus monitoring unit 150 may be realized by an application program
  • the functions of the window information storage unit 120 and the window operation unit 160 may be realized by an OS program.
  • FIG. 5 is a diagram showing an example of the data structure of the window management table.
  • the window management table 121 is stored in the window information storage unit 120 and is referred to and updated by the window operation unit 160.
  • the window management table 121 includes items indicating a window ID (IDentifier), a display state, and active. Information arranged in the horizontal direction of each item is associated with each other.
  • a character string for identifying each window is set.
  • the window ID is automatically given, for example, when the window is opened.
  • a character string indicating the current display state of the window is set. For example, “maximize”, “minimize” or “normal” is set.
  • a flag indicating whether or not the window is currently active is set. For example, “Yes” is set when active, and “No” is set when inactive.
  • the number of active windows may be limited to one, or multiple windows may be allowed to exist at the same time.
  • information that the window ID is “window # A”, the display state is “normal”, and the active flag is “Yes” is registered in the window management table 121. This indicates that a certain window is currently displayed in a normal display state on the operation screen and is active.
  • information that the window ID is “window # C”, the display state is “minimized”, and the active flag is “No” is registered. This indicates that another window is currently displayed in an iconized state on the operation screen and is not active.
  • the window operation unit 160 registers information on the opened window in the window management table 121 when the window is opened.
  • a newly opened window is normally active with a display state of “normal”. Thereafter, the display state and active / inactive change according to the user's input operation. Further, the window operation unit 160 deletes information on the closed window from the window management table 121 when the window is closed. However, it is possible to set the display state to “closed” without deleting the window information.
  • FIG. 6 is a diagram showing an example of the data structure of the figure definition table.
  • the graphic definition table 131 is stored in the graphic information storage unit 130 and is referred to by the stylus monitoring unit 150.
  • items indicating figures, operations, and features are provided in the figure definition table 131.
  • Information arranged in the horizontal direction of each item is associated with each other.
  • Symbols for identifying each command are set in the items indicating graphics.
  • the identification symbol for example, a simple representation of the shape of a figure is used.
  • a character string indicating the type of window operation is set. For example, “maximize”, “minimize”, “close” or “scroll” is set.
  • Feature information for recognizing a graphic drawn by a touch operation is set in the item indicating the feature.
  • a plurality of feature items may be defined for one figure. Note that the feature of the graphic may be expressed as a mathematical expression that defines a relationship between a plurality of coordinates so that the stylus monitoring unit 150 can easily interpret it.
  • information that the figure is “x” and the operation is “close” is set. This indicates that when a figure that can be recognized as “ ⁇ ” is drawn by a touch operation, the active window is closed.
  • information that the graphic is “ ⁇ ” and the operation is “maximization” is set. This indicates that the active window is maximized when a figure that can be recognized as “ ⁇ ” is drawn by a touch operation.
  • the stylus monitoring unit 150 compares the trajectory of the drag operation from a predetermined time before or a predetermined number of times to the present with the characteristic information of each graphic, and determines whether there is a registered graphic that matches the characteristic. When a plurality of feature items are set for one figure, for example, it is determined that the figure matches the figure when all the feature items are matched. Note that the user can change the correspondence between the figure and the type of window operation by updating the figure definition table 131. It is also possible to register additional new figures.
  • FIG. 7 is a flowchart showing window display control. The process shown in FIG. 7 is repeatedly executed in the portable information terminal device 100. Hereinafter, the processing content of the window display control will be described along with step numbers.
  • Step S1 The touch detection unit 140 detects a drag operation on the touch panel 104 based on an input signal acquired from the touch panel 104. Then, the touch detection unit 140 notifies the stylus monitoring unit 150 of a change in the touch position during the drag operation.
  • the stylus monitoring unit 150 refers to the graphic definition table 131 stored in the graphic information storage unit 130 and collates the locus of the drag operation with the graphic registered as a command. That is, it is determined whether the trajectory of the drag operation matches the feature of each figure.
  • Step S3 The stylus monitoring unit 150 determines whether the locus of the drag operation matches any registered figure in step S2. If it matches any registered figure, the process proceeds to step S4. If it does not match any registered figure, the process is terminated.
  • Step S4 The stylus monitoring unit 150 determines the contents of the window operation corresponding to the graphic specified in step S2. Then, the stylus monitoring unit 150 instructs the window operation unit 160 to perform the window operation on the active window.
  • the window operation unit 160 refers to the window management table 121 stored in the window information storage unit 120 to identify an active window. Then, the window operation unit 160 executes the operation designated by the stylus monitoring unit 150 on the specified window, and updates the operation screen displayed on the display 103. At the same time, the display state information registered in the window management table 121 is also updated.
  • the portable information terminal device 100 detects a touch operation on the touch panel 104 and specifies a figure indicated by the locus of the touch operation. Then, the operation associated with the registered figure is executed on the active window to change the display state, and the operation screen displayed on the display 103 is updated.
  • FIG. 8 is a diagram illustrating an example of first graphic determination.
  • FIG. 8 shows a method of detecting “x” from the locus of the touch operation.
  • the following feature items A1 and A2 are registered in the figure definition table 131.
  • [A1] Two independent lines intersect at only one point.
  • [A2] The intersection of each of the two lines must be within the range of “25% of the total length of the line from the center of the line”.
  • Example 1 The trajectory of the touch operation in Example 1 satisfies both feature items A1 and A2. Therefore, in Example 1, it is determined that the figure “x” is drawn.
  • the trajectory of the touch operation in Example 2 is such that two independent lines intersect at two points and do not satisfy the feature item A1. Further, the trajectory of the touch operation in Example 3 does not satisfy the feature item A2 because the intersection does not exist within the range of “25% of the total length of the line from the center of the line”. Therefore, in Examples 2 and 3, it is not determined that the figure “x” is drawn.
  • FIG. 9 is a diagram showing an example of the first window operation.
  • Operation screens 211 and 212 shown in FIG. 9 are examples of operation screens displayed on the display 103.
  • windows A, B, and C are opened. Of these, windows A and B are displayed in a normal state, and window C is displayed in an iconized state on the task bar.
  • Window A is displayed in the foreground and is active.
  • FIG. 10 is a diagram illustrating an example of second graphic determination.
  • FIG. 10 shows a method of detecting “ ⁇ ” from the trajectory of the touch operation.
  • the following feature items B 1 and B 2 are registered in the figure definition table 131.
  • the length between the start point and the intersection point is 10% or less of the total length of the line.
  • Example 1 The trajectory of the touch operation in Example 1 satisfies both feature items B1 and B2. Therefore, in Example 1, it is determined that the figure “ ⁇ ” is drawn.
  • the trajectory of the touch operation in Example 2 does not satisfy the feature item B1 because there is no intersection between the start point and the end point. Further, in the touch operation locus of Example 3, the length between the start point and the intersection is greater than 10% of the total length of the line, and does not satisfy the feature item B2. Therefore, in Examples 2 and 3, it is not determined that the figure “ ⁇ ” is drawn.
  • FIG. 11 is a diagram illustrating an example of the second window operation.
  • Operation screens 221 and 222 shown in FIG. 11 are examples of operation screens displayed on the display 103.
  • windows A, B, and C are opened as in the operation screen 211 shown in FIG. Of these, windows A and B are displayed in a normal state, and window C is displayed in an iconized state on the task bar.
  • Window A is displayed in the foreground and is active.
  • window A is displayed using the maximum display area of display 103. After window A is maximized, for example, window A continues to be active.
  • FIG. 12 is a diagram illustrating an example of third graphic determination.
  • FIG. 12 shows a method for detecting “ ⁇ ” from the trajectory of the touch operation.
  • the following feature items C1 and C2 are registered in the figure definition table 131.
  • the length between the center point M of one line and the highest vertex P (the point with the smallest y coordinate) is 10% or less of the total length of the line.
  • the direction from the top to the bottom of the display area is the y-axis.
  • the difference between the y coordinate of the start point and the y coordinate of the end point is 10% or less of the difference between the y coordinate of the start point and the y coordinate of the top vertex P. Note that either the start point y coordinate or the end point y coordinate may be small.
  • Example 2 The trajectory of the touch operation in Example 1 satisfies both the feature items C1 and C2. Therefore, in Example 1, it is determined that the figure “ ⁇ ” is drawn.
  • the length between the center point M and the highest vertex P is larger than 10% of the total length of the line, and does not satisfy the feature item C1.
  • the difference between the y-coordinate of the start point and the y-coordinate of the end point is larger than 10% of the difference between the y-coordinate of the start point and the y-coordinate of the highest vertex P, and satisfies the feature item C2. Absent. Therefore, in Examples 2 and 3, it is not determined that the figure “ ⁇ ” is drawn.
  • FIG. 13 is a diagram illustrating an example of the third window operation.
  • Operation screens 231 and 232 shown in FIG. 13 are examples of operation screens displayed on the display 103.
  • windows A, B, and C are opened as in the operation screen 211 shown in FIG. Of these, windows A and B are displayed in a normal state, and window C is displayed in an iconized state on the task bar.
  • Window A is displayed in the foreground and is active.
  • the operation screen of the display 103 transitions from the operation screen 231 to the operation screen 232. That is, the window A is displayed only as an icon on the task bar, and the window B displayed on the lower layer of the window A is displayed in the foreground in an area other than the task bar. If the icon is subsequently touched, the window A returns to the normal display.
  • FIG. 14 is a diagram illustrating an example of the fourth graphic determination.
  • FIG. 14 shows a method of detecting “Le” from the trajectory of the touch operation.
  • the following feature items D1 and D2 are registered in the figure definition table 131.
  • D1 The difference between the x coordinate of the lowest point Q (the point having the largest y coordinate) of one line and the x coordinate of the starting point is 10% or less of the total length of the line. However, the direction from the left to the right of the display area is the x-axis.
  • the y coordinate of the end point is between the y coordinate of the start point and the y coordinate of the lowest point Q, and is within the range of “25% of the y coordinate difference from the center of both points”.
  • Example 1 The trajectory of the touch operation in Example 1 satisfies both the feature items D1 and D2. Therefore, in Example 1, it is determined that the figure “R” is drawn.
  • the difference between the x coordinate of the lowest point Q and the x coordinate of the start point is larger than 10% of the total length of the line, and does not satisfy the feature item D1.
  • the locus of the touch operation in Example 3 does not satisfy the feature item D2 because the y coordinate of the end point is too small (too much to extend upward). Therefore, in Examples 2 and 3, it is not determined that the figure “R” is drawn.
  • FIG. 15 is a diagram showing an example of the fourth window operation.
  • Operation screens 241 and 242 shown in FIG. 15 are examples of operation screens displayed on the display 103.
  • windows A, B, and C are opened as in the operation screen 211 shown in FIG. 9.
  • windows A and B are displayed in a normal state
  • window C is displayed in an iconized state on the task bar.
  • Window A is displayed in the foreground and is active.
  • Examples of four types of window operations have been shown, but the operation content is not limited to these, and various window operations can be set.
  • graphics that can be used as commands are not limited to these, and various graphics can be registered.
  • the correspondence between the figure and the type of window operation does not have to be 1: 1, and a plurality of figures may be associated with one type of window operation.
  • the locus drawn by the stylus pen 106 or the finger may be invisible or may be displayed on the display 103 for a predetermined time.
  • window A may be closed, maximized, or minimized. Further, when the scroll bar of window A is dragged, screen scrolling may be performed.
  • the method using graphic commands and the method using buttons and scroll bars may be used in combination, or only one of them may be used. The user may be allowed to set which method to turn on. In addition, it is possible to suppress erroneous operations by using only figures of a predetermined size or more as detection targets.
  • a figure drawn by a touch operation is specified, and an operation corresponding to the figure is executed on a currently opened window (for example, an active window).
  • a currently opened window for example, an active window.
  • the display control can be realized by causing a computer to execute a predetermined program.
  • a program describing the processing contents to be realized is provided.
  • the program describing the processing contents can be recorded on a computer-readable recording medium.
  • the computer-readable recording medium include a magnetic recording device, an optical disk, a magneto-optical recording medium, and a semiconductor memory.
  • the magnetic recording device include a hard disk device, a flexible disk (FD), and a magnetic tape (MT).
  • Optical discs include DVD (Digital Versatile Disc), DVD-RAM, CD-ROM (Compact Disc-Read Only Memory), CD-R (Recordable), CD-RW (ReWritable), and the like.
  • Magneto-optical recording media include MO (Magneto-Optical disk).
  • a portable recording medium such as a DVD or CD-ROM in which the program is recorded is sold. It is also possible to store the program in a storage device of a server computer and transfer the program from the server computer to another computer via a network.
  • the computer that executes the program stores, for example, the program recorded on the portable recording medium or the program transferred from the server computer in its own storage device. Then, the computer reads the program from its own storage device and executes processing according to the program. The computer can also read the program directly from the portable recording medium and execute processing according to the program. In addition, each time the program is transferred from the server computer, the computer can sequentially execute processing according to the received program.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

　ウィンドウ操作の操作性を向上させる。 　情報処理装置（１）は、表示部（１ａ）と検出部（１ｂ）と制御部（１ｃ）を有する。表示部（１ａ）は、１またはそれ以上のウィンドウを表示する。検出部（１ｂ）は、表示部（１ａ）に対するタッチ操作を検出する。制御部（１ｃ）は、検出部（１ｂ）で検出したタッチ操作の軌跡が表す図形を特定し、表示部（１ａ）に表示されているウィンドウについて図形に応じた表示制御（例えば、最大化・最小化・クローズ・スクロールなど）を行う。

Description

情報処理装置、表示制御方法および表示制御プログラム
　本件は情報処理装置、表示制御方法および表示制御プログラムに関する。
　ＧＵＩ（Graphical User Interface）を備えた情報処理装置では、ウィンドウシステムが広く採用されている。ウィンドウシステムでは、１またはそれ以上のウィンドウが操作画面上に表示される。ユーザは、表示されたウィンドウの領域内で、文字入力や図形描画などの各種作業を行うことができる。また、表示されウィンドウに対し、移動・サイズ変更・最大化・最小化（アイコン化）・クローズ・スクロールなどの各種ウィンドウ操作を行うことができる。
　ウィンドウ操作は、マウスなどのポインティングデバイスを用いて行うことができる。例えば、ユーザは、ウィンドウの上辺に設けられたタイトルバーをマウスでドラッグすることで、ウィンドウを移動させる。また、タイトルバーの端に設けられたボタンをマウスでクリックすることで、ウィンドウの最大化・最小化・クローズを行う。ただし、ポインティングデバイスとは別にウィンドウ操作専用の入力装置を情報処理装置に設けることも可能である（例えば、特許文献１参照）。
　ところで、操作画面上の位置を指定するために、操作画面に対してタッチ操作が可能なデバイス（例えば、タッチパネル）を用いることもできる。ユーザは、ペンや指によって操作画面上の位置を直接指定することができる。なお、ペン入力が可能な情報処理装置を用いる場合、ペンで所定のメモコマンドを記入するとメモ入力のための領域を開き、その後、所定のボックスをタッチするとメモ入力の領域を閉じるという手書き入力方法も考えられる（例えば、特許文献２参照）。
特開２００２－２５９００１号公報 特開平０７－１４１０９２号公報
　操作画面に対するタッチ操作が可能な情報処理装置では、表示中のウィンドウに対する各種ウィンドウ操作も、タッチ操作で行えるようにすることが考えられる。しかし、タッチ操作では、ユーザにとって、操作画面内に相対的に小さく表示されるタイトルバーやボタンを正確にタッチすることが容易でないという問題がある。この問題は、携帯情報端末装置のように操作画面を大きくすることが難しい装置では、特に顕著である。
　本件はこのような点に鑑みてなされたものであり、ウィンドウ操作の操作性を向上させる情報処理装置、表示制御方法および表示制御プログラムを提供することを目的とする。
　上記課題を解決するために、表示部と検出部と制御部とを有する情報処理装置が提供される。表示部は、１またはそれ以上のウィンドウを表示する。検出部は、表示部に対するタッチ操作を検出する。制御部は、検出部で検出したタッチ操作の軌跡が表す図形を特定し、表示部に表示されているウィンドウについて図形に応じた表示制御を行う。
　また、上記課題を解決するために、表示部を備えた情報処理装置の表示制御方法が提供される。この表示制御方法では、表示部に１またはそれ以上のウィンドウを表示する。表示部に対するタッチ操作を検出する。タッチ操作の軌跡が表す図形を特定し、表示部に表示されているウィンドウについて図形に応じた表示制御を行う。
　また、上記課題を解決するために、表示装置と接続されたコンピュータに実行させる表示制御プログラムが提供される。この表示制御プログラムを実行するコンピュータは、表示装置に１またはそれ以上のウィンドウを表示する。表示装置に対するタッチ操作を検出する。タッチ操作の軌跡が表す図形を特定し、表示装置に表示されているウィンドウについて図形に応じた表示制御を行う。
　上記情報処理装置、表示制御方法および表示制御プログラムによれば、ウィンドウ操作の操作性が向上する。
　本発明の上記および他の目的、特徴および利点は本発明の例として好ましい実施の形態を表す添付の図面と関連した以下の説明により明らかになるであろう。
本実施の形態に係る情報処理装置の例を示す図である。 携帯情報端末装置の外観を示す図である。 携帯情報端末装置のハードウェアを示すブロック図である。 携帯情報端末装置の機能を示すブロック図である。 ウィンドウ管理テーブルのデータ構造例を示す図である。 図形定義テーブルのデータ構造例を示す図である。 ウィンドウ表示制御を示すフローチャートである。 第１の図形判断の例を示す図である。 第１のウィンドウ操作の例を示す図である。 第２の図形判断の例を示す図である。 第２のウィンドウ操作の例を示す図である。 第３の図形判断の例を示す図である。 第３のウィンドウ操作の例を示す図である。 第４の図形判断の例を示す図である。 第４のウィンドウ操作の例を示す図である。
　以下、本実施の形態を図面を参照して詳細に説明する。
　図１は、本実施の形態に係る情報処理装置の例を示す図である。図１に示す情報処理装置１は、ウィンドウ表示を行うことができる。情報処理装置１としては、ラップトップ型コンピュータ、ＵＭＰＣ（Ultra Mobile Personal Computer）、ＰＤＡ（Personal Data Assistance）、携帯電話機などの種々の装置が考えられる。情報処理装置１は、表示部１ａ、検出部１ｂおよび制御部１ｃを有する。
　表示部１ａは、１またはそれ以上のウィンドウを含む操作画面を表示する。表示部１ａとしては、例えば、液晶ディスプレイや有機ＥＬ（Electro Luminescence）ディスプレイを用いることができる。ユーザは、表示部１ａに表示されたウィンドウを操作して、種々の作業を行うことが可能である。
　検出部１ｂは、表示部１ａ上の操作画面に対するタッチ操作を検出する。検出部１ｂとしては、例えば、タッチパネルを用いることができる。検出部１ｂは、操作画面におけるタッチされた位置を制御部１ｃに通知する。位置の通知は、定期（例えば、５０ｍｓ毎）または不定期に行われる。検出部１ｂは、タッチ操作がユーザの指で行われることを許容してもよいし、スタイラスペンを用いて行われることを許容してもよい。
　制御部１ｃは、検出部１ｂで検出したタッチ操作の軌跡に対応する図形を特定する。例えば、「×」の形状の特徴を記憶しておき、その特徴に合致する軌跡が検出されると「×」が描かれたと判断する。制御部１ｃは、複数の種類の図形を区別して特定することもできる。その場合、図形と形状の特徴とを対応付けたテーブルを保持しておくことが考えられる。検出対象とする図形は、固定でもよいし、ユーザが設定できるようにしてもよい。
　そして、制御部１ｃは、表示部１ａに表示されているウィンドウに対して、特定した図形に応じた表示制御を行う。表示制御には、ウィンドウの最大化・最小化・クローズ・スクロールなどが含まれる。例えば、図形として「×」が特定されたとき、ウィンドウをクローズする。表示制御の対象は、表示部１ａに表示されている全てのウィンドウとしてもよいし一部のウィンドウとしてもよい。後者の場合、例えば、現在操作対象となっているウィンドウ（アクティブなウィンドウ）のみを対象とすることが考えられる。
　このような情報処理装置１によれば、表示部１ａにより、１またはそれ以上のウィンドウが表示される。検出部１ｂにより、表示部１ａに対するタッチ操作が検出される。制御部１ｃにより、検出されたタッチ操作の軌跡が表す図形が特定され、表示部１ａに表示されているウィンドウについて図形に応じた表示制御が行われる。
　これにより、ユーザによるウィンドウ操作の操作性が向上する。例えば、ユーザは、操作画面内に相対的に小さく表示されるタイトルバーやボタンを正確にタッチしなくても、最大化・最小化・クローズ・スクロールなどのウィンドウ操作を行うことができる。これは、操作画面の領域を十分に大きくできない携帯型の情報端末装置では特に有効となる。
　次に、上記の表示制御方法をタッチパネルを備えた携帯情報端末装置に適用した場合について更に詳細に説明する。ただし、上記の表示制御方法は、タッチパネル以外の検出部を備える携帯情報端末装置に適用することもできるし、他の種類の情報処理装置に適用することもできる。
　図２は、携帯情報端末装置の外観を示す図である。本実施の形態に係る携帯情報端末装置１００は、ＵＭＰＣと呼ばれる小型の情報端末装置であり、持ち運びが容易である。
　携帯情報端末装置１００は、筐体１０１，１０２を有する。筐体１０１は、筐体１０２に対して開閉することができる。図２は、筐体１０１が開いた状態を示している。筐体１０１は、ディスプレイ１０３（図２では図示せず）およびタッチパネル１０４を有する。筐体１０２は、キーボード１０５を有する。
　ディスプレイ１０３は、タッチパネル１０４の下層に配置されて操作画面を表示する。ディスプレイ１０３の表示する操作画面は、タッチパネル１０４を透過して、筐体１０１の前面から視認可能である。ユーザは、ディスプレイ１０３によって表示された操作画面を見ながら、タッチパネル１０４に対するタッチ操作を行うことができる。なお、タッチパネル１０４の種類によっては、ディスプレイ１０３がタッチパネル１０４より上層側に配置される場合もある。
　タッチパネル１０４は、タッチ操作を検出する。ユーザは、スタイラスペン１０６や指によりタッチパネル１０４にタッチすることができる。タッチパネル１０４は、スタイラスペン１０６の先端や指が接触している位置を検出する。タッチ操作を検出する方法としては、例えば、抵抗膜を用いるもの、表面に電界を形成するもの、赤外線を用いるものなどが考えられる。なお、検出方法によっては、非接触で位置を検出できる場合もある。
　キーボード１０５は、文字キー・記号キー・数字キー・機能キーなどの各種キーを備えた入力装置である。キーボード１０５は、ユーザにより何れかのキーが押下されると、押下されたキーに応じた電気信号を出力する。ユーザは、キー操作により、文章入力や機能の呼び出しを行うことができる。
　なお、携帯情報端末装置１００に他の入出力装置を設けてもよい。例えば、スピーカーやマイクロフォンを設けることが考えられる。また、携帯情報端末装置１００に他の入出力装置を接続することもできる。例えば、マウスを接続することが考えられる。
　図３は、携帯情報端末装置のハードウェアを示すブロック図である。携帯情報端末装置１００は、ＣＰＵ（Central Processing Unit）１１１、ＲＡＭ（Random Access Memory）１１２、ＨＤＤ（Hard Disk Drive）１１３、通信インタフェース１１４、表示処理部１１５および入力処理部１１６を有する。これら部品は、筐体１０１または筐体１０２内に設けられる。
　ＣＰＵ１１１は、携帯情報端末装置１００全体の動作を制御する。その際、ＨＤＤ１１３に格納されているプログラムを読み出し、ＲＡＭ１１２に展開して実行する。具体的には、ＣＰＵ１１１は、携帯情報端末装置１００の起動時に、ＯＳ（Operating System）プログラムやウィンドウ表示制御のプログラムの実行を開始する。その後は、適宜、アプリケーションプログラムの実行を開始・終了する。なお、携帯情報端末装置１００に複数のＣＰＵを搭載して分散処理を行ってもよい。
　ＲＡＭ１１２は、ＣＰＵ１１１で実行されるプログラムや処理に用いられる各種データの少なくとも一部を一時的に記憶する。ＣＰＵ１１１により、適宜、ＲＡＭ１１２に対してプログラムやデータの書き込みおよび読み出しが実行される。なお、ＲＡＭ１１２に代えて、他の種類のメモリを用いてもよい。
　ＨＤＤ１１３は、ＣＰＵ１１１で実行されるプログラムや処理に用いられる各種データを格納する。ＨＤＤ１１３に格納されるプログラムには、ＯＳプログラム、ウィンドウ表示制御のプログラム、アプリケーションプログラムが含まれる。格納されるデータには、ウィンドウ表示制御の設定データが含まれる。なお、ＨＤＤ１１３に代えて、ＳＳＤ（Solid State Drive）など不揮発性メモリ装置を用いてもよい。
　通信インタフェース１１４は、ネットワークを介して、他の情報処理装置とデータ通信を行う。すなわち、通信インタフェース１１４は、ＣＰＵ１１１の制御のもと送信データを符号化・変調してネットワークに出力する。また、ネットワークから受信したデータを復調・復号する。なお、通信インタフェース１１４がアクセスするネットワークは、有線の場合と無線の場合とが考えられる。
　表示処理部１１５は、ディスプレイ１０３に接続されている。表示処理部１１５は、ＣＰＵ１１１の制御のもと、ディスプレイ１０３に表示する操作画面について画像処理を行い、画像信号をディスプレイ１０３に継続的に出力する。操作画面には、１または複数のウィンドウが含まれている可能性がある。
　入力処理部１１６は、タッチパネル１０４およびキーボード１０５に接続されている。入力処理部１１６は、タッチパネル１０４が出力するタッチ開始（ＤＯＷＮイベント）、タッチ終了（ＵＰイベント）、現在のタッチ位置の座標などを示す入力信号を検知する。また、キーボード１０５が出力する押下されたキーを示す入力信号を検知する。検知された入力信号は、ＣＰＵ１１１に出力される。
　なお、ディスプレイ１０３は、図１の表示部１ａと対応する。タッチパネル１０４は、図１の検出部１ｂと対応する。ＣＰＵ１１１およびＲＡＭ１１２は、図１の制御部１ｃと対応する。
　図４は、携帯情報端末装置の機能を示すブロック図である。携帯情報端末装置１００は、ウィンドウ情報記憶部１２０、図形情報記憶部１３０、タッチ検出部１４０、スタイラス監視部１５０およびウィンドウ操作部１６０を有する。これらモジュールの機能は、ＣＰＵ１１１がプログラムをＲＡＭ１１２に展開して実行することにより実現される。ただし、その一部または全部をハードウェア部品として実現してもよい。
　ウィンドウ情報記憶部１２０は、オープンされているウィンドウそれぞれの状態を示すウィンドウ管理情報を記憶する。ウィンドウ管理情報が示す状態には、ウィンドウの表示状態と使用状態とが含まれる。表示状態には、例えば、最大化状態（確保可能な最大の表示領域で表示した状態）、最小化状態（アイコン化して表示した状態）、通常表示の状態（最大化および最小化以外の状態）がある。使用状態には、例えば、アクティブ（ユーザの操作対象である状態）と非アクティブ（ユーザの操作対象でない状態）とがある。
　図形情報記憶部１３０は、ウィンドウ操作のコマンドを定義した図形情報を記憶する。コマンドは、タッチ操作により描かれる図形として定義される。図形情報には、例えば、ウィンドウ操作の種類を示す情報と、タッチ操作の軌跡から図形を特定するための特徴情報とが含まれる。ウィンドウ操作の種類には、例えば、ウィンドウの最大化・最小化・クローズ・スクロールがある。なお、ユーザが図形情報を更新できるようにしてもよい。
　タッチ検出部１４０は、タッチパネル１０４が出力するタッチ操作を示す入力信号を、入力処理部１１６経由で取得する。タッチ検出部１４０は、ＵＰイベントおよびＤＯＷＮイベントに基づいて、ドラッグ操作を検出する。そして、ドラッグが行われている間、継続的に（例えば、５０ｍｓ周期で）現在のタッチ位置を示す座標をスタイラス監視部１５０に通知する。ただし、前回通知した座標からの変化量を通知するようにしてもよい。
　なお、タッチ検出部１４０は、ウィンドウ操作のためのタッチ操作を認識する領域を、タッチパネル１０４上の全ての領域としてもよいし、一部の領域に制限してもよい。後者としては、例えば、最前面のウィンドウやアクティブなウィンドウが表示されている領域に制限する方法が考えられる。すなわち、所定のウィンドウが表示されている領域上での所定のタッチ操作を、ウィンドウ操作のためのタッチ操作と判断する方法が考えられる。その場合、軌跡の一部がウィンドウ外に跨っていてもよい。
　スタイラス監視部１５０は、現在のタッチ位置の情報をタッチ検出部１４０から継続的に取得し、タッチ操作の軌跡を一時的に記憶する。例えば、所定時間前までのドラッグ操作または所定回数前までのドラッグ操作の座標を保持しておく。そして、スタイラス監視部１５０は、図形情報記憶部１３０に記憶されている図形情報を参照して、タッチ操作の軌跡が示すコマンドを特定する。例えば、タッチ操作の軌跡と各コマンドの特徴情報とを照合し、最も適合するコマンドを選択する。その後、スタイラス監視部１５０は、特定したコマンドが示すウィンドウ操作を実行するよう、ウィンドウ操作部１６０に指示する。
　ウィンドウ操作部１６０は、ウィンドウの表示状態を制御する。すなわち、ウィンドウ操作部１６０は、スタイラス監視部１５０からウィンドウ操作の指示があると、ウィンドウ情報記憶部１２０に記憶されているウィンドウ情報を参照して、現在アクティブなウィンドウを特定する。そして、アクティブなウィンドウに対するウィンドウ操作を実行し、ウィンドウ操作後の操作画面を、表示処理部１１５を介してディスプレイ１０３に表示させる。また、ウィンドウ操作部１６０は、ウィンドウ情報を更新する。
　なお、ウィンドウ操作の対象を、アクティブなウィンドウではなく、最前面や最背面のウィンドウなど他のウィンドウとしてもよい。また、コマンドに応じて操作対象を選択してもよいし、タッチ操作が行われた位置に応じて操作対象を選択してもよい。その場合、スタイラス監視部１５０は、ウィンドウ操作部１６０に対して操作対象のウィンドウを指定する。
　上記モジュールの機能は、複数種類のプログラムの連携により実現することもできる。例えば、タッチ検出部１４０の機能はドライバプログラム、図形情報記憶部１３０およびスタイラス監視部１５０の機能はアプリケーションプログラム、ウィンドウ情報記憶部１２０およびウィンドウ操作部１６０の機能はＯＳプログラムにより実現することが考えられる。
　図５は、ウィンドウ管理テーブルのデータ構造例を示す図である。ウィンドウ管理テーブル１２１は、ウィンドウ情報記憶部１２０に記憶されており、ウィンドウ操作部１６０により参照および更新される。ウィンドウ管理テーブル１２１には、ウィンドウＩＤ（IDentifier）、表示状態およびアクティブを示す項目が設けられている。各項目の横方向に並べられた情報同士が互いに関連付けられている。
　ウィンドウＩＤを示す項目には、各ウィンドウを識別するための文字列が設定される。ウィンドウＩＤは、例えば、ウィンドウのオープン時に自動的に付与される。表示状態を示す項目には、ウィンドウの現在の表示状態を示す文字列が設定される。例えば、「最大化」、「最小化」または「通常」が設定される。アクティブを示す項目には、ウィンドウが現在アクティブであるか否かを示すフラグが設定される。例えば、アクティブな場合に「Ｙｅｓ」、非アクティブな場合に「Ｎｏ」が設定される。アクティブなウィンドウは、１つのみに制限してもよいし、同時に複数存在することを許容してもよい。
　例えば、ウィンドウ管理テーブル１２１にはウィンドウＩＤが「ｗｉｎｄｏｗ＃Ａ」、表示状態が「通常」、アクティブフラグが「Ｙｅｓ」という情報が登録される。これは、あるウィンドウが操作画面上に通常表示の状態で現在表示されており、アクティブになっていることを示している。また、ウィンドウＩＤが「ｗｉｎｄｏｗ＃Ｃ」、表示状態が「最小化」、アクティブフラグが「Ｎｏ」という情報が登録される。これは、他のウィンドウが操作画面上にアイコン化された状態で現在表示されており、アクティブでないことを示している。
　ウィンドウ操作部１６０は、ウィンドウのオープン時、オープンしたウィンドウの情報をウィンドウ管理テーブル１２１に登録する。新規にオープンされたウィンドウは、通常は、表示状態が「通常」でアクティブである。その後、ユーザの入力操作に応じて、表示状態およびアクティブ／非アクティブが変化する。また、ウィンドウ操作部１６０は、ウィンドウのクローズ時、クローズしたウィンドウの情報をウィンドウ管理テーブル１２１から削除する。ただし、ウィンドウ情報を削除せず、表示状態を「クローズ」と設定する方法も考えられる。
　図６は、図形定義テーブルのデータ構造例を示す図である。図形定義テーブル１３１は、図形情報記憶部１３０に記憶されており、スタイラス監視部１５０により参照される。図形定義テーブル１３１には、図形、操作および特徴を示す項目が設けられている。各項目の横方向に並べられた情報同士が互いに関連付けられている。
　図形を示す項目には、各コマンドを識別するための記号が設定される。識別記号としては、例えば、図形の形状を端的に表したものを用いる。操作を示す項目には、ウィンドウ操作の種類を示す文字列が設定される。例えば、「最大化」、「最小化」、「クローズ」または「スクロール」が設定される。特徴を示す項目には、タッチ操作で描かれた図形を認識するための特徴情報が設定される。特徴情報では、１つの図形について複数の特徴事項を定義してもよい。なお、図形の特徴は、スタイラス監視部１５０が容易に解釈できるよう、複数の座標の関係を定義した数式として表現しておいてもよい。
　例えば、図形定義テーブル１３１には、図形が「×」、操作が「クローズ」という情報が設定される。これは、タッチ操作で「×」と認識できる図形が描かれると、アクティブなウィンドウを閉じることを示している。また、図形が「○」、操作が「最大化」という情報が設定される。これは、タッチ操作で「○」と認識できる図形が描かれると、アクティブなウィンドウを最大化すること示している。
　スタイラス監視部１５０は、所定時間前または所定回数前から現在までのドラッグ操作の軌跡を各図形の特徴情報と照合し、特徴の合致する登録図形が存在するか判断する。１つの図形に対して複数の特徴項目が設定されている場合は、例えば、全ての特徴項目に適合したときにその図形に合致するものと判断する。なお、ユーザは、図形定義テーブル１３１を更新することで、図形とウィンドウ操作の種類との対応関係を変更することができる。また、新しい図形を追加登録することも可能である。
　図７は、ウィンドウ表示制御を示すフローチャートである。図７に示す処理が、携帯情報端末装置１００において繰り返し実行される。以下、ウィンドウ表示制御の処理内容をステップ番号に沿って説明する。
　［ステップＳ１］タッチ検出部１４０は、タッチパネル１０４から取得した入力信号に基づいて、タッチパネル１０４上でのドラッグ操作を検出する。すると、タッチ検出部１４０は、ドラッグ操作中のタッチ位置の変化をスタイラス監視部１５０に通知する。
　［ステップＳ２］スタイラス監視部１５０は、図形情報記憶部１３０に記憶されている図形定義テーブル１３１を参照し、ドラッグ操作の軌跡をコマンドとして登録されている図形と照合する。すなわち、ドラッグ操作の軌跡が各図形の特徴に合致するか判断する。
　［ステップＳ３］スタイラス監視部１５０は、ステップＳ２において、ドラッグ操作の軌跡が何れかの登録図形に合致したか判断する。何れかの登録図形に合致した場合、処理をステップＳ４に進める。何れの登録図形にも合致しなかった場合、処理を終了する。
　［ステップＳ４］スタイラス監視部１５０は、ステップＳ２で特定した図形に対応するウィンドウ操作の内容を判断する。そして、スタイラス監視部１５０は、アクティブなウィンドウに対してウィンドウ操作を行うよう、ウィンドウ操作部１６０に指示する。
　［ステップＳ５］ウィンドウ操作部１６０は、ウィンドウ情報記憶部１２０に記憶されているウィンドウ管理テーブル１２１を参照して、アクティブなウィンドウを特定する。そして、ウィンドウ操作部１６０は、特定したウィンドウに対してスタイラス監視部１５０から指定された操作を実行し、ディスプレイ１０３に表示する操作画面を更新する。併せて、ウィンドウ管理テーブル１２１に登録されている表示状態の情報も更新する。
　このようにして、携帯情報端末装置１００は、タッチパネル１０４上でのタッチ操作を検出し、タッチ操作の軌跡が示す図形を特定する。そして、登録図形と対応付けられている操作をアクティブなウィンドウに対して実行して表示状態を変更し、ディスプレイ１０３に表示されている操作画面を更新する。
　次に、タッチ操作の軌跡から描かれた図形を判断する方法、および、ウィンドウ操作の具体例について説明する。ここでは（１）「×」を検出するとウィンドウを閉じる場合、（２）「○」を検出すると最大化する場合、（３）「∧」を検出すると最小化する場合、（４）「レ」を検出するとスクロールする場合を例に挙げる。
　図８は、第１の図形判断の例を示す図である。図８は、タッチ操作の軌跡から「×」を検出する方法を示している。「×」を検出するために、例えば、図形定義テーブル１３１に次の特徴事項Ａ１，Ａ２が登録されている。
［Ａ１］２本の独立した線が１点のみで交差すること。
［Ａ２］２本の線それぞれについて、交点が「線の中心から線の全長の２５％」の範囲内に存在すること。
　例１のタッチ操作の軌跡は、特徴事項Ａ１，Ａ２の両方を満たす。よって、例１については、図形「×」が描かれたものと判断される。一方、例２のタッチ操作の軌跡は、２本の独立した線が２点で交差しており、特徴事項Ａ１を満たさない。また、例３のタッチ操作の軌跡は、交点が「線の中心から線の全長の２５％」の範囲内に存在せず、特徴事項Ａ２を満たさない。よって、例２，３については、図形「×」が描かれたものとは判断されない。
　図９は、第１のウィンドウ操作の例を示す図である。図９に示す操作画面２１１，２１２は、ディスプレイ１０３に表示される操作画面の例である。操作画面２１１では、ウィンドウＡ，Ｂ，Ｃがオープンされている。このうち、ウィンドウＡ，Ｂが通常状態で表示され、ウィンドウＣがタスクバーにアイコン化状態で表示されている。ウィンドウＡは、最前面に表示されておりアクティブである。
　ここで、操作画面２１１の表示領域上で「×」を描くタッチ操作が行われると、アクティブなウィンドウＡのクローズを示すコマンドとして認識される。すると、ディスプレイ１０３の操作画面が、操作画面２１１から操作画面２１２に遷移する。すなわち、ウィンドウＡが閉じて操作画面から消える。その際、タスクバーの対応するアイコンも消える。ウィンドウＡが閉じた後は、例えば、ウィンドウＡの下のレイヤに表示されていたウィンドウＢがアクティブとなる。
　図１０は、第２の図形判断の例を示す図である。図１０は、タッチ操作の軌跡から「○」を検出する方法を示している。「○」を検出するために、例えば、図形定義テーブル１３１に次の特徴事項Ｂ１，Ｂ２が登録されている。
［Ｂ１］１本の線が始点（ＤＯＷＮイベントを検出した点）から終点（ＵＰイベントを検出した点）までの間に１回だけ交差すること。
［Ｂ２］始点と交点との間の長さが線の全長の１０％以下であること。
　例１のタッチ操作の軌跡は、特徴事項Ｂ１，Ｂ２の両方を満たす。よって、例１については、図形「○」が描かれたものと判断される。一方、例２のタッチ操作の軌跡は、始点から終点までの間に交点が存在せず、特徴事項Ｂ１を満たさない。また、例３のタッチ操作の軌跡は、始点と交点との間の長さが線の全長の１０％より大きく、特徴事項Ｂ２を満たさない。よって、例２，３については、図形「○」が描かれたものとは判断されない。
　図１１は、第２のウィンドウ操作の例を示す図である。図１１に示す操作画面２２１，２２２は、ディスプレイ１０３に表示される操作画面の例である。操作画面２２１では、図９に示した操作画面２１１と同様、ウィンドウＡ，Ｂ，Ｃがオープンされている。このうち、ウィンドウＡ，Ｂが通常状態で表示され、ウィンドウＣがタスクバーにアイコン化状態で表示されている。ウィンドウＡは、最前面に表示されておりアクティブである。
　ここで、操作画面２２１の表示領域上で「○」を描くタッチ操作が行われると、アクティブなウィンドウＡの最大化を示すコマンドとして認識される。すると、ディスプレイ１０３の操作画面が、操作画面２２１から操作画面２２２に遷移する。すなわち、ウィンドウＡがディスプレイ１０３の最大限の表示領域を用いて表示される。ウィンドウＡが最大化した後は、例えば、ウィンドウＡが引き続きアクティブとなる。
　図１２は、第３の図形判断の例を示す図である。図１２は、タッチ操作の軌跡から「∧」を検出する方法を示している。「∧」を検出するために、例えば、図形定義テーブル１３１に次の特徴事項Ｃ１，Ｃ２が登録されている。
［Ｃ１］１本の線の中心点Ｍと最頂点Ｐ（ｙ座標が最も小さい点）との間の長さが、線の全長の１０％以下であること。ただし、表示領域の上から下の方向をｙ軸とする。
［Ｃ２］始点のｙ座標と終点のｙ座標との差が、始点のｙ座標と最頂点Ｐのｙ座標との差の１０％以下であること。なお、始点のｙ座標と終点のｙ座標の何れが小さくてもよい。
　例１のタッチ操作の軌跡は、特徴事項Ｃ１，Ｃ２の両方を満たす。よって、例１については、図形「∧」が描かれたものと判断される。一方、例２のタッチ操作の軌跡は、中心点Ｍと最頂点Ｐの間の長さが線の全長の１０％より大きく、特徴事項Ｃ１を満たさない。また、例３のタッチ操作の軌跡は、始点のｙ座標と終点のｙ座標との差が、始点のｙ座標と最頂点Ｐのｙ座標との差の１０％より大きく、特徴事項Ｃ２を満たさない。よって、例２，３については、図形「∧」が描かれたものとは判断されない。
　図１３は、第３のウィンドウ操作の例を示す図である。図１３に示す操作画面２３１，２３２は、ディスプレイ１０３に表示される操作画面の例である。操作画面２３１では、図９に示した操作画面２１１と同様、ウィンドウＡ，Ｂ，Ｃがオープンされている。このうち、ウィンドウＡ，Ｂが通常状態で表示され、ウィンドウＣがタスクバーにアイコン化状態で表示されている。ウィンドウＡは、最前面に表示されておりアクティブである。
　ここで、操作画面２３１の表示領域上で「∧」を描くタッチ操作が行われると、アクティブなウィンドウＡの最小化を示すコマンドとして認識される。すると、ディスプレイ１０３の操作画面が、操作画面２３１から操作画面２３２に遷移する。すなわち、ウィンドウＡがタスクバーにアイコンとしてのみ表示され、タスクバー以外の領域ではウィンドウＡの下のレイヤに表示されていたウィンドウＢが最前面に表示される。なお、その後にアイコンがタッチされると、ウィンドウＡは通常表示に戻る。
　図１４は、第４の図形判断の例を示す図である。図１４は、タッチ操作の軌跡から「レ」を検出する方法を示している。「レ」を検出するために、例えば、図形定義テーブル１３１に次の特徴事項Ｄ１，Ｄ２が登録されている。
［Ｄ１］１本の線の最下点Ｑ（ｙ座標が最も大きい点）のｘ座標と始点のｘ座標との差が線の全長の１０％以下であること。ただし、表示領域の左から右の方向をｘ軸とする。
［Ｄ２］終点のｙ座標が、始点のｙ座標と最下点Ｑのｙ座標との間であって、「両点の中心からｙ座標差の２５％」の範囲内に存在すること。
　例１のタッチ操作の軌跡は、特徴事項Ｄ１，Ｄ２の両方を満たす。よって、例１については、図形「レ」が描かれたものと判断される。一方、例２のタッチ操作の軌跡は、最下点Ｑのｘ座標と始点のｘ座標との差が線の全長の１０％より大きく、特徴事項Ｄ１を満たさない。また、例３のタッチ操作の軌跡は、終点のｙ座標が小さ過ぎる（上側に伸び過ぎている）ため、特徴事項Ｄ２を満たさない。よって、例２，３については、図形「レ」が描かれたものとは判断されない。
　図１５は、第４のウィンドウ操作の例を示す図である。図１５に示す操作画面２４１，２４２は、ディスプレイ１０３に表示される操作画面の例である。操作画面２４１では、図９に示した操作画面２１１と同様、ウィンドウＡ，Ｂ，Ｃがオープンされている。このうち、ウィンドウＡ，Ｂが通常状態で表示され、ウィンドウＣがタスクバーにアイコン化状態で表示されている。ウィンドウＡは、最前面に表示されておりアクティブである。
　ここで、操作画面２４１の表示領域上で「レ」を描くタッチ操作が行われると、アクティブなウィンドウＡのスクロールを示すコマンドとして認識される。すると、ディスプレイ１０３の操作画面が、操作画面２４１から操作画面２４２に遷移する。すなわち、ウィンドウＡの領域内で下方向の画面スクロールが生じ、右側のスクロールバーも下方向に移動する。これは、スクロールバーを操作した場合と同様の視覚的効果となる。なお、上方向の画面スクロールを行うようにすることも可能である。
　以上、４種類のウィンドウ操作の例を示したが、操作内容はこれらに限られるものではなく、様々なウィンドウ操作を設定することができる。また、コマンドとして使用可能な図形はこれらに限られるものではなく、様々な図形を登録することができる。図形とウィンドウ操作の種類との対応は１対１でなくてよく、１種類のウィンドウ操作に対して複数の図形を対応付けてもよい。また、スタイラスペン１０６や指によって描かれた軌跡は、不可視としてもよいし、所定時間だけディスプレイ１０３に表示してもよい。
　また、図９，１１，１３，１５において、ウィンドウＡのタイトルバー右端にあるボタンがタッチされた場合に、ウィンドウＡのクローズ、最大化または最小化が行われるようにしてもよい。また、ウィンドウＡのスクロールバーがドラッグされた場合に、画面スクロールが行われるようにしてもよい。図形コマンドを用いる方法とボタンやスクロールバーを用いる方法とは、併用してもよいし、何れか一方のみを用いてもよい。何れの方法をＯＮにするかユーザが設定できるようにしてもよい。また、所定の大きさ以上の図形のみを検出対象として、誤操作を抑制することも可能である。
　このような携帯情報端末装置１００によれば、タッチ操作により描かれた図形が特定され、現在オープンされているウィンドウ（例えば、アクティブなウィンドウ）に対して図形に応じた操作が実行される。これにより、ユーザはボタンやスクロールバーなどの操作画像を正確にタッチしなくてもよく、ウィンドウ操作を快適に行うことができる。すなわち、ウィンドウ操作の操作性が向上する。これは、携帯情報端末装置で特に有効である。
　なお、上記表示制御は、コンピュータに所定のプログラムを実行させることで実現できる。その場合、実現すべき処理内容を記述したプログラムが提供される。処理内容を記述したプログラムは、コンピュータ読み取り可能な記録媒体に記録しておくことができる。コンピュータ読み取り可能な記録媒体には、例えば、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリがある。磁気記録装置には、ハードディスク装置、フレキシブルディスク（ＦＤ）、磁気テープ（ＭＴ）などがある。光ディスクには、ＤＶＤ（Digital Versatile Disc）、ＤＶＤ－ＲＡＭ、ＣＤ－ＲＯＭ（Compact Disc - Read Only Memory）、ＣＤ－Ｒ（Recordable）、ＣＤ－ＲＷ（ReWritable）などがある。光磁気記録媒体には、ＭＯ（Magneto-Optical disk）などがある。
　プログラムを流通させる場合、例えば、そのプログラムが記録されたＤＶＤ、ＣＤ－ＲＯＭなどの可搬型記録媒体が販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにプログラムを転送することもできる。
　プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムまたはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送される毎に、逐次、受け取ったプログラムに従った処理を実行することもできる。
　上記については単に本発明の原理を示すものである。さらに、多数の変形、変更が当業者にとって可能であり、本発明は上記に示し、説明した正確な構成および応用例に限定されるものではなく、対応するすべての変形例および均等物は、添付の請求項およびその均等物による本発明の範囲とみなされる。
符号の説明
　１　情報処理装置
　１ａ　表示部
　１ｂ　検出部
　１ｃ　制御部

Claims (7)

  1. 　１またはそれ以上のウィンドウを表示する表示部と、
    　前記表示部に対するタッチ操作を検出する検出部と、
    　前記検出部で検出した前記タッチ操作の軌跡が表す図形を特定し、前記表示部に表示されているウィンドウについて前記図形に応じた表示制御を行う制御部と、
    　を有することを特徴とする情報処理装置。
  2. 　前記制御部は、前記表示部に表示されているウィンドウのうちアクティブなウィンドウを制御対象とすることを特徴とする請求の範囲第１項記載の情報処理装置。
  3. 　前記図形に応じた表示制御には、ウィンドウの最大化、最小化、クローズおよびスクロールの少なくとも１つが含まれることを特徴とする請求の範囲第１項記載の情報処理装置。
  4. 　前記タッチ操作の軌跡の特徴と前記図形とを対応付けた情報を記憶する記憶部を有し、
    　前記制御部は、前記記憶部に記憶された情報を参照して前記図形を特定する、
    　ことを特徴とする請求の範囲第１項記載の情報処理装置。
  5. 　前記図形と表示制御の内容とを対応付けた情報を記憶する記憶部を有し、
    　前記制御部は、前記記憶部に記憶された情報を参照して実行する表示制御を特定する、
    　ことを特徴とする請求の範囲第１項記載の情報処理装置。
  6. 　表示部を備えた情報処理装置の表示制御方法であって、
    　前記表示部に１またはそれ以上のウィンドウを表示し、
    　前記表示部に対するタッチ操作を検出し、
    　前記タッチ操作の軌跡が表す図形を特定し、前記表示部に表示されているウィンドウについて前記図形に応じた表示制御を行う、
    　ことを特徴とする表示制御方法。
  7. 　表示装置と接続されたコンピュータに、
    　前記表示装置に１またはそれ以上のウィンドウを表示し、
    　前記表示装置に対するタッチ操作を検出し、
    　前記タッチ操作の軌跡が表す図形を特定し、前記表示装置に表示されているウィンドウについて前記図形に応じた表示制御を行う、
    　処理を実行させることを特徴とする表示制御プログラム。
PCT/JP2009/053145 2009-02-23 2009-02-23 情報処理装置、表示制御方法および表示制御プログラム WO2010095255A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020117018226A KR20110104088A (ko) 2009-02-23 2009-02-23 정보 처리 장치, 표시 제어 방법 및 표시 제어 프로그램을 기록한 컴퓨터 판독 가능한 매체
JP2011500424A JPWO2010095255A1 (ja) 2009-02-23 2009-02-23 情報処理装置、表示制御方法および表示制御プログラム
CN2009801566606A CN102317895A (zh) 2009-02-23 2009-02-23 信息处理装置、显示控制方法以及显示控制程序
EP09840361A EP2400378A1 (en) 2009-02-23 2009-02-23 Information processing device, display control method and display control program
PCT/JP2009/053145 WO2010095255A1 (ja) 2009-02-23 2009-02-23 情報処理装置、表示制御方法および表示制御プログラム
US13/204,447 US20110289449A1 (en) 2009-02-23 2011-08-05 Information processing apparatus, display control method, and display control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2009/053145 WO2010095255A1 (ja) 2009-02-23 2009-02-23 情報処理装置、表示制御方法および表示制御プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/204,447 Continuation US20110289449A1 (en) 2009-02-23 2011-08-05 Information processing apparatus, display control method, and display control program

Publications (1)

Publication Number Publication Date
WO2010095255A1 true WO2010095255A1 (ja) 2010-08-26

Family

ID=42633555

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/053145 WO2010095255A1 (ja) 2009-02-23 2009-02-23 情報処理装置、表示制御方法および表示制御プログラム

Country Status (6)

Country Link
US (1) US20110289449A1 (ja)
EP (1) EP2400378A1 (ja)
JP (1) JPWO2010095255A1 (ja)
KR (1) KR20110104088A (ja)
CN (1) CN102317895A (ja)
WO (1) WO2010095255A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013171195A (ja) * 2012-02-21 2013-09-02 Canon Inc 表示装置、その制御方法及びプログラム

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120102400A1 (en) * 2010-10-22 2012-04-26 Microsoft Corporation Touch Gesture Notification Dismissal Techniques
WO2014042481A1 (ko) * 2012-09-14 2014-03-20 Go Jae Yong 자기장 센서를 이용하여 사용자 입력을 판단하는 전기 장치
TWI496069B (zh) * 2013-06-28 2015-08-11 Insyde Software Corp Method of Judging Electronic Device and Multi - window Touch Command
CN104571798A (zh) * 2013-10-28 2015-04-29 联想(北京)有限公司 一种信息处理方法及电子设备
CN104049900A (zh) * 2014-06-30 2014-09-17 北京安兔兔科技有限公司 悬浮窗口关闭方法及装置
CN105739848B (zh) * 2014-12-12 2019-06-25 联想(北京)有限公司 一种信息处理方法及电子设备
JP6292213B2 (ja) * 2015-11-25 2018-03-14 コニカミノルタ株式会社 画像形成装置および制御プログラム
US10592228B2 (en) * 2016-02-12 2020-03-17 Microsoft Technology Licensing, Llc Stylus firmware updates
KR102391965B1 (ko) * 2017-02-23 2022-04-28 삼성전자주식회사 가상현실 서비스를 위한 화면 제어 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07141092A (ja) 1993-11-16 1995-06-02 Casio Comput Co Ltd 手書き入力装置
JP2002259001A (ja) 2001-03-05 2002-09-13 Shingo Tsuda ウィンドウ操作方法及び装置
JP2003140791A (ja) * 2001-10-31 2003-05-16 Toshiba Corp 情報処理装置及び情報処理装置の制御方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0481056A (ja) * 1990-07-20 1992-03-13 Nec Corp ネットワーク環境定義誤り検出方式
US7411575B2 (en) * 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
JP5091180B2 (ja) * 2009-03-27 2012-12-05 ソニーモバイルコミュニケーションズ， エービー 携帯端末装置
TWI391850B (zh) * 2009-03-31 2013-04-01 Au Optronics Corp 輸入圖形判定方法及電腦可讀儲存媒體
JP5208267B2 (ja) * 2009-04-28 2013-06-12 三菱電機株式会社 入力装置
KR101648747B1 (ko) * 2009-10-07 2016-08-17 삼성전자 주식회사 복수의 터치 센서를 이용한 ｕｉ 제공방법 및 이를 이용한 휴대 단말기
EP2544078B1 (en) * 2010-03-01 2021-02-17 Panasonic Intellectual Property Management Co., Ltd. Display device with adaptive capacitive touch panel

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07141092A (ja) 1993-11-16 1995-06-02 Casio Comput Co Ltd 手書き入力装置
JP2002259001A (ja) 2001-03-05 2002-09-13 Shingo Tsuda ウィンドウ操作方法及び装置
JP2003140791A (ja) * 2001-10-31 2003-05-16 Toshiba Corp 情報処理装置及び情報処理装置の制御方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013171195A (ja) * 2012-02-21 2013-09-02 Canon Inc 表示装置、その制御方法及びプログラム

Also Published As

Publication number Publication date
CN102317895A (zh) 2012-01-11
JPWO2010095255A1 (ja) 2012-08-16
US20110289449A1 (en) 2011-11-24
EP2400378A1 (en) 2011-12-28
KR20110104088A (ko) 2011-09-21

Similar Documents

Publication Publication Date Title
US20220083214A1 (en) Systems and Methods for Interacting with Multiple Applications that are Simultaneously Displayed on an Electronic Device with a Touch-Sensitive Display
US11989409B2 (en) Device, method, and graphical user interface for displaying a plurality of settings controls
EP3750045B1 (en) Systems, methods, and user interfaces for interacting with multiple application windows
WO2010095255A1 (ja) 情報処理装置、表示制御方法および表示制御プログラム
US10365787B2 (en) Apparatus and method for grouping and displaying icons on a screen
US10156967B2 (en) Device, method, and graphical user interface for tabbed and private browsing
US8773370B2 (en) Table editing systems with gesture-based insertion and deletion of columns and rows
EP2908232B1 (en) Display control device, display control method and program for managing the layout of software applications
US20120212438A1 (en) Methods and apparatuses for facilitating interaction with touch screen apparatuses
US20110175826A1 (en) Automatically Displaying and Hiding an On-screen Keyboard
KR102168648B1 (ko) 사용자 단말 장치 및 그 제어 방법
EP3590034B1 (en) Systems and methods for interacting with multiple applications that are simultaneously displayed on an electronic device with a touch-sensitive display
CN105229590A (zh) 具有笔的用户终端装置和用户终端装置的控制方法
JP2013529339A (ja) 携帯用電子デバイスおよびそれを制御する方法
US10895955B2 (en) Apparatus and method for grouping and displaying icons on a screen
WO2022059386A1 (ja) 操作領域を移動する情報処理装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980156660.6

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09840361

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2011500424

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 20117018226

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2009840361

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE