CN102141887A - 画笔、复写和填充手势 - Google Patents

画笔、复写和填充手势 Download PDF

Info

Publication number
CN102141887A
CN102141887A CN2011100373889A CN201110037388A CN102141887A CN 102141887 A CN102141887 A CN 102141887A CN 2011100373889 A CN2011100373889 A CN 2011100373889A CN 201110037388 A CN201110037388 A CN 201110037388A CN 102141887 A CN102141887 A CN 102141887A
Authority
CN
China
Prior art keywords
input
gesture
image
stylus
identified
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011100373889A
Other languages
English (en)
Inventor
K·P·欣克利
矢谷浩司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102141887A publication Critical patent/CN102141887A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/203—Drawing of straight lines or curves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

描述了涉及手势和其他功能的技术。在一个或多个实现中，各技术描述了可用于向计算设备提供输入的手势。构想了各种不同的手势，包括双模手势(例如，使用一种以上类型的输入)和单模手势。另外，手势技术可被配置成利用这些不同的输入类型来增加可用于发起计算设备的操作的手势的数量。

Description

画笔、复写和填充手势
背景技术
可从计算设备获得的功能的数量正在不断增加，如来自移动设备、游戏控制台、电视机、机顶盒、个人计算机等等。然而，曾经用于与计算设备交互的传统技术随着功能数量的增加而变得更低效。
例如，在菜单中包括附加功能可向菜单添加附加级别以及每一级别处的附加选择。因此，在菜单中添加这些功能可能会纯粹由于大量的功能选择而使用户受挫折，且因此导致对附加功能以及采用各功能的设备本身的减少的利用。由此，曾经用于访问功能的传统技术可能会限制各功能对于计算设备的用户的有用性。
发明内容
描述了涉及手势和其他功能的技术。在一个或多个实现中，各技术描述了可用于向计算设备提供输入的手势。构想了各种不同的手势，包括双模手势(例如，使用一种以上类型的输入)和单模手势。另外，手势技术可被配置成利用这些不同的输入类型来增加可用于发起计算设备的操作的手势的数量。
提供本概述是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。
附图说明
参考附图来描述具体实施方式。在附图中，附图标记中最左边的数字标识该附图标记首次出现的附图。在说明书和附图的不同实例中使用相同的附图标记可指示相似或相同的项目。
图1是在一示例实现中的可用于采用手势技术的环境的图示。
图2示出了示例系统200，其示出图1的手势模块104和双模输入模块114被实现为使用于多个设备通过中央计算设备互联的环境。
图3是一示例实现的图示，其中图1的复制手势的各阶段被示为通过与计算设备的交互来输入。
图4是描绘根据一个或多个实施例的复制手势的示例实现中的过程的流程图。
图5是一示例实现的图示，其中图1的图钉手势的各阶段被示为通过与计算设备的交互来输入。
图6是描绘根据一个或多个实施例的图钉手势的示例实现中的过程的流程图。
图7是一示例实现的图示，其中图1的裁剪手势的各阶段被示为通过与计算设备的交互来输入。
图8是描绘根据一个或多个实施例的裁剪手势的示例实现中的过程的流程图。
图9是一示例实现的图示，其中图1的打孔手势的各阶段被示为通过与计算设备的交互来输入。
图10是描绘根据一个或多个实施例的打孔手势的示例实现中的过程的流程图。
图11是一示例实现的图示，其中图1的裁剪手势和打孔手势的组合被示为结合计算设备来输入。
图12是一示例实现的图示，其中图1的撕裂手势的各阶段被示为通过与计算设备的交互来输入。
图13是描绘根据一个或多个实施例的撕裂手势的示例实现中的过程的流程图。
图14是一示例实现的图示，其中图1的边缘手势的各阶段被示为通过与计算设备的交互以便画线来输入。
图15是描绘根据一个或多个实施例的边缘手势的示例实现中的过程的流程图。
图16是描绘根据一个或多个实施例的边缘手势的示例实现中的过程的流程图。
图17是一示例实现的图示，其中图1的边缘手势的各阶段被示为通过与计算设备的交互以便沿着线裁剪来输入。
图18是描绘根据一个或多个实施例的执行裁剪的边缘手势的示例实现中的过程的流程图。
图19是一示例实现的图示，其中图1的盖印手势的各阶段被示为结合计算设备来输入。
图20是描绘根据一个或多个实施例的盖印手势的示例实现中的过程的流程图。
图21是一示例实现的图示，其中图1的画笔手势的各阶段被示为通过与计算设备的交互来输入。
图22是描绘根据一个或多个实施例的画笔手势的示例实现中的过程的流程图。
图23是一示例实现的图示，其中图1的复写手势的各阶段被示为通过与计算设备的交互来输入。
图24是一示例实现的图示，其中图1的复写手势的各阶段被示为结合计算设备来输入。
图25是描绘根据一个或多个实施例的复写手势的示例实现中的过程的流程图。
图26是一示例实现的图示，其中图1的填充手势的各阶段被示为结合计算设备来输入。
图27是描绘根据一个或多个实施例的填充手势的示例实现中的过程的流程图。
图28是一示例实现的图示，其中图1的交叉引用手势的各阶段被示为结合计算设备来输入。
图29是一示例实现的图示，其中示出了一手势的各阶段来使用图28的填充手势访问与图像相关联的元数据。
图30是描绘根据一个或多个实施例的图1的交叉引用手势的示例实现中的过程的流程图。
图31是一示例实现的图示，其中图1的链接手势的各阶段被示为结合计算设备来输入。
图32是描绘根据一个或多个实施例的链接手势的示例实现中的过程的流程图。
图33是一示例实现的图示，其中图1的链接手势的各阶段被示为结合计算设备来输入。
图34是描绘根据一个或多个实施例的链接手势的示例实现中的过程的流程图。
图35描绘了示出用于上下文空间复用的技术的示例实现。
图36是描绘一示例实现中的过程的流程图，其中使用关于输入是指示笔还是触摸输入的标识来标识要结合用户界面执行的操作。
图37是描绘一示例实现中的另一过程的流程图，其中使用关于输入是指示笔还是触摸输入的标识来标识要结合用户界面执行的操作。
图38示出了可被实现为参考图1-37来描述的任何类型的便携式和/或计算机设备来实现此处描述的手势技术的各实施例的示例设备的各个组件。
具体实施方式
概览
曾经用于访问计算设备的功能的常规技术在被扩展来访问数量不断增长的功能时可能变得更低效。因此，这些常规技术会导致关于附加功能的用户挫折感，并且可能导致对于具有这些附加功能的计算设备的降低的用户满意度。例如，对传统菜单的使用可能会迫使用户导航多个级别以及在每一级别处的选择来定位所需功能，这对用户来说既是耗时的又是令人沮丧的。
描述了涉及手势的技术。在以下讨论中，描述了涉及启动计算设备的功能的手势的各种不同的实现。以此方式，用户可用高效且直观的方式来容易地访问各功能，而不会遇到使用常规访问技术所涉及的复杂性。例如，在一个或多个实现中，手势涉及表示手势的双模输入，如通过使用触摸(例如，用户的手指)和指示笔(例如，诸如笔等定点输入设备)的直接手动输入。通过识别哪一输入是触摸输入而不是指示笔输入，以及哪一输入是指示笔输入而不是触摸输入，可支持各种不同的手势。对涉及以及不涉及双模输入的这一实现以及其他实现的进一步讨论可在以下各节中找到。
在以下讨论中，首先描述可用于采用此处描述的手势技术的示例环境。然后描述手势以及涉及手势的过程的示例图示，这些可以在示例环境以及在其他环境中采用。因此，该示例环境不限于执行示例手势和过程。同样，示例过程和手势不限于在示例环境中实现。
示例环境
图1是在一示例实现中的可用于采用手势技术的环境100的图示。所示环境100包括可用各种方式来配置的计算设备102的一个示例。例如，计算设备102可被配置为传统计算机(例如，台式个人计算机、膝上型计算机等)、移动站、娱乐设备、通信耦合到电视机的机顶盒、无线电话、上网本、游戏控制台等等，如关于图2进一步描述的。因而，计算设备102的范围可以是从具有充足存储器和处理器资源的全资源设备(如个人计算机、游戏控制台)到具有有限存储器和/或处理资源的低资源设备(如传统机顶盒、手持式游戏控制台)。计算设备102还可以与使得计算设备102执行一个或多个操作的软件相关。
计算设备102被示为包括手势模块104。手势模块104代表了标识手势并使得对应于手势的操作被执行的功能。手势可由手势模块104用各种不同方式来标识。例如，手势模块104可被配置成识别诸如用户的手106的手指等接近使用触摸屏功能的计算设备102的显示设备108的触摸输入。
触摸输入还可被识别为包括可用于将触摸输入与手势模块104所识别的其他触摸输入进行区分的属性(例如，移动、选择点等)。这一区分然后可用作从触摸输入中标识手势并因此标识要基于对手势的标识来执行的操作的基础。
例如，用户的手106的手指被示为选择110显示设备108所显示的图像112。对图像112的选择110和用户的手106的手指的后续移动可由手势模块104来识别。手势模块104然后可将该所识别的移动标识为指示将图像112的位置改变到显示画面中用户的手106的手指从显示设备108提起的点的“拖放”操作。由此，对描述对图像的选择的触摸输入、选择点到另一点的移动、然后提起用户的手106的手指的识别可用于标识要启动拖放操作的手势(例如，拖放手势)。
手势模块104可识别各种不同类型的手势，如从单类输入识别的手势(例如，诸如先前描述的拖放手势等触摸手势)以及涉及多种类型的输入的手势。如图1所示，例如，手势模块104被示为包括代表识别输入并标识涉及双模输入的手势的功能的双模输入模块114。
例如，计算设备102可被配置成检测并区分触摸输入(例如，由用户的手106的一个或多个手指提供)和指示笔输入(例如，由指示笔116提供)。该区分可以用各种方式来执行，如通过检测用户的手108的手指接触的显示设备108的量对比指示笔116接触的显示设备108的量。区分也可通过使用照相机从自然用户界面(NUI)中的指示笔输入(例如，将两个手指握在一起来指示一个点)中区分出触摸输入(例如，举起一个或多个手指)来执行。构想了用于区分触摸和指示笔输入的各种其他示例技术，其进一步讨论可关于图38来找到。
由此，手势模块104可通过使用双模输入模块114通过识别并利用指示笔和触摸输入之间的区分来支持各种不同手势技术。例如，双模输入模块114可被配置成将指示笔识别为书写工具，而触摸则用于操纵显示设备108所显示的对象。因此，触摸和指示笔输入的组合可用作指示各种不同手势的基础。例如，可组成触摸原语(例如，轻叩、按住、两个手指按住、抓取、画十字、捏、手或手指手势等等)以及指示笔原语(例如，轻叩、按住并拖走、拖入、画十字、划一笔)来创建直观且语义上丰富的手势的空间。应当注意，通过在指示笔和触摸输入之间进行区分，通过这些手势中的单独每一个而变得可能的手势的数量也增加。例如，尽管移动可能是相同的，但可使用触摸输入对比指示笔输入来指示不同手势(或对于类似命令的不同参数)。
因此，手势模块104可支持各种不同的双模的和其他的手势。此处所描述的手势的示例包括复制手势118、图钉手势120、裁剪手势122、打孔手势124、撕裂手势126、边缘手势128、盖印手势130、画笔手势132、复写手势134、填充手势136、交叉引用手势138以及链接手势140。这些不同手势中的每一个在以下讨论的相应的节中描述。尽管使用了不同的节，但应容易地清楚，这些手势的特征可被组合和/或分开来支持附加手势。因此，本说明书不限于这些示例。
另外，尽管以下讨论可描述触摸和指示笔输入的具体示例，但在各实例中，输入的类型可交换(例如，触摸可用于替换指示笔，反之亦然)甚至移除(例如，两种输入可使用触摸或指示笔来提供)而不背离其精神和范围。此外，尽管在以下讨论的各实例中手势被示为使用触摸屏功能来输入，但手势可以由各种不同设备使用各种不同技术来输入，其进一步讨论可以关于以下附图来找到。
图2示出了示例系统200，其示出图1的手势模块104和双模输入模块114被实现为使用于多个设备通过中央计算设备互联的环境。中央计算设备可以是多个设备本地的，或者可以位于多个设备的远程。在一个实施例中，中央计算设备是“云”服务器农场，其包括通过网络或因特网或其他手段连接到多个设备的一个或多个服务器计算机。在一个实施例中，该互联体系结构使得功能能够递送到多个设备以向多个设备的用户提供公共且无缝的体验。多个设备的每一个可具有不同的物理要求和能力，且中央计算设备使用一平台来使得为设备特制且又对所有设备公用的体验能被递送到设备。在一个实施例中，创建目标设备“类”，且对通用设备类特制体验。设备类可由设备的物理特征或用途或其他公共特性来定义。
例如，如上所述，计算设备102可采取各种不同配置，诸如用于移动202、计算机204和电视机206用途。这些配置中的每一个具有一般对应的屏幕大小，且因此计算设备102可被相应地配置到本示例系统200中的这些设备类中的一个或多个。例如，计算设备102可采取移动202设备类，该设备类包括移动电话、便携式音乐播放器、游戏设备等等。计算设备102还可采取计算机204设备类，该设备类包括个人计算机、膝上型计算机、上网本等等。电视机206配置包括涉及在休闲环境中在一般较大的屏幕上的显示的设备配置，如电视机、机顶盒、游戏控制台等等。由此，此处所描述的技术可由计算设备102的这各种配置来支持，且不限于在以下各节中所描述的具体示例。
云208被示为包括用于web服务212的平台210。平台210抽象出云208的硬件(例如，服务器)和软件资源的底层功能，且因此可用作“云操作系统”。例如，平台210可以抽象资源来将计算设备102与其他计算设备相连接。平台210还可用于抽象资源的缩放来向对经由平台210实现的web服务212的所遇到的需求提供对应的缩放级别。也构想了各种其他示例，如服务器农场中的服务器的负载平衡、针对恶意方(例如，垃圾邮件、病毒和其他恶意软件)的保护等等。由此，可支持web服务212和其他功能而不需要功能“知道”支持硬件、软件和网络资源的细节。
因此，在互联设备的实施例中，手势模块104(以及双模输入模块114)的功能的实现可分布在系统200上。例如，手势模块104可部分地在计算设备102上以及经由抽象云208的功能的平台210来实现。
此外，功能可由计算设备102来支持而不考虑配置。例如，手势模块104所支持的手势技术可使用移动202配置中的触摸屏功能、计算机204配置的跟踪垫功能来检测，在电视机206示例中作为不涉及与具体输入设备的接触的自然用户界面(NUI)的支持的一部分由照相机来检测，等等。此外，检测并识别输入来标识特定手势的操作的执行可分布在系统200上，如由计算设备102来执行和/或由云208的平台210支持的web服务212来执行。对手势模块104所支持的手势的进一步讨论可关于以下各节找到。
一般而言，在此描述的任何功能可使用软件、固件、硬件(例如，固定逻辑电路)、手动处理或这些实现的组合来实现。本文使用的术语“模块”、“功能”和“逻辑”一般表示软件、固件、硬件或其组合。在软件实现的情况下，模块、功能或逻辑表示当在处理器(例如，一个或多个CPU)上执行时执行指定任务的程序代码。程序代码可被储存在一个或多个计算机可读存储器设备中。以下描述的手势技术的各特征是平台无关的，从而意味着这些技术可在具有各种处理器的各种商用计算平台上实现。
复制手势
图3是一示例实现的图示，其中图1的复制手势118的各阶段被示为通过与计算设备102的交互来输入。复制手势118在图3中使用第一阶段302、第二阶段304和第三阶段306来示出。在第一阶段302，由计算设备102的显示设备108显示图像308。图像308被进一步示为使用用户的手106的手指来选择310。例如，用户的手106的手指可被放置并保持在图像308的边界内。该触摸输入因此可由计算设备102的手势模块104识别为选择图像308的触摸输入。尽管描述了用用户手指的选择，但也构想了其他触摸输入而不脱离其精神和范围。
在第二阶段304，仍使用用户的手106的手指来选择图像308，但在其他实施例中，即使在用户的手106的手指提离图像308之后，图像308仍可保持在选中状态。在选择图像308时，使用指示笔116来提供指示笔输入，该指示笔输入包括指示笔在图像308的边界内的放置以及到图像308的边界外部的指示笔的后续移动。该移动在第二阶段304中使用假象线和指示指示笔116与图像308的初始交互点的圆圈来示出。响应于触摸和指示笔输入，计算设备102(通过手势模块104)使得图像308的副本312被显示设备108显示。本例中的副本312跟随与图像308的初始交互点处的指示笔116的移动。换言之，指示笔116与图像308的初始交互点被用作用于操纵副本312使得副本312跟随指示笔的移动的持续点。在一个实现中，一旦指示笔116的移动穿过了图像308的边界，就显示图像308的副本312，但也构想了其他实现，如经过阈值距离的移动、将触摸和指示笔输入识别为指示复制手势118、等等。例如，如果图像的边界边缘位于离指示笔的起始点的最大允许笔画距离之外，则穿过这一最大允许笔画距离可改为触发复制手势的发起。在另一示例中，如果图像的边界边缘比最小允许笔画距离更接近，则指示笔超过最小允许笔画距离的移动同样替换穿过图像边界本身。在又一示例中，可采用移动速度而非距离阈值，例如，对于复制手势将“快速”移动笔，而对于复写手势缓慢移动笔。在再一示例中，可采用在发起移动时的压力，例如，对于复制手势相对“重”地按压笔。
在第三阶段306，指示笔116被示为移得离图像308更远。在所示实现中，副本312移动得更远，副本312的不透明度增加，其一个示例可通过使用灰度级示出的第二阶段304和第三阶段306的比较来注意到。一旦指示笔116从显示设备108移除，则副本312在显示设备108上的位置处被显示为完全不透明，例如，是图像308的“真正副本”。在一个实现中，可通过在例如使用用户的手106的手指选择图像308时重复指示笔116移动来创建另一副本。例如，如果用户的手106的手指保持在图像308上(从而选择图像)，则从图像308的边界内到该边界外的指示笔的每一后续移动可导致图像308的另一副本被创建。在一个实现中，直到副本变得完全不透明时该副本才被认为是被完全实现。即，在图像保持半透明时提起指示笔(或将指示笔移回到小于副本创建阈值的距离)在本实现中可取消复制操作。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行复制手势118，该手势可单独使用触摸或指示笔输入来执行，或者可按住物理键盘、鼠标或面板按钮来代替继续显示设备上的触摸输入，等等。在某些实施例中，完全或部分地与先前选择的图像重叠、在其附近或以其他方式与其相关联的墨水注释或其他对象也可被认为是该“图像”的一部分并且也被复制。
图4是描绘根据一个或多个实施例的复制手势118的示例实现中的过程400的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图3的示例实现300。
将第一输入识别为选择由显示设备显示的对象(框402)。例如，使用用户的手106的手指提供的触摸输入可被手势模块104识别为选择计算设备102的显示设备108显示的图像308。
将第二输入识别为从对象的边界内到该对象的边界外的移动，该移动被识别为在对象被选中时发生(框404)。继续前一示例，可使用指示笔116来提供描述从图像308内的点到图像308的边界外的移动的输入，如图3的第二阶段304中所示。因此，手势模块104可从使用显示设备108的触摸屏功能检测的指示笔输入中识别这一移动。在一个实现中，第一和第二输入是使用计算设备102同时输入并检测的。
从所识别的第一和第二输入中标识复制手势，该复制手势可用于使得对象的副本的显示跟随第二输入的源的后续移动(框406)。通过识别第一和第二输入，手势模块104可标识要使用这些输入来指示的对应的复制手势118。作为响应，手势模块104可使得图像308的副本312被显示设备108显示并跟随指示笔116在显示设备108上的后续移动。以此方式，图像308的副本312可用直观的方式来创建和移动。额外的副本也可使用这些技术来制作。
例如，将第三输入识别为从对象的边界内到该对象的边界外的移动，该移动被识别为在对象被第一输入选中时发生(框408)。由此，在该示例中，对象(例如，图像308)仍使用用户的手106的手指(或其他触摸输入)来选择。然后可接收涉及从图像308内到图像308的边界外的移动的另一指示笔输入。因此，从所识别的第一和第三输入中标识第二复制手势，该复制手势可用于使得对象的第二副本的显示跟随第三输入的源的后续移动(框410)。
继续前一示例，第二副本可跟随指示笔116的后续移动。尽管所描述的该示例继续使用用户的手指106来选择图像308，但该选择甚至在对象的选择未使用该源(例如，用户的手的手指)继续时也可以继续。例如，图像308可被置于“选中状态”，使得不需要用户的手106的手指的继续接触来保持图像308被选中。再一次，应当注意，尽管以上在使用触摸和指示笔输入的复制手势118中描述了一具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
图钉手势
图5是一示例实现500的图示，其中图1的图钉手势120的各阶段被示为结合计算设备102来输入。图钉手势120在图5中使用第一阶段502、第二阶段504和第三阶段506来示出。在第一阶段502，计算设备102的显示设备108显示第一图像508、第二图像510、第三图像512和第四图像514。用户的手被假象地示为使用触摸输入，如通过使用用户的手“轻叩”图像，来选择第一图像508和第二图像510。
在第二阶段504，第一图像508和第二图像510通过使用环绕图像的假象边框被示为处于选中状态，但也可采用其他技术。用户的手106的手指在第二阶段504中被进一步示为保持第四图像514，如通过将用户的手106的手指放在第四图像514的附近并保持在那里例如至少预定量的时间。
尽管第四图像514被用户的手106的手指保持，但可使用指示笔115在第四图像514的边界内“轻叩”。因此，手势模块104(和双模输入模块114)可从这些输入中标识图钉手势120，例如，选择第一图像508和第二图像510，保持第四图像514，以及使用指示笔116轻叩第四图像514。
响应于对图钉手势120的标识，手势模块104可将第一图像508、第二图像510和第四图像514排列成经整理的显示。例如，第一图像508和第二图像510可按照由显示设备108选择为在被保持的对象(例如，第四图像514)下方的次序来显示。另外，可显示指示516来指示第一图像508、第二图像510和第四图像514被钉在一起。在一个实施例中，指示516可通过保持第四图像514并将指示笔116划过该指示来“移除图钉”来移除。
可重复该手势来向经整理的显示添加附加项目，例如，在第四图像514被保持时选择第三图像512然后使用指示笔116轻叩第四图像514。在另一示例中，可通过使用图钉手势120整理已经钉住的材料的集合来形成书。此外，经整理的对象集合可作为一个组来操纵，如调整大小、移动、旋转等，其进一步讨论可关于以下附图找到。在已经钉住的堆的顶上执行图钉手势可将该堆在已整理和未整理状态之间切换(手势模块104记住整理的项目之间的原始相对空间关系)，可向堆添加封套或装订(封面)，等等。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行图钉手势120，该手势可单独使用触摸或指示笔输入来执行，等等。
图6是描绘根据一个或多个实施例的图钉手势的示例实现中的过程600的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图5的示例实现500。
将第一输入识别为选择由显示设备显示的第一对象(框602)。该第一对象可以用各种方式来选择。例如，可用用户的手106的手指、指示笔116、使用光标控制设备等来轻叩第一图像508。
将第二输入识别为在第一输入之后提供并且保持显示设备显示的第二对象(框604)。还将第三输入识别为在保持第二对象期间轻叩第二对象(框606)。继续前一示例，用户的手106的手指可放置并保持在第四图像514的边界内，同时在第四图像514的边界内轻叩指示笔116。另外，这些输入可以在选择了第一图像508之后例如使用触摸输入来接收。
从第一、第二和第三输入中标识图钉手势，该图钉手势可用于使得第一对象被显示为在第二对象下方(框608)。手势模块104可从第一、第二和第三输入中标识图钉手势120。响应于该标识，手势模块104可使得第一输入所选择的一个或多个对象被排列在如第二输入所描述的那样保持的对象下方。该情况的一个示例在图5的系统500的第三阶段506中示出。在一个实现中，经由第一输入选择的一个或多个对象按照对应于选择该一个或多个对象的次序的次序被排列在第二输入的下方。换言之，选择该一个或多个对象的次序被用作在经整理的显示中排列对象的基础。被钉在一起的对象的经整理的显示可以用各种方式来被充分利用。
例如，将第四输入识别为涉及对经整理的显示的选择(框610)。从该第四输入中标识可用于改变经整理的显示的外观的手势(框612)。例如，该手势可涉及调整经整理的显示的大小，移动经整理的显示，旋转经整理的显示，最小化经整理的显示，等等。由此，用户可将该组钉住的对象作为一个组以高效且直观的方式来操纵。
也可重复图钉手势来向一组钉住的对象的经整理的显示添加额外对象，进一步整理已经整理的对象的组，等等。例如，标识可用于引起第三对象在第四对象下方的经整理的显示的第二图钉手势(框614)。然后标识可用于引起第一、第二、第三和第四对象的经整理的显示的第三图钉手势(框616)。以此方式，用户可以通过重复图钉手势120来形成对象的“书”。再一次，应当注意，尽管以上使用触摸和指示笔输入关于图钉手势120描述了一具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
裁剪手势
图7是一示例实现700的图示，其中图1的裁剪手势122的各阶段被示为通过与计算设备102的交互来输入。裁剪手势122在图7中使用第一阶段702、第二阶段704和第三阶段706来示出。在第一阶段702，由计算设备102的显示设备108显示图像708。在第一阶段702中，用户的手106的手指被示为选择图像708。
在第二阶段704中，接收指示笔输入，该指示笔输入描述指示笔116在图像708被选中时至少两次跨过图像708的一个或多个边界的移动710。该移动708在第二阶段704中通过使用在图像708外开始、穿过图像708的第一边界、继续穿过图像708的至少一部分、并穿过图像708的另一边界、从而离开图像708的界限的虚线来示出。
响应于这些输入(例如，选择图像708的触摸输入和定义移动的指示笔输入)，手势模块104可以标识裁剪手势122。因此，如第三阶段706中所示，手势模块104可以使得图像708根据指示笔116的所指示的移动710被显示在至少两个部分712、714中。在一个实现中，这些部分由手势模块104在显示画面中略微移位以便更好地指示出裁剪。尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行裁剪手势122，该手势可单独使用触摸或指示笔输入来执行，等等。
图8是描绘根据一个或多个实施例的裁剪手势的示例实现中的过程800的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图7的示例实现700。
将第一输入识别为选择由显示设备显示的对象(框802)。例如，可用用户的手106的手指、指示笔116、使用光标控制设备等来轻叩图像708。在所示实现中，用户的手106的手指被示为选择图像708。
将第二输入识别为至少两次跨过对象的一个或多个边界的移动，该移动被识别为在对象被选中时发生(框804)。该移动可按各种方式来输入。例如，移动710可涉及指示笔116至少两次跨过图像708的边界(例如，边缘)的、与计算设备102的显示设备108的不间断的接触。另外，尽管移动710被示为在图像708“外”开始，但在本例中，该移动也可以在图像708的边界内开始，然后跨过至少两个边界来指示裁剪。此外，指示笔移动也可包括共同跨过边界的多个笔画(例如，重叠)。以此方式所画出的多个笔画可被模块识别为在一起，因为图像的保持(例如，触摸输入)清楚地指示这些笔画属于一起。为实现这一点，第一(部分)笔画可将选择置于特殊状态，使得在不调用其他手势(例如，复制手势)的情况下允许另外的笔画，直到完成了多个笔画输入的“阶段”。
从所识别的第一和第二输入中标识裁剪手势，该裁剪手势可用于使得对象被显示为沿着第二输入跨过对象的显示的移动的裁剪(框806)。在计算设备102标识了裁剪手势122之后，例如，手势模块104可使得图像106的一个或多个部分表现为从初始位置移开并具有至少部分地对应于指示笔116的移动710的边界。此外，笔的笔画的初始和最终位置(在图像边界外)最初可被手势模块104看作普通“墨水”笔画，但是在裁剪操作期间或之后，这些墨水轨迹可从显示设备移除以便不会因执行裁剪手势而留下记号。
应当认识到，对对象(例如，图像708)的边界每一次后续跨过可被标识为另一裁剪手势。因此，对图像708的边界的每一对跨过可被手势模块104标识为裁剪。以此方式，在图像708被选中时，例如当用户的手106的手指仍放在图像708内时，可执行多个裁剪。再一次，应当注意，尽管以上在使用触摸和指示笔输入的裁剪手势122中描述了一具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
打孔手势
图9是一示例实现900的图示，其中图1的打孔手势124的各阶段被示为通过与计算设备102的交互来输入。打孔手势124在图9中使用第一阶段902、第二阶段904和第三阶段906来示出。在第一阶段902，图像908被示为使用用户的手106的手指来选择，但如上所述也构想其他实现。
在图像908被选中(例如，处于选中状态)时，接收近似于图像908内的自相交移动910的第二输入。例如，移动910在第二阶段904中被示为使用指示笔116来输入。所示示例中描述移动910的指示笔输入详细描述了通过在图像908上使用虚线来示出的椭圆。在一个实现中，手势模块104可提供这一显示(例如，在完成自相交移动期间或在完成之后)来用作对用户的视觉提示。另外，手势模块104可使用一阈值来标识该移动何时充分接近来近似于自相交移动。在一个实现中，手势模块104包含了移动的阈值大小，例如用于诸如在像素级将打孔限制在阈值大小之下。
在第二阶段904，手势模块104识别移动910是自相交的。在图像908仍被选中(例如，用户的手106的手指保留在图像908内)时，接收涉及在自相交移动910内轻叩的另一输入。例如，用于详细描述自相交移动910的指示笔116然后可用于在自相交移动内轻叩，例如，如第二阶段904中所示的虚线椭圆。从这些输入中，手势模块104可标识打孔手势124。在另一实现中，该轻叩可以在所近似的自相交移动“外”执行以便移除图像的该部分。由此，“轻叩”可用于指示图像的哪一部分要被保留以及哪一部分要被移除。
因此，如第三阶段906中所示，图像908的在自相交移动910中的一部分从图像908中打孔(例如，移除)，从而在图像908中留下了洞912。在所示实现中，图像908的被打孔的部分不再被显示设备108显示，但也构想了其他实现。例如，被打孔的部分可被最小化并显示在图像908中的洞912中，可被显示在图像908附近，等等。在图像仍被保持(选中)时的后续轻叩可产生具有与第一次打孔相同形状的额外的打孔——由此该操作可定义一纸孔形状，且用户然后可重复应用该形状来在图像、其他图像、背景中的画布等中打出额外的洞。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行打孔手势124，该手势可单独使用触摸或指示笔输入来执行，等等。
图10是描绘根据一个或多个实施例的打孔手势的示例实现中的过程1000的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图9的示例实现900。
将第一输入识别为选择由显示设备显示的对象(框1002)。例如，可用用户的手106的手指、指示笔116、通过使用光标控制设备等来轻叩图像708。
将第二输入识别为对象内的自相交移动(框1004)。例如，该自相交移动可以作为穿过自身的连续移动来输入。构想了各种形状和大小的自相交移动，且因此该移动不限于图9所示的示例移动910。在一个实现中，该第二输入还包括在先前关于图9所描述的移动所定义的区域内轻叩。然而，还构想了其他实现，例如，自相交移动910内的部分可以在不轻叩指示笔116的情况下“脱离”。
从所识别的第一和第二输入中标识打孔手势，该打孔手势可用于使得对象被显示为如同该自相交移动导致了对象中的洞一样(框1006)。继续前一示例，洞912可由手势模块104在标识了打孔手势124之后显示。再一次，应当注意，尽管描述了其中打孔手势124是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。另外，先前描述的手势的功能可被组合到单个手势中，其一个示例在以下附图中示出。
图11是一示例实现1100的图示，其中图1的裁剪手势122和打孔手势124的组合被示为结合计算设备102来输入。裁剪手势122和打孔手势124通过使用第一阶段1102和第二阶段1104来示出。在第一阶段1102中，将图像1106示为使用用户的手106的手指被选中。指示笔116的移动1108也如上所述通过使用虚线来示出。然而，在这一情况下，移动1108穿过图像1106的两条边界，且在图像1106内自相交。
在第二阶段1104，沿着指示笔116的所描述的移动1108来裁剪图像1106。如同裁剪手势122一样，部分1110、1112、1114被略微位移来示出图像1106“在哪里”被裁剪。另外，移动1118的一部分被标识为自相交，且因此从图像1106中“打孔”掉。然而，在这一情况下，被打孔掉的部分1110被显示在图像1106的其他部分1112、1114附近。应当容易地明白，这仅是手势的组成的各种不同示例中的一个，且构想了此处所描述的手势的各种不同组合而不脱离其精神和范围。
撕裂手势
图12是一示例实现1200的图示，其中图1的撕裂手势126的各阶段被示为通过与计算设备102的交互来输入。撕裂手势126在图12中使用第一阶段1202和第二阶段1204来示出。在第一阶段1202，由计算设备102的显示设备108显示图像1206。用户的手106的第一个和第二个手指以及用户的另一个手1208的第一个和第二个手指被示为选择图像1206。例如，用户的手106的第一和第二个手指可用于指示第一点1210，而用户的另一个手1208的第一和第二个手指可用于指示第二点1212。
移动由手势模块104来识别，其中第一和第二输入可彼此移开。在所示实现中，该移动1214、1216描述了非常像可用于撕裂物理纸张的运动的弧。因此，手势模块104可从这些输入中标识撕裂手势126。
第二阶段1204示出了撕裂手势126的结果。在该示例中，图像1206被撕裂以形成第一部分1218和第二部分1220。另外，在图像的第一部分1210和第二部分1212之间形成裂缝1222，该裂缝一般垂直于所描述的用户的手106、1208的手指远离彼此的移动。在所示示例中，裂缝1222被显示为具有锯齿形边缘，其不同于裁剪手势122的干净边缘，但在其他实现中也构想了干净边缘，例如沿着显示设备108显示的图像中的穿孔线撕裂。如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行撕裂手势126，该手势可单独使用触摸或指示笔输入来执行，等等。
图13是描绘根据一个或多个实施例的撕裂手势126的示例实现中的的过程1300的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图12的示例实现1200。
将第一输入识别为选择由显示设备显示的对象的第一点(框1302)。将第二输入识别为选择该对象的第二点(框1304)。例如，用户的手106的手指可选择第一点1210，而来自用户的另一个手1208的手指可选择图像1206的第二点。
识别第一和第二输入的移动为彼此移开(1306)。例如，该移动可包含指示第一和第二输入(且因此第一和第二输入的源)正在移开和/或已经移开的矢量分量。因此，从所识别的第一和第二输入中标识撕裂手势，该撕裂手势可用于使得对象被显示为好像在第一和第二点之间撕裂(框1308)。如图12所示，例如，撕裂1222可形成于第一点1210和第二点1212之间的大致中点处，并且垂直于连接第一点1210和第二点1212的直线(如果如此画的话)而延伸。再一次，应当注意，尽管描述了其中撕裂手势126使用触摸输入的具体示例，但这些输入可被切换到触摸笔输入，可使用多个输入类型(例如，触摸和指示笔)，等等。
边缘手势
图14是一示例实现1400的图示，其中图1的边缘手势128的各阶段被示为结合计算设备102来输入以便画线。边缘手势128在图14中使用第一阶段1402、第二阶段1404和第三阶段1406来示出。在第一阶段1402，使用两个接触点来选择图像1408。例如，用户的手106的第一和第二个手指可用于选择图像1408，但也构想了其他示例。通过使用两个接触点而不是一个，手势模块104可在数量增加的手势之间进行区分，但可以容易地明白，本例中也构想了单个接触点。
在第二阶段1404中，使用来自用户的手106的两个接触点来将图像1408从第一阶段1402中的初始位置移动并旋转到第二阶段1404中所示的新位置。指示笔116也被示为移向图像1408的边缘1410附近。因此，手势模块104从这些输入中标识边缘手势128，并使得线1412被显示，如第三阶段1406中所示。
在所示示例中，当发生指示笔116的移动时，线1412被显示为在图像1408的边缘1410所在之处附近。由此，在本例中，图像1408的边缘1410用作直边缘来画出对应的笔直的线1412。在一个实现中，即使在行进越过图像1408的角时，线1412也可以继续跟随边缘1410。以此方式，线1412可被画为具有大于边缘1410的长度的长度。
另外，对边缘手势128的标识可导致线被画到哪里的指示1414的输出，其一个示例在第二阶段1404中示出。例如，手势模块104可输出指示1414，以便给予用户相对于边缘1410线1412要被画到哪里的概念。以此方式，用户可调整图像1408的位置以便进一步细化线要被画到哪里，而不实际画线1412。也可以设想各种其他示例而不背离其精神和范围。
在一个实现中，取决于在线1412下方要显示什么，即线要被画在什么上面，线1412具有不同的特性。例如，线1412可被配置成在被画在用户界面的背景上时显示，而在被画在另一图像上时不显示。另外，图像1408在被用作边缘手势128的一部分时可被显示为部分透明，使得用户可以查看在图像1408下方是什么，且因此更好地知道其中要画线1412的上下文。此外，尽管边缘1410在本例中被示为是笔直的，但是，接着根据先前的示例手势裁剪的、撕裂的、或打孔掉的边缘，边缘可采用各种配置，例如曲线板、圆、椭圆、波浪等等。例如，用户可从各种预配置的边缘中进行选择来执行边缘手势128(如从菜单、显示在显示设备108的侧边区域中的模板等等中选择)。因此，在这些配置中，被画在边缘附近的线可跟随边缘的曲线和其他特征。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行边缘手势128，该手势可单独使用触摸或指示笔输入来执行，等等。例如，在使用触摸输入来支持手指绘图或颜色涂抹的某些实施例中，这些触摸输入也与由此形成的边缘一致。诸如喷漆器等其他工具也可被扣合到边缘，以便产生沿着约束线的硬边缘以及底层表面上的软边缘。
图15是描绘根据一个或多个实施例的边缘手势128的示例实现中的过程1500的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图14的示例实现1400。
将第一输入识别为选择由显示设备显示的对象(框1502)。如上所述，第一输入可被识别为涉及例如图像1408等对象的显示上的两个接触点的触摸输入。尽管被称为“接触点”，但应当容易明白，并不需要实际接触，例如，接触点可使用自然用户界面(NUI)“在空中”表示并使用照相机来检测。因此，接触点可以指指示接触的意图的指示，而不限于实际接触本身。
将第二输入识别为沿对象边缘的移动，该移动被识别为在对象被选中时发生(框1504)。继续前一示例，可将输入的指示笔输入识别为使用指示笔116在图像1408的所显示的边缘1410附近输入并跟随该边缘。
从所识别的第一和第二输入中识别手势，该手势可用于使得线被示为画在边缘附近且跟随第二输入所描述的移动(框1506)。手势模块104可从这些输入中识别边缘手势128。边缘手势128可用于使得对应于所识别的移动以及跟随指示笔116的后续移动的线被显示。如上所述，使用边缘手势128来画的线并不限于直线，而是相反可以遵循任何所需边缘形状而不脱离其精神和范围。同样，可沿着所选对象的相同或不同的边画出多个笔画。
图16是描绘根据一个或多个实施例的边缘手势128的示例实现中的过程1600的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图14的示例实现1400。
将第一输入识别为使用多个触摸输入来选择由显示设备显示的对象(框1602)。如关于图14所述，第一输入可被识别为涉及例如图像1408等对象的显示上的两个接触点的触摸输入。
将第二输入识别为沿对象边缘的指示笔移动，该移动被识别为在对象被选中时发生(框1604)。在本例中，输入是被识别为使用指示笔116在图像1408的所显示的边缘1410附近且跟随该边缘而输入的一类指示笔输入。
从所识别的第一和第二输入中标识手势，该手势可用于使得对象的边缘用作模板，从而如指示笔输入所指示的那样画在边缘附近的线被显示为跟随该对象的边缘(框1606)。由此，在本例中，对象(例如，图像1408)的边缘用作响应于对边缘手势128的标识而引起线的显示的向导。
图17是一示例实现1700的图示，其中图1的边缘手势128的各阶段被示为结合计算设备102来输入以便沿着线裁剪。边缘手势128在图17中使用第一阶段1702、第二阶段1704和第三阶段1706来示出。在第一阶段1702，使用两个接触点来选择第一图像1708。例如，用户的手106的第一和第二个手指可用于选择图像1708，但也构想了其他示例。
在第二阶段1704中，使用来自用户的手106的两个接触点来将图像1708从第一阶段1702中的初始位置移动到第二阶段1704中所示的新位置，如定位在第二图像1710“上”。另外，第一图像1708被示为部分透明(例如，使用灰度)，使得被定位在第一图像1708下方的第二图像1710的至少一部分可被查看。以此方式，用户可调整图像1708的位置来进一步细化裁剪要发生在哪里。
指示笔116被示为在第一图像1708的边缘1712附近沿着“裁剪线”的指示1712移动。因此，手势模块104从这些输入中标识边缘手势128，其结果在第三阶段1706中示出。在一个实现中，要裁剪的对象也(例如，经由轻叩)被选中来指示要裁剪什么。对边缘和裁剪/绘画对象的选择可以用任何次序来执行。
如第三阶段1706中所示，第一图像1708例如使用拖放手势将该图像1708移回到前一位置而从第二图像1710移开。另外，第二图像1710被显示为沿着在第二阶段1704中定位第一图像1708的边缘之处，即沿着指示1712，被裁剪成第一部分1714和第二部分1716。由此，在本例中，第一图像1708的边缘可被用作模板来执行裁剪，而非如上对于裁剪手势122所描述的那样执行“手画线”裁剪。
在一个实现中，由边缘手势128执行的裁剪取决于要在哪里执行裁剪而具有不同的特性。例如，裁剪可用于裁剪显示在用户界面中的对象而不裁剪用户界面的背景。另外，尽管边缘在本例中被示为是直的，但边缘可采取各种配置，例如，曲线板、圆、椭圆、波浪等等。例如，用户可从各种预配置的边缘中进行选择来使用边缘手势128执行裁剪(如从菜单、显示在显示设备108的侧边区域中的模板等等中选择)。因此，在这些配置中，裁剪可跟随对应边缘的曲线和其他特征。同样，可以用手指来执行撕开手势来创建遵循模板的撕开边缘。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行边缘手势128，该手势可单独使用触摸或指示笔输入来执行，等等。
图18是描绘根据一个或多个实施例的执行裁剪的边缘手势128的示例实现中的过程1800的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图17的示例实现1700。
将第一输入识别为选择由显示设备显示的对象(框1802)。将第二输入识别为沿对象边缘的移动，该移动被识别为在对象被选中时发生(框1804)。如前一样，指示笔输入可被识别为在图像1708例如使用用户的手106的一个或多个手指被选中时使用指示笔116在图像1708的所显示的边缘附近并跟随该边缘输入。
从所识别的第一和第二输入中识别手势，该手势可用于使得裁剪被显示为在边缘附近且跟随第二输入所描述的移动(框1806)。手势模块104可从这些输入中识别边缘手势128。边缘手势128可用于使得对应于所识别的移动以及跟随指示笔116的后续移动的裁剪被显示。例如，图像1710的部分1714、1716可被显示为被略微位移来示出裁剪发生“在哪里”。如上所述，裁剪不限于直线，而是相反可以遵循任何所需边缘形状而不脱离其精神和范围。
再一次，应当注意，尽管描述了其中使用触摸和指示笔输入来输入边缘手势128的图14-18的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
盖印手势
图19是一示例实现1900的图示，其中图1的盖印手势130的各阶段被示为结合计算设备102来输入。盖印手势130在图19中使用第一阶段1902、第二阶段1904和第三阶段1906来示出。在第一阶段1902，使用用户的手106的手指来选择图像1908，但也构想了其他实现，例如如上所述的使用多个接触点、光标控制设备等来选择。
在第二阶段1904中，使用指示笔116来指示计算设备102的显示设备108所显示的用户界面中的第一位置1910和第二位置1912。例如，指示笔116可用于在这些位置“轻叩”显示设备108。在本例中，第一位置1910和第二位置1912位于图像1908的边界“外”。然而，应当容易明白，构想了其他示例。例如，一旦第一位置落在图像边界外，则可建立“盖印阶段”，且因此后续的轻叩可落在图像边界内且引入关于例如图钉手势等其他手势的歧义。
响应于这些输入，手势模块104标识盖印手势130，且使得第一副本1914和第二副本1916分别被显示在第一位置1910和第二位置1912处。在一个实现中，显示图像1908的第一副本1914和第二副本1916以给出该图像1908是类似于橡皮图章来使用以便将副本1914、1916盖印到用户界面的背景上的外观。可使用各种技术来给出橡皮图章外观，如粒度、使用一个或多个颜色等等。此外，可使用指示笔轻叩压力和指示笔倾斜角(方位角、高度和转动，只要可用)来对所得的墨水压印加权，确定印记的图像方向，确定喷涂或模糊效果的方向，在所得图像中引入浅到深墨水的渐变，等等。同样，对于触摸输入，也可以有触摸输入的接触面积和方向的相应属性。另外，可使用连续的盖印手势130来响应于在图像1908的边界外执行的连续轻叩创建图像1908的逐渐更淡的副本，任选地下至一最小淡浅度阈值。其一个示例被示为在第二阶段1904中通过使用灰度级，图像1908的第二副本1916被显示为比图像1908的第一副本1914更淡。也构想了其他淡化技术，如使用对比度、明度等等。用户还可通过在盖印阶段期间采用色彩拾取器、色彩图标、效果图标等来“刷新墨水”或改变由印记产生的色彩或效果。
在第三阶段1906中，图像1908被显示为与第一阶段1902和第二阶段1904中的图像1908相比被旋转。因此，在该示例中，第三盖印手势130使得第三副本1918被显示为具有匹配图像1908的方向(例如，旋转后)的方向。也构想了各种其他示例，如操纵图像1908的副本1914-1918的大小、色彩、纹理、视角等。如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行盖印手势130(例如，图像1908可使用指示笔116来保持，且使用触摸输入来指示在哪里进行盖印的位置)，手势可单独使用触摸或指示笔输入来执行，等等。
图20是描绘根据一个或多个实施例的盖印手势130的示例实现中的过程2000的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图19的系统1900。
将第一输入识别为选择由显示设备显示的对象(框2002)。例如，可用用户的手106的一个或多个手指、指示笔116、使用光标控制设备等来选择图像1908。因此，第一输入描述了这一选择。
将第二输入识别为指示用户界面中在对象边界外的第一位置且在对象被选中时发生(框2004)。例如，第二输入可由手势模块104识别为描述指示笔116在计算设备102的显示设备108所显示的用户界面中的第一位置1910的轻叩的指示笔输入。另外，第一位置可出现在图像1908的边界外。
从所识别的第一和第二输入中标识第一盖印手势，该第一盖印手势可用于引起用户界面中的第一位置处的对象副本的显示(框2006)。继续前一示例，手势模块104可使得图像1908的第一副本1914被显示在第一位置1910处。图像1908的副本1914可用各种不同方式来配置，如表现为如同图像1908被用作橡皮图章来创建副本1914一样。
另外，盖印可用各种方式发起并放置在用户界面中。例如，指示笔116可在显示设备108上“轻轻敲下”来指示初始所需位置，例如第二位置1912。如果指示笔116移动但仍指示与用户界面的所需交互(例如，放置在显示设备108所输出的用户界面附近)，则第二副本1916可跟随指示笔116的移动。一旦指示笔116例如通过将指示笔116提离显示设备108来指示了最终放置，则该副本可保留在该位置，可将跟随指示笔所规定的路径的运动模糊/喷涂应用于所得印记，等等。也可制作另外的副本(例如，印记)，其一个示例描述如下。
将第三输入识别为指示用户界面中在对象边界外的第二位置且在对象被选中时发生(框2008)。从所识别的第一和第三输入中标识第二盖印手势，该第二盖印手势可用于引起用户界面中的第二位置处的对象的第二副本的显示，该第二副本比第一副本更淡(框2010)。仍然再继续前一示例，手势模块104可使得图像1908的第二副本1916被显示在第二位置1912处。在一个实现中，盖印手势130的连续实现可使得显示设备108显示逐渐更淡的副本，其一个示例使用图19的示例实现中的逐渐更淡的灰度阴影来示出。另外，手势模块104可取决于要盖印“什么”来采用不同的语义。例如，手势模块104可允许副本(例如，印记)出现在背景上，但不允许其出现在显示设备108显示的图标或其他图像上，可将副本限制为在可被用户操纵的数据中实现，等等。
例如，在一个实施例中，可选择工具栏中的图标(例如，保持)，然后该图标的实例可被“盖印”到用户界面上，例如绘图程序中的形状。也可以考虑各种其他示例。再一次，应当注意，尽管描述了其中盖印手势130是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
画笔手势
图21是一示例实现2100的图示，其中图1的画笔手势132的各阶段被示为通过与计算设备102的交互来输入。画笔手势132在图21中使用第一阶段2102、第二阶段2104和第三阶段2106来示出。在第一阶段2102中，由计算设备102的显示设备108在用户界面中显示图像2108。本例中的图像2108是具有多个建筑物的城市空中轮廓线的照片。
在第二阶段2104中，使用触摸输入来选择图像2108并选择图像2108中的某一点2110，这被示为使用用户的手106的手指来执行。本例中的指示笔116也被示为提供描述由指示笔116在图像2108的边框外“用画笔画”的一条或多条线的指示笔输入。例如，指示笔116可做出在用户界面中的图像2108的边界外的位置2112处开始的一系列锯齿形线、放在一起的线的组合、超过阈值距离的单条线、等等。手势模块104然后可将这些输入标识为画笔手势132。此时，手势模块104可认为这些输入启动了画笔阶段，使得阈值距离以下的后续的线被允许。
在标识了画笔手势132之后，手势模块104可使用图像2108的位图来作为用于指示笔116所画出的线的填充。另外，在一个实现中，该填充取自图像2108的在图像2108中由触摸输入(例如，用户的手106的手指)所指示的特定点2110处开始的对应的线，但在其范围内构想了源图像到所得画笔笔画的其他视口映射，如通过使用源对象的属性(例如，纹理)等等。这些线的结果被示为使用指示笔116的画笔笔画来复制的图像2108的一部分2114。
在一个实现中，由指示笔116画出的线的不透明度随着在给定区域上画出另外的线而增加。如第三阶段2106中所示的，例如，指示笔116可在从图像2108复制的部分2114上向回画，以增加部分2114的不透明度。这在第三阶段2106中通过增加部分2114与示例实现2100的第二阶段2104中所示的部分2114的暗度相比的暗度来示出。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行画笔手势132，画笔手势132可单独使用触摸或指示笔输入来执行，等等。
图22是描绘根据一个或多个实施例的画笔手势132的示例实现中的过程2200的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图21的示例实现2100。
将第一输入识别为选择由显示设备显示的对象(框2202)。例如，图像2108可使用触摸输入、指示笔输入、通过使用光标控制设备等来选择。在所示实现中，用户的手106的手指被示为选择图像2108以提供触摸输入。
将第二输入识别为画在对象边界外的线，该线被识别为在对象被选中时画出(框2204)。例如，第二输入可以是描述画在用户界面中的图像2108的边界外的一条或多条线的指示笔输入。
从所识别的第一和第二输入中标识画笔手势，该画笔手势可用于使得所画出的线被显示为对象的对应的线的副本(框2206)。继续前一示例，手势模块104可从输入中标识画笔手势，且因此使用经由第一输入选择的图像2108来作为用于第二输入所描述的线的填充。例如，画笔手势可用于使得对象的对应的线的副本在由第一输入选择的对象中的一点处开始(框2208)。如图21的第二阶段2104中所示，触摸输入可选择一点2110，该点可用作为指示笔在图像2108外的一点2112处开始画出的线提供填充的起始点。尽管描述了要用于触摸输入所做出的画笔手势132的填充的起始点的指示，但也构想了各种其他实现。例如，用于每一画笔手势132的填充点可被设在图像2108中的预定义位置处，如图像2108的左上角、图像2108的中心等等。
另外，画笔手势可用于使得对来自对象的对应的多条线的复制具有与第二输入的多条线的匹配的空间关系(框2210)。在本例中，指示笔输入所描述的线取自图像的对应部分，且保留了图像2108的空间关系。此外，对图像2108的继续选择可使得在显示设备108所显示的用户界面中的别处画出的线保留这一关系，直到接收到不再需要该关系的输入，如通过将用户的手106的手指提离显示设备。因此，即使指示笔116从显示设备108提起并且被放在设备108上的别处来画另外的线，本实施例中用于那些另外的线的填充维持了与前一组线相同的与图像2108的空间关系。也构想了各种其他示例，如再一次使用由触摸输入指示的点2110作为起始点来开始填充过程。再一次，应当注意，尽管描述了其中画笔手势132是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
复写手势
图23是一示例实现2300的图示，其中图1的复写手势134的各阶段被示为通过与计算设备102的交互来输入。复写手势134在图23中使用第一阶段2302、第二阶段2304和第三阶段2306来示出。在第一阶段2302中，由计算设备102的显示设备108在用户界面中显示图像2308。与图21的图像2108一样，本例中的图像2308是具有多个建筑物的城市天空轮廓线的照片。在第一阶段2302中，使用触摸输入，例如用户的手106的手指来选择图像2308，并将其移动到用户界面中的新位置，如第二阶段2304中所示。
在第二阶段2304中，本例中的指示笔116还被示为提供描述由指示笔116在图像2308的边框内“擦掉”的一条或多条线的指示笔输入。例如，如上所述，指示笔116可做出在用户界面中的图像2308的边界内的位置2310处开始的一系列锯齿形线、可使用超过阈值长度的单条线、等等。手势模块104然后可将这些输入(例如，选择和擦除)标识为复写手势134。
在标识了复写手势134之后，手势模块104可使用图像2308的位图、图像的纹理等来作为用于指示笔116所画出的线的填充。另外，这些线可被实现为“穿过”图像2308画出，使得线被显示在图像2308的下方。因此，一旦图像2308如第三阶段2306中所示那样移开，图像2308的被复制到用户界面的一部分2312被示出，例如画在用户界面的背景上。在一个实现中，覆盖图像可被显示为半透明状态，以便允许用户看见覆盖的和底层的图像。由此，像画笔手势132一样，复写手势134可用于复制图像2308中由指示笔116所画出的线所指示的部分。同样，图像2308可按各种方式来用作用于部分2312的填充，如用作制作“真实”副本的位图、使用可由用户指定的一个或多个颜色、等等。尽管本示例实现2400将复写手势134示为被实现成将部分2312“沉积”到用户界面的背景上，但复写手势134也可被实现来将图像2308的一部分“擦掉”，其一个示例在下一附图中示出。
图24是一示例实现2400的图示，其中图1的复写手势134的各阶段被示为通过与计算设备102的交互来输入。像图23一样，复写手势134在图24中使用第一阶段2402、第二阶段2404和第三阶段2406来示出。在第一阶段2402中，由计算设备102的显示设备108在用户界面中显示图像2408。另外，在用户界面中还示出了另一对象2410，在该实例中，该对象出于讨论清楚的目的被示为空白文档，但也构想了其他对象。在第一阶段2402中，使用触摸输入，例如用户的手106的手指来选择对象2410，并诸如通过使用拖放手势将其移动到用户界面中的新位置(如第二阶段2404中所示)，如定位在图像2408上。
在第二阶段2404中，本例中的指示笔116被示为提供描述由指示笔116在对象2410和图像2408的边框内“擦掉”的一条或多条线的指示笔输入。例如，指示笔116可做出在对象2410的边界内的一位置处开始的一系列锯齿形线，该对象2410在用户界面内的图像2408上。手势模块104然后可将这些输入(例如，选择、对象2410相对于图像2408的定位、以及擦除)标识为复写手势134。
在标识了复写手势134之后，手势模块104可使用图像2408的位图来作为用于指示笔116所画出的线的填充。另外，这些线可被实现为“擦破”到对象2410上，使得线被显示为对象2410内的一部分2412。因此，一旦对象2410如第三阶段2406中所示那样移开，图像2408的部分2412保持与对象2410在一起。由此，像先前的复写手势134的示例实现2300中的画笔手势132一样，本示例实现2400的复写手势134可用于复制由使用指示笔116所画出的线指示的图像2408的各部分。同样，图像2408可按各种方式来用作用于部分2412的填充，如用作制作“真实”副本的位图、使用可由用户指定的一个或多个颜色、等等。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行复写手势134，该手势可单独使用触摸或指示笔输入来执行，等等。
图25是描绘根据一个或多个实施例的复写手势134的示例实现中的过程2500的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和分别在图23和24中的实现2300、2400。
将第一输入识别为选择由显示设备显示的对象(框2502)。例如，可用用户的手106的手指、指示笔116、通过使用光标控制设备等来轻叩图像2308。在图23的所示实现中，用户的手106的手指被示为选择图像2408。在图24的所示实现中，图像2408通过使用触摸输入将对象2410定位到图像2408“上”来选择。也可以考虑各种其他示例。
将第二输入识别为在对象被选中时所画的线(框2504)。例如，该第二输入可描述如图23所示画在对象边界外的线。在另一实例中，该第二输入可描述如图24所示画在对象边界内的线。
从所识别的第一和第二输入中标识复写手势，该复写手势用于引起对象的各部分的副本的显示(框2506)。继续先前的实例，复写手势134可用于如图23所示沉积对象2308的各部分，或如图24所示将对象2408的各部分接收到另一对象2410上。应当注意，尽管描述了其中复写手势134是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
填充手势
图26是一示例实现2600的图示，其中图1的填充手势136的各阶段被示为结合计算设备102来输入。填充手势136在图26中使用第一阶段2602、第二阶段2604和第三阶段2606来示出。在第一阶段2602中，由计算设备102的显示设备108在用户界面中显示图像2608，这可用先前或随后描述的一种或多种方式来执行。
在第二阶段2604中，框架2612被示为使用指示笔116来画出，该框架具有通过指示笔116的运动2614来定义的矩形形状。例如，指示笔116可被放在显示设备108上并被拖动来形成框架2612。尽管示出了具有矩形形状的框架2612，但可采用各种不同形状以及用于形成这些形状的各种技术，如圆形、手画线等等。
然后从输入中识别填充手势136，其结果的一个实例在第三阶段2606中示出。在标识了填充手势136之后，手势模块104可使用所选图像2608来填充框架2612，从而形成另一图像2616。填充可以用各种方式来提供，如第三阶段2606中所示的被拉伸以适合框架2612的宽高比、以原始宽高比重复直到填充了框架2612、以原始宽高比重复但被修剪来适合、等等。尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行填充手势136，填充手势136可单独使用触摸或指示笔输入来执行，等等。
图27是描绘根据一个或多个实施例的填充手势的示例实现中的过程2700的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图26的示例实现2600。
将第一输入识别为选择由显示设备显示的对象(框2702)。将第二输入识别为画在对象边界外的框架，该框架被识别为在对象被选中时画出(框2704)。该框架可以用各种方式来画出，如使用指示笔116或触摸输入的手画线来形成自相交线、选择预配置的框架、通过拖放来指定框架的大小、等等。
从第一和第二输入中标识填充手势，该填充手势可用于使用该对象来填充在框架中(框2706)。在标识了填充手势136之后，手势模块104可使用利用第一输入选择的对象来填充从第二输入识别的框架。填充可用各种方式来执行，如拉伸以填充框架2612的宽高比、在框架2612内重复图像2608、收缩图像2608、将图像2608用作位图、等等。此外，应当注意，尽管描述了其中填充手势136是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
交叉引用手势
图28是一示例实现2800的图示，其中图1的交叉引用手势138的各阶段被示为通过与计算设备102的交互来输入。交叉引用手势138在图28中被示为更详细地显示出图1的计算设备102。
显示设备108被示为显示图像2802。用户的手2804的手指也被示为选择图像2802，但如上所述，可使用各种不同技术来选择图像2082。
当图像2802被选中时(例如，在选中状态)，指示笔116被示为提供涉及一条或多条线2806的指示笔输入，这些线在本实例中被示为单词“Eleanor”。手势模块104可从这些输入中识别交叉引用手势138来提供各种功能。
例如，手势模块104可使用交叉引用手势138来将线2806与图像2802链接。因此，使得图像2802被显示的操作也可使得线2806被共同显示。在另一示例中，链接将线2806配置为可被选择来导航到图像2802。例如，对线2806的选择可使得图像2802被显示、包含图像2802的文档的一部分被显示(例如，跳转到文档中包含该图像2802的页)、等等。同样，交叉引用手势可用于对对象进行分组，使得对象在拖曳操作期间共同移动，或在文档重排版(reflow)或其他自动或手动布局改变期间保持图像和注释之间的相对空间关系。
在又一示例中，手势模块104可采用墨水分析引擎2808来标识线2806“写了什么”，例如将线转换成文本。例如，墨水分析引擎2808可用于将线2806翻译成拼写出“Eleanor”的文本。另外，墨水分析引擎可用于将要转换成文本的单独的线分组在一起，例如，形成单独字符的线可被分组在一起以便翻译。在一个实现中，一条或多条线可提供由墨水分析引擎2808来解析的暗示，如指示线要被转换成文本的特殊符号。
因此，手势模块104通过执行交叉引用手势138可按各种方式来使用该文本。在一个实现中，该文本被用作所选图像2802的文字说明和/或可以与图像相关联的其他元数据，如用于标识图像2802中的一个或多个人、表示图像2802中所示的位置、等等。链接到图像2802的该元数据(例如，文本)可被访问并充分利用来用于搜索或其他任务，其一个示例在以下附图中示出。
图29是一示例实现2900的图示，其中示出了交叉引用手势138的各阶段来使用图28的填充手势访问与图像2802相关联的元数据。该手势在图29中使用第一阶段2902、第二阶段2904和第三阶段2906来示出。在第一阶段2902中，由计算设备102的显示设备108在用户界面中显示图28的图像2802。图像2802任选地包括有与图像2802相关联的附加元数据可供查看的指示2908。
在第二阶段2904中，用户的手2804的手指被示为选择指示2908，并指示类似于“翻转”图像2802的移动2910。在一个实现中，在标识了这些输入之后，手势模块104可提供动画以给出图像2802正被“翻过来”的外观。或者，可通过与项目相关联的上下文菜单命令，例如“属性……”命令来揭示元数据。
在第三阶段2906中，示出了翻转手势的结果。在本例中，显示图像2802的“背面”2912。背面2912包括与图像2802相关联的元数据的显示，如图像2802是何时拍摄的、图像2802的类型、以及使用图28的交叉引用手势138输入的元数据(本例中是“Eleanor”)。图像2802的背面2912还包括该背面2912可被“翻回去”来返回到第一阶段2902中所示的图像2802的指示2914。尽管关于图29描述了使用翻转手势的图像2802的“翻转”，但应当容易明白，可使用各种不同技术来访问元数据。
如上所述，尽管使用触摸和/或指示笔输入关于图28和29描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换，手势可单独使用触摸或指示笔输入来执行，等等。
图30是描绘根据一个或多个实施例的图1的交叉引用手势138的示例实现中的过程3000的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和分别在图28和29中的实现2800、2900。
将第一输入识别为选择由显示设备显示的对象(框3002)。例如，可用用户的手2804的手指、指示笔116、通过使用光标控制设备等来轻叩图像2802。在所示实现中，用户的手2804的手指被示为选择并保持图像2802。
将第二输入识别为画在对象边界外的一条或多条线，所述一条或多条线被识别为在对象被选中时画出(框3004)。例如，手势模块104可将线2806识别为在图像2802被选中时由指示笔116画出的指示笔输入。另外，应当认识到，线2806可以是连续的，和/或由各段组成，而不脱离其精神和范围。
从所识别的第一和第二输入中标识交叉引用手势，该交叉引用手势可用于使得一条或多条线被链接到对象(框3006)。如上所述，线2806可用各种方式来链接。例如，手势模块104可采用墨水分析引擎2808来将线翻译成文本。该文本然后可结合图像2802来保存、用作到图像2802的链接、显示为图像2802的文字说明、等等。
再一次，应当注意，尽管描述了其中交叉引用手势138是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
链接手势
图31是一示例实现3100的图示，其中图1的链接手势140的各阶段被示为结合计算设备102来输入。链接手势140在图31中使用第一阶段3102、第二阶段3104和第三阶段3106来示出。在第一阶段3102中，计算机102的显示设备108被示为显示第一图像3108、第二图像3110、第三图像3112和第四图像3114。
在第二阶段3104中，第三图像3112被示为使用触摸输入，例如通过使用用户的手106的手指来选择，但也构想了其他实现。指示笔116被示为提供描述在第一图像3108的边界内开始的、通过第二图像3110、并在第三图像3112处结束的移动3118的指示笔输入。例如，移动3116可涉及将指示笔116放在第一图像3108的显示内，并穿过第二图像3110到第三图像3112，在那里指示笔116被提离显示设备108。从这些输入中，手势模块104可标识链接手势140。
链接手势140可用于提供各种不同功能。例如，手势模块104可形成要随第三图像3112包括在一起的链接，其一个示例在第三阶段3106中示出。在该阶段中，示出了图像3112的背面3118，该背面包括与图像3112相关联的元数据的显示，如图像的标题和类型。元数据还包括到第一图像3108和第二图像3110的链接，其被示为从图像中取得的标题“妈妈”和“孩子”。链接可被选择来导航到相应图像，例如，链接“妈妈”可被选择来导航到第一图像3108，等等。因此，链接可使用不涉及用户的手动文本输入的简单手势来形成。各种其他功能也可经由链接手势140而变得可用，其进一步讨论可关于图32-33来找到。
如上所述，尽管使用触摸和指示笔输入描述了一具体实现，但应当容易地明白，也可构想各种其他实现。例如，触摸和指示笔输入可被交换来执行链接手势140，该手势可单独使用触摸或指示笔输入来执行，等等。另外，链接可结合各种不同输入来执行。例如，可例如使用指示笔圈出一集合在多个对象周围画出路径，以便选择该路径内的对象。然后可选择一图标(例如，组图标)来将对象链接和/或分组在一起。也可考虑各种其他实例。
图32是描绘根据一个或多个实施例的链接手势的示例实现中的过程3200的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图31的示例实现3100。
将第一输入识别为选择由显示设备显示的对象(框3202)，如通过使用一个或多个触摸输入、指示笔输入等来选择。将第二输入识别为从由显示设备显示的第二对象画到第一对象的线，该线被识别为在第一对象被选中时画出(框3204)。例如，线可被识别为指示笔116从第二对象(例如，第二图像3112)的边界内到由第一输入(例如，在图31的第二阶段3104中的用户的手106的手指)选择的对象的边界内的移动3116。指示笔所经过的中间图像3110或其他对象或者可被认为是也应被一起链接到一共同集合中的附加图像，或者可作为不是链接手势的目标的中间对象而被忽略。链接手势的动态特性(例如，拐点、在拖曳时的瞬间暂停、速度阈值等)可用于在需要时在这些情况之间进行判断。
从所识别的第一和第二输入中标识链接手势，该链接手势可用于在第一和第二对象之间创建链接(框3206)。手势模块104例如可标识链接手势140，并形成涉及第一输入所选择的第一对象和通过第二输入而涉及第一对象的第二对象的链接。链接可采用各种功能，如在第一和第二对象之间导航的超链接、存储链接(例如，与第一或第二对象一起)以供稍后导航、提供链接的存在的指示(例如，通过对第一或第二对象加下划线)、等等。还构想了各种其他链接，其进一步讨论可相关于以下附图找到。
图33是另一示例实现3300的图示，其中图1的链接手势140的各阶段被示为结合计算设备102来输入。计算设备102被示为由显示设备108输出用户界面。该用户界面包括播放列表清单和歌曲清单。
用户的手3302的手指被示为选择播放列表“About Last Night”，且指示笔116被示为从歌曲“My Way”移动到所选播放列表。以此方式，与第二对象(例如，歌曲)相关联的元数据与所选对象(例如，播放列表)相关联，在本实例中这使得该歌曲被添加到该播放列表。由此，手势模块104可从输入中标识链接手势140，并使得对应的操作被执行。尽管本例中描述了播放列表的形成，但可使用链接手势来将各种不同元数据进行关联，如按照类型对电影进行分类、对对象进行分级、等等。
图34是描绘根据一个或多个实施例的链接手势的示例实现中的过程3400的流程图。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图33的示例实现3300。
将第一输入识别为选择由显示设备显示的对象(框3402)。将第二输入识别为从由显示设备显示的第二对象画到第一对象的线，该线被识别为在第一对象被选中时画出(框3404)。例如，线可被识别为从元数据列表画到歌曲、从地点清单画到图像、等等。
从所识别的第一和第二输入中标识链接手势，该链接手势可用于将由第二对象表示的元数据与第一对象相关联(框3406)。继续前一实例，链接手势140可用于使得元数据被存储为第一对象的一部分，例如使得该播放列表包括该歌曲，该图像包括人的名字，等等。
然而再一次，应当注意，尽管在图31-34中描述了其中链接手势140是使用触摸和指示笔输入来输入的具体示例，但这些输入可被交换，可使用单个输入类型(例如，触摸或指示笔)来提供输入，等等。
上下文空间复用
图35描绘了示出用于上下文空间复用的技术的示例实现3500。在先前的示例实现的情况下，使用了不同类型的输入(例如，指示笔输入以及触摸输入)来指定不同手势。例如，可使用双模输入模块114来在输入类型之间进行区分以标识手势，如先前关于图1和后续各节所描述的一个或多个手势。
这些技术也可用于上下文空间复用。上下文空间复用描述了用户界面的特定区域承担用于指示笔或触摸输入的不同功能的技术。例如，用户的手3502的手指被示为在用户界面的初始点选择图像3504。另外，指示笔116被示为书写单词“Eleanor”3506，这也在用户界面中的该初始点开始。由此，双模输入模块114可在输入类型(例如，触摸还是指示笔输入)之间进行区分以便在用户界面中的同一点提供不同功能。
在一个实现中，触摸原语(例如，轻叩、保持、两个手指保持、拖曳、交叉、捏、以及其他手或手指手势)和指示笔原语(例如，轻叩、保持、拖走、拖入、交叉、划过)可由双模输入模块114来组成以创建比单独的指示笔或触摸更大的、直观且语义上丰富的手势的可能空间。例如，直接触摸模式切换可集成模式激活、对象选择、以及将子任务分阶段成单个对象专用模式，例如用于定义如上所述的手势。
另外，可合成各种技术例如以便达到不同手势。例如，选择一个对象连同对子任务分阶段一起提供了多个工具和效果的一起合成。如上对于图14-18的边缘手势128所描述的，例如，描述了使用对象的边缘的绘图和裁剪。在其他情况下，可由手势模块向手势分配优先级来避免潜在歧义，例如，裁剪优先级高于覆盖在项目上的边缘手势128，但不高于画笔手势132。由此，在这些实现中，指示笔书写(或裁剪)且触摸操纵，而指示笔加上触摸的组合产生新的技术。但是在某些上下文中，指示笔和触摸之间的其他划分是可能的，且实际上与用户期望相一致。
例如，计算设备102的显示设备108显示的用户界面可以取决于所涉及的对象区域以及环绕对象和页面(背景)的上下文而不同地反应。例如，用户界面上的墨水注解对于某些触摸输入(例如，选择、直接操纵)可被忽略，以使得在页面上执行两个手指的缩放变得更容易，以及避免诸如墨水笔画等指示笔输入的意外打断。也可考虑对象的大小，例如，超过阈值大小的对象可经由触摸输入来直接操纵。还构想了各种其他实现，其进一步讨论可相关于以下附图找到。
图36是描绘一示例实现中的过程3600的流程图，其中使用输入是指示笔还是触摸输入的标识来标识要结合用户界面执行的操作。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图35的示例实现3500。
确定输入是触摸输入还是指示笔输入，该输入可用于指示与显示设备所显示的用户界面的交互(框3602)。例如，手势模块104可检测使用各种功能的输入，如触摸屏、照相机(例如、随显示设备的多个像素一起包括的照相机)、等等。手势模块104随后可确定该输入是触摸输入(例如，使用用户的手的一个或多个手指输入)还是指示笔输入(例如，使用定点输入设备来输入)。该判定可用各种方式来执行，如通过使用一个或多个传感器检测指示笔116、基于使用指示笔对比使用触摸接触的显示设备108的量、使用图像识别、等等。
至少部分地基于该判定来标识要由计算设备执行的操作，使得所标识的操作基于所确定的输入是触摸输入还是指示笔输入而不同(框3604)。使所标识的操作由计算设备来执行(框3606)。如图35所示，例如，使用来自指示笔116的指示笔输入来进行书写，而来自用户的手3502的手指的触摸输入可用于选择图像3504并将其从用户界面内的同一点移动。也构想了各种其他示例，如基于交互所涉及的对象的配置。例如，手势模块104可被配置成对对象是否是图像、表示歌曲、涉及文档、对象的大小等做出区分，以使得不同操作基于底层和/或附近的对象来执行。作为另一示例，将笔从色盒拖动可留下笔画，而将手指从色盒拖动可留下喷涂或手指绘图笔画。用笔选择色盒、然后用手指来划；或者相反地用手指来选择色盒、然后用笔来划，也可暗示不同命令或命令参数(例如，画笔样式、不透明度等等)。对此类区分的进一步讨论可关于以下附图找到。
图37是描绘一示例实现中的另一过程3700的流程图，其中使用输入是指示笔还是触摸输入的标识来标识要结合用户界面执行的操作。该过程的各方面可用硬件、固件、软件或其组合来实现。该过程在本示例中被示为指定由一个或多个设备执行的操作的一组框，并且其不必限于所示由各框执行操作的次序。在以下讨论的部分中将参考图1的环境100、图2的系统200和图35的示例实现3500。
确定输入是触摸输入还是指示笔输入，该输入可用于指示与显示设备所显示的用户界面的交互(框3702)。该判定可如上以及下文所述地用各种方式来执行。响应于输入是触摸输入的确定，使得第一操作结合用户界面来执行(框3704)。例如，该操作可涉及移动底层对象，例如图35的图像3504。
响应于输入是指示笔输入的确定，使得不同于第一操作的第二操作结合用户界面来执行(框3706)。继续前一示例，指示笔116所提供的指示笔输入可用于在图像3504上书写而不是移动它。另外，应当容易明白，手势模块104也可采用各种其他考虑，如在其他对象附近、涉及输入的交互在用户界面中的“何处”发生、等等。
示例设备
图38示出了可被实现为参考图1和2来描述的任何类型的便携式和/或计算机设备来实现此处描述的手势技术的各实施例的示例设备3800的各个组件。设备3800包括允许设备数据3804(例如，所接收的数据、正被接收的数据、被排定广播的数据、数据的数据分组等)的有线和/或无线通信的通信设备3802。设备数据3804或其他设备内容可包括设备的配置设置、存储在设备上的媒体内容、和/或与设备的用户相关联的信息。存储在设备3800上的媒体内容可包括任何类型的音频、视频和/或图像数据。设备3800包括一个或多个数据输入3806，经由这些数据输入可接收任何类型的数据、媒体内容和/或输入，如用户可选择输入、消息、音乐、电视媒体内容、记录的视频内容、以及从任何内容和/或数据源接收的任何其他类型的音频、视频和/或图像数据。
设备3800还包括通信接口3808，其可被实现为串行和/或并行接口、无线接口、任何类型的网络接口、调制解调器、和任何其它类型的通信接口中的任一个或多个。通信接口3808提供了设备3800和通信网络之间的连接和/或通信链路，其他电子、计算和通信设备可通过通信网络与设备3800通信。
设备3800包括一个或多个处理器3810(例如，微处理器、控制器等中的任一个)，其处理各种计算机可执行指令来控制设备3800的操作和实现触摸拉入手势的各实施例。作为替换或补充，设备3800可以用结合概括地在3812处标识的处理和控制电路来实现的硬件、固件、或固定逻辑电路中的任何一个或组合来实现。尽管并未示出，但设备3800可包括将该设备内的各组件进行耦合的系统总线或数据传输系统。系统总线可包括不同总线结构中的任何一个或组合，如存储器总线或存储器控制器、外围总线、通用串行总线、和/或利用各种总线架构中的任一种的处理器或局部总线。
设备3800还可包括计算机可读介质3814，如一个或多个存储器组件，存储器组件的示例包括随机存取存储器(RAM)、非易失性存储器(例如，只读存储器(ROM)、闪存、EPROM、EEPROM等中的任一个或多个)、以及盘存储设备。盘存储设备可被实现为任何类型的磁性或光学存储设备，如硬盘驱动器、可记录和/或可重写紧致盘(CD)、任何类型的数字多功能盘(DVD)等等。设备3800还可包括大容量存储介质设备3816。
计算机可读介质3814提供数据存储机制以便存储设备数据3804、以及各种设备应用3818和与设备3800的各操作方面有关的任何其它类型的信息和/或数据。例如，操作系统3820可以用计算机可读介质3814作为计算机应用程序来维护并在处理器3810上执行。设备应用3818可包括设备管理器(例如，控制应用、软件应用、信号处理和控制模块、特定设备本机的代码、用于特定设备的硬件抽象层等等)。设备应用3818还包括实现此处所描述的手势技术的各实施例的任何系统组件或模块。在本例中，设备应用3818包括被示为软件模块和/或计算机应用程序的接口应用3822和手势捕捉驱动程序3824。手势捕捉驱动程序3824代表了用于提供与被配置成捕捉手势的设备(如触摸屏、跟踪垫、照相机等)的接口的软件。另选地或另外地，接口应用3822和手势捕捉驱动程序3824可被实现为硬件、软件、固件或其任意组合。另外，手势捕捉驱动程序3824可被配置成支持多个输入设备，如分别捕捉触摸和指示笔输入的单独设备。例如，设备可被配置成包括双显示设备，其中一个显示设备被配置成捕捉触摸输入而另一个被配置成捕捉指示笔输入。
设备3800还包括向音频系统3828提供音频数据和/或向显示系统3830提供视频数据的音频和/或视频输入-输出系统3826。音频系统3828和/或显示系统3830可包括处理、显示、和/或以其它方式呈现音频、视频、和图像数据的任何设备。视频信号和音频信号可经由RF(射频)链路、S-视频链路、复合视频链路、分量视频链路、DVI(数字视频接口)、模拟音频连接、或其它类似的通信链路来从设备3800传输给音频设备和/或传输给显示设备。在一个实施例中，音频系统3828和/或显示系统3830被实现为设备3800外部的组件。或者，音频系统3828和/或显示系统3830被实现为示例设备3800的集成组件。
结论
虽然已经用对结构特征和/或方法动作专用的语言描述了本发明，但是应该理解，在所附权利要求中定义的本发明不必限于所述的具体特征或动作。相反，这些具体特征和动作是作为实现所要求保护的本发明的示例形式而公开的。

Claims (20)

1.一种方法，包括：
将第一输入识别为选择由显示设备显示的对象；
将第二输入识别为画在所述对象的边界外的线，所述线被识别为在所述对象被选中时画出；以及
从所识别的第一和第二输入中标识画笔手势，所述画笔手势能用于使得所画出的线被显示为所述对象的对应的线的副本。
2.如权利要求1所述的方法，其特征在于，所述第一输入被识别为触摸输入，所述第二输入被识别为指示笔输入。
3.如权利要求1所述的方法，其特征在于：
所述第一输入是触摸输入或指示笔输入中的一个；以及
所述第二输入是所述触摸输入或所述指示笔输入中的另一个。
4.如权利要求1所述的方法，其特征在于，所述第一输入被识别为选择所述对象中的一点，且所述对应的线在所述点处开始从所述对象复制。
5.如权利要求1所述的方法，其特征在于，识别所述第二输入是对多条线执行的，且所述画笔手势能用于从所述对象复制对应的多条线，所述对应的多条线具有与所述第二输入的多条线的匹配的空间关系。
6.如权利要求1所述的方法，其特征在于，还包括使用照相机来检测所述第一和第二输入。
7.如权利要求1所述的方法，其特征在于，所述对象被识别为在用户界面中具有方向，且所述画笔手势还能用于使得所述对象被复制为具有所述方向。
8.如权利要求1所述的方法，其特征在于，所述画笔手势能用于使用所述对象来作为填充。
9.一种方法，包括：
将第一输入识别为选择由显示设备显示的对象；
将第二输入识别为画在所述对象的边界内的线，所述线被识别为在所述对象被选中时画出；以及
从所识别的第一和第二输入中标识复写手势，所述复写手势能用于引起穿过其来画所述线的所述对象的各部分的副本的显示。
10.如权利要求9所述的方法，其特征在于，穿过其来画所述线的所述对象的各部分的副本的显示被显示为出现在所述对象的显示下方。
11.如权利要求9所述的方法，其特征在于，穿过其来画所述线的所述对象的各部分的副本的显示被显示为出现在所述对象的显示上。
12.如权利要求9所述的方法，其特征在于，所述第一输入被识别为选择所述对象的两个点。
13.如权利要求12所述的方法，其特征在于，所述第一输入被识别为触摸输入，所述第二输入被识别为指示笔输入。
14.如权利要求9所述的方法，其特征在于，识别所述第二输入是对多条线执行的，且所述复写手势能用于从所述对象复制对应的多条线，所述对应的多条线被显示为具有与所述第二输入的多条线的匹配的空间关系。
15.如权利要求9所述的方法，其特征在于，所述对象被识别为在用户界面中具有方向，且所述复写手势还能用于使得所述对象被复制为具有所述方向。
16.如权利要求9所述的方法，其特征在于，所述复写手势能用于使用所述对象来作为填充。
17.一种方法，包括：
将第一输入识别为选择由显示设备显示的对象；
将第二输入识别为画在所述对象的边界外的框架，所述框架被识别为在所述对象被选中时画出；以及
从所识别的第一和第二输入中标识填充手势，所述填充手势能用于使用所述对象来填充在所述框架中。
18.如权利要求17所述的方法，其特征在于，所述第一输入被识别为选择所述对象的两个点。
19.如权利要求18所述的方法，其特征在于，所述第一输入被识别为触摸输入，所述第二输入被识别为指示笔输入。
20.如权利要求17所述的方法，其特征在于：
所述第一输入是触摸输入或指示笔输入中的一个；以及
所述第二输入是所述触摸输入或所述指示笔输入中的另一个。
CN2011100373889A 2010-01-28 2011-01-27 画笔、复写和填充手势 Pending CN102141887A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/695,959 2010-01-28
US12/695,959 US8261213B2 (en) 2010-01-28 2010-01-28 Brush, carbon-copy, and fill gestures

Publications (1)

Publication Number Publication Date
CN102141887A true CN102141887A (zh) 2011-08-03

Family

ID=44309929

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011100373889A Pending CN102141887A (zh) 2010-01-28 2011-01-27 画笔、复写和填充手势

Country Status (2)

Country Link
US (3) US8261213B2 (zh)
CN (1) CN102141887A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103197761A (zh) * 2013-03-28 2013-07-10 深圳泰山在线科技有限公司 手势识别方法及装置
CN103252087A (zh) * 2012-02-20 2013-08-21 富立业资讯有限公司 具有触控面板媒体的游戏控制方法及该游戏媒体
CN103399698A (zh) * 2013-07-31 2013-11-20 中国船舶重工集团公司第七〇九研究所 一种基于手绘草图和手势输入判断处理的笔式交互方法
CN103455242A (zh) * 2012-05-31 2013-12-18 宏达国际电子股份有限公司 屏幕画面裁切方法及装置
CN105706028A (zh) * 2013-11-19 2016-06-22 日立麦克赛尔株式会社 投影型影像显示装置
CN106201323A (zh) * 2016-09-30 2016-12-07 深圳市创凯智能股份有限公司 基于触摸屏的书写方法及装置
CN113515228A (zh) * 2021-06-09 2021-10-19 华为技术有限公司 一种虚拟标尺显示方法以及相关设备

Families Citing this family (142)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US8210331B2 (en) * 2006-03-06 2012-07-03 Hossein Estahbanati Keshtkar One-way pawl clutch with backlash reduction means and without biasing means
US8803474B2 (en) * 2009-03-25 2014-08-12 Qualcomm Incorporated Optimization of wireless power devices
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US8239785B2 (en) * 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures
US9411504B2 (en) 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110191704A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US20110191719A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Cut, Punch-Out, and Rip Gestures
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US20110209098A1 (en) * 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9274682B2 (en) 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US8473870B2 (en) * 2010-02-25 2013-06-25 Microsoft Corporation Multi-screen hold and drag gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9075522B2 (en) 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US8707174B2 (en) 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US20110209101A1 (en) * 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen pinch-to-pocket gesture
US8539384B2 (en) 2010-02-25 2013-09-17 Microsoft Corporation Multi-screen pinch and expand gestures
US20110209089A1 (en) * 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen object-hold and page-change gesture
US20120054667A1 (en) * 2010-08-31 2012-03-01 Blackboard Inc. Separate and simultaneous control of windows in windowing systems
JP2012058857A (ja) * 2010-09-06 2012-03-22 Sony Corp 情報処理装置、操作方法及び情報処理プログラム
JP5625642B2 (ja) * 2010-09-06 2014-11-19 ソニー株式会社 情報処理装置、データ分割方法及びデータ分割プログラム
CN108681424B (zh) 2010-10-01 2021-08-31 Z124 用户界面上的拖移手势
US8842080B2 (en) 2010-10-01 2014-09-23 Z124 User interface with screen spanning icon morphing
US20120218202A1 (en) 2010-10-01 2012-08-30 Sanjiv Sirpal Windows position control for phone applications
US8667425B1 (en) * 2010-10-05 2014-03-04 Google Inc. Touch-sensitive device scratch card user interface
US9152395B2 (en) * 2010-12-13 2015-10-06 Microsoft Technology Licensing, Llc Response to user input based on declarative mappings
US9342569B2 (en) * 2010-12-15 2016-05-17 Sap Se System and method of adding user interface element groups
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
US9423878B2 (en) 2011-01-06 2016-08-23 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9471145B2 (en) 2011-01-06 2016-10-18 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9766718B2 (en) 2011-02-28 2017-09-19 Blackberry Limited Electronic device and method of displaying information in response to input
US9465440B2 (en) 2011-01-06 2016-10-11 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9477311B2 (en) 2011-01-06 2016-10-25 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9015641B2 (en) 2011-01-06 2015-04-21 Blackberry Limited Electronic device and method of providing visual notification of a received communication
US20120180001A1 (en) * 2011-01-06 2012-07-12 Research In Motion Limited Electronic device and method of controlling same
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
TW201303655A (zh) * 2011-07-13 2013-01-16 Asustek Comp Inc 無線傳輸觸控筆與觸控顯示系統
US9727227B2 (en) * 2011-07-28 2017-08-08 Microsoft Technology Licensing, Llc Multi-touch remoting
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US9495012B2 (en) 2011-09-27 2016-11-15 Z124 Secondary single screen mode activation through user interface activation
TW201316184A (zh) * 2011-10-14 2013-04-16 Kdan Mobile Software Ltd 電子裝置區塊擷取及貼覆之電腦程式產品
TW201319921A (zh) * 2011-11-07 2013-05-16 Benq Corp 觸控螢幕畫面控制方法及觸控螢幕畫面顯示方法
KR20130061510A (ko) * 2011-12-01 2013-06-11 삼성전자주식회사 디지털 영상 처리장치 및 이를 포함하는 디지털 촬영장치
US9070160B2 (en) * 2011-12-15 2015-06-30 Nike, Inc. Customized design for an article of footwear
US9058168B2 (en) * 2012-01-23 2015-06-16 Blackberry Limited Electronic device and method of controlling a display
KR20150127785A (ko) * 2012-03-20 2015-11-18 삼성전자주식회사 휴대단말기의 이메일작성 장치 및 방법
US9268476B2 (en) * 2012-05-02 2016-02-23 Sap Se Drag and drop interaction paradigm with image swap
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
KR101670570B1 (ko) 2012-05-09 2016-10-28 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
CN104487929B (zh) 2012-05-09 2018-08-17 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169870A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for transitioning between display states in response to gesture
WO2013169843A1 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP2847662B1 (en) 2012-05-09 2020-02-19 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
US9223489B2 (en) * 2012-06-13 2015-12-29 Adobe Systems Incorporated Method and apparatus for gesture based copying of attributes
US9164673B2 (en) * 2012-07-16 2015-10-20 Microsoft Technology Licensing, Llc Location-dependent drag and drop UI
JP6080461B2 (ja) * 2012-10-01 2017-02-15 キヤノン株式会社 操作受付装置及び方法、並びにプログラム
US20150212647A1 (en) 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US9589538B2 (en) 2012-10-17 2017-03-07 Perceptive Pixel, Inc. Controlling virtual objects
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
KR101990039B1 (ko) * 2012-11-30 2019-06-18 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9904414B2 (en) * 2012-12-10 2018-02-27 Seiko Epson Corporation Display device, and method of controlling display device
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
EP2912542B1 (en) 2012-12-29 2022-07-13 Apple Inc. Device and method for forgoing generation of tactile output for a multi-contact gesture
EP3564806B1 (en) 2012-12-29 2024-02-21 Apple Inc. Device, method and graphical user interface for determining whether to scroll or select contents
KR101958517B1 (ko) 2012-12-29 2019-03-14 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
CN105264479B (zh) 2012-12-29 2018-12-25 苹果公司 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
JP6091525B2 (ja) * 2013-01-04 2017-03-08 株式会社Ｕｅｉ 情報処理装置及び情報入力制御プログラム
KR101984592B1 (ko) * 2013-01-04 2019-05-31 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
EP2763019A1 (en) * 2013-01-30 2014-08-06 BlackBerry Limited Stylus based object modification on a touch-sensitive display
US9075464B2 (en) 2013-01-30 2015-07-07 Blackberry Limited Stylus based object modification on a touch-sensitive display
US20140245195A1 (en) * 2013-02-25 2014-08-28 International Business Machines Corporation Duplicating graphical widgets
US9288471B1 (en) * 2013-02-28 2016-03-15 Amazon Technologies, Inc. Rotatable imaging assembly for providing multiple fields of view
JP5921469B2 (ja) * 2013-03-11 2016-05-24 株式会社東芝 情報処理装置、クラウドプラットフォーム、情報処理方法およびそのプログラム
US9715282B2 (en) * 2013-03-29 2017-07-25 Microsoft Technology Licensing, Llc Closing, starting, and restarting applications
US9152321B2 (en) * 2013-05-03 2015-10-06 Barnes & Noble College Booksellers, Llc Touch sensitive UI technique for duplicating content
US10481769B2 (en) * 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
JP6303314B2 (ja) 2013-07-31 2018-04-04 ブラザー工業株式会社 プログラムおよび情報処理装置
KR101444091B1 (ko) 2013-08-06 2014-09-26 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN103558978A (zh) * 2013-10-17 2014-02-05 深圳市同洲电子股份有限公司 一种截取图像的方法、装置及系统
WO2015068872A1 (en) * 2013-11-08 2015-05-14 Lg Electronics Inc. Electronic device and method for controlling of the same
JP2015115682A (ja) * 2013-12-10 2015-06-22 セイコーエプソン株式会社 画像表示装置、プロジェクター、および画像表示装置の制御方法
US20150227166A1 (en) * 2014-02-13 2015-08-13 Samsung Electronics Co., Ltd. User terminal device and displaying method thereof
KR102256388B1 (ko) * 2014-02-17 2021-05-26 삼성전자 주식회사 전자장치에서 일기 서비스를 제공하는 방법 및 장치
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
US9990059B2 (en) 2014-05-23 2018-06-05 Microsoft Technology Licensing, Llc Ink modes
KR101631966B1 (ko) * 2014-06-19 2016-06-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9753620B2 (en) 2014-08-01 2017-09-05 Axure Software Solutions, Inc. Method, system and computer program product for facilitating the prototyping and previewing of dynamic interactive graphical design widget state transitions in an interactive documentation environment
US20160048318A1 (en) * 2014-08-15 2016-02-18 Microsoft Technology Licensing, Llc Detecting selection of digital ink
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9965445B2 (en) * 2015-08-06 2018-05-08 FiftyThree, Inc. Systems and methods for gesture-based formatting
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
CN105630279A (zh) * 2015-09-30 2016-06-01 宇龙计算机通信科技(深圳)有限公司 一种快捷操作程序处理方法及系统
JP2017076207A (ja) * 2015-10-14 2017-04-20 株式会社リコー 画像処理装置及び画像処理システム
US10684758B2 (en) 2017-02-20 2020-06-16 Microsoft Technology Licensing, Llc Unified system for bimanual interactions
US10558341B2 (en) 2017-02-20 2020-02-11 Microsoft Technology Licensing, Llc Unified system for bimanual interactions on flexible representations of content
US10429954B2 (en) 2017-05-31 2019-10-01 Microsoft Technology Licensing, Llc Multi-stroke smart ink gesture language
US10895954B2 (en) * 2017-06-02 2021-01-19 Apple Inc. Providing a graphical canvas for handwritten input
JP6477857B2 (ja) * 2017-12-26 2019-03-06 ブラザー工業株式会社 プログラムおよび情報処理装置
US10871886B2 (en) * 2018-05-31 2020-12-22 Apple Inc. Device, method, and graphical user interface for moving drawing objects
WO2020251385A1 (en) * 2019-06-14 2020-12-17 Ringcentral, Inc., (A Delaware Corporation) System and method for capturing presentation gestures
CN111459369B (zh) * 2020-04-13 2021-07-20 深圳康佳电子科技有限公司 一种界面元素的筛选方法、智能终端及存储介质
US11119652B1 (en) * 2020-05-05 2021-09-14 Huawei Technologies Co., Ltd. Using a stylus to modify display layout of touchscreen displays
US11062493B1 (en) * 2020-09-15 2021-07-13 Adobe Inc. Symmetry axis digital content generation system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1263302A (zh) * 2000-03-13 2000-08-16 中国科学院软件研究所 基于笔和手势的文稿编辑技术
CN101599002A (zh) * 2008-06-04 2009-12-09 佳能株式会社 用户接口的控制方法和信息处理装置

Family Cites Families (415)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4686332A (en) 1986-06-26 1987-08-11 International Business Machines Corporation Combined finger touch and stylus detection system for use on the viewing surface of a visual display device
US4843538A (en) 1985-04-30 1989-06-27 Prometrix Corporation Multi-level dynamic menu which suppresses display of items previously designated as non-selectable
US4868912A (en) 1986-11-26 1989-09-19 Digital Electronics Infrared touch panel
US6167439A (en) 1988-05-27 2000-12-26 Kodak Limited Data retrieval, manipulation and transmission with facsimile images
US5231578A (en) 1988-11-01 1993-07-27 Wang Laboratories, Inc. Apparatus for document annotation and manipulation using images from a window source
US5252951A (en) 1989-04-28 1993-10-12 International Business Machines Corporation Graphical user interface with gesture recognition in a multiapplication environment
US5237647A (en) * 1989-09-15 1993-08-17 Massachusetts Institute Of Technology Computer aided drawing in three dimensions
US5898434A (en) 1991-05-15 1999-04-27 Apple Computer, Inc. User interface system having programmable user interface elements
JPH0736142B2 (ja) 1991-10-10 1995-04-19 インターナショナル・ビジネス・マシーンズ・コーポレイション 移動指示手段の運動停止を認識する方法および情報処理装置
US5349658A (en) 1991-11-01 1994-09-20 Rourke Thomas C O Graphical user interface
US5351995A (en) 1992-01-29 1994-10-04 Apple Computer, Inc. Double-sided, reversible electronic paper
US5661773A (en) 1992-03-19 1997-08-26 Wisconsin Alumni Research Foundation Interface for radiation therapy machine
US5821930A (en) 1992-08-23 1998-10-13 U S West, Inc. Method and system for generating a working window in a computer system
US6097392A (en) 1992-09-10 2000-08-01 Microsoft Corporation Method and system of altering an attribute of a graphic object in a pen environment
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
JPH06282368A (ja) 1993-02-01 1994-10-07 Wacom Co Ltd 情報処理装置の位置情報入力システム
DE4302991A1 (de) 1993-02-03 1994-08-04 Basf Ag Multimetalloxidmassen
US5696915A (en) 1993-03-03 1997-12-09 Apple Computer, Inc. Method and apparatus for linking routines for different contexts
EP0622722B1 (en) 1993-04-30 2002-07-17 Xerox Corporation Interactive copying system
JP2955149B2 (ja) 1993-05-11 1999-10-04 グンゼ株式会社 タッチパネルの座標検出装置
DE69432199T2 (de) 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
US5583984A (en) 1993-06-11 1996-12-10 Apple Computer, Inc. Computer system with graphical user interface including automated enclosures
US5497776A (en) 1993-08-05 1996-03-12 Olympus Optical Co., Ltd. Ultrasonic image diagnosing apparatus for displaying three-dimensional image
US5596697A (en) 1993-09-30 1997-01-21 Apple Computer, Inc. Method for routing items within a computer system
US5664133A (en) 1993-12-13 1997-09-02 Microsoft Corporation Context sensitive menu system/menu behavior
EP0667567B1 (en) 1993-12-30 2001-10-17 Xerox Corporation Apparatus and method for supporting the implicit structure of freeform lists, outlines, text, tables, and diagrams in a gesture-based input system and editing system
US5491783A (en) 1993-12-30 1996-02-13 International Business Machines Corporation Method and apparatus for facilitating integrated icon-based operations in a data processing system
US5555369A (en) 1994-02-14 1996-09-10 Apple Computer, Inc. Method of creating packages for a pointer-based computer system
JPH07281810A (ja) 1994-04-02 1995-10-27 Wacom Co Ltd マルチデバイス入力システムを有するコンピュータシステム
GB9422911D0 (en) 1994-11-14 1995-01-04 Moonstone Technology Ltd Capacitive touch detectors
US5664128A (en) 1995-02-23 1997-09-02 Apple Computer, Inc. Object storage apparatus for use with data sets in computer applications
JPH0926769A (ja) 1995-07-10 1997-01-28 Hitachi Ltd 画像表示装置
US5694150A (en) 1995-09-21 1997-12-02 Elo Touchsystems, Inc. Multiuser/multi pointing device graphical user interface system
US6029214A (en) 1995-11-03 2000-02-22 Apple Computer, Inc. Input tablet system with user programmable absolute coordinate mode and relative coordinate mode segments
US5777596A (en) 1995-11-13 1998-07-07 Symbios, Inc. Touch sensitive flat panel display
US5761485A (en) 1995-12-01 1998-06-02 Munyan; Daniel E. Personal electronic book system
JPH10192A (ja) 1996-04-15 1998-01-06 Olympus Optical Co Ltd 超音波画像診断装置
US5784061A (en) 1996-06-26 1998-07-21 Xerox Corporation Method and apparatus for collapsing and expanding selected regions on a work space of a computer controlled display system
US5969720A (en) 1997-03-07 1999-10-19 International Business Machines Corporation Data processing system and method for implementing an informative container for a file system
CN1326564C (zh) 1997-04-01 2007-07-18 科里克萨有限公司 单磷酰基脂质a的水性免疫佐剂组合物
US6948173B1 (en) 1997-08-04 2005-09-20 Fred Steven Isom Method of sequencing computer controlled tasks based on the relative spatial location of task objects in a directional field
KR19990015738A (ko) 1997-08-08 1999-03-05 윤종용 터치패드 입력 제어기능을 갖는 휴대형 컴퓨터
US5943052A (en) 1997-08-12 1999-08-24 Synaptics, Incorporated Method and apparatus for scroll bar control
US6920619B1 (en) 1997-08-28 2005-07-19 Slavoljub Milekic User interface for removing an object from a display
WO1999028811A1 (en) 1997-12-04 1999-06-10 Northern Telecom Limited Contextual gesture interface
US6037937A (en) 1997-12-04 2000-03-14 Nortel Networks Corporation Navigation tool for graphical user interface
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US20010047263A1 (en) 1997-12-18 2001-11-29 Colin Donald Smith Multimodal user interface
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
EP1717682B1 (en) 1998-01-26 2017-08-16 Apple Inc. Method and apparatus for integrating manual input
US7800592B2 (en) 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US6639577B2 (en) 1998-03-04 2003-10-28 Gemstar-Tv Guide International, Inc. Portable information display device with ergonomic bezel
US6278443B1 (en) 1998-04-30 2001-08-21 International Business Machines Corporation Touch screen with random finger placement and rolling on screen to control the movement of information on-screen
US6239798B1 (en) 1998-05-28 2001-05-29 Sun Microsystems, Inc. Methods and apparatus for a window access panel
US6208331B1 (en) 1998-07-01 2001-03-27 Ericsson Inc. Cleaning touchscreens
US20020018051A1 (en) 1998-09-15 2002-02-14 Mona Singh Apparatus and method for moving objects on a touchscreen display
US6337698B1 (en) 1998-11-20 2002-01-08 Microsoft Corporation Pen-based interface for a notepad computer
US6246395B1 (en) 1998-12-17 2001-06-12 Hewlett-Packard Company Palm pressure rejection method and apparatus for touchscreens
US6507352B1 (en) 1998-12-23 2003-01-14 Ncr Corporation Apparatus and method for displaying a menu with an interactive retail terminal
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US6396523B1 (en) 1999-07-29 2002-05-28 Interlink Electronics, Inc. Home entertainment device remote control
US6459424B1 (en) 1999-08-10 2002-10-01 Hewlett-Packard Company Touch-sensitive input screen having regional sensitivity and resolution properties
US6957233B1 (en) 1999-12-07 2005-10-18 Microsoft Corporation Method and apparatus for capturing and rendering annotations for non-modifiable electronic content
US6992687B1 (en) 1999-12-07 2006-01-31 Microsoft Corporation Bookmarking and placemarking a displayed document in a computer system
JP4803883B2 (ja) 2000-01-31 2011-10-26 キヤノン株式会社 位置情報処理装置及びその方法及びそのプログラム。
US6859909B1 (en) 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
JP2001265523A (ja) 2000-03-21 2001-09-28 Sony Corp 情報入出力システム及び情報入出力方法、並びにプログラム記憶媒体
WO2002003189A1 (en) 2000-06-30 2002-01-10 Zinio Systems, Inc. System and method for encrypting, distributing and viewing electronic documents
JP2002055753A (ja) 2000-08-10 2002-02-20 Canon Inc 情報処理装置、機能一覧表表示方法、及び記憶媒体
EP1364362A1 (en) 2001-01-24 2003-11-26 Interlink Electronics, Inc. Game and home entertainment device remote control
US20020101457A1 (en) 2001-01-31 2002-08-01 Microsoft Corporation Bezel interface for small computing devices
US6883145B2 (en) 2001-02-15 2005-04-19 Denny Jaeger Arrow logic system for creating and operating control systems
US20020116421A1 (en) 2001-02-17 2002-08-22 Fox Harold L. Method and system for page-like display, formating and processing of computer generated information on networked computers
US6961912B2 (en) 2001-07-18 2005-11-01 Xerox Corporation Feedback mechanism for use with visual selection methods
SE0102648A0 (sv) 2001-08-02 2003-03-06 Lars Höidahl Arrangemang att utföra objekt-orienterad programmering
WO2003023595A1 (en) 2001-09-10 2003-03-20 Anoto Ab Method, computer program product and device for arranging coordinate areas relative to each other
US7085274B1 (en) 2001-09-19 2006-08-01 Juniper Networks, Inc. Context-switched multi-stream pipelined reorder engine
TW528981B (en) 2001-10-25 2003-04-21 Compal Electronics Inc Portable computer and related method for preventing input interruption by write-tracking input region
US7009599B2 (en) 2001-11-20 2006-03-07 Nokia Corporation Form factor for portable device
US6762752B2 (en) 2001-11-29 2004-07-13 N-Trig Ltd. Dual function input device and method
JP2003195998A (ja) 2001-12-26 2003-07-11 Canon Inc 情報処理装置及び情報処理装置の制御方法及び情報処理装置の制御プログラム及び記憶媒体
JP2003296015A (ja) 2002-01-30 2003-10-17 Casio Comput Co Ltd 電子機器
US20030179541A1 (en) 2002-03-21 2003-09-25 Peter Sullivan Double screen portable computer
US7158675B2 (en) 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
CA2390506C (en) 2002-06-12 2013-04-02 Smart Technologies Inc. System and method for recognizing connector gestures
US7023427B2 (en) 2002-06-28 2006-04-04 Microsoft Corporation Method and system for detecting multiple touches on a touch-sensitive screen
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US20090143141A1 (en) 2002-08-06 2009-06-04 Igt Intelligent Multiplayer Gaming System With Multi-Touch Display
US9756349B2 (en) 2002-12-10 2017-09-05 Sony Interactive Entertainment America Llc User interface, system and method for controlling a video stream
US20040117782A1 (en) 2002-12-16 2004-06-17 Tse-Win Lo Construction method of external links for software execution environment
US20040175764A1 (en) * 2003-01-06 2004-09-09 Hiroto Nishiyama Image processing apparatus, image processing program, recording medium, and image processing method
US7663605B2 (en) 2003-01-08 2010-02-16 Autodesk, Inc. Biomechanical user interface elements for pen-based computers
US7231609B2 (en) 2003-02-03 2007-06-12 Microsoft Corporation System and method for accessing remote screen content
CN100538292C (zh) 2003-02-10 2009-09-09 N-特莱格有限公司 数字化器的触摸检测
JP2004302785A (ja) * 2003-03-31 2004-10-28 Honda Motor Co Ltd 移動ロボットの画像送信装置
US7159189B2 (en) 2003-06-13 2007-01-02 Alphabase Systems, Inc. Method and system for controlling cascaded windows on a GUI desktop on a computer
JP4161814B2 (ja) 2003-06-16 2008-10-08 ソニー株式会社 入力方法および入力装置
KR100580245B1 (ko) 2003-06-26 2006-05-16 삼성전자주식회사 동시화면을 디스플레이 하는 장치 및 방법
JP2005026834A (ja) 2003-06-30 2005-01-27 Minolta Co Ltd 注釈付与装置および注釈付与プログラム
US8373660B2 (en) 2003-07-14 2013-02-12 Matt Pallakoff System and method for a portable multimedia client
KR100522940B1 (ko) 2003-07-25 2005-10-24 삼성전자주식회사 활성영역을 설정 가능한 터치스크린 시스템 및 그 제어방법
US20050076300A1 (en) 2003-10-02 2005-04-07 International Business Machines Corporation Block marker system
JP2005122271A (ja) 2003-10-14 2005-05-12 Sony Ericsson Mobilecommunications Japan Inc 携帯型電子装置
US20050101864A1 (en) 2003-10-23 2005-05-12 Chuan Zheng Ultrasound diagnostic imaging system and method for 3D qualitative display of 2D border tracings
US7532196B2 (en) 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
US7302650B1 (en) 2003-10-31 2007-11-27 Microsoft Corporation Intuitive tools for manipulating objects in a display
JP2005149279A (ja) 2003-11-18 2005-06-09 Matsushita Electric Ind Co Ltd 情報処理装置およびプログラム
TWI275041B (en) * 2003-12-10 2007-03-01 Univ Nat Chiao Tung System and method for constructing large-scaled drawings of similar objects
US7705908B2 (en) 2003-12-16 2010-04-27 Eastman Kodak Company Imaging method and system for determining camera operating parameter
JP4239090B2 (ja) 2004-01-08 2009-03-18 富士フイルム株式会社 ファイル管理プログラム
US20050162402A1 (en) 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US7620915B2 (en) 2004-02-13 2009-11-17 Ludwig Lester F Electronic document editing employing multiple cursors
US7197502B2 (en) 2004-02-18 2007-03-27 Friendly Polynomials, Inc. Machine-implemented activity management system using asynchronously shared activity data objects and journal data items
CA2557507A1 (en) 2004-02-25 2005-09-09 Xplore Technologies Corporation Apparatus providing multi-mode digital input
JP2007525761A (ja) 2004-02-27 2007-09-06 エヌ−トリグ リミテッド デジタイザシステムにおけるノイズ低減
JP4368378B2 (ja) 2004-04-27 2009-11-18 株式会社日立メディコ 画像描画装置及びその方法
US7383500B2 (en) * 2004-04-30 2008-06-03 Microsoft Corporation Methods and systems for building packages that contain pre-paginated documents
JP4148187B2 (ja) 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム
US7743348B2 (en) * 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
WO2006006173A2 (en) 2004-07-15 2006-01-19 N-Trig Ltd. Automatic switching for a dual mode digitizer
US7649524B2 (en) 2004-07-15 2010-01-19 N-Trig Ltd. Tracking window for a digitizer system
JP4405335B2 (ja) 2004-07-27 2010-01-27 株式会社ワコム 位置検出装置、及び、入力システム
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7728821B2 (en) * 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US7561146B1 (en) 2004-08-25 2009-07-14 Apple Inc. Method and apparatus to reject accidental contact on a touchpad
TWI261776B (en) 2004-09-22 2006-09-11 Hannstar Display Corp A reflective coding LCD and a reflective coding panel
US8106888B2 (en) 2004-10-01 2012-01-31 3M Innovative Properties Company Vibration sensing touch input device
US8456488B2 (en) 2004-10-06 2013-06-04 Apple Inc. Displaying digital images using groups, stacks, and version sets
US8169410B2 (en) 2004-10-20 2012-05-01 Nintendo Co., Ltd. Gesture inputs for a portable display device
US7454717B2 (en) 2004-10-20 2008-11-18 Microsoft Corporation Delimiters for selection-action pen gesture phrases
US20060092177A1 (en) 2004-10-30 2006-05-04 Gabor Blasko Input method and apparatus using tactile guidance and bi-directional segmented stroke
US7925996B2 (en) 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US7847789B2 (en) 2004-11-23 2010-12-07 Microsoft Corporation Reducing accidental touch-sensitive device activation
KR101984833B1 (ko) 2005-03-04 2019-06-03 애플 인크. 다기능 휴대용 장치
US7489324B2 (en) * 2005-03-07 2009-02-10 Vistaprint Technologies Limited Automated image processing
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
JP4603931B2 (ja) 2005-05-16 2010-12-22 任天堂株式会社 オブジェクト移動制御装置およびオブジェクト移動制御プログラム
US20060262105A1 (en) * 2005-05-18 2006-11-23 Microsoft Corporation Pen-centric polyline drawing tool
US20060262188A1 (en) 2005-05-20 2006-11-23 Oded Elyada System and method for detecting changes in an environment
US7338224B2 (en) 2005-06-03 2008-03-04 Microsoft Corporation Ergonomic keyboard apparatus
US7676767B2 (en) 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
WO2006137078A1 (en) 2005-06-20 2006-12-28 Hewlett-Packard Development Company, L.P. Method, article, apparatus and computer system for inputting a graphical object
US7734654B2 (en) 2005-08-16 2010-06-08 International Business Machines Corporation Method and system for linking digital pictures to electronic documents
JP2007058785A (ja) 2005-08-26 2007-03-08 Canon Inc 情報処理装置及び前記装置におけるドラグオブジェクトの操作方法
JP4394057B2 (ja) 2005-09-21 2010-01-06 アルプス電気株式会社 入力装置
CN100583013C (zh) 2005-09-23 2010-01-20 鸿富锦精密工业（深圳）有限公司 用户操作控制装置及其方法
US7728818B2 (en) 2005-09-30 2010-06-01 Nokia Corporation Method, device computer program and graphical user interface for user input of an electronic device
US7574628B2 (en) 2005-11-14 2009-08-11 Hadi Qassoudi Clickless tool
US7868874B2 (en) 2005-11-15 2011-01-11 Synaptics Incorporated Methods and systems for detecting a position-based attribute of an object using digital codes
US7636071B2 (en) 2005-11-30 2009-12-22 Hewlett-Packard Development Company, L.P. Providing information in a multi-screen device
US7786975B2 (en) 2005-12-23 2010-08-31 Apple Inc. Continuous scrolling list with acceleration
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
WO2007103631A2 (en) 2006-03-03 2007-09-13 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
JP5092255B2 (ja) 2006-03-09 2012-12-05 カシオ計算機株式会社 表示装置
US20070097096A1 (en) 2006-03-25 2007-05-03 Outland Research, Llc Bimodal user interface paradigm for touch screen devices
KR100672605B1 (ko) 2006-03-30 2007-01-24 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US20070236468A1 (en) 2006-03-30 2007-10-11 Apaar Tuli Gesture based device activation
US20100045705A1 (en) * 2006-03-30 2010-02-25 Roel Vertegaal Interaction techniques for flexible displays
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US20090278806A1 (en) 2008-05-06 2009-11-12 Matias Gonzalo Duarte Extended touch-sensitive control area for electronic device
US20070262951A1 (en) 2006-05-09 2007-11-15 Synaptics Incorporated Proximity sensor device and method with improved indication of adjustment
KR100897806B1 (ko) 2006-05-23 2009-05-15 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US8086971B2 (en) * 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7880728B2 (en) 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
US20080040692A1 (en) * 2006-06-29 2008-02-14 Microsoft Corporation Gesture input
CN101496404A (zh) 2006-07-31 2009-07-29 株式会社爱可信 电子设备、显示系统、显示方法以及程序
WO2008020446A1 (en) 2006-08-15 2008-02-21 N-Trig Ltd. Gesture detection for a digitizer
US7813774B2 (en) 2006-08-18 2010-10-12 Microsoft Corporation Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US7934156B2 (en) 2006-09-06 2011-04-26 Apple Inc. Deletion gestures on a portable multifunction device
US7831727B2 (en) 2006-09-11 2010-11-09 Apple Computer, Inc. Multi-content presentation of unassociated content types
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
WO2008034184A1 (en) 2006-09-22 2008-03-27 Rpo Pty Limited Waveguide configurations for optical touch systems
US20080084400A1 (en) 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
DE202007014957U1 (de) 2007-01-05 2007-12-27 Apple Inc., Cupertino Multimediakommunikationseinrichtung mit Berührungsbildschirm, der auf Gesten zur Steuerung, Manipulierung und Editierung von Mediendateien reagiert
US8970503B2 (en) 2007-01-05 2015-03-03 Apple Inc. Gestures for devices having one or more touch sensitive surfaces
US8963842B2 (en) 2007-01-05 2015-02-24 Visteon Global Technologies, Inc. Integrated hardware and software user interface
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US7978182B2 (en) 2007-01-07 2011-07-12 Apple Inc. Screen rotation gestures on a portable multifunction device
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US8607167B2 (en) 2007-01-07 2013-12-10 Apple Inc. Portable multifunction device, method, and graphical user interface for providing maps and directions
US10437459B2 (en) 2007-01-07 2019-10-08 Apple Inc. Multitouch data fusion
US8665225B2 (en) 2007-01-07 2014-03-04 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture
US20080168382A1 (en) 2007-01-07 2008-07-10 Louch John O Dashboards, Widgets and Devices
WO2008095139A2 (en) 2007-01-31 2008-08-07 Perceptive Pixel, Inc. Methods of interfacing with multi-point input devices and multi-point input systems employing interfacing techniques
US20080215962A1 (en) 2007-02-28 2008-09-04 Nokia Corporation Pc-metadata on backside of photograph
JP4973245B2 (ja) 2007-03-08 2012-07-11 富士ゼロックス株式会社 表示装置及びプログラム
US8347206B2 (en) 2007-03-15 2013-01-01 Microsoft Corporation Interactive image tagging
US7907141B2 (en) 2007-03-23 2011-03-15 Palo Alto Research Center Incorporated Methods and processes for recognition of electronic ink strokes
US20080249682A1 (en) 2007-04-06 2008-10-09 Visteon Global Technologies, Inc. Touch control bezel for display devices
US20080278481A1 (en) 2007-05-08 2008-11-13 Microsoft Corporation Photo generated 3-d navigable storefront
WO2008138030A1 (en) 2007-05-11 2008-11-20 Rpo Pty Limited User-defined enablement protocol
TWM325544U (en) 2007-05-15 2008-01-11 High Tech Comp Corp Electronic device with switchable user interface and electronic device with accessable touch operation
JP2008305087A (ja) 2007-06-06 2008-12-18 Toshiba Matsushita Display Technology Co Ltd 表示装置
JP2008305036A (ja) 2007-06-06 2008-12-18 Hitachi Displays Ltd タッチパネル付表示装置
US20090019188A1 (en) 2007-07-11 2009-01-15 Igt Processing input for computing systems based on the state of execution
CN101802747B (zh) 2007-07-19 2013-05-01 H·K·蔡 双屏展示笔记本计算机
WO2009018314A2 (en) * 2007-07-30 2009-02-05 Perceptive Pixel, Inc. Graphical user interface for large-scale, multi-user, multi-touch systems
US20090033632A1 (en) 2007-07-30 2009-02-05 Szolyga Thomas H Integrated touch pad and pen-based tablet input system
KR20090013927A (ko) 2007-08-03 2009-02-06 에스케이 텔레콤주식회사 전자책 뷰어화면 상에서의 메모 실행 방법 및 이에적용되는 장치
US20090054107A1 (en) 2007-08-20 2009-02-26 Synaptics Incorporated Handheld communication device and method for conference call initiation
US7778118B2 (en) 2007-08-28 2010-08-17 Garmin Ltd. Watch device having touch-bezel user interface
US7941758B2 (en) 2007-09-04 2011-05-10 Apple Inc. Animation of graphical objects
KR100837283B1 (ko) 2007-09-10 2008-06-11 (주)익스트라스탠다드 터치스크린을 구비한 휴대용 단말기
US8122384B2 (en) 2007-09-18 2012-02-21 Palo Alto Research Center Incorporated Method and apparatus for selecting an object within a user interface by performing a gesture
US20090074255A1 (en) 2007-09-18 2009-03-19 Motorola, Inc. Apparatus and method for capturing skin texture biometric in electronic devices
US20090079699A1 (en) 2007-09-24 2009-03-26 Motorola, Inc. Method and device for associating objects
US20090089739A1 (en) 2007-09-28 2009-04-02 Microsoft Corporation Intelligent editing of relational models
EP2045700A1 (en) 2007-10-04 2009-04-08 LG Electronics Inc. Menu display method for a mobile communication terminal
KR101386473B1 (ko) 2007-10-04 2014-04-18 엘지전자 주식회사 휴대 단말기 및 그 메뉴 표시 방법
KR100869557B1 (ko) 2007-10-18 2008-11-27 김종대 무체인 자전거용 동력전달장치
US20090203414A1 (en) 2007-10-23 2009-08-13 Tatarchenko Sergey A Action gaming method for interacting with moving and transforming objects
KR100930563B1 (ko) 2007-11-06 2009-12-09 엘지전자 주식회사 휴대 단말기 및 그 휴대 단말기의 방송채널 또는 방송채널 리스트 전환 방법
TW200921478A (en) 2007-11-06 2009-05-16 Giga Byte Comm Inc A picture-page scrolling control method of touch panel for hand-held electronic device and device thereof
US8294669B2 (en) 2007-11-19 2012-10-23 Palo Alto Research Center Incorporated Link target accuracy in touch-screen mobile devices by layout adjustment
KR101352994B1 (ko) 2007-12-10 2014-01-21 삼성전자 주식회사 적응형 온 스크린 키보드 제공 장치 및 그 제공 방법
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US8154523B2 (en) 2007-12-13 2012-04-10 Eastman Kodak Company Electronic device, display and touch-sensitive user interface
TWI358028B (en) 2007-12-25 2012-02-11 Htc Corp Electronic device capable of transferring object b
US8395584B2 (en) 2007-12-31 2013-03-12 Sony Corporation Mobile terminals including multiple user interfaces on different faces thereof configured to be used in tandem and related methods of operation
US20090167702A1 (en) 2008-01-02 2009-07-02 Nokia Corporation Pointing device detection
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
KR101505191B1 (ko) 2008-01-09 2015-03-20 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
CN101482790B (zh) 2008-01-09 2012-03-14 宏达国际电子股份有限公司 可于两显示元件上转移对象的电子装置及其控制方法
CN101939722A (zh) 2008-01-09 2011-01-05 智能技术Ulc公司 多页面组织和操纵电子文档
US8803797B2 (en) 2008-01-18 2014-08-12 Microsoft Corporation Input through sensing of user-applied forces
EP3432656B1 (en) 2008-01-30 2021-04-14 Google LLC Notification of mobile device events
KR100981268B1 (ko) 2008-02-15 2010-09-10 한국표준과학연구원 촉각센서를 이용한 터치스크린장치
US8555207B2 (en) 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
TW200943140A (en) 2008-04-02 2009-10-16 Asustek Comp Inc Electronic apparatus and control method thereof
US8289289B2 (en) 2008-04-03 2012-10-16 N-trig, Ltd. Multi-touch and single touch detection
KR20090106755A (ko) 2008-04-07 2009-10-12 주식회사 케이티테크 메모 입력 기능을 제공하는 방법, 단말 및 그 방법을실행하는 프로그램이 기록된 기록매체
US8788967B2 (en) 2008-04-10 2014-07-22 Perceptive Pixel, Inc. Methods of interfacing with multi-input devices and multi-input display systems employing interfacing techniques
KR101012305B1 (ko) 2008-04-22 2011-02-08 삼성전자주식회사 터치 입력장치의 동작 방법 및 이를 이용하는 휴대 단말기
US20090276701A1 (en) 2008-04-30 2009-11-05 Nokia Corporation Apparatus, method and computer program product for facilitating drag-and-drop of an object
TWI364699B (en) 2008-05-07 2012-05-21 Acer Inc Synchronous operating method of remote systems and synchronous operating method of local touch screens
US20090282332A1 (en) 2008-05-12 2009-11-12 Nokia Corporation Apparatus, method and computer program product for selecting multiple items using multi-touch
US20090284478A1 (en) 2008-05-15 2009-11-19 Microsoft Corporation Multi-Contact and Single-Contact Input
CN101581992A (zh) 2008-05-16 2009-11-18 鸿富锦精密工业（深圳）有限公司 触摸屏装置及其输入方法
US8375336B2 (en) 2008-05-23 2013-02-12 Microsoft Corporation Panning content utilizing a drag operation
TW200951783A (en) 2008-06-06 2009-12-16 Acer Inc Electronic device and controlling method thereof
CN101566865A (zh) 2008-06-08 2009-10-28 许文武 多工作模式双屏笔记本电脑系统及操作控制方法
EP2304588A4 (en) 2008-06-11 2011-12-21 Teliris Inc SYSTEM, METHOD AND DEVICE FOR SURFACE COMPUTING COLLABORATION
US20090319893A1 (en) 2008-06-24 2009-12-24 Nokia Corporation Method and Apparatus for Assigning a Tactile Cue
CN101615102A (zh) 2008-06-26 2009-12-30 鸿富锦精密工业（深圳）有限公司 基于触摸屏的输入方法
US20090327975A1 (en) 2008-06-27 2009-12-31 Stedman Roy W Multi-Touch Sorting Gesture
KR20100001490A (ko) 2008-06-27 2010-01-06 주식회사 케이티테크 휴대용 단말기의 동영상 재생시 메모 입력 방법 및 이를수행하는 휴대용 단말기
US8245156B2 (en) 2008-06-28 2012-08-14 Apple Inc. Radial menu selection
JP2010015238A (ja) 2008-07-01 2010-01-21 Sony Corp 情報処理装置、及び補助情報の表示方法
US20110115735A1 (en) 2008-07-07 2011-05-19 Lev Jeffrey A Tablet Computers Having An Internal Antenna
JP2010019643A (ja) 2008-07-09 2010-01-28 Toyota Motor Corp 情報端末、ナビゲーション装置、選択肢表示方法
JP5606669B2 (ja) 2008-07-16 2014-10-15 任天堂株式会社 ３次元パズルゲーム装置、ゲームプログラム、３次元パズルゲームシステムおよびゲーム制御方法
US8159455B2 (en) * 2008-07-18 2012-04-17 Apple Inc. Methods and apparatus for processing combinations of kinematical inputs
JP5670016B2 (ja) 2008-07-22 2015-02-18 レノボ・イノベーションズ・リミテッド（香港） 表示装置、通信端末、表示装置の表示方法、および表示制御用プログラム
US8390577B2 (en) 2008-07-25 2013-03-05 Intuilab Continuous recognition of multi-touch gestures
JP5219929B2 (ja) 2008-07-31 2013-06-26 ソニー株式会社 情報処理装置および方法、並びにプログラム
US8913991B2 (en) 2008-08-15 2014-12-16 At&T Intellectual Property I, L.P. User identification in cell phones based on skin contact
US20100039392A1 (en) 2008-08-15 2010-02-18 At&T Intellectual Property I, L.P. Conductive fingernail
US8924892B2 (en) * 2008-08-22 2014-12-30 Fuji Xerox Co., Ltd. Multiple selection on devices with many gestures
KR101500425B1 (ko) 2008-08-27 2015-03-09 삼성디스플레이 주식회사 터치 스크린 표시 장치
US20100051355A1 (en) 2008-08-31 2010-03-04 Kai-Ti Yang Capacitive touch panel
KR101529916B1 (ko) 2008-09-02 2015-06-18 엘지전자 주식회사 휴대 단말기
KR100969790B1 (ko) 2008-09-02 2010-07-15 엘지전자 주식회사 이동단말기 및 그 컨텐츠 합성방법
CN102197350B (zh) 2008-09-10 2014-12-03 Opera软件股份公司 用于在用户代理中提供手指触摸层的方法和设备
WO2010030984A1 (en) * 2008-09-12 2010-03-18 Gesturetek, Inc. Orienting a displayed element relative to a user
KR101548958B1 (ko) 2008-09-18 2015-09-01 삼성전자주식회사 휴대단말기의 터치스크린 동작 제어 방법 및 장치
US8600446B2 (en) 2008-09-26 2013-12-03 Htc Corporation Mobile device interface with dual windows
US8547347B2 (en) 2008-09-26 2013-10-01 Htc Corporation Method for generating multiple windows frames, electronic device thereof, and computer program product using the method
US8284170B2 (en) 2008-09-30 2012-10-09 Apple Inc. Touch screen device, method, and graphical user interface for moving on-screen objects without using a cursor
JP5362307B2 (ja) 2008-09-30 2013-12-11 富士フイルム株式会社 ドラッグアンドドロップ制御装置、方法、及びプログラム、並びにコンピュータ端末
US9250797B2 (en) 2008-09-30 2016-02-02 Verizon Patent And Licensing Inc. Touch gesture interface apparatuses, systems, and methods
KR101586627B1 (ko) 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
KR101503835B1 (ko) 2008-10-13 2015-03-18 삼성전자주식회사 멀티터치를 이용한 오브젝트 관리 방법 및 장치
JP4683110B2 (ja) 2008-10-17 2011-05-11 ソニー株式会社 表示装置、表示方法及びプログラム
US20100107067A1 (en) 2008-10-27 2010-04-29 Nokia Corporation Input on touch based user interfaces
JP5066055B2 (ja) 2008-10-28 2012-11-07 富士フイルム株式会社 画像表示装置、画像表示方法およびプログラム
US9122356B2 (en) 2008-10-30 2015-09-01 Dell Products L.P. Virtual periphery display buttons
KR20100050103A (ko) 2008-11-05 2010-05-13 엘지전자 주식회사 맵 상에서의 3차원 개체 제어방법과 이를 이용한 이동 단말기
US20140033134A1 (en) 2008-11-15 2014-01-30 Adobe Systems Incorporated Various gesture controls for interactions in between devices
US9213450B2 (en) 2008-11-17 2015-12-15 Tpk Touch Solutions Inc. Touch sensor
CN201298220Y (zh) 2008-11-26 2009-08-26 陈伟山 基于lcd液晶显示屏的红外反射多点触摸装置
KR101544475B1 (ko) 2008-11-28 2015-08-13 엘지전자 주식회사 터치를 통한 입출력 제어
JP5268595B2 (ja) 2008-11-28 2013-08-21 ソニー株式会社 画像処理装置、画像表示方法及び画像表示プログラム
US8368658B2 (en) 2008-12-02 2013-02-05 At&T Mobility Ii Llc Automatic soft key adaptation with left-right hand edge sensing
US20100185949A1 (en) 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
US8749497B2 (en) * 2008-12-12 2014-06-10 Apple Inc. Multi-touch shape drawing
TWI381305B (zh) 2008-12-25 2013-01-01 Compal Electronics Inc 使用者介面的顯示與操作方法以及電子裝置
US9864513B2 (en) 2008-12-26 2018-01-09 Hewlett-Packard Development Company, L.P. Rendering a virtual input device upon detection of a finger movement across a touch-sensitive display
US20100164878A1 (en) 2008-12-31 2010-07-01 Nokia Corporation Touch-click keypad
US8407606B1 (en) 2009-01-02 2013-03-26 Perceptive Pixel Inc. Allocating control among inputs concurrently engaging an object displayed on a multi-touch device
US8330733B2 (en) 2009-01-21 2012-12-11 Microsoft Corporation Bi-modal multiscreen interactivity
US8279184B2 (en) 2009-01-27 2012-10-02 Research In Motion Limited Electronic device including a touchscreen and method
JP4771183B2 (ja) 2009-01-30 2011-09-14 株式会社デンソー 操作装置
US8219937B2 (en) 2009-02-09 2012-07-10 Microsoft Corporation Manipulation of graphical elements on graphical user interface via multi-touch gestures
US8643628B1 (en) 2012-10-14 2014-02-04 Neonode Inc. Light-based proximity detection system and user interface
TWI370473B (en) 2009-02-20 2012-08-11 Wistron Corp Switch structure mounted on the sidewall of circuit boards for electronic devices and manufacturing methods of the circuit boards thereof
WO2010096761A1 (en) 2009-02-23 2010-08-26 Provo Craft And Novelty, Inc. Controller device
US8605960B2 (en) 2009-03-02 2013-12-10 Avago Technologies General Ip (Singapore) Pte. Ltd. Fingerprint sensing device
US9250788B2 (en) 2009-03-18 2016-02-02 IdentifyMine, Inc. Gesture handlers of a gesture engine
US20100251112A1 (en) 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
US8134539B2 (en) 2009-03-30 2012-03-13 Eastman Kodak Company Digital picture frame having near-touch and true-touch
US8370762B2 (en) 2009-04-10 2013-02-05 Cellco Partnership Mobile functional icon use in operational area in touch panel devices
JP5229083B2 (ja) 2009-04-14 2013-07-03 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US8212788B2 (en) 2009-05-07 2012-07-03 Microsoft Corporation Touch input to modulate changeable parameter
TW201040823A (en) 2009-05-11 2010-11-16 Au Optronics Corp Multi-touch method for resistive touch panel
US8169418B2 (en) 2009-05-12 2012-05-01 Sony Ericsson Mobile Communications Ab Displays for electronic devices that detect and respond to the size and/or angular orientation of user input objects
CN101551728A (zh) 2009-05-21 2009-10-07 友达光电股份有限公司 电阻式触控式面板的多点触控方法
US8269736B2 (en) 2009-05-22 2012-09-18 Microsoft Corporation Drop target gestures
KR101587211B1 (ko) 2009-05-25 2016-01-20 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US8441777B2 (en) 2009-05-29 2013-05-14 Avx Corporation Solid electrolytic capacitor with facedown terminations
US8549432B2 (en) 2009-05-29 2013-10-01 Apple Inc. Radial menus
US9405456B2 (en) 2009-06-08 2016-08-02 Xerox Corporation Manipulation of displayed objects by virtual magnetism
CN101576789B (zh) 2009-06-16 2011-07-27 广东威创视讯科技股份有限公司 拼墙定位系统中跨屏书写笔画属性的保持和更改方法
SG177155A1 (en) 2009-06-16 2012-01-30 Intel Corp Camera applications in a handheld device
US9013423B2 (en) 2009-06-16 2015-04-21 Intel Corporation Adaptive virtual keyboard for handheld device
US8711108B2 (en) 2009-06-19 2014-04-29 Apple Inc. Direct connect single layer touch panel
US20110012841A1 (en) 2009-07-20 2011-01-20 Teh-Zheng Lin Transparent touch panel capable of being arranged before display of electronic device
US9152317B2 (en) 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
JP5371626B2 (ja) 2009-08-18 2013-12-18 キヤノン株式会社 表示制御装置、表示制御装置の制御方法、プログラム及び記憶媒体
US20110055753A1 (en) 2009-08-31 2011-03-03 Horodezky Samuel J User interface methods providing searching functionality
US9262063B2 (en) 2009-09-02 2016-02-16 Amazon Technologies, Inc. Touch-screen user interface
US9274699B2 (en) 2009-09-03 2016-03-01 Obscura Digital User interface for a large scale multi-user, multi-touch system
US20110072036A1 (en) 2009-09-23 2011-03-24 Microsoft Corporation Page-based content storage system
JP5859447B2 (ja) 2009-10-28 2016-02-10 イー インク コーポレイション タッチセンサを有する電気光学ディスプレイ
US20110117526A1 (en) 2009-11-16 2011-05-19 Microsoft Corporation Teaching gesture initiation with registration posture guides
US20110126094A1 (en) 2009-11-24 2011-05-26 Horodezky Samuel J Method of modifying commands on a touch screen user interface
US20110143769A1 (en) 2009-12-16 2011-06-16 Microsoft Corporation Dual display mobile communication device
JP5454133B2 (ja) 2009-12-25 2014-03-26 富士通株式会社 検知情報補正装置、可搬型装置、検知情報補正方法、およびコンピュータプログラム
US20110167336A1 (en) * 2010-01-04 2011-07-07 Hit Development Llc Gesture-based web site design
US20110167092A1 (en) 2010-01-06 2011-07-07 Baskaran Subramaniam Image caching in a handheld device
US8432368B2 (en) 2010-01-06 2013-04-30 Qualcomm Incorporated User interface methods and systems for providing force-sensitive input
US8525839B2 (en) 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
US9542097B2 (en) 2010-01-13 2017-01-10 Lenovo (Singapore) Pte. Ltd. Virtual touchpad for a touch device
JP2011150413A (ja) 2010-01-19 2011-08-04 Sony Corp 情報処理装置、操作入力方法及び操作入力プログラム
US8239785B2 (en) 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US9411504B2 (en) 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US20110185320A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Cross-reference Gestures
US20110185299A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110191704A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US20110191719A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Cut, Punch-Out, and Rip Gestures
US20110199386A1 (en) 2010-02-12 2011-08-18 Honeywell International Inc. Overlay feature to provide user assistance in a multi-touch interactive display environment
US20110231796A1 (en) 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
US9274682B2 (en) 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US20110209098A1 (en) 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US20110209089A1 (en) 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen object-hold and page-change gesture
US8473870B2 (en) 2010-02-25 2013-06-25 Microsoft Corporation Multi-screen hold and drag gesture
US8707174B2 (en) 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US20110209058A1 (en) 2010-02-25 2011-08-25 Microsoft Corporation Multi-screen hold and tap gesture
US20110209101A1 (en) 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen pinch-to-pocket gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9075522B2 (en) 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US8539384B2 (en) 2010-02-25 2013-09-17 Microsoft Corporation Multi-screen pinch and expand gestures
US20110242039A1 (en) 2010-03-30 2011-10-06 Garmin Ltd. Display module for a touchscreen display
US20110242138A1 (en) 2010-03-31 2011-10-06 Tribble Guy L Device, Method, and Graphical User Interface with Concurrent Virtual Keyboards
US8384683B2 (en) 2010-04-23 2013-02-26 Tong Luo Method for user input from the back panel of a handheld computerized device
US9946459B2 (en) 2010-05-28 2018-04-17 Lenovo (Singapore) Pte. Ltd. Systems and methods for determining intentional touch screen contact
US20110291964A1 (en) 2010-06-01 2011-12-01 Kno, Inc. Apparatus and Method for Gesture Control of a Dual Panel Electronic Device
US8674959B2 (en) 2010-06-28 2014-03-18 Intel Corporation Dynamic bezel for a mobile device
USD631043S1 (en) 2010-09-12 2011-01-18 Steven Kell Electronic dual screen personal tablet computer with integrated stylus
EP2434368B1 (en) 2010-09-24 2018-08-01 BlackBerry Limited Method for conserving power on a portable electronic device and a portable electronic device configured for the same
EP2437153A3 (en) 2010-10-01 2016-10-05 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
US8495522B2 (en) 2010-10-18 2013-07-23 Nokia Corporation Navigation in a display
US20120131454A1 (en) 2010-11-24 2012-05-24 Siddharth Shah Activating an advertisement by performing gestures on the advertisement
US9244545B2 (en) 2010-12-17 2016-01-26 Microsoft Technology Licensing, Llc Touch and stylus discrimination and rejection for contact sensitive computing devices
US8660978B2 (en) 2010-12-17 2014-02-25 Microsoft Corporation Detecting and responding to unintentional contact with a computing device
JP2012133453A (ja) 2010-12-20 2012-07-12 Sony Corp 情報処理装置、情報処理方法及びプログラム
US20120212445A1 (en) 2011-02-23 2012-08-23 Nokia Corporation Display With Rear Side Capacitive Touch Sensing
US9898122B2 (en) 2011-05-12 2018-02-20 Google Technology Holdings LLC Touch-screen device and method for detecting and ignoring false touch inputs near an edge of the touch-screen device
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
TWI456434B (zh) 2011-05-31 2014-10-11 Compal Electronics Inc 具有觸控輸入系統之電子裝置
US8640047B2 (en) 2011-06-01 2014-01-28 Micorsoft Corporation Asynchronous handling of a user interface manipulation
US20120311476A1 (en) 2011-06-02 2012-12-06 Alan Stirling Campbell System and method for providing an adaptive touch screen keyboard
US8719719B2 (en) 2011-06-17 2014-05-06 Google Inc. Graphical icon presentation
US8810533B2 (en) 2011-07-20 2014-08-19 Z124 Systems and methods for receiving gesture inputs spanning multiple input devices
US20130038564A1 (en) 2011-08-10 2013-02-14 Google Inc. Touch Sensitive Device Having Dynamic User Interface
US8804347B2 (en) 2011-09-09 2014-08-12 Apple Inc. Reducing the border area of a device
JP5911961B2 (ja) 2011-09-30 2016-04-27 インテル コーポレイション 意図的でないタッチセンサへの接触を排除するモバイルデバイス
US20130088434A1 (en) 2011-10-06 2013-04-11 Sony Ericsson Mobile Communications Ab Accessory to improve user experience with an electronic display
US8810535B2 (en) 2011-10-18 2014-08-19 Blackberry Limited Electronic device and method of controlling same
US9594504B2 (en) 2011-11-08 2017-03-14 Microsoft Technology Licensing, Llc User interface indirect interaction
US20130154999A1 (en) 2011-12-19 2013-06-20 David Brent GUARD Multi-Surface Touch Sensor Device With User Action Detection
US20130300668A1 (en) 2012-01-17 2013-11-14 Microsoft Corporation Grip-Based Device Adaptations
US9519419B2 (en) 2012-01-17 2016-12-13 Microsoft Technology Licensing, Llc Skinnable touch device grip patterns
EP2634678A1 (en) 2012-02-28 2013-09-04 BlackBerry Limited Touch-sensitive navigation in a tab-based application interface
KR20130099745A (ko) 2012-02-29 2013-09-06 주식회사 팬택 터치 단말기의 입력 신호 구분 장치 및 방법
KR101926070B1 (ko) 2012-06-15 2019-02-27 삼성디스플레이 주식회사 디스플레이 장치 및 그 제어방법
US20140022183A1 (en) 2012-07-19 2014-01-23 General Instrument Corporation Sending and receiving information
US20140043265A1 (en) 2012-08-07 2014-02-13 Barnesandnoble.Com Llc System and method for detecting and interpreting on and off-screen gestures
US20140043277A1 (en) 2012-08-09 2014-02-13 Nokia Corporation Apparatus and associated methods
US9395836B2 (en) 2012-10-01 2016-07-19 Atmel Corporation System and method for reducing borders of a touch sensor
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
JP2014149816A (ja) 2013-01-10 2014-08-21 Japan Display Inc タッチ検出機能付き表示装置及び電子機器
US9395917B2 (en) 2013-03-24 2016-07-19 Sergey Mavrody Electronic display with a virtual bezel
US9513663B2 (en) 2013-04-02 2016-12-06 Apple Inc. Electronic device with touch sensitive display
EP2994822A4 (en) 2013-05-09 2016-12-07 Amazon Tech Inc INTERFACES OF MOBILE DEVICES
KR20150019165A (ko) 2013-08-12 2015-02-25 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US20150160849A1 (en) 2013-12-06 2015-06-11 Microsoft Corporation Bezel Gesture Techniques
JP6282368B2 (ja) 2017-04-25 2018-02-21 浜松ホトニクス株式会社 光検出装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1263302A (zh) * 2000-03-13 2000-08-16 中国科学院软件研究所 基于笔和手势的文稿编辑技术
CN101599002A (zh) * 2008-06-04 2009-12-09 佳能株式会社 用户接口的控制方法和信息处理装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103252087A (zh) * 2012-02-20 2013-08-21 富立业资讯有限公司 具有触控面板媒体的游戏控制方法及该游戏媒体
CN103252087B (zh) * 2012-02-20 2016-02-24 富立业资讯有限公司 具有触控面板媒体的游戏控制方法及该游戏媒体
CN103455242A (zh) * 2012-05-31 2013-12-18 宏达国际电子股份有限公司 屏幕画面裁切方法及装置
CN103455242B (zh) * 2012-05-31 2017-09-29 宏达国际电子股份有限公司 屏幕画面裁切方法及装置
CN103197761B (zh) * 2013-03-28 2016-12-28 深圳泰山在线科技有限公司 手势识别方法及装置
CN103197761A (zh) * 2013-03-28 2013-07-10 深圳泰山在线科技有限公司 手势识别方法及装置
CN103399698A (zh) * 2013-07-31 2013-11-20 中国船舶重工集团公司第七〇九研究所 一种基于手绘草图和手势输入判断处理的笔式交互方法
CN105706028B (zh) * 2013-11-19 2018-05-29 麦克赛尔株式会社 投影型影像显示装置
CN105706028A (zh) * 2013-11-19 2016-06-22 日立麦克赛尔株式会社 投影型影像显示装置
CN108664173A (zh) * 2013-11-19 2018-10-16 麦克赛尔株式会社 投影型影像显示装置
CN106201323A (zh) * 2016-09-30 2016-12-07 深圳市创凯智能股份有限公司 基于触摸屏的书写方法及装置
CN106201323B (zh) * 2016-09-30 2019-03-19 深圳市创凯智能股份有限公司 基于触摸屏的书写方法及装置
CN113515228A (zh) * 2021-06-09 2021-10-19 华为技术有限公司 一种虚拟标尺显示方法以及相关设备
WO2022257870A1 (zh) * 2021-06-09 2022-12-15 华为技术有限公司 一种虚拟标尺显示方法以及相关设备

Also Published As

Publication number Publication date
US20110185300A1 (en) 2011-07-28
US10282086B2 (en) 2019-05-07
US9411498B2 (en) 2016-08-09
US20160342326A1 (en) 2016-11-24
US8261213B2 (en) 2012-09-04
US20120236026A1 (en) 2012-09-20

Similar Documents

Publication Publication Date Title
CN102141887A (zh) 画笔、复写和填充手势
CN102141888A (zh) 盖印手势
CN102169408A (zh) 链接手势
CN102169407A (zh) 上下文复用手势
CN102169365A (zh) 裁剪、打孔和撕裂手势
CN102725711A (zh) 边缘手势
US9857970B2 (en) Copy and staple gestures
TWI533191B (zh) 用於使用者介面的電腦實施方法及運算裝置
CN102147704B (zh) 多屏幕对象保持并换页手势
TWI459281B (zh) 在使用者介面顯示上顯現教學動畫
Hurter et al. Strip'TIC: exploring augmented paper strips for air traffic controllers
CN102141858A (zh) 多屏幕同步滑动手势
CN102147705A (zh) 多屏幕书签保持手势
CN105247463B (zh) 增强的画布环境
JP4611116B2 (ja) プレゼンテーションに用いられる情報処理装置およびプログラム
CN108628455A (zh) 一种基于触摸屏手势识别的虚拟沙画绘制方法
Kurtenbach Pen-based computing
Igarashi Freeform user interfaces for graphical computing
WO2011083676A1 (ja) オブジェクト処理装置およびオブジェクト選択方法
EP2712433B1 (en) User interface for drawing with electronic devices
US20130127718A1 (en) Method for Operating Computer Objects and Computer Program Product Thereof
US20120147034A1 (en) Animated link sensation
Igarashi Freeform user interfaces for graphical computing
KR102240410B1 (ko) 학습장치 및 학습 방법
JP4963633B2 (ja) 情報処理装置及び情報処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110803