CN102572567A - 一种手持设备和电视机的ui界面交互系统及方法 - Google Patents

一种手持设备和电视机的ui界面交互系统及方法 Download PDF

Info

Publication number
CN102572567A
CN102572567A CN2011104471378A CN201110447137A CN102572567A CN 102572567 A CN102572567 A CN 102572567A CN 2011104471378 A CN2011104471378 A CN 2011104471378A CN 201110447137 A CN201110447137 A CN 201110447137A CN 102572567 A CN102572567 A CN 102572567A
Authority
CN
China
Prior art keywords
television set
handheld device
touch
video data
interface alternation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011104471378A
Other languages
English (en)
Inventor
刘江
余静江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huizhou TCL Mobile Communication Co Ltd
Original Assignee
Huizhou TCL Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huizhou TCL Mobile Communication Co Ltd filed Critical Huizhou TCL Mobile Communication Co Ltd
Priority to CN2011104471378A priority Critical patent/CN102572567A/zh
Publication of CN102572567A publication Critical patent/CN102572567A/zh
Priority to EP12862098.6A priority patent/EP2800389A4/en
Priority to US14/125,267 priority patent/US9723352B2/en
Priority to PCT/CN2012/081504 priority patent/WO2013097492A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline

Abstract

本发明公开了一种手持设备和电视机的UI界面交互系统及方法，包括第二HDMI传输模块、触摸屏幕、手势管理模块及显示管理模块、第一HDMI传输模块及电视屏幕的设置和连接。本发明手持设备和TV的UI界面交互方法及系统，利用带有触摸屏幕的手持设备对电视进行操作，而不需要增加其他的硬件如鼠标或键盘等，仅需使用手持设备即可完成所有操作，从而降低了设备的成本。另外，本发明操作结构简便，只需要对手持设备的触摸屏幕进行操作，即可满足在电视上进行选择电影或歌曲等需要精确操作的要求，还可满足用户在玩游戏时需要大面积滑动触摸的需求。这种方式既能充分发挥电视的高分辨率的显示优势，又能充分发挥手持设备的操作简单的优势，为用户提供了良好的移动互联网体验。

Description

一种手持设备和电视机的UI界面交互系统及方法
技术领域
本发明涉及电视机系统及其通讯方法，尤其涉及一种手持设备和电视机的UI界面交互系统及方法。
背景技术
    目前，智能电视的出现，顺应了电视机“高清化”、“网络化”及“智能化”的趋势，但所谓真正的智能电视，应该具备能从网络、AV设备、PC等多种渠道获得节目内容的能力，以便能通过简单易用的整合式操作界面，简易操作将消费者最需要的内容在大屏幕上清晰地展现出来。未来的智能电视将是一个娱乐中心，用户可以进行搜索电视频道、录制电视节目、播放有线电视节目、进行网络视频、看电影及玩游戏等众多的活动。
在目前智能手机、智能电视的时代，人们娱乐的范围更大了，方式也更多了，很多用户希望能够通过手持设备直接在电视上进行玩游戏、选择喜爱的电影播放等操作。UI界面交互设计，即用户界面（User Interface）交互是近年来兴起的一种人和电视或电脑进行交互的设计，UI设计不仅让产品有个性有品味，并且使得用户的操作变得舒适、简单   、自由，充分体现了产品的定位和特点。由于一般的电视不具备触摸功能，所以，目前常见的与电视交互的方法还是使用鼠标或键盘等。但上述方法并不能很好地满足用户通过手持设备简单操作电视的需求，比如，无法满足用户进行选择电影或歌曲等精确操作时，同时进行玩游戏等需要大面积滑动触摸操作要求，这样，用户通过手持设备对电视机的操作存在极大地不便。
因此，现有技术还有待于改进和发展。
发明内容
鉴于上述现有技术的不足，本发明的目的在于提供一种手持设备和电视机的UI界面交互系统及方法，旨在解决现有技术中通过手持设备对电视机操作不方便的问题。
本发明的技术方案如下：
一种手持设备和电视机的UI界面交互系统，其包括：
电视机，所述电视机包括显示屏幕及与显示屏幕连接的第一HDMI传输模块；
手持设备，所述手持设备包括依次连接的第二HDMI传输模块、显示管理模块、手势管理模块及触摸屏幕；
所述第二HDMI传输模块与第一HDMI传输模块通讯相连，用于将来自于第一HDMI传输模块的电视机之EDID数据传输至显示管理模块，所述触摸屏幕用于接收用户的触摸事件；
所述显示管理模块用于根据EDID数据初始化UI显示数据，并将UI显示数据传输至电视机，所述手势管理模块用于管理操作模式。
所述的手持设备和电视的UI界面交互系统，其中，所述触摸屏幕设有一操作模式切换区域。
所述的手持设备和电视的UI界面交互系统，其中，所述操作模式切换区域设置于触摸屏幕的左上方。
一种应用所述的手持设备和电视机的UI界面交互系统的方法，包括以下步骤：
A、电视机通过第一HDMI传输模块将电视机的EDID数据传输至第二HDMI传输模块；
B、手持设备通过第二HDMI传输模块将电视机的EDID数据传输至显示管理模块；
C、显示管理模块根据EDID数据初始化UI显示数据，并将UI显示数据输出至电视机；
D、手势管理模块初始化操作模式为光标模式；
E、手持设备接收用户的触摸事件，更新UI显示数据并发送至电视机。
所述的UI界面交互方法，其中，所述触摸事件的类型包括：按下事件和移动事件。
所述的UI界面交互方法，其中，当触摸事件类型为按下事件时，所述步骤E包括：
E11、判断坐标是否在操作模式切换区域内，若是，则切换操作模式，进入下一步骤；若否，直接进入下一步骤；
E12、判断是否是光标模式，若是，则保存按下坐标，不发送触摸事件；若否，则发送触摸事件，更新UI显示数据并传送给电视机。
所述的UI界面交互方法，其中，当触摸事件类型为移动事件时，所述步骤E包括：
E21、判断是否是光标模式，若否，则发送触摸事件，更新UI显示数据并传送给电视机；若是，则进入下一步骤；
E22、判断移动距离是否大于阀值，若否，则不处理；若是，则进入光标移动状态，计算并移动光标的显示位置，更新UI显示数据并传送给电视机。
所述的UI界面交互方法，其中，所述步骤E之后还包括：
F、切换操作模式为触摸模式。
所述的UI界面交互方法，其中，步骤F中，当触摸事件的类型为按下事件，且坐标在操作模式切换区域内，则切换操作模式为触摸模式。
有益效果：本发明手持设备和电视机的UI界面交互系统及方法，操作极其简便，只需要对手持设备的触摸屏幕进行操作，即可满足在电视上进行选择电影或歌曲等需要精确操作的要求，还可满足用户在玩游戏时需要大面积滑动触摸的需求。这种方式既能充分发挥电视的高分辨率的显示优势，又能充分发挥手持设备的操作简单的优势，为用户提供了良好的移动互联网体验。另外，本发明利用带有触摸屏幕的手持设备对电视进行操作，而不需要增加其他的硬件如鼠标或键盘等，仅需使用手持设备即可完成所有操作，从而降低了设备的成本。
附图说明
图1为本发明手持设备和电视机的UI界面交互系统的结构示意图。
图2为本发明手持设备和电视机的UI界面交互方法的流程图。
图3为本发明手持设备和电视机的UI界面交互方法的按下事件处理流程图。
图4为本发明手持设备和电视机的UI界面交互方法的移动事件处理流程图。
具体实施方式
本发明提供一种手持设备和电视机的UI界面交互系统及方法，为使本发明的目的、技术方案及效果更加清楚、明确，以下对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
请参见图1，其是本发明手持设备和电视机的UI界面交互系统的结构框图。UI界面交互设计，即用户界面（User Interface）交互是近年来兴起的一种人和机器进行交互的设计，UI设计不仅让产品有个性有品味，并且使得用户的操作变得舒适、简单。自由、充分体现软件的定位和特点。
本发明手持设备和电视机的UI界面交互系统是通过电视机110和手持设备120的HDMI传输模块的通讯连接来实现的，HDMI英文全称为High Definition Multmedia Interface，是指高清晰度多媒体接口，是一种数字化视频或音频接口技术，可同时传输音频和影音信号；如图1所示，该电视机110主要包括第一HDMI传输模块及显示屏幕，该手持设备120包括依次连接的触摸屏幕、手势管理模块、显示管理模块及第二HDMI传输模块。
具体来说，在本发明较佳实施例中，所述电视机中110设有第一HDMI传输模块，手持设备120中设有第二HDMI传输模块，手持设备120上还提供有一个HDMI传输用的硬件接口，用户可通过HDMI数据线将手持设备120的第二HDMI传输模块通讯连接到电视机110的第一HDMI传输模块。手持设备120可通过HDMI协议传输的方式获取电视机110中的EDID数据，即扩展显示标识数据（Extended Display Identification Data），EDID数据是一种VESA标准数据格式，包含电视机性能的参数，其中包含有电视机显示屏幕分辨率、供应商信息、最大图像大小、颜色设置、厂商预设置等信息。
手持设备120会根据获取的EDID数据将其触摸屏幕的分辨率调整至与电视机110显示屏幕分辨率相匹配，本发明较佳实施例中，手持设备120获取电视机110的EDID数据是为了先调整手持设备120触摸屏幕的分辨率，以提高手持设备120的体验效果。手持设备120的显示管理模块会根据所获取的EDID数据中的电视机110显示屏幕分辨率等信息，初始化UI显示数据，UI显示数据即用户界面的显示数据，手持设备120的显示管理模块会将UI显示数据通过第二HDMI传输模块及第一HDMI传输模块传输至电视机110中，电视机110根据该UI显示数据同步显示更新后的画面，而非简单地将手持设备120的触摸屏幕分辨率投放到电视机110上进行显示，上述过程可保证手持设备120传输到电视机110的UI显示数据为标准的HDMI高清输出，从而充分发挥电视机110的高分辨率的显示优势，为用户提供最优的移动互联网体验，本发明的一个重要特点是通过手持设备120和电视机110的HDMI连接来使所述手持设备120能够适用于不同参数的电视机110，例如用户的电视机尺寸及显示屏幕分辨率可能完全不同，而通过手持设备120的显示管理模块及第二传输模块将UI显示数据传输至电视机后，可保证电视机输出高清TV。
如图1所示，所述手持设备120还提供了一个手势管理模块及触摸屏幕，所述手势管理模块可提供光标模式和触摸模式的切换功能，相应地，在手持设备120的触摸屏幕上设置一操作模式切换区域，用于用户切换操作模式，此时，还需要协调硬件上手持设备120的触摸屏幕和电视机110的显示屏幕的点对点关系，通过在触摸屏幕上进行触摸，然后显示屏幕上会在相应的地方进行显示。
请参见图2，图2为本发明应用上述UI界面交互系统的UI界面交互方法的流程示意图，如图所示，本发明的UI界面交互方法主要包括以下步骤：
S01、电视机110通过第一HDMI传输模块将电视机110的EDID数据传输至第二HDMI传输模块，该过程首先是电视机110内的CPU读取电视机的EDID数据，然后第一HDMI传输模块读取电视机110的EDID数据，再将该EDID数据传输给第二HDMI传输模块进行处理；
S02、手持设备120通过第二HDMI传输模块将电视机110的EDID数据传输至显示管理模块，显示管理模块接收到电视机110的EDID数据后，便进行初始化UI显示数据的操作；
S03、显示管理模块初始化UI显示数据，并将UI显示数据输出至电视机110。显示管理模块可根据EDID数据中的电视机110屏幕分辨率等信息，初始化UI显示数据，然后将UI显示数据通过第二HDMI传输模块传输至第一HDMI传输模块，并最终在电视机110上同步显示；
S04、手势管理模块初始化操作模式，并可默认操作模式为光标模式，光标模式下，用户可以精确定位到电视上的每一个最小单元的触摸点，具体来说，电视屏幕上会出现一个小图标，用于提示用户当前光标的位置；
S05、触摸屏幕接收用户的触摸事件，更新UI显示数据并将更新后的UI显示数据发送至电视机110进行响应，当用户在手持设备120的触摸屏幕上滑动时，会移动光标的位置，但不会将触摸事件发送给当前的上层应用程序例如视频选择程序响应，当用户将光标移动到需要的位置后，可以在触摸屏幕的任何区域中点击一下，此时，会将该点击事件发送给上层应用程序。此过程中，电视屏幕上会出现一个小图标，操作电视的过程类似于操作电脑，用户发送的点击事件的坐标是光标在电视屏幕上的显示坐标，而不是用户在触摸屏幕上点击的位置坐标。另外需要说明的是，本发明中用户通过手持设备120进行控制的应用程序是手持设备120自带的应用程序，并非电视有关或无关的应用程序，本发明的目的在于在手持设备120上进行对电视机110的控制，并在电视机110上进行显示，以充分发挥电视机110的高分辨率的显示优势，又能利用手持设备120的操作简单的优势。
当用户需要进行其他操作时，例如需要使用连续的触摸或者sensor功能时，用户可以点击手势管理模块提供给用户的一个操作模式切换区域，该操作模式切换区域可设置在触摸屏幕的左上方，只需在该操作模式切换区域内点击一次即可切换为触摸模式，当用户在该操作模式切换区域内再点击一次，即可切换回光标模式。
具体地，如图2所示，所述步骤S04中所述手势管理模块初始化操作模式为光标模式；并且步骤S05之后还包括：
S06、切换操作模式为触摸模式，对触摸屏幕进行触摸并发送用户的触摸事件。当用户需要切换为触摸模式时，例如需要进行大面积滑动触摸操作，可通过点击触摸屏幕上预先设定好的操作模式切换区域切换为触摸模式，即步骤S05中的触摸事件的类型为按下事件，且坐标在操作模式切换区域内，此时切换操作模式为触摸模式。用户在触摸屏幕上的的任何触摸动作例如点击或滑动都会直接发送给上层应用程序如游戏程序响应。在此过程中，电视机可以根据触摸手势进行动作响应，如单点的滑动或多点的缩放，用户发送的触摸事件的坐标是用户在触摸屏幕上点击或滑动的位置坐标。
具体来说，用户对触摸屏幕进行触摸动作发送触摸事件后，手持设备120会判断触摸事件的类型，触摸事件的类型包括：移动事件和按下事件，根据各不同的触摸事件的类型，进行相应的响应动作；
请参阅图3，图3为本发明触摸屏幕接收按下事件的处理流程图，当触摸事件的类型为按下事件时，如图所示，所述步骤S05包括：
L01、判断坐标是否在操作模式切换区域内，若是，则切换操作模式，进入下一步骤；若否，则直接进入下一步骤；具体来说，用户在手持设备120的触摸屏幕上进行按下操作后，手持设备120会判断按下的坐标是否在操作模式切换区域内，如果是在操作模式切换区域内就切换操作模式，如果不是，进入下一步骤；
L02、判断是否是光标模式，若是，则保存按下坐标，不发送触摸事件；若否，则发送触摸事件，更新UI显示数据并传送给电视机110。此过程中，不管当前手持设备120为何种操作模式，手持设备120会先判断是否是光标模式，如果是就保存按下坐标，不发送触摸事件；如果不是，则发送触摸时间，更新UI显示数据并传送给电视机110。
请参阅图4，图4为本发明触摸屏幕接收移动事件的处理流程图，当触摸事件类型为移动事件时，如图所示，所述步骤S05包括：
T01、判断是否是光标模式，若否，则发送触摸事件，更新UI显示数据并传送给电视机110，若是，则进入下一步骤；用户在触摸屏幕上进行移动操作时，手持设备先判断当前操作模式是否是光标模式，如果不是光标模式，即当前操作模式为触摸模式，则发送触摸事件，更新UI显示数据并传送给电视机；如果是光标模式，则进入下一步骤；
T02、判断移动距离是否大于阀值，若否，则不处理；若是，则进入光标移动状态，计算并移动光标的显示位置，更新UI显示数据并传送给电视机110。在光标模式下，用户进行移动操作后，手持设备先判断移动距离是否大于阀值，如果没有，不进行处理；如果移动距离大于阀值，则进入光标移动状态，再计算并移动光标的显示位置，然后更新UI显示数据并传送给电视机。
本发明手持设备和TV的UI界面交互方法及系统，利用带有触摸屏幕的手持设备对电视进行操作，而不需要增加其他的硬件如鼠标或键盘等，仅需使用手持设备即可完成所有操作，从而降低了设备的成本。另外，本发明操作极其简便，利用现有的HDMI接口实现手持设备与电视机之间的数据传输和操作，只需要对手持设备的触摸屏幕进行操作，即可满足在电视上进行选择电影或歌曲等需要精确操作的要求，还可满足用户在玩游戏时需要大面积滑动触摸的需求。这种方式既能充分发挥电视的高分辨率的显示优势，又能充分发挥手持设备的操作简单的优势，为用户提供了良好的移动互联网体验。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (9)

1.一种手持设备和电视机的UI界面交互系统，其包括：
电视机，所述电视机包括显示屏幕及与显示屏幕连接的第一HDMI传输模块；
手持设备，所述手持设备包括依次连接的第二HDMI传输模块、显示管理模块、手势管理模块及触摸屏幕；
所述第二HDMI传输模块与第一HDMI传输模块通讯相连，用于将来自于第一HDMI传输模块的电视机之EDID数据传输至显示管理模块，所述触摸屏幕用于接收用户的触摸事件；
所述显示管理模块用于根据EDID数据初始化UI显示数据，并将UI显示数据传输至电视机，所述手势管理模块用于管理操作模式。
2.根据权利要求1所述的手持设备和电视的UI界面交互系统，其特征在于，所述触摸屏幕设有一操作模式切换区域。
3.根据权利要求2所述的手持设备和电视的UI界面交互系统，其特征在于，所述操作模式切换区域设置于触摸屏幕的左上方。
4.一种应用如权利要求3所述的手持设备和电视机的UI界面交互系统的方法，包括以下步骤：
A、电视机通过第一HDMI传输模块将电视机的EDID数据传输至第二HDMI传输模块；
B、手持设备通过第二HDMI传输模块将电视机的EDID数据传输至显示管理模块；
C、显示管理模块根据EDID数据初始化UI显示数据，并将UI显示数据输出至电视机；
D、手势管理模块初始化操作模式为光标模式；
E、手持设备接收用户的触摸事件，更新UI显示数据并发送至电视机。
5.根据权利要求4所述的UI界面交互方法，其特征在于，所述步骤E中触摸事件的类型包括：按下事件和移动事件。
6.根据权利要求5所述的UI界面交互方法，其特征在于，当触摸事件类型为按下事件时，所述步骤E包括：
E11、判断坐标是否在操作模式切换区域内，若是，则切换操作模式，进入下一步骤；若否，直接进入下一步骤；
E12、判断是否是光标模式，若是，则保存按下坐标，不发送触摸事件；若否，则发送触摸事件，更新UI显示数据并传送给电视机。
7.根据权利要求5所述的UI界面交互方法，其特征在于，当触摸事件类型为移动事件时，所述步骤E包括：
E21、判断是否是光标模式，若否，则发送触摸事件，更新UI显示数据并传送给电视机；若是，则进入下一步骤；
E22、判断移动距离是否大于阀值，若否，则不处理；若是，则进入光标移动状态，计算并移动光标的显示位置，更新UI显示数据并传送给电视机。
8.根据权利要求4所述的UI界面交互方法，其特征在于，所述步骤E之后还包括：
F、切换操作模式为触摸模式。
9.根据权利要求8所述的UI界面交互方法，其特征在于，步骤F中，当触摸事件的类型为按下事件，且坐标在操作模式切换区域内，则切换操作模式为触摸模式。
CN2011104471378A 2011-12-28 2011-12-28 一种手持设备和电视机的ui界面交互系统及方法 Pending CN102572567A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2011104471378A CN102572567A (zh) 2011-12-28 2011-12-28 一种手持设备和电视机的ui界面交互系统及方法
EP12862098.6A EP2800389A4 (en) 2011-12-28 2012-09-17 USER INTERFACE SYSTEM AND METHOD FOR INTERACTION BETWEEN A PORTABLE DEVICE AND A TELEVISION
US14/125,267 US9723352B2 (en) 2011-12-28 2012-09-17 User interface interaction system and method for handheld device and TV set
PCT/CN2012/081504 WO2013097492A1 (zh) 2011-12-28 2012-09-17 一种手持设备和电视机的ui界面交互系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011104471378A CN102572567A (zh) 2011-12-28 2011-12-28 一种手持设备和电视机的ui界面交互系统及方法

Publications (1)

Publication Number Publication Date
CN102572567A true CN102572567A (zh) 2012-07-11

Family

ID=46416831

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011104471378A Pending CN102572567A (zh) 2011-12-28 2011-12-28 一种手持设备和电视机的ui界面交互系统及方法

Country Status (4)

Country Link
US (1) US9723352B2 (zh)
EP (1) EP2800389A4 (zh)
CN (1) CN102572567A (zh)
WO (1) WO2013097492A1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547179A (zh) * 2011-12-29 2012-07-04 惠州Tcl移动通信有限公司 一种手持设备及与电视同步显示的方法
CN103124378A (zh) * 2012-12-07 2013-05-29 东莞宇龙通信科技有限公司 基于通信终端与电视机多屏互动的输入方法及系统
WO2013097492A1 (zh) * 2011-12-28 2013-07-04 惠州Tcl移动通信有限公司 一种手持设备和电视机的ui界面交互系统及方法
CN103546793A (zh) * 2013-10-30 2014-01-29 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
CN103546795A (zh) * 2013-10-30 2014-01-29 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
CN103645847A (zh) * 2013-12-02 2014-03-19 乐视致新电子科技（天津）有限公司 通过移动终端模拟鼠标控制智能电视的方法和系统
CN103729069A (zh) * 2013-11-29 2014-04-16 乐视致新电子科技（天津）有限公司 智能电视中的光标控制方法和装置
CN103809856A (zh) * 2014-02-24 2014-05-21 联想(北京)有限公司 一种信息处理方法和第一电子设备
WO2014075493A1 (zh) * 2012-11-15 2014-05-22 中兴通讯股份有限公司 机顶盒以及基于机顶盒的使用方法
WO2015062515A1 (zh) * 2013-10-30 2015-05-07 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
CN105518614A (zh) * 2013-03-15 2016-04-20 谷歌公司 用于多屏幕应用程序的屏幕录制
CN106101803A (zh) * 2016-06-13 2016-11-09 Tcl移动通信科技（宁波）有限公司 一种智能电视的显示屏控制方法及系统
CN106534750A (zh) * 2016-10-09 2017-03-22 北京小米移动软件有限公司 显示控制方法及装置
CN109032733A (zh) * 2018-07-10 2018-12-18 深圳Tcl数字技术有限公司 终端设备管理方法、系统及计算机可读存储介质
CN111104082A (zh) * 2019-12-12 2020-05-05 深圳市深智电科技有限公司 一种画面显示及处理方法、终端及存储介质
CN116828263A (zh) * 2023-08-30 2023-09-29 华光影像科技有限公司 一种8k4k影视制作界面切换系统

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103577077A (zh) * 2012-07-20 2014-02-12 晨星软件研发(深圳)有限公司 符号输入装置、符号输入方法及相关的电脑程序产品
WO2015190877A1 (ko) * 2014-06-12 2015-12-17 엘지전자(주) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
CN104717542B (zh) * 2015-03-26 2018-08-07 海信集团有限公司 一种智能电视的同步信息获取方法、装置及系统
US10743059B2 (en) * 2015-08-30 2020-08-11 EVA Automation, Inc. Displaying HDMI content at an arbitrary location
CN110753244B (zh) * 2018-07-24 2022-10-28 中兴通讯股份有限公司 一种场景同步方法、终端及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1355994A (zh) * 1999-06-11 2002-06-26 联合视频制品公司 具有手持应用设备的交互式电视应用系统
CN101166251A (zh) * 2006-10-20 2008-04-23 三星电子株式会社 显示装置、显示系统及其控制方法
CN101753878A (zh) * 2008-12-09 2010-06-23 深圳Tcl新技术有限公司 一种触摸屏遥控器的遥控方法
EP2387238A1 (en) * 2006-08-18 2011-11-16 Sony Corporation Automatically reconfigurable multimedia system with interchangable personality adapters

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7123212B2 (en) * 2000-12-22 2006-10-17 Harman International Industries, Inc. Information transmission and display method and system for a handheld computing device
CN101107587B (zh) * 2005-01-14 2013-03-13 皇家飞利浦电子股份有限公司 移动由触摸输入显示装置呈现的对象
KR100830467B1 (ko) * 2006-07-13 2008-05-20 엘지전자 주식회사 터치 패널을 갖는 영상기기 및 이 영상기기에서 줌 기능을수행하는 방법
US8812629B2 (en) * 2008-04-18 2014-08-19 Universal Electronics Inc. System and method for configuring the remote control functionality of a portable device
JP4553882B2 (ja) * 2006-10-25 2010-09-29 シャープ株式会社 携帯型電子機器，テレビジョン受像機，テレビジョン受像機操作システム
US8443409B2 (en) * 2008-04-30 2013-05-14 Zeevee, Inc. System and method for channel selection for local broadcasting
US20100064228A1 (en) * 2008-09-11 2010-03-11 Ely Tsern Expandable system architecture comprising a handheld computer device that dynamically generates different user environments with secondary devices with displays of various form factors
CN101489076A (zh) * 2009-01-19 2009-07-22 Tcl通力电子（惠州）有限公司 一种hdmi分辨率设置的方法
TWI442271B (zh) * 2009-07-03 2014-06-21 Wistron Corp 多模式觸控之方法、使用多重單點觸控指令之方法及具有觸控裝置之電子裝置
US20110163966A1 (en) * 2010-01-06 2011-07-07 Imran Chaudhri Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus
US9092129B2 (en) * 2010-03-17 2015-07-28 Logitech Europe S.A. System and method for capturing hand annotations
JP5623111B2 (ja) * 2010-04-01 2014-11-12 船井電機株式会社 携帯情報処理装置
CN102893599B (zh) * 2010-05-19 2013-11-06 夏普株式会社 重放装置、显示装置、电视接收机、系统、识别方法、程序及记录介质
TW201237728A (en) * 2011-03-08 2012-09-16 Acer Inc Screen rotation lock methods and systems, and computer program products thereof
US9285950B2 (en) * 2011-03-30 2016-03-15 Google Inc. Hover-over gesturing on mobile devices
US8745024B2 (en) * 2011-04-29 2014-06-03 Logitech Europe S.A. Techniques for enhancing content
CN102572567A (zh) * 2011-12-28 2012-07-11 惠州Tcl移动通信有限公司 一种手持设备和电视机的ui界面交互系统及方法
CN102662514B (zh) * 2012-03-30 2017-03-29 中兴通讯股份有限公司 一种控制触摸屏的方法和移动终端
US20150205396A1 (en) * 2012-10-19 2015-07-23 Mitsubishi Electric Corporation Information processing device, information terminal, information processing system and calibration method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1355994A (zh) * 1999-06-11 2002-06-26 联合视频制品公司 具有手持应用设备的交互式电视应用系统
EP2387238A1 (en) * 2006-08-18 2011-11-16 Sony Corporation Automatically reconfigurable multimedia system with interchangable personality adapters
CN101166251A (zh) * 2006-10-20 2008-04-23 三星电子株式会社 显示装置、显示系统及其控制方法
CN101753878A (zh) * 2008-12-09 2010-06-23 深圳Tcl新技术有限公司 一种触摸屏遥控器的遥控方法

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013097492A1 (zh) * 2011-12-28 2013-07-04 惠州Tcl移动通信有限公司 一种手持设备和电视机的ui界面交互系统及方法
US8988604B2 (en) 2011-12-29 2015-03-24 Huizhou TCL Mobile Communications Co., Ltd. Handheld device and method for displaying synchronously with TV set
CN102547179A (zh) * 2011-12-29 2012-07-04 惠州Tcl移动通信有限公司 一种手持设备及与电视同步显示的方法
US9292901B2 (en) 2011-12-29 2016-03-22 Huizhou Tcl Mobile Communication Co., Ltd Handheld device and method for displaying synchronously with TV set
CN102547179B (zh) * 2011-12-29 2014-06-25 惠州Tcl移动通信有限公司 一种手持设备及与电视同步显示的方法
WO2014075493A1 (zh) * 2012-11-15 2014-05-22 中兴通讯股份有限公司 机顶盒以及基于机顶盒的使用方法
CN103124378A (zh) * 2012-12-07 2013-05-29 东莞宇龙通信科技有限公司 基于通信终端与电视机多屏互动的输入方法及系统
CN103124378B (zh) * 2012-12-07 2016-04-06 东莞宇龙通信科技有限公司 基于通信终端与电视机多屏互动的输入方法及系统
CN105518614A (zh) * 2013-03-15 2016-04-20 谷歌公司 用于多屏幕应用程序的屏幕录制
CN105518614B (zh) * 2013-03-15 2019-05-31 谷歌有限责任公司 用于多屏幕应用程序的屏幕录制的方法、设备和计算机可读介质
CN103546793A (zh) * 2013-10-30 2014-01-29 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
WO2015062515A1 (zh) * 2013-10-30 2015-05-07 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
CN103546795A (zh) * 2013-10-30 2014-01-29 乐视致新电子科技（天津）有限公司 一种控制智能电视界面滚动的方法和装置
CN103729069A (zh) * 2013-11-29 2014-04-16 乐视致新电子科技（天津）有限公司 智能电视中的光标控制方法和装置
CN103645847A (zh) * 2013-12-02 2014-03-19 乐视致新电子科技（天津）有限公司 通过移动终端模拟鼠标控制智能电视的方法和系统
CN103809856A (zh) * 2014-02-24 2014-05-21 联想(北京)有限公司 一种信息处理方法和第一电子设备
CN106101803A (zh) * 2016-06-13 2016-11-09 Tcl移动通信科技（宁波）有限公司 一种智能电视的显示屏控制方法及系统
CN106101803B (zh) * 2016-06-13 2020-06-02 Tcl移动通信科技（宁波）有限公司 一种智能电视的显示屏控制方法及系统
CN106534750A (zh) * 2016-10-09 2017-03-22 北京小米移动软件有限公司 显示控制方法及装置
CN106534750B (zh) * 2016-10-09 2019-04-26 北京小米移动软件有限公司 显示控制方法及装置
CN109032733A (zh) * 2018-07-10 2018-12-18 深圳Tcl数字技术有限公司 终端设备管理方法、系统及计算机可读存储介质
CN111104082A (zh) * 2019-12-12 2020-05-05 深圳市深智电科技有限公司 一种画面显示及处理方法、终端及存储介质
CN116828263A (zh) * 2023-08-30 2023-09-29 华光影像科技有限公司 一种8k4k影视制作界面切换系统

Also Published As

Publication number Publication date
US9723352B2 (en) 2017-08-01
EP2800389A1 (en) 2014-11-05
US20140130091A1 (en) 2014-05-08
WO2013097492A1 (zh) 2013-07-04
EP2800389A4 (en) 2015-07-15

Similar Documents

Publication Publication Date Title
CN102572567A (zh) 一种手持设备和电视机的ui界面交互系统及方法
US10708534B2 (en) Terminal executing mirror application of a peripheral device
WO2020244266A1 (zh) 智能电视的远程控制方法、移动终端和智能电视
US9152253B2 (en) Remote control method, remote control apparatus, and display apparatus
CN103338398B (zh) 移动终端控制机顶盒的方法及移动终端
CN202353685U (zh) 一种触摸控制遥控器及电视机
CN109618206A (zh) 呈现用户界面的方法和显示设备
CN102497521B (zh) 一种预览方式选择视音频信号输入通道的设备和方法
CN101316318A (zh) 连接到服务传递平台的设备的遥控装置
CN103037264A (zh) 电视机多个桌面的实现方法
CN101860695B (zh) 移动光标的方法及应用其的显示装置
US10768782B2 (en) Apparatus and method for presenting information associated with icons on a display screen
CN104135683A (zh) 一种智能设备的遥控方法及相关设备、系统
CN111625169B (zh) 一种遥控器浏览网页的方法及显示设备
WO2013134975A1 (en) Method of Scene Recognition Based Virtual Touch Event
CN102346594A (zh) 电视设备的播放控制方法及系统
TWI702843B (zh) 遠端觸控操作的電視系統
WO2020248924A1 (zh) 显示设备及扫描外部蓝牙设备的方法
CN117581191A (zh) 显示设备及多设备投屏同屏显示的控制方法
CN106663071A (zh) 用户终端、控制用户终端的方法及多媒体系统
US20220279230A1 (en) Epg interface presentation method and display apparatus
CN111901646A (zh) 一种显示设备及触控菜单显示方法
CN112073787B (zh) 显示设备及首页显示方法
CN202435537U (zh) 一种触控鼠标型遥控器
CN112272331B (zh) 一种节目频道列表快速展示的方法及显示设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20120711