一种屏幕操作互动方法、设备及存储介质与流程

1.本发明涉及体感控制技术领域，尤其是涉及一种屏幕操作互动方法、设备及存储介质。


背景技术：

2.如今，随着陀螺仪、重力感应等传感器元件在智能设备上的普及，人们可以使用智能设备来实现屏幕操作互动。手机、平板就可以替代专业的体感输入设备(如微软wii手柄等)来对固定端进行屏幕操作互动：通过手持终端设备不同的姿态变化，生成相应的控制命令，并通过网络或蓝牙等信道发送至固定端设备，实现屏幕交互。
3.专利cn208638380u公开了一种多屏互动系统及互动屏幕设备，互动屏幕设备通过传感器侦测用户的手势，在手势满足多屏互动手势的情况下，互动屏幕能够获取特定信息内容，并将该特定信息内容转换成音频文件发送，使用户的移动终端能够共享该特定信息内容，透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。专利cn113220139b公开了一种控制大屏设备显示的方法、移动终端及第一系统，该专利通过已有的移动终端(如手机)，可以接收用户对该移动终端空间姿态的控制，根据其空间姿态计算得到该空间姿态对应到大屏设备显示屏对应的位置，通过向该大屏设备发送控制信息，控制大屏设备的显示屏在对应位置做出显示激光指针，移动激光指针等响应。该移动终端包括多个运动传感器，通过传感器获取相应数据。
4.然而，现有屏幕交互技术普遍存在一个缺陷：依赖专用的空间感应装置手持终端，若没有相应的间感应装置则无法感知固定端的具体方向及距离，例如一些光枪瞄准控制操作就无法实现，使用场景受到极大限制。


技术实现要素：

5.本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种手持终端能够感知固定端的具体方向及距离的屏幕操作互动方法、设备及存储介质。
6.本发明的目的可以通过以下技术方案来实现：
7.一种屏幕操作互动方法，该方法应用于手持终端，包括以下步骤：
8.与固定端建立通信连接；
9.接收固定端发出的识别信号，对固定端进行拍摄获得拍摄图像，并记录拍摄时的姿态信息，其中，固定端展示原始图像；
10.将所述拍摄图像与原始图像进行匹配，获得原始图像的二维信息；
11.基于包括所述二维信息、姿态信息、摄像头焦距和固定端屏幕的物理尺寸在内的数据进行综合计算，获得相对空间关系，并建立空间直角坐标系；
12.基于所述空间直角坐标系，生成互动命令，实现屏幕操作互动。
13.进一步地，所述的姿态信息包括俯仰角、方向角和翻滚角。
14.进一步地，通过图像识别算法将所述拍摄图像与原始图像进行匹配。
15.进一步地，所述的二维信息包括固定端的四个顶点坐标。
16.进一步地，建立空间直角坐标系的具体步骤包括：
17.以摄像头为原点，建立初始空间直角坐标系；
18.基于所述初始空间直角坐标系和透视投影，所述二维信息结合摄像头焦距和固定端屏幕的物理尺寸进行计算，获得初始相对空间关系；
19.基于所述姿态信息，将所述初始相对空间关系进行转换，获得最终的相对空间关系，并建立最终的空间直角坐标系。
20.进一步地，以像距近似为所述的摄像头焦距。
21.进一步地，根据固定端屏幕的分辨率和像素点大小计算所述固定端屏幕的物理尺寸。
22.进一步地，在进行计算时，将所述初始空间直角坐标系转化为极坐标形式。
23.本发明还提供一种电子设备，其特征在于，包括一个或多个处理器、存储器和被存储在存储器中的一个或多个程序，所述一个或多个程序包括用于执行如上所述的一种屏幕操作互动方法的指令。
24.本发明还提供一种计算机可读存储介质，其特征在于，包括供电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行如上所述一种屏幕操作互动方法的指令。
25.与现有技术相比，本发明具有以下有益效果：
26.(1)本发明通过获取原始图像的二维信息，包括结合姿态信息、摄像头焦距和固定端屏幕的物理尺寸进行综合计算，获得屏幕之间相对空间关系，并建立空间直角坐标系，从而弥补了现有屏幕体感控制技术中缺乏空间坐标系的缺陷，大大拓展了屏幕操作互动的应用场景。
27.(2)本发明通过手持终端设备自身的硬件实现空间信息获取，不依赖专用的空间感应装置手持终端就能够感知固定端的具体方向及距离，具有适用性广的优点。
28.(3)本发明建立了屏幕操作互动中的空间坐标系，空间直角坐标系可转换为极坐标形式，能够为后续步骤提供更多方便。
附图说明
29.图1为本发明实施例的控制流程图；
30.图2为本发明实施例的原始识别图；
31.图3为本发明实施例经手机摄像头拍摄得到的拍摄图像；
32.图4为本发明实施例经图像匹配后的二维信息图；
33.图5为本发明实施例手机姿态信息的俯仰角a
pitch
、方向角a
yaw
和翻滚角a
roll
定义图；
34.图6为本发明实施例初始空间直角坐标系c0示意图；
35.图7为本发明实施例初始空间直角坐标系c0的极坐标形式图；
36.图8为本发明实施例基于初始空间直角坐标系c0的透视投影图；
37.图9为本发明实施例点p在投影面(拍摄图像)上的投影点p'的坐标示意图；
38.图10为本发明实施例点p的初始空间极坐标θ分量的计算示意图；
39.图11为本发明实施例两个灭点的情况示意图；
40.图12为本发明实施例一个灭点的情况示意图；
41.图13为本发明实施例有灭点的垂点投影q'的像素坐标计算示意图；
42.图14为本发明实施例无灭点的情况示意图；
43.图15为本发明实施例无灭点的垂点投影q'的像素坐标计算示意图；
44.图16为本发明实施例垂点q的坐标变换图；
45.图17为本发明实施例投影面中垂点投影q'与投影点p'的坐标关系图；
46.图18为本发明实施例三维空间中垂点q与点p的坐标关系图；
47.图19为本发明实施例当a
yaw
、a
pitch
、a
roll
三者为0
°
时c0与c1的关系图；
48.图20为本发明实施例最终获得的空间直角坐标系图。
具体实施方式
49.下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
50.实施例1
51.本实施例提供一种屏幕操作互动方法，该方法应用于手持终端，在该实施例中，以手机作为手持终端，如图1所示，包括以下步骤：
52.s1、与固定端建立通信连接。
53.为实现屏幕交互，将手机与固定端之间建立通信连接。
54.s2、接收固定端发出的识别信号，获得固定端的拍摄图像，并记录拍摄时的姿态信息，其中，固定端展示原始图像。
55.固定端全屏显示一张特定的原始图像，并向手机发出识别信号，该原始图像如图2所示；手机接收识别信号，提示用户打开摄像头对固定端进行拍摄，并记录拍摄时的手机设备的姿态信息，手机获得的拍摄图像如图3所示。其中，所述的姿态信息包括俯仰角a
pitch
、方向角a
yaw
和翻滚角a
roll
。翻滚角a
roll
指示手机绕x轴旋转角度，取值范围为(-90
°
，90
°
)；俯仰角a
pitch
指示手机绕y轴旋转角度，取值范围为(-90
°
，90
°
)；方向角a
yaw
指示手机绕z轴旋转角度，取值范围为(-180
°
，180
°
)；所述姿态信息如图5所示。
56.s3、将所述拍摄图像与原始图像进行匹配，获得原始图像的二维信息。
57.通过图像识别算法将所述拍摄图像与原始图像进行匹配，获得原始图像的二维信息，所述原始图像的二维信息包括固定端的四个顶点坐标：p1、p2、p3和p4，所述原始图像的二维信息如图4所示。
58.s4、基于包括所述二维信息、姿态信息、摄像头焦距和固定端屏幕的物理尺寸在内的数据进行综合计算，获得相对空间关系，并建立空间直角坐标系。
59.该步骤的具体实现方法如下：
60.s41、以摄像头为原点，建立初始空间直角坐标系。
61.建立初始空间直角坐标系c0。如图6所示，其原点o为摄像头中央点，也称为视点，z轴与摄像头光轴方向重合，方向向前，x轴与手机长边平行，方向向下，y轴与手机短边平行，方向向右。
62.s42、基于所述初始空间直角坐标系和透视投影，所述二维信息结合摄像头焦距和固定端屏幕的物理尺寸进行计算，获得初始相对空间关系。
63.c0中的某一点p的坐标也可以用极坐标的形式表示，如图7所示，其中r表示点p到原点o的距离，表示通过点p在xoy平面上的投影点p'与x轴的夹角，θ表示p与z轴的夹角。
64.如图8所示，o点为摄像头中心，光线通过摄像头聚集在感光元件(cmos)上成倒立的像，通常情况下，物距u远大于摄像头的焦距f，所以像距v(cmos到o点的距离)可近似为焦距f。成像的过程可认为是一次透视投影的操作：原点o为视点，等效的投影面如图8中所示，与cmos中心对称，投射在投影面上的景物即为拍摄图像(正立且等比例缩放)。根据透视投影规律，三维空间里的某一点p投射在投影面(拍摄图像)上的点为投影点p'，那么点p的极坐标分量θ(即方向分量)可以根据拍摄图像里p'点的坐标求得。如图9所示，拍摄图像的分辨率为w*h，中心点m像素坐标为(x0，y0)，p'点像素坐标为(x1，y1)，则极坐标分量值为：
65.令由于atan2取值范围为(-π，π]，则的表达式如公式(1)所示：
[0066][0067]
在计算极坐标分量θ前，需要先计算拍摄图像的最大视角范围fov，可以由以下公式(2)求得：
[0068][0069]
其中，f是从系统的硬件接口获取的摄像头等效焦距值(等效焦距指的是当感光元件对角线长度l等效为标准135画幅的对角线长度时摄像头的实际焦距)，l为135画幅相机感光元件的对角线长度即43.2mm。
[0070]
根据公式(2)计算极坐标分量θ：如图9所示，以投影面最大视野角作圆，与mp'相交于点s，点s的像素坐标(x2，y2)可以通过以下公式求出：
[0071][0072][0073]
mp'及ms的长度分别为：
[0074][0075][0076]
如图10所示，三维空间中，m、p'、s三点位于投影面上，
△
mop'与
△
mos为直角三角形且共用直角边om，所以极坐标分量θ值为：
[0077][0078]
可见c0中极坐标分量θ的取值范围为[0，π/2)。
[0079]
至此，根据四个顶点p1、p2、p3和p4在拍摄图像里的像素坐标，可以得到这四个顶点在坐标系c0中的极坐标分量θ，下面进一步给出这4个顶点的极坐标分量r的计算步骤(固定端所在的空间平面以下简称tv平面)，分为以下三步：
[0080]
(i)确定tv平面相对于视点o的垂点q在投影面上的垂点投影q'的坐标。
[0081]
以下分两种情况进行垂点投影q'的坐标计算：
[0082]
情况一、p1、p2、p3和p4构成四边形里至少有一组对边不平行。
[0083]
如图11所示，两组对边都不平行(两线段角度之差大于阈值σ)，那么两组对边分别延伸并相交于灭点v1和v2，此时tv平面的灭线为经过v1和v2的直线；如图12所示，两组对边其中一组平行(两线段角度之差小于等于阈值σ)，而另一组不平行，不平行的那组对边延伸并相交于灭点v1，此时tv平面的灭线经过该灭点并与平行的那组对边相平行；在确定了灭线后，q'的像素坐标(x
q'
，y
q'
)计算过程如下：
[0084]
如图13所示，m点为拍摄图像中心点，在灭线上找到距离m点最近的一个点g(xg，yg)，并连接gm。通过透视投影原理可知，垂点q与视点o连线的投影必定位于gm的延长线上，三维空间中∠qog＝∠q'og＝90
°
，要计算投影面上q'的坐标，可根据上述求解步骤先计算出θg及根据∠q'og＝θ
q'
+θg＝90
°
，求出∠q'om即θ
q'
：
[0085]
θ
q'
＝90
°‑
θgꢀꢀꢀꢀꢀ
(8)
[0086]
由θ
q'
可以得到拍摄图像中线段q'm的像素长度l
q'm
：
[0087][0088]
进一步地，求出q'的像素坐标(x
q'
，y
q'
)：
[0089][0090][0091]
在求解q'像素坐标时，两组对边其中一组平行时的计算方式与两组对边都不平行的计算方式同理，此处不再赘述。
[0092]
情况二、p1、p2、p3、p4构成四边形里两组对边都近似平行。
[0093]
如图14所示，该情况下投影面上不存在灭点与灭线，如图15所示，q'坐标为拍摄图像的中心点，q'的像素坐标(x
q'
，y
q'
)为：
[0094][0095][0096]
(ii)将垂点投影q'的像素坐标(x
q'
，y
q'
)变换至tv平面的像素坐标q*(x
q*
，y
q*
)。
[0097]
如图16所示，左为tv平面上建立的二维坐标系c
tv
，右为投影面坐标系c
photo
；其中，c
tv
以固定端左上顶点为原点，则在该tv平面上四个顶点p
*1
、p
*2
、p
*3
和p
*4
的坐标分别为(0，0)，(w，0)，(w，h)，(0，h)，w和h为固定端的屏幕分辨率，垂点q在该坐标系c
tv
中相应的坐标为q
*
(x
q*
，y
q*
)；根据透视投影原理，坐标系c
tv
中的点可以通过一个3*3的透视变换矩阵t
p
转换到坐标系c
photo
中，反过来，c
photo
中的点也可以通过该矩阵的逆矩阵t
p-1
转换到坐标系c
tv
中。要求出变换矩阵t
p
，可以通过最少4个点在透视变换前后的4组坐标来确定，满足其中任意3点互不共线，由于四个顶点p1、p2、p3和p4正好符合条件，所以可以通过c
photo
和c
tv
两个坐标系里对应的4组坐标点求解t
p
及逆矩阵t
p-1
；求解出t
p-1
后，将q'的像素坐标q'(x
q'
，y
q'
)通过t
p-1
转换至tv平面的像素坐标q
*
(x
q*
，y
q*
)：
[0098][0099][0100][0101]
(iii)计算tv平面上点p到垂点q的物理距离，并进一步求出点p在坐标系c0中的极坐标分量r。
[0102]
目前已经获得了垂点q在c
tv
中的坐标q
*
(x
q*
，y
q*
)，并且知道四个顶点p1、p2、p3、p4在c
tv
中的坐标分别为p
1*
(0，0)、p
2*
(w，0)、p
3*
(w，h)、p
4*
(0，h)，对于这四个顶点中任意一个点，就可以计算出p和q的物理距离(单位m)：
[0103][0104]
其中，(x
p*
，y
p*
)为点p在c
tv
中的坐标，ppi为通过手机设备硬件接口获取的屏幕ppi(pixels per inch，像素密度)值。
[0105]
获得pq的物理距离后，可进一步通过三角函数计算求出点p到视点o的物理距离。三维空间中，o为视点，如图17所示，p'、q'、m三点位于投影面，如图18所示，om与光轴重合，并垂直于投影面。点p和垂点q位于tv平面，线段op的长度即为点p在c0的极坐标分量r，它可以通过下列步骤求得：
[0106]
求出p'点在c0的极坐标分量和θ
p'
，其中θ
p'
即∠mop'的值；
[0107]
求出q'点在c0的极坐标分量和θ
q'
，其中θ
q'
即∠moq'的值；
[0108]
求出∠p'mq'的大小，即
[0109]
设om长度为l0，则op'、oq'、mp'、mq'的长度l
op'
、l
oq'
、l
mp'
、l
mq'
分别可以通过三角函数关系求出；
[0110]
求出p'q'的长度l
p'q'
(通过已知l
op'
和l
oq'
及∠p'mq')；
[0111]
求出∠poq的值(通过已知l
op'
、l
oq'
、l
p'q'
三边)；
[0112]
最终求出op的长度，即点p的极坐标分量r：
[0113][0114]
进一步地，通过点p的空间极坐标可以得到p在c0中的直角坐标(x，y，z)：
[0115][0116][0117]
z＝r*cosθ
ꢀꢀꢀꢀꢀꢀꢀ
(21)
[0118]
s43、基于所述姿态信息，将所述初始相对空间关系进行转换，获得最终的相对空间关系，并建立最终的空间直角坐标系。
[0119]
建立最终的空间直角坐标系c1。将c0坐标系的点p坐标(x，y，z)转换到c1坐标系中的坐标p(x'，y'，z')。
[0120]
如图19所示，令手机姿态信息a
yaw
、a
pitch
、a
roll
三个分量为0
°
时，虚线的坐标系是c0，实线坐标系是c1。可见，c0的x轴与c1的y轴重合且方向相反；c0的y轴与c1的z轴重合且方向相反；c0的z轴与c1的x轴重合且方向相同。可以得出，当手机屏幕姿态复位时，c0中的点坐标(x，y，z)变换到c1的基础变换矩阵t0为：
[0121][0122]
对于手机屏幕姿态旋转时，在t0的基础上叠加绕x，y，z三轴旋转的变换矩阵t
roll
、t
pitch
、t
yaw
，其中旋转角与姿态参数a
yaw
、a
pitch
、a
roll
相反：
[0123][0124][0125][0126]
所以c0到c1的最终变换矩阵t为：
[0127]
t＝t0t
roll
t
pitch
t
yaw (26)
[0128]
通过变换矩阵t，可将c0中的坐标(x，y，z)映射到c1(x'，y'，z')中：
[0129]
[0130]
由此得到手机与固定端的相对空间关系，获得最终的空间直角坐标系，如图20所示，该空间直角坐标系以摄像头为原点，以磁北方向为x轴，以垂直于地平面并向天空方向为z轴，以垂直于磁北并与地平面平行的轴为y轴，方向遵循右手系规则，即y轴方向为磁西方向。
[0131]
s5、基于所述空间直角坐标系，生成互动命令，实现屏幕操作互动。
[0132]
根据上述步骤获得的手机与固定端的相对空间关系，生成互动命令，根据此互动命令，手机与固定端能够实现互动操作。
[0133]
综上所述，通过获取原始图像的二维信息，包括结合姿态信息、摄像头焦距和固定端屏幕的物理尺寸进行综合计算，获得屏幕之间相对空间关系，并建立空间坐标系，从而弥补了现有屏幕体感控制技术中缺乏空间坐标系的缺陷，大大拓展了屏幕体感控制的应用场景。此外，通过手持终端设备自身的硬件实现空间信息获取，不依赖专用的空间感应装置手持终端就能够感知固定端的具体方向及距离，具有适用性广的优点。
[0134]
实施例2
[0135]
本实施例提供了一种电子设备，其特征在于，包括一个或多个处理器、存储器和被存储在存储器中的一个或多个程序，所述一个或多个程序包括用于执行如实施例1所述的一种屏幕操作互动方法的指令。
[0136]
实施例3
[0137]
本实施例提供了一种计算机可读存储介质，包括供电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行如实施例1所述的一种屏幕操作互动方法的指令。
[0138]
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。本发明实施例中的方案可以采用各种计算机语言实现，例如，面向对象的程序设计语言java和直译式脚本语言javascript等。
[0139]
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0140]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0141]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一
个方框或多个方框中指定的功能的步骤。
[0142]
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
[0143]
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
[0144]
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思作出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。

技术特征：
1.一种屏幕操作互动方法，其特征在于，该方法应用于手持终端，包括以下步骤：与固定端建立通信连接；接收固定端发出的识别信号，获得固定端的拍摄图像，并记录拍摄时的姿态信息，其中，固定端展示原始图像；将所述拍摄图像与原始图像进行匹配，获得原始图像的二维信息；基于包括所述二维信息、姿态信息、摄像头焦距和固定端屏幕的物理尺寸在内的数据进行综合计算，获得相对空间关系，并建立空间直角坐标系；基于所述空间直角坐标系，生成互动命令，实现屏幕操作互动。2.根据权利要求1所述的一种屏幕操作互动方法，其特征在于，所述的姿态信息包括俯仰角、方向角和翻滚角。3.根据权利要求1所述的一种屏幕操作互动方法，其特征在于，通过图像识别算法将所述拍摄图像与原始图像进行匹配。4.根据权利要求1所述的一种屏幕操作互动方法，其特征在于，所述的二维信息包括固定端的四个顶点坐标。5.根据权利要求1所述的一种屏幕操作互动方法，其特征在于，建立空间直角坐标系的具体步骤包括：以摄像头为原点，建立初始空间直角坐标系；基于所述初始空间直角坐标系和透视投影，所述二维信息结合摄像头焦距和固定端屏幕的物理尺寸进行计算，获得初始相对空间关系；基于所述姿态信息，将所述初始相对空间关系进行转换，获得最终的相对空间关系，并建立最终的空间直角坐标系。6.根据权利要求5所述的一种屏幕操作互动方法，其特征在于，以像距近似为所述的摄像头焦距。7.根据权利要求5所述的一种屏幕操作互动方法，其特征在于，根据固定端屏幕的分辨率和像素点大小计算所述固定端屏幕的物理尺寸。8.根据权利要求5所述的一种屏幕操作互动方法，其特征在于，在进行计算时，将所述初始空间直角坐标系转化为极坐标形式。9.一种电子设备，其特征在于，包括一个或多个处理器、存储器和被存储在存储器中的一个或多个程序，所述一个或多个程序包括用于执行如权利要求1-8任一所述的一种屏幕操作互动方法的指令。10.一种计算机可读存储介质，其特征在于，包括供电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行如权利要求1-8任一所述的一种屏幕操作互动方法的指令。

技术总结
本发明涉及一种屏幕操作互动方法、设备及存储介质，该方法包括以下步骤：与固定端建立通信连接；接收固定端发出的识别信号，获得固定端的拍摄图像，并记录拍摄时的姿态信息，其中，固定端展示原始图像；将所述拍摄图像与原始图像进行匹配，获得原始图像的二维信息；基于包括所述二维信息、姿态信息、摄像头焦距和固定端屏幕的物理尺寸在内的数据进行综合计算，获得相对空间关系，并建立空间直角坐标系；基于所述空间直角坐标系，生成互动命令，实现屏幕操作互动。与现有技术相比，本发明具有能够使得手持终端感知固定端的具体方向及距离，扩大使用场景等优点。扩大使用场景等优点。扩大使用场景等优点。


技术研发人员：宋起柱 曹雅莉 彭文胜 潘磊 刘磊 耿文俊 沈德荣 汤毅
受保护的技术使用者：中国广播电视网络集团有限公司
技术研发日：2023.05.22
技术公布日：2023/10/6