CN111367221A - 基于混合现实技术变电站智能运检辅助系统人机交互方法 - Google Patents
基于混合现实技术变电站智能运检辅助系统人机交互方法 Download PDFInfo
- Publication number
- CN111367221A CN111367221A CN202010206387.1A CN202010206387A CN111367221A CN 111367221 A CN111367221 A CN 111367221A CN 202010206387 A CN202010206387 A CN 202010206387A CN 111367221 A CN111367221 A CN 111367221A
- Authority
- CN
- China
- Prior art keywords
- model
- equipment
- dimensional
- data
- gesture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000007689 inspection Methods 0.000 title claims abstract description 27
- 238000005516 engineering process Methods 0.000 title claims abstract description 21
- 230000003993 interaction Effects 0.000 title claims abstract description 20
- 238000012800 visualization Methods 0.000 claims abstract description 16
- 238000004891 communication Methods 0.000 claims description 12
- 238000011161 development Methods 0.000 claims description 10
- 238000012544 monitoring process Methods 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 238000007794 visualization technique Methods 0.000 claims description 5
- 230000003213 activating effect Effects 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 claims description 3
- 238000004806 packaging method and process Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 3
- 238000002360 preparation method Methods 0.000 claims 1
- 230000006870 function Effects 0.000 abstract description 8
- 238000012423 maintenance Methods 0.000 abstract description 6
- 206010063385 Intellectualisation Diseases 0.000 abstract description 4
- 230000009467 reduction Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012938 design process Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
- G05B19/0423—Input/output
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/23—Pc programming
- G05B2219/23051—Remote control, enter program remote, detachable programmer
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种基于混合现实技术变电站智能运检辅助系统人机交互方法，包括二维码扫描模块、设备虚拟拆装模块和实时三维可视化模块；本发明实现变电站运检辅助系统的设备虚拟拆装，实时三维可视化，远程专家辅助功能，以二维码作为模块的入口标识。通过扫描二维码，系统获取设备的信息，调用设备的三维模型和动画，通过GGV交互，实现对设备的移动、旋转、拆装、还原等设备虚拟拆装操作，方便运维人员了解设备内部结构和操作方法，提高技术水平和工作效率及安全性。通过扫描二维码，获取URL地址，系统调用浏览器实现实时数据显示、超限报警等实时三维可视化功能，实现运维智能化、自动化。
Description
技术领域
本发明涉及一种基于混合现实技术变电站智能运检辅助系统人机交互方法，属于智能设备技术领域。
背景技术
随着虚拟现实(VR)消费设备可用性的增加以及三维(3D)可视化的内在优势，许多沉浸式3D电力应用软件已经出现并快速发展。虽然这些更高分辨率的完全沉浸式系统为电力应用提供了理想的平台，但由于完全阻隔了正常现场，因此仍然无法将完全沉浸式设备应用到电力现场运检环境中。增强现实(AR)技术允许运检人员通过一副眼镜查看设备信息等数据，同时保持眼神接触。随着显示硬件功能的进一步成熟，出现了混合现实(MR)技术。MR提供了更直观的语音，手势和注视跟踪等控制方法，允许用户保持与环境的连接，最大限度地降低运检人员的额外风险。
VR，AR和MR可统称为扩展现实(ER)，它们创建数字和物理现实的适当集成，各有其独特的技术性能。VR用数字内容替换整个物理环境，能够支持交互，但阻止用户与物理空间进行交互。AR通常在ER中最不具侵入性，比较适合向用户提供通常使用纸张或传统显示器访问的信息或通知。MR是将信息集成到物理环境中，为显示的信息提供额外的空间相关性和上下文关联，MR在物理空间中锚定或覆盖信息，使用户能够更多地与数字对象进行交互，就好像它们存在于物理空间中一样。在工业实践中，MR越来越多地用于信息可视化，远程协作，人机界面，设计工具以及教育和培训。例如：福特公司在汽车设计中，设计师使用MR头戴式设备(HMD)，通过增强的图纸改变汽车的外观，使设计过程更加协作和有效。在基于MR的工业机器人交互式编程系统里，用户可以通过高度直观的界面与机器人和空间环境进行交互，使没有编程技能的用户也能将任务分配给机器人。MR还应用于船舶辅机拆装，使船舶辅机虚拟拆装更加智能、便利和贴近现实。
随着2016年底国家电网公司运维检修部智能运检白皮书的发布，对利用新技术、新设备优化传统运检现场工作方式，提升运检效率，推进运检现场工作智能化提出了更高的要求。
变电站运检现场工作对智能化的要求，使得对基于混合现实技术的变电站运检辅助系统进行开发设计具有现实意义。系统利用混合现实平台HoloLens扫码识别电力设备，高效快捷的获取设备信息，将获取的设备三维装配数据、设备实时状态数据等数字内容在真实环境中混合显示，优化了传统运检现场工作方式，提升运检效率，减少运检人员携带电脑笔记本、平板电脑及纸质参考资料等，实现轻装作业。
发明内容
本发明的目的在于提供一种基于混合现实技术变电站智能运检辅助系统人机交互方法，基于智能穿戴设备HoloLens，提供变电站智能辅助运检的整套解决方案，包括电力设备识别与虚拟拆装，设备运行状态实时三维可视功能。
本发明的目的通过以下技术方案予以实现：
一种基于混合现实技术变电站智能运检辅助系统人机交互方法，所述基于混合现实技术变电站智能运检辅助系统基于微软混合现实平台HoloLens，包括设备虚拟拆装模块、实时三维可视化模块；
混合现实技术变电站智能运检辅助系统以二维码作为人工标识，用以识别电力设备以及URL地址；扫描二维码方法包括：
步骤S1，当激活二维码识别程序后，系统启动摄像头，如果启动不成功，则提示打开摄像头失败，并重启摄像头，如果启动成功，则显示扫描方框，并文字提示用户在此范围内扫描；
步骤S2，摄像头启动成功后，摄像头开始捕获单击手势，如果捕获未成功，则重新捕获单击手势，如果捕获成功，则获取一帧摄像机图像数据；
步骤S3，对图像进行裁剪，保留二维码区域；
步骤S4，求世界坐标系中二维码扫描坐标；
步骤S5，将投影坐标转换成为PhotoCapture拍摄的图像上的坐标；
步骤S6，将图像进行垂直反转；
步骤S7，调用zxing库对二维码图像进行解码，如果解码失败，则摄像头重新捕获单击手势；
步骤S8，如果解码成功，则根据解析的字符串，查找对应场景；
步骤S9，如果没有对应场景，则摄像头重新捕获单击手势，如果有对应场景，则加载对应场景；
所述设备虚拟拆装模块使用语音识别实现对设备三维模型虚拟拆装，语音识别虚拟拆装方法包括：
步骤S1，当激活设备虚拟拆装模块后，系统加载模型到场景中；
步骤S2，监听语音输入；
步骤S3，当消息为第一语音时，如果模型为注视焦点，则响应模型移动手势，用户可使用拖拽手势移动模型到合适位置，如果模型不是注视焦点，则不响应手势；
步骤S4，当消息为第二语音时，如果模型为注视焦点，则响应模型旋转手势，用户可使用拖拽手势旋转模型，进行全方位观察，如果模型不是注视焦点，则不响应手势；
步骤S5，当消息为第三语音时，将设备三维模型分解，此时当模型部件为注视焦点时，可响应模型移动手势；
步骤S6，当消息为第四语音时，解体的设备三维模型恢复原状。
所述实时三维可视化模块对设备运行状态实时三维显示报警，三维可视化方法包括：
步骤S1，当设备端程序激活时，传感器开始采集数据；
步骤S2，将采集到的数据发送给PLC设备；
步骤S3，如果通信超时，则对命令帧分析，然后清除缓冲区；当通信不超时，判断是否集满一帧数据；
步骤S4，如果帧数据不满，则PLC继续接收字符，如果满一帧，则进行命令帧分析；
步骤S5，如果命令帧错误，则发送错误响应帧，然后清除缓冲区；
步骤S6，如果命令帧正确，则发送帧至后台，最后清除缓冲区；
步骤S7，当后台程序激活时，后台服务器开始接收电力设备状态信息；
步骤S8，对数据进行封装，生成JSON数据；
步骤S9，建立WebSoket服务，监听服务请求。
步骤S10，当前端程序激活时，前端页面开始加载三维模型；
步骤S11，发出WebSoket通信请求，如果请求未响应，则继续发送WebSoket通信请求；
步骤S12，当请求被响应时，前端接收后台发送的JSON数据；
步骤S13，当数据未超限时，模型和数据正常显示，当数据超限时，相关模型部件以红色警示。
本发明的目的还可以通过以下技术措施来进一步实现：
前述基于混合现实技术变电站智能运检辅助系统人机交互方法，其中扫描二维码方法，利用C#语言编写程序，在Unity和Visual Studio开发环境中编译实现。
前述基于混合现实技术变电站智能运检辅助系统人机交互方法，其中语音识别虚拟拆装方法，利用C#语言编写程序，在Unity和Visual Studio开发环境中编译实现。
前述基于混合现实技术变电站智能运检辅助系统人机交互方法，其中三维可视化方法，利用Java和JavaScript语言编写程序，在eclipse开发环境中编译实现。
与现有技术相比，本发明的有益效果是：本发明实现变电站运检辅助系统的设备虚拟拆装，实时三维可视化功能，以二维码作为模块的入口标识。通过扫描二维码，系统获取设备的信息，调用设备的三维模型和动画，通过GGV交互，实现对设备的移动、旋转、拆装、还原等设备虚拟拆装操作，方便运维人员了解设备内部结构和操作方法，提高技术水平和工作效率及安全性。通过扫描二维码，获取URL地址，系统调用浏览器实现实时数据显示、超限报警等实时三维可视化功能，实现运维智能化、自动化。
附图说明
图1是软件系统框架图；
图2是二维码识别工作流程图；
图3是设备虚拟拆装工作流程图；
图4是实时数据三维可视化工作流程图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明。
本发明的目的在于提供一种基于混合现实技术变电站智能运检辅助系统人机交互方法，基于混合现实技术变电站智能运检辅助系统基于智能穿戴设备HoloLens，提供变电站智能辅助运检的整套解决方案，包括电力设备识别与虚拟拆装，设备运行状态实时三维可视功能。
系统整体框架设计：
变电站运检辅助系统基于微软混合现实平台HoloLens开发，HoloLens是一款不受线缆限制的全息计算机智能眼镜，能让用户与数字内容交互，并与周围真实环境中的全息影像互动。作为混合现实设备，HoloLens具有独特的人机交互模式，即凝视，手势和语音，简称GGV。本系统以HoloLens扫描二维码为应用入口，以GGV的交互模式实现设备虚拟拆装，实时三维可视化等功能模块。
系统框架：基于混合现实技术的变电站运检辅助系统技术框图如图1所示，系统核心为混合现实平台HoloLens。HoloLens通过SLAM算法进行空间扫描，采集真实场景信息，再通过识别二维码，调用设备三维模型并锚定在真实的场景中或与实时数据服务器进行通信，然后用户通过语音、手势和凝视等方式与全息数字内容进行交互。
系统功能：变电站运检辅助系统功能分为二维码扫描模块、设备虚拟拆装模块，实时三维可视化模块，必要时可以与远程专家辅助系统连接，以二维码作为模块的入口标识。通过扫描二维码，系统获取设备的信息，调用设备的三维模型和动画，通过GGV交互，实现对设备的移动、旋转、拆装、还原等设备虚拟拆装操作。通过扫描二维码，获取URL地址，系统调用浏览器实现实时数据显示、超限报警等实时三维可视化功能。
本发明共分为三个功能模块，分别是二维码扫描模块，设备虚拟拆装模块和实时三维可视化模块。为了使本发明更加易于明白了解，下面结合图示与具体实施例，对本发明进行进一步阐述。
二维码扫描方法，利用C#语言编写程序，在Unity和Visual Studio开发环境中编译实现。系统以二维码作为相关人工标识，用以识别电力设备以及URL地址。HoloLens眼镜通过扫描二维码，根据获取的二维码信息，切换到指定的相关应用，二维码识别作为系统各功能的入口。系统利用Air tap手势，激活识别程序，使用不同声音提示识别是否成功。如图2所示，方法包括：
步骤S1，当激活二维码识别程序后，系统启动摄像头，如果启动不成功，则提示打开摄像头失败，并重启摄像头，如果启动成功，则显示扫描方框，并文字提示用户在此范围内扫描；
步骤S2，摄像头启动成功后，摄像头开始捕获单击手势，如果捕获未成功，则重新捕获单击手势，如果捕获成功，则获取一帧摄像机图像数据；
步骤S3，对图像进行裁剪，保留二维码区域；
步骤S4，求世界坐标系中二维码扫描坐标；
步骤S5，将投影坐标转换成为PhotoCapture拍摄的图像上的坐标；
步骤S6，将图像进行垂直反转；
步骤S7，调用zxing库对二维码图像进行解码，如果解码失败，则摄像头重新捕获单击手势；
步骤S8，如果解码成功，则根据解析的字符串，查找对应场景；
步骤S9，如果没有对应场景，则摄像头重新捕获单击手势，如果有对应场景，则加载对应场景。
设备虚拟拆装方法，利用C#语言编写程序，在Unity和Visual Studio开发环境中编译实现，系统使用语音识别实现对设备三维模型操作的转换。如图3所示方法包括：
步骤S1，当激活设备虚拟拆装模块后，系统加载模型到场景中；
步骤S2，监听语音输入；
步骤S3，当消息为第一语音，如“move model”时，如果模型为注视焦点，则响应模型移动手势，用户可使用拖拽手势移动模型到合适位置，如果模型不是注视焦点，则不响应手势；
步骤S4，当消息为第二语音，如“rotate model”时，如果模型为注视焦点，则响应模型旋转手势，用户可使用拖拽手势旋转模型，进行全方位观察，如果模型不是注视焦点，则不响应手势；
步骤S5，当消息为第三语音，如“expand model”时，将设备三维模型分解，此时当模型部件为注视焦点时，可响应模型移动手势；
步骤S6，当消息为第四语音，如“reset model”时，解体的设备三维模型恢复原状。
所述实时三维可视化方法，利用Java和JavaScript语言编写程序，在eclipse开发环境中编译实现。如图4所示方法包括：
步骤S1，当设备端程序激活时，传感器开始采集数据；
步骤S2，将采集到的数据发送给PLC设备；
步骤S3，如果通信超时，则对命令帧分析，然后清除缓冲区；当通信不超时，判断是否集满一帧数据；
步骤S4，如果帧数据不满，则PLC继续接收字符，如果满一帧，则进行命令帧分析；
步骤S5，如果命令帧错误，则发送错误响应帧，然后清除缓冲区；
步骤S6，如果命令帧正确，则发送帧至后台，最后清除缓冲区；
步骤S7，当后台程序激活时，后台服务器开始接收电力设备状态信息；
步骤S8，对数据进行封装，生成JSON数据；
步骤S9，建立WebSoket服务，监听服务请求。
步骤S10，当前端程序激活时，前端页面开始加载三维模型；
步骤S11，发出WebSoket通信请求，如果请求未响应，则继续发送WebSoket通信请求；
步骤S12，当请求被响应时，前端接收后台发送的JSON数据；
步骤S13，当数据未超限时，模型和数据正常显示，当数据超限时，相关模型部件以红色警示。
除上述实施例外，本发明还可以有其他实施方式，凡采用等同替换或等效变换形成的技术方案，均落在本发明要求的保护范围内。
Claims (4)
1.一种基于混合现实技术变电站智能运检辅助系统人机交互方法，所述基于混合现实技术变电站智能运检辅助系统基于微软混合现实平台HoloLens，包括设备虚拟拆装模块、实时三维可视化模块；其特征在于，
混合现实技术变电站智能运检辅助系统以二维码作为人工标识，用以识别电力设备以及URL地址，扫描二维码方法包括：
步骤S1，当激活二维码识别程序后，系统启动摄像头，如果启动不成功，则提示打开摄像头失败，并重启摄像头，如果启动成功，则显示扫描方框，并文字提示用户在此范围内扫描；
步骤S2，摄像头启动成功后，摄像头开始捕获单击手势，如果捕获未成功，则重新捕获单击手势，如果捕获成功，则获取一帧摄像机图像数据；
步骤S3，对图像进行裁剪，保留二维码区域；
步骤S4，求世界坐标系中二维码扫描坐标；
步骤S5，将投影坐标转换成为PhotoCapture拍摄的图像上的坐标；
步骤S6，将图像进行垂直反转；
步骤S7，调用zxing库对二维码图像进行解码，如果解码失败，则摄像头重新捕获单击手势；
步骤S8，如果解码成功，则根据解析的字符串，查找对应场景；
步骤S9，如果没有对应场景，则摄像头重新捕获单击手势，如果有对应场景，则加载对应场景；
设备虚拟拆装模块使用语音识别实现对设备三维模型虚拟拆装，语音识别虚拟拆装方法包括：
步骤S1，当激活设备虚拟拆装模块后，系统加载模型到场景中；
步骤S2，监听语音输入；
步骤S3，当消息为第一语音时，如果模型为注视焦点，则响应模型移动手势，用户可使用拖拽手势移动模型到合适位置，如果模型不是注视焦点，则不响应手势；
步骤S4，当消息为第二语音时，如果模型为注视焦点，则响应模型旋转手势，用户可使用拖拽手势旋转模型，进行全方位观察，如果模型不是注视焦点，则不响应手势；
步骤S5，当消息为第三语音时，将设备三维模型分解，此时当模型部件为注视焦点时，可响应模型移动手势；
步骤S6，当消息为第四语音时，解体的设备三维模型恢复原状；
实时三维可视化模块对设备运行状态实时三维显示报警，三维可视化方法包括：
步骤S1，当设备端程序激活时，传感器开始采集数据；
步骤S2，将采集到的数据发送给PLC设备；
步骤S3，如果通信超时，则对命令帧分析，然后清除缓冲区；当通信不超时，判断是否集满一帧数据；
步骤S4，如果帧数据不满，则PLC继续接收字符，如果满一帧，则进行命令帧分析；
步骤S5，如果命令帧错误，则发送错误响应帧，然后清除缓冲区；
步骤S6，如果命令帧正确，则发送帧至后台，最后清除缓冲区；
步骤S7，当后台程序激活时，后台服务器开始接收电力设备状态信息；
步骤S8，对数据进行封装，生成JSON数据；
步骤S9，建立WebSoket服务，监听服务请求。
步骤S10，当前端程序激活时，前端页面开始加载三维模型；
步骤S11，发出WebSoket通信请求，如果请求未响应，则继续发送WebSoket通信请求；
步骤S12，当请求被响应时，前端接收后台发送的JSON数据；
步骤S13，当数据未超限时，模型和数据正常显示，当数据超限时，相关模型部件以红色警示。
2.如权利要求1所述的基于混合现实技术变电站智能运检辅助系统人机交互方法，其特征在于，扫描二维码方法，利用C#语言编写程序，在Unity和VisualStudio开发环境中编译实现。
3.如权利要求1所述的基于混合现实技术变电站智能运检辅助系统人机交互方法，其特征在于，语音识别虚拟拆装方法利用C#语言编写程序，在Unity和VisualStudio开发环境中编译实现。
4.如权利要求1所述的基于混合现实技术变电站智能运检辅助系统人机交互方法，其特征在于，三维可视化方法利用Java和JavaScript语言编写程序，在eclipse开发环境中编译实现。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010206387.1A CN111367221A (zh) | 2020-03-23 | 2020-03-23 | 基于混合现实技术变电站智能运检辅助系统人机交互方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010206387.1A CN111367221A (zh) | 2020-03-23 | 2020-03-23 | 基于混合现实技术变电站智能运检辅助系统人机交互方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111367221A true CN111367221A (zh) | 2020-07-03 |
Family
ID=71210538
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010206387.1A Pending CN111367221A (zh) | 2020-03-23 | 2020-03-23 | 基于混合现实技术变电站智能运检辅助系统人机交互方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111367221A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111987630A (zh) * | 2020-07-10 | 2020-11-24 | 国网上海市电力公司 | 一种用于电力物联网检修的可视化设备系统 |
| CN112509149A (zh) * | 2020-12-08 | 2021-03-16 | 太原理工大学 | 基于混合现实的三面六点轴径测量工艺指导系统及方法 |
| CN113205608A (zh) * | 2021-05-11 | 2021-08-03 | 安徽工业大学 | 一种基于ar技术的磨床产品远程交互与运维系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105425698A (zh) * | 2015-11-09 | 2016-03-23 | 国网重庆市电力公司电力科学研究院 | 一种三维数字变电站一体化管控方法及系统 |
| CN108399276A (zh) * | 2018-01-18 | 2018-08-14 | 武汉理工大学 | 基于HoloLens虚实结合技术的船舶主机拆装系统及其拆装方法 |
| CN109242979A (zh) * | 2018-09-05 | 2019-01-18 | 国家电网公司 | 一种基于混合现实技术的隐蔽管道可视化系统和方法 |
| CN109246195A (zh) * | 2018-08-13 | 2019-01-18 | 孙琤 | 一种融合增强现实、虚拟现实的管网智能管控方法及系统 |
| CN109859538A (zh) * | 2019-03-28 | 2019-06-07 | 中广核工程有限公司 | 一种基于混合现实的关键设备培训系统及方法 |
| US20190186779A1 (en) * | 2017-12-19 | 2019-06-20 | Honeywell International Inc. | Building system commissioning using mixed reality |
| US20190355177A1 (en) * | 2018-05-15 | 2019-11-21 | Honeywell International Inc. | Building system maintenance using mixed reality |
| CN110689450A (zh) * | 2019-09-02 | 2020-01-14 | 上海华高汇元工程服务有限公司 | 一种基于三维可视化模式的智慧水务运营系统 |
-
2020
- 2020-03-23 CN CN202010206387.1A patent/CN111367221A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105425698A (zh) * | 2015-11-09 | 2016-03-23 | 国网重庆市电力公司电力科学研究院 | 一种三维数字变电站一体化管控方法及系统 |
| US20190186779A1 (en) * | 2017-12-19 | 2019-06-20 | Honeywell International Inc. | Building system commissioning using mixed reality |
| CN108399276A (zh) * | 2018-01-18 | 2018-08-14 | 武汉理工大学 | 基于HoloLens虚实结合技术的船舶主机拆装系统及其拆装方法 |
| US20190355177A1 (en) * | 2018-05-15 | 2019-11-21 | Honeywell International Inc. | Building system maintenance using mixed reality |
| CN109246195A (zh) * | 2018-08-13 | 2019-01-18 | 孙琤 | 一种融合增强现实、虚拟现实的管网智能管控方法及系统 |
| CN109242979A (zh) * | 2018-09-05 | 2019-01-18 | 国家电网公司 | 一种基于混合现实技术的隐蔽管道可视化系统和方法 |
| CN109859538A (zh) * | 2019-03-28 | 2019-06-07 | 中广核工程有限公司 | 一种基于混合现实的关键设备培训系统及方法 |
| CN110689450A (zh) * | 2019-09-02 | 2020-01-14 | 上海华高汇元工程服务有限公司 | 一种基于三维可视化模式的智慧水务运营系统 |
Non-Patent Citations (1)
| Title |
|---|
| 陈闻等: "基于增强现实技术的电网设备检修系统的研制", 《现代制造技术与装备》 * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111987630A (zh) * | 2020-07-10 | 2020-11-24 | 国网上海市电力公司 | 一种用于电力物联网检修的可视化设备系统 |
| CN112509149A (zh) * | 2020-12-08 | 2021-03-16 | 太原理工大学 | 基于混合现实的三面六点轴径测量工艺指导系统及方法 |
| CN112509149B (zh) * | 2020-12-08 | 2023-05-02 | 太原理工大学 | 基于混合现实的三面六点轴径测量工艺指导系统及方法 |
| CN113205608A (zh) * | 2021-05-11 | 2021-08-03 | 安徽工业大学 | 一种基于ar技术的磨床产品远程交互与运维系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111367221A (zh) | 基于混合现实技术变电站智能运检辅助系统人机交互方法 | |
| Zhu et al. | A context-aware augmented reality system to assist the maintenance operators | |
| JP7220753B2 (ja) | ラベル付けツールの生成方法と装置、ラベル付け方法と装置、電子デバイス、記憶媒体及びプログラム | |
| CN102224476A (zh) | 多进程交互系统和方法 | |
| US20140247283A1 (en) | Unifying augmented reality and big data | |
| CN112306233A (zh) | 一种巡检方法、系统和巡检管理平台 | |
| CN115249291A (zh) | 一种基于Hololens设备的三维虚拟装备库系统 | |
| CN114895891A (zh) | 一种图形软件的处理方法、装置、电子设备及存储介质 | |
| Duke | Reasoning about gestural interaction | |
| Lapointe et al. | A literature review of AR-based remote guidance tasks with user studies | |
| Rehman et al. | Comparative evaluation of augmented reality-based assistance for procedural tasks: a simulated control room study | |
| Hongli et al. | Application of AR technology in aircraft maintenance manual | |
| CN115080886A (zh) | 一种基于移动端的三维医学模型glb文件解析与展示方法 | |
| CN114169546A (zh) | 一种基于深度学习的mr远程协同装配系统及方法 | |
| CN114333056A (zh) | 一种手势控制的方法、系统、设备及存储介质 | |
| CN112416332B (zh) | 一种图形化编程的界面展示方法、装置、设备及介质 | |
| CN101907992B (zh) | 用于提供Windows环境下三维用户界面的设备和方法 | |
| Olmedo et al. | Multimodal interaction with virtual worlds XMMVR: eXtensible language for MultiModal interaction with virtual reality worlds | |
| CN111660294B (zh) | 一种液压重载机械臂增强现实操控系统 | |
| CN110852296A (zh) | 基于语义模型的消防运维阶段人员异常检测装置和方法 | |
| CN102722250A (zh) | 一种影像控制点交互编辑的方法及系统 | |
| EP1044408A1 (en) | Dynamic interface synthesizer | |
| Tang et al. | Using augmented reality techniques to simulate training and assistance in electric power | |
| Yu et al. | A novel MR remote collaborative assembly system using reconstructed attribute-enhanced product models | |
| CN118394245B (zh) | 三维可视化数据分析和展示系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200703 |