本发明公开了一种基于虚拟现实型的可见即可控智能家居控制系统及方法，虚拟现实图像编辑模块构建虚拟现实家居图像，在显示模块上显示，用户模块采集用户信息，根据用户选定的房间切换到对应房间的虚拟现实图像，再根据用户选定的房间内的被控家电设备以及用户的命令内容生成命令信息，用户模块将命令信息传输至家电控制集成模块，家电控制集成模块根据命令内容实现对被控设备的正向控制，并实时读取设备的状态信息经通讯模块反馈到用户模块，形成闭环系统。本发明采用看与控一体的人机交互控制革命了菜单模式的控制，用户控制智能家电设备时，如同真实控制一样通过看到、想到就能做到，用户控制体验效果极为简易、人性化。

探索虚拟环境的真实感知以及虚实环境融合的一致性理 论与方法，主要研究虚拟环境的构建、大规模场景绘制、沉 浸式真实感漫游、目标检测与识别等关键技术，在高分遥感 影像增强的虚拟仿真、高清立体显示、多用户虚拟漫游等方 面研究特色鲜明。

华南理工大学声学研究所是国内最早（1958年）开展空间声重放的研究单位。研究领域包括心理声学、电声学、声信号处理、室内声学、音乐声学等，特别侧重于双耳听觉与心理声学、声场空间信息重放方面的基础研究。 七十年代末到九十年代末，系统地开展了立体声、环绕声及其重放声场方面的研究工作。从 2000 年代开始，对空间听觉与虚拟听觉重放进行了系统的基础研究工作。目前已设计和建立了头相关传输函数(HRTF)的快速测量系统。2005年建立了首个中国人受试者的头相关传输函数(HRTF)数据库，2009年和2010年分别建立了KEMAR人工头的近场和超高空间分辨率的HRTF数据库，2010年完成了虚拟听觉环境实时绘制系统的研究工作，2015年已建立了中国人受试者样本的近场HRTF数据库(国际上第一个真人受试者的近场HRTF数据库)。成果“空间听觉与虚拟听觉重放的关键技术及应用”获得2018年度高等学校科学研究优秀成果奖（科学技术）科技进步奖——科技进步类二等奖。 与国内知名企事业单位（如华为、国光电器公司、TCL等）合作开展虚拟听觉与多通路环绕声技术与产品的研发，已实现产品产业化生产。 快速HRTF测量系统 多通路环绕声重放系统

一、项目简介 基于云平台的虚拟助手可视对讲终端，融合了先进的互联网云中大数据技术和图像及语音识别技术，将家庭室内机及门口主机、室内分机和手机智能连接等增加了图像及语音识别技术，并结合云端架构，在实现视频通话和开锁及智能家居控制等基本功能基础上，增加了更加智能的图像和语音识别技术和云服务功能（类似于家庭服务机器人），如可通过与云端语音对话达到不出家门可用语音对话即可购物、请人帮助及家庭医疗监护等增值云服务功能，相当于得到一位高智商高能力更加人性化的虚拟助手，还可通过图像视频等帮助居家老人获得帮助，解决目前社会老年化问题，并使传统智能家居系统创新，获得颠覆式技术革新。 二、前期研究基础 先期帮助企业完成了智能家居可视对讲终端的设计及私有云服务器的搭建。1)      数字福建物联网通信和体系架构及安全技术实验室建设，福建省发改委，400万2)      基于开放业务平台的泛在融合智能家居系统的研制福建省科技计划重点项目福建省科技厅（NO：2013H0048 ） 2013.1-2016.12 （3）数字家庭网关的研制福建省科技重点项目（创意产业发展专项（工业）），40万，（NO:2013H1008）与漳州二菱电子有限公司合作2013.9-2015.8 （4）自组织网智能家居安防系统的研制，科技部项目 2009.9-2011.5 项目编号2009GJC40038 （5）智能家居安防技术中心, 厦门大学信息科学与技术学院和厦门立林科技有限公司联合实验室项目150万 （6）2017-2020年物联网应用技术研究基金，福建联迪商用设备有限公司，150万 三、应用技术成果 四、合作企业 厦门立林科技有限公司成立于1993年，总资产1.3亿元人民币，综合实力位居中国楼宇对讲行业前三位。在厦门拥有总占地11万平方米的工业园，拥有世界一流的生产、检测设备，实现了产品全套工序的自主生产。在中国拥有3000多万的用户群体和超过20%的市场份额，产品远销美国、英国、德国、法国、意大利等多个国家和地区。

面向数字人的大规模生成需求，发展生成式人工智能理论，探索机器学习方法从数据中自动化学习数字人建模方法，提出了高精度三维人脸重建技术、表情驱动数字人技术、语音驱动数字人技术三项世界领先的技术，以低成本、高效率生成可驱动的高保真数字人。该技术能够极大提升数字人的生成质量与生成效率，支持大规模高精度的数字人生成，具有广泛的应用前景。

产品详细介绍 NComputing在全球已交付超过300万的低成本瘦客户机。 而我们最新的RX300也是基于最新的Raspberry Pi 3平台而生产的新一代X86架构的瘦客户机。 RX300是NComputing专门为桌面虚拟化解决方案而设计和优化的一款x86瘦客户机，并给用户提供了类PC的体验功能。 RX300不仅支持有全屏幕，全动态高清多媒体播放功能，而且还支持vCAST直播流技术，内置透明USB重定向功能，实现无与伦比的外设支持，WiFi和Linux Raspbian操作系统可选的访问由IT管理员统一管理。 RX300提供了一个易于部署，集中管理的高性能虚拟桌面，完美适用于SMB和教育。  任何NComputing瘦客户端的最低初始成本； 集中管理       云就绪 透明USB重定向     双显示器功能 对vSpace和Raspbian Linux操作系统的预配置访问 睡眠模式功耗低于5W，可节省更多成本  1 提供最新的WINDOWS桌面体验 RX300针对vSpace Pro 10进行了全面的优化，可支持为9大常见的Windows操作系统交付虚拟桌面，包括Windows 10和Windows Server 2016。  2 云就绪与vCAST流支持 使用vCAST流在观看Web视频（如YouTube）或本地媒体内容时不需要昂贵的GPU，从而降低了服务器端的整体CPU使用率。 这允许更高质量的媒体流利用网络宽带，而无需担心CPU瓶颈问题，从而能支持更多的并发用户。  3集中管理和快速部署 RX300易于配置，并自动从已部署的vSpace Pro 10服务器接收更新。 管理员可以定义具有所有设置和配置的设备模板，然后克隆并将其推送到新设备。 所有这些都可以由IT管理员通过vSpace Pro进行集中管理和配置，只需点击几下即可控制数百个RX300设备。 使得用户RX300终端设备总是保持最新版本以获取到最新的技术体验更新。  4 BROAD USB外设支持 通过集成的透明USB重定向技术，RX300利用来自服务器端的设备驱动程序提供广泛的外设支持，包括大容量存储，打印机，扫描仪，读卡器，耳机或扬声器，网络摄像头和COM端口以及标准键盘和鼠标。  5 双显示器显示能力 通过NComputing的USB加密狗（VGA或DVI）的辅助显示功能，解决单一屏幕显示的局限性，从而提高了用户的工作效率。  6 通过以太网或Wi-Fi连接可定制灵活部署 RX300内置10/100以太网和Wi-Fi（802.11 b / g / n）。这就使得终端用户不再依赖于接线的基础设施，可以部署RX300在任何位置并且通过Wi-Fi访问并交付桌面，使得用户得到桌面体验。  7 RASPBAN LINUX模式支持增加灵活性 RX300配备了“瘦客户端模式”和“Raspbian Linux模式”。使用RX300作为瘦客户端可以连接到vSpace Pro 10和Verde VDI，或作为一个Raspberry Pi 3设备允许直接访问Raspbian Linux 操作系统及其流行的游戏（我的世界），代码应用程序（Scratch，Python和Java）和开发工具。 8 最低采集成本 RX300在我们的瘦客户端系列中提供最低的初始成本。 RX300附带了一个为期一年的软件连接许可证vSpace Pro 10桌面虚拟化软件，和一个为期6个月的vCAST流技术的试用版。 vSpace Pro 10的软件连接许可证可以在随后的每年续订。  9 RX300连接 1电源（5.1V micro USB） 2 HDMI的视频输出 3扬声器插孔（16bit / 22kHz高品质音频） 410/100 Mbps以太网RJ45端口 5高速USB 2.0端口，支持完全USB重定向（鼠标和键盘需要2个） 6 Kensington安全端口 7 睡眠模式按钮禁用显示输出以进入省电模式  

广州虚拟动力网络技术有限公司是一家以技术驱动为核心的高新科技企业，公司致力于AR、VR、AI领域智能软硬件产品的研发和销售。   经营范围：智能机器销售;互联网商品销售（许可审批类商品除外）;智能机器系统销售;图书数据处理技术开发;网络技术的研究、开发;集成电路设计;家用视听设备零售;机器人系统技术服务;专用设备销售;互联网商品零售（许可审批类商品除外）;机器人系统销售;机器人销售;智能机器系统技术服务;机器人的技术研究、技术开发;物联网技术研究开发;货物进出口（专营专控商品除外）;技术进出口;物联网服务;网络游戏服务;电影和影视节目制作;互联网出版业。

厦门立方幻境虚拟仿真系统将虚拟仿真技术与临床医学教学相结合，模拟数十种真实基础护理学案例，将基础临床医学专业操作规范要求、操作动作、器械位置等交互关系实时3D立体呈现；医学师生可直观观察各案例情况、按规范要求进行护理知识学习、实训；对操作过程实时展示、纠正错误、进行考评。系统能有效协助教师完成教学和考核工作，帮助医学生更快掌握基础护理学知识和技能。 系统拥有：PC、VR、AR、MR、3D交互墙、CAVE沉浸系统、移动版等多种软件版本，客户可根据需求定制。 产品涵盖： （1）、理虚实教学管理平台（2）、内科学（3）、外科学（4）、妇产科学（5）、儿科学（6）、口腔医学（7）、中医学（8）、基础护理（9）、急救护理（10）、老年护理（11）、康复治疗（12）、生理学（13）、动物学 等多个医学专业门类，及细分医学科目。更多产品资讯欢迎致电详询。

虚拟现实技术是指利用计算机技术构建和体验模拟现实世界场景的仿真系统，可使用户沉浸到模拟现实的环境中并进行交互操作。立方幻境医学虚拟现实系统中所有医学场景和操作动作均可被操作者介入进行交互式操作；可将传统模拟人无法展现的视角盲点通过计算机图形模拟以透视、剖视等多角度实时呈现，使操作更贴近实际规程，让学生、医护工作者在课堂、实训中更易理解和掌握，让教师、指导者在教学过程中更轻松解释疑点和难点。系统可分为单人和多人等多种模式。 （1）、VR虚拟现实系统 （2）、AR增强现实系统 （3）、MR混合现实系统-Hololense （4）、浸式3D立体虚拟现实交互系统 （5）、CAVE四面融合沉浸式交互式教学系统 （6）、力反馈虚实结合训练系统 （7）、虚实结合一体机台车 （8）、虚实结合产品体系

新型电力系统仿真分析、测试验证。 一、项目分类 关键核心技术突破 二、成果简介 随着“双碳目标”国家能源战略的确定和新型电力系统概念的提出，我国能源转型力度持续加大，逐步形成了大量新能源接入电力系统的局面。由于风能、太阳能等新能源与常规能源禀性差别很大，其并网发电系统具有显著不确定性、波动性和机械惯量缺失等特点。此外，高比例电力电子装备、新一代直流输电、多能互补的综合能源、各类大规模储能电站、各种通信及自动化新技术装置等因素使得新型电力系统组成要素愈加复杂，动态特性蕴含诸多未知，造成系统规划设计、装备制造、系统集成和运行控制等都面临史无前例的挑战。目前，电力科研院所、规划设计单位、装备制造厂家、教育培训机构等对新型电力系统开展仿真分析、测试验证的需求很大、很迫切。同时看到，新型电力系统的这些新型场景对仿真技术要求苛刻，门槛很高。 1）新型电力系统需要精细化动态模拟。人们对新型电力系统动态行为的认识还不够深入，无论是基础理论层面还是工程技术层面还处于广泛讨论、观点碰撞或局部示范试验阶段。然而，电力设施的新技术路线试错成本极高，不太可能对所有备选方案和技术选项都逐一示范。因此，开展大量深入的仿真研究是推进新型电力系统实施的必要手段。对于新型电力系统，需要深入开展仿真研究的领域包括：①新型电网体系结构研究；②新能源接入电网关键技术； ③ 新能源电网保护与自动化技术； ④源网荷储协同控制与优化调度；⑤新型配电网的电能质量分析与控制；⑥人工智能等新技术对新型电力系统的支撑。 2）新能源基地并网需要做稳定性评估。大规模陆上及海上风电集中接入局部电网有可能引发次/超同步振荡、宽频谐波谐振等电网安全稳定性问题，需要对这些问题进行机理及应对策略分析。所以需要对包含多类型新能源装备的局部电网做精细化动模仿真测试。然而，百千台级风光机组电磁暂态详细建模与仿真是一个卡脖子难题。 3）软、硬件在环仿真是必要的。新能源及储能电站的电力电子变流器控制及保护策略是厂家核心机密，对外不公开。由于控保策略对装置外特性及其接入系统的响应特性有重要影响，故需要分析内部核心控保策略。需要将新能源及储能控制器实物或黑盒模型接入测试平台开展动模仿真，以对其多时间尺度动态响应特性进行精细化分析。软、硬件在环试验对仿真平台提出了更高要求。 4）超大规模储能电站的仿真难度大。①单个储能机组的设备形态发生改变，从两/三电平变流器向模块化多电平变流器（MMC）的复杂结构演变，甚至采用储能跟变流器集成，故需要对这种复杂新形态做精细化测试验证。②超大规模、超大机组的储能电站包含较多并联储能单元或者储能机组，吉瓦时级储能电站，需上百台机组并联。另外，储能变流器的控制策略正从电流源型向电压源型转变，控制策略趋于复杂化，故需要大量的储能变流器的控制装置接入测试平台，才能对实现对储能单机以及多机之间协调控制性能测试，进而实现超大规模、超大机组的储能电站的精细化仿真。 5）现代直流输电控制与保护测试提出更高要求。超/特高压直流输电系统应用于新能源基地外送的控制保护策略及其硬件在环试验对实时仿真平台硬件资源要求苛刻，既要对直流输电系统建模，又要对新能源基地建模，应用场景的复杂性对仿真平台要求更高。 1 技术分析（创新性、先进性、独占性） 1.1 国产化实时仿真技术现状 实时仿真是指仿真模型执行进度与系统时钟完全同步的一类仿真，具备这种特性的仿真装置称为实时仿真器。新型电力系统的认知、试验、生产、培训需求快速增长，形成了实时仿真领域巨大潜在市场。但目前RTDS、RT-LAB等进口设备依旧垄断市场，对于大规模新能源场站、县域规模万节点级电力系统、多端特高压直流输电等应用场景电磁暂态仿真，所需的仿真资源巨大，平台造价极高。且关键核心技术处于卡脖子状态，平台应用的灵活性和开放性受到很大限制。只有开发和推广国产化实时仿真技术才能为顺利推进新型电力系统建设过程中的研究和生产提供自主可控的工具和手段。 1.2 UREP与进口设备的对比试验  为了实现电力实时仿真器的国产化替代，彻底解决电力实时仿真领域的技术“卡脖子”问题，国产实时仿真器UREP需要与国际主流技术进行对比，力求达到甚至超过目前世界最先进的技术。对标对象为行业公认的电力系统实时仿真仪（RTDS）和行业广泛使用的RTLAB，以上两款设备均为加拿大生产。对比试验方案如图1-1所示。制定标准（典型）测试算例，分别在UREP、RTDS和RTLAB环境下搭建测试算例的仿真模型，在完全相同的测试条件和试验内容下得到各种仿真器的仿真结果，比较仿真结果的一致性。同时比对仿真规模、建模效率和编译时间等关键指标。             图1-1  国产UREP与进口设备对标方案 1.2.1电气网络仿真对比    图1-2表示了一个多支路网络，基于图1-1中三种仿真器搭建该模型，通过不断增加支路数扩大网络规模，直到仿真器过载，得到仿真器的算力极限。         图1-2  多支路电气网络 在50us仿真步长下，对于图1-2案例RTLAB最大仿真规模为78个 三相节点，UREP也为78个 三相节点，二者相同。在编译速度方面，RTLAB编译时间为3分52秒，UREP编译时间为1分12秒，UREP是RTLAB的3.22倍。      图1-3  基于RTDS的仿真模型  当基于RTDS建模时，如图2-5，每块PB5最多允许24个节点；当基于NovaCor建模时，在超大步长150us下可以达到100节点，在50us步长下仿真规模未知。 2.2.2 双馈风机仿真对比   双馈风机含有电机、传动链、电力电子变流器和控制系统，是具有代表性的新能源元件。在在50us仿真步长下，对于如图1-4案例，RTLAB最大仿真规模为6台，UREP也为6台，二者相同。在编译速度方面，RTLAB编译时间为7分0秒，UREP编译时间为2分12秒，UREP是RTLAB的3.18倍。                图1-4  双馈风机测试案例 2.2.3 直流输电仿真对比   直流输电是最复杂的电力电子装备，有换流阀、阀控制器、极控制器、站控制器等一次和二次系统，是实时仿真领域的难点，也是检验仿真器能力的试金石。图1-5是双端单极直流输电系统测试用例，每端包含2个六脉波桥，控制保护包括了阀控、极控和主控模型，封装于蓝色模块内。   图1-5 双端单极直流输电系统测试用例 将图1-5所示算例分别在RTLAB和UREP中建模运行，在单核可用资源下，若仿真对象为电气主系统和控制保护组成的整个系统，则RTLAB过载，UREP也过载。若仿真对象仅为电气主系统（即双侧电源、交直流滤波器和4个6脉波桥），则RTLAB和UREP均不过载。在编译速度方面，RTLAB编译时间为3分40秒，UREP编译时间为1分11秒，UREP是RTLAB的3.10倍。 2.2.4 同步发电机组仿真对比    同步发电机目前仍是电力系统主力电源，是电力系统的主要仿真对象。同步发电机组模型包括同步发电机、调速器、励磁调节器及升压变。搭建多台同步电机并列运行算例，如图1-6所示。   图1-6  同步电机并列运行算例 在50us仿真步长下，对于图1-6案例RTLAB最大仿真规模为11台，UREP为13台。在编译速度方面，RTLAB编译时间为3分51秒，UREP编译时间为1分16秒，UREP是RTLAB的3.04倍。 2.2.5 最小步长对比 基于CPU的最小仿真步长能够体现仿真计算时间的抖动问题，抖动越小，允许的仿真步长就越小。因此，通过比较最小仿真步长，也可以反映仿真器的计算性能。仿真对象采用单台双馈风机，模型包括风力机、绕线异步电机、机侧变流器、网侧变流器、主动系统、所接入的配电网等元素，如图1-7所示。             图1-7  测试最小步长算例 经测试，RTLAB最小仿真步长为24us，UREP最小仿真步长为20us。可见，UREP具有更小的仿真抖动。 2.2.6 仿真精度对比 为了验证国产UREP的仿真精度，采取和RTDS交叉对比验证方法说明UREP的仿真精度。电力系统仿真包括电磁暂态和机电暂态，因此，从电磁暂态和机电暂态两个方面进行对比，同时考虑各种应用场景，以覆盖各种情形。电磁暂态检测案例的电网拓扑如图1-8所示。 图1-8 电磁暂态检测使用案例 无穷大电源电压等级为110kV，频率为50Hz，系统内阻抗为；L1、L3线路阻抗为，L2、L4线路阻抗为， T1、T2两变压器的额定容量均为，短路电压，空载损耗，空载电流，短路损耗，变比，高低压绕组均为Y形联结；假设系统A1、B1、A、B处供电负荷为(5+j1)MVA，C1和C处供电负荷为1+j0.1MVA。UREP建模如图1-9所示。   图1-9 电磁暂态检测案例的UREP仿真模型 基于RTDS建立电磁暂态案例的仿真模型如图1-10所示，其电压过零点短路控制如图1-10所示。   图1-10  RTDS仿真模型   图1-11  RTDS电压过零点短路控制结构 对上述模型，分别使用UREP和RTDS进行实时仿真，仿真时间为0.2s，短路故障发生在0.06s-0.16s之间，仿真步长为100微秒，横轴表示在0.2s时间内仿真采样点数，纵轴表示母线电压、电流，单位分别为V、A。在母线A点处发生三相短路，短路前后及短路期间的三相电压波形如图16-7。为了显示细微之处，将图1-12局部放大后，如图1-13。   图1-12  A点发生三相短路时三相电压波形   图1-13  A点处发生三相短路时三相电压波形局部放大 点划线为RTDS仿真结果，虚线为UREP仿真结果。可以看出，两种仿真结果高度重合，表现出电磁暂态仿真结果的高度一致。电磁暂态过程除了表现在电压动态还表现在电流动态，短路前后及短路期间的三相短路电流波形如图1-14。   图1-14 A点处发生三相短路时三相电流波形 图1-15  A点处发生三相短路时三相电流波形局部放大图 1.3  对标结论 （1）在内核资源完全等同条件下，国产UREP和RTLAB的仿真算力基本相同，即内核授权数相同条件下，具有相同的仿真规模。 （2）国产UREP的建模效率和编译速度远远高于RTLAB。小规模场景下，UREP是RTLAB的3倍左右，大规模场景下UREP是RTLAB的45倍左右。 （3）在仿真对象完全相同的条件下，国产UREP和RTDS的电磁暂态仿真结果完全相同，二者交叉对比没有差别。