本发明公开了一种基于 Hadoop 多作业环境下的资源调度方法， 包括：(1)实时采集集群负载、Hadoop 平台以及硬件三方监控信息，(2) 实时采集集群各计算节点上用户的作业执行监控信息，(3)汇总集群三 方监控数据，建模评估节点的计算能力，并将集群节点划分为优势计 算节点和劣势计算节点，(4)若节点为优势计算节点，则启动基于相似 度评估的作业任务资源需求配置策略，(5)若节点为劣势计算节点，则 还原为 Yarn

市场背景：我国具有世界上最大的有机质废弃物产生量：城镇污泥年产量已经超过4000万吨（以含水率80%脱水污泥计，以下同），以有机垃圾、餐厨废弃物为代表的城市有机质废弃物产量超过1亿吨/年。但我国对有机质废弃物的稳定化处理与资源化处置显著落后于发达国家，目前我国主要处理处置措施仍为填埋和焚烧，对城市环境造成严重的二次污染威胁。随着欧洲等发达国家可再生能源战略的实施、国际能源危机的进一步加深、我国对大气环境及水环境质量要求的进一步提高，城镇有机废弃物的高效生物燃气化技术，尤其可以满足大型城市集中式处理处置与能源资源综合利用需要的有机废弃物干法厌氧生物制气技术，可以把有机质废弃物高效转化为生物燃气，生产清洁能源，实现废弃物的减量化和高值循环利用，已经成为目前国际上有机垃圾、城市污泥等富含有机质废弃物处理和资源化利用的重点发展方向，各国纷纷在该领域投入大量研究，抢占城市有机质废弃物资源化与能源化产业化技术的制高点。由于我国污泥泥质的特殊性，其有机质含量远低于国外、含砂量高、生物反应池负荷低等，国外传统成熟的污泥厌氧消化处理技术在我国无法得到稳定应用，造成国内大量污泥处理处置设施的故障闲置，城市污泥及有机质处理处置技术存在着重大的瓶颈性问题。 国内外现状：国内外有微波强化预处理促进低有机质污泥厌氧资源化、城市低有机质污泥的好氧堆肥研究、温和热处理对低有机质污泥厌氧消化性能的影响等相关城市污泥厌氧化资源化技术，但针对我国污泥有机质低、含砂量高、区域差异大的特点的合适的污泥资源化处理处置技术却鲜少，本技术方案突破了传统厌氧消化要求进料含固率为5%的技术要求，实现了将进料含固率提升至10%~20%实现连续稳定厌氧消化的可行性与调控措施，并在国际上较早报道了脱水污泥直接实现厌氧消化的连续流试验结果，并提出了高含固体系下污泥与餐厨等城市有机质废弃物的协同厌氧消化调控技术，创造性的提出了适用于我国典型低有机质污泥高含固厌氧消化的技术路线。 目前本项目组针对我国污泥低热值的泥质特点，开发了适用于生污泥与消化污泥的热解/焚烧耦合技术，并形成核心装备，解决了污泥及工业固废高效热化学处理的技术难道与成套装备。

面向快速、高效的矿产资源探测的国家需求，集成空间数据挖掘与案例推理技术，充分利用海量的地质空间数据，解决矿产资源潜力评价与预测关键技术。在此基础上，建立智能化区域成矿预测系统和三维矿产资源预测系统，为各地质矿产单位进行找矿勘探提供空间分析和决策的基础平台。主要功能、特色： ？ 建立了不确定性地质空间数据挖掘算法模型、成矿案例推理模型，提高了区域成矿预测的效率、精度和智能性； ？ 综合不确定性地质空间数据挖掘、成矿案例推理和证据权模型，建立了混合推理策略与方法，得到更为客观的综合预测结果； ？ 基于COM架构，开发了“区域成矿预测信息系统”和“三维矿产资源预测系统”，包括地质空间数据管理、空间分析、模型预测、专题制图等功能； ？ 发展了三种高光谱矿物填图方法：权重光谱角制图法、耦合整体光谱匹配和局部光谱匹配的高光谱矿物信息提取方法、特征参数拟合方法； ？ 完成了区域成矿预测的数学地质方法扩展与应用，包括证据权模型、扩展证据权模型和逻辑斯谛回归模型，为地质空间数据挖掘和成矿案例推理提供图层选择及参数化的理论依据和对比验证对象； ？ 以我国西部典型成矿带——青海东昆仑成矿带为例，进行上述各类算法模型的区域成矿预测实验，并进行了野外调查与验证。 基于上述研究成果，该课题成果已申请发明国家专利2项；计算机软件系统2个；出版专著1部《多源地质空间信息智能处理与区域成矿预测》；发表或录用论文15篇，其中SCI期刊论文5篇，EI期刊论文4篇。

项目成果/简介:市场背景：我国具有世界上最大的有机质废弃物产生量：城镇污泥年产量已经超过4000万吨（以含水率80%脱水污泥计，以下同），以有机垃圾、餐厨废弃物为代表的城市有机质废弃物产量超过1亿吨/年。但我国对有机质废弃物的稳定化处理与资源化处置显著落后于发达国家，目前我国主要处理处置措施仍为填埋和焚烧，对城市环境造成严重的二次污染威胁。随着欧洲等发达国家可再生能源战略的实施、国际能源危机的进一步加深、我国对大气环境及水环境质量要求的进一步提高，城镇有机废弃物的高效生物燃气化技术，尤其可以满足大型城市集中式处理处置与能源资源综合利用需要的有机废弃物干法厌氧生物制气技术，可以把有机质废弃物高效转化为生物燃气，生产清洁能源，实现废弃物的减量化和高值循环利用，已经成为目前国际上有机垃圾、城市污泥等富含有机质废弃物处理和资源化利用的重点发展方向，各国纷纷在该领域投入大量研究，抢占城市有机质废弃物资源化与能源化产业化技术的制高点。由于我国污泥泥质的特殊性，其有机质含量远低于国外、含砂量高、生物反应池负荷低等，国外传统成熟的污泥厌氧消化处理技术在我国无法得到稳定应用，造成国内大量污泥处理处置设施的故障闲置，城市污泥及有机质处理处置技术存在着重大的瓶颈性问题。 国内外现状：国内外有微波强化预处理促进低有机质污泥厌氧资源化、城市低有机质污泥的好氧堆肥研究、温和热处理对低有机质污泥厌氧消化性能的影响等相关城市污泥厌氧化资源化技术，但针对我国污泥有机质低、含砂量高、区域差异大的特点的合适的污泥资源化处理处置技术却鲜少，本技术方案突破了传统厌氧消化要求进料含固率为5%的技术要求，实现了将进料含固率提升至10%~20%实现连续稳定厌氧消化的可行性与调控措施，并在国际上较早报道了脱水污泥直接实现厌氧消化的连续流试验结果，并提出了高含固体系下污泥与餐厨等城市有机质废弃物的协同厌氧消化调控技术，创造性的提出了适用于我国典型低有机质污泥高含固厌氧消化的技术路线。 目前本项目组针对我国污泥低热值的泥质特点，开发了适用于生污泥与消化污泥的热解/焚烧耦合技术，并形成核心装备，解决了污泥及工业固废高效热化学处理的技术难道与成套装备。应用范围:项目已经进入示范运行阶段，在长沙（基于热水解预处理的高含固污泥厌氧消化工程，500吨/天）、镇江（污泥热水解+污泥/餐厨高含固协同厌氧消化工程，260吨/天）、丽水（市政与工业污泥热解/焚烧耦合无害化处理，100吨/天）等地建立了示范工程，取得了良好的运行效果。 通过本技术的应用实行，市政污泥及城市有机质高级协同厌氧消化制气技术的研发及产业化有助于解决我国有机质废弃物处理设施普遍存在的厌氧消化产气率低、降解率低的问题，在原有工艺基础上提供更高的生物质能源利用率。既可以解决城镇污泥及其他城市有机质的处理处置问题，又实现资源的充分利用和能量流的最大化循环，突破了我国在生物质能这一重大国际热点新能源领域的技术与产业竞争力，具有重要的社会和创新效益。项目阶段:其他（进入示范运行阶段）效益分析:技术亮点：该项研究工作突破了传统厌氧消化要求进料含固率为5%的技术要求，实现了将进料含固率提升至10%~20%实现连续稳定厌氧消化的可行性与调控措施，提出了适用于我国典型低有机质污泥高含固厌氧消化的技术路线，解决了我国城市不同废弃物在高含固的条件下实现协同厌氧消化问题，增加消化设施的工程效益，提高反应效率的问题，为我国城市有机质的协同消化提供了机理与技术研究的支撑，突破了国外技术垄断。在此基础上，进一步针对我国污泥低热值的泥质特点，开发了适用于生污泥与消化污泥的热解/焚烧耦合技术，并形成核心装备，解决了污泥及工业固废高效热化学处理的技术难道与成套装备。 技术优势：相较于传统消化技术，解决了我国有机质废弃物处理设施普遍存在的厌氧消化产气率低、降解率低的问题，实现了高进料含固率下的持续稳定运行，提高了单位体积产气率，从而提高了单位体积产能，在原有工艺基础上提供了更高的生物质能源利用率，从而实现市政污泥、餐厨、禽畜粪便、有机垃圾等废弃物中营养物质与能源的协调调配与高值利用。

面向快速、高效的矿产资源探测的国家需求，集成空间数据挖掘与案例推理技术，充分利用海量的地质空间数据，解决矿产资源潜力评价与预测关键技术。在此基础上，建立智能化区域成矿预测系统和三维矿产资源预测系统，为各地质矿产单位进行找矿勘探提供空间分析和决策的基础平台。

基于云计算技术，实现了大量工程分析与设计软件的共享、服务化和协同管理，为企业产品的设计开发提供协同支撑环境，可有效提高工程软件的利用效率、提高产品设计开发的效率。主要功能有： 1. 实现了工程软件的远程共享。通过虚拟桌面技术，用户可通过桌面计算机、笔记本电脑等使用远程高性能服务器上的工程软件，如Pro/E、ADAMS、Ansys等，可有效提高高性能服务器及其上的工程软件的利用效率，并可对系统的用户进行有效权限管理； 2. 实现了工程软件的服务化封装，根据产品设计分析的需要进行服务的组合、自动运行，可有效提高产品的设计、分析的效率； 3. 基于Hadoop技术，实现了海量工程数据的云存储平台，可实现海量数据的快速存储、搜索。 应用范围： 可应用于各种类型企业的产品设计开发部门，提升企业的产品设计开发软件环境的自动化、服务化水平。 对于大中型企业来说，可以安装部署云制造资源共享与管理平台，实现企业的产品设计开发共享环境； 对于中小型企业来说，可在本系统的支持下，采用租赁的方式来方便地使用大型计算服务器上的各种工程分析设计软件工具。 市场前景： 对于全国几十万家有产品设计开发能力的企业来说，本系统的应用可有效提升企业的产品竞争力，因此，本系统有较大的市场应用前景。

利用多机器人和多模态视觉传感器有效探索与感知复杂 环境的三维结构，进而理解和分析三维场景。研究从多源异 构的机器人定位与建图等环境感知方面、多模态融合的前景 分割、显著性检测和目标检测等场景分析方面取得突破。

（1）主要功能和应用领域 本成果面向环境与灾害监测预警需求，可在地形复杂、通信条件受限、运营维护困难的复杂环境下，建立监测预警信息传输系统，实现监测预警工作的持续、可靠运行，解决现有监测预警网络中的覆盖面受限、长期持续监测难度高、信息传输可靠性低等问题。 本成果可应用于自然灾害监测预警与应急处理、各种类型的环境监测等领域。 （2）特色及先进性 基于三大核心（新型组网架构、高效节能机制、可靠传输保障）机制，设计八项创新技术。提出了基于监测事件预测的节能机制和能量均衡消耗机制，设计了支持中继转发、双信道汇聚式接入的组网架构，研发了集自动重传、自适应传输、机会通信于一体的滑坡泥石流监测预警可靠传输技术，提升了监测预警网络的稳定性和可靠性。 本成果申请国家发明专利10余项，除正在受理部分，目前已获得国家发明专利授权8项。 （3）技术指标 本成果已示范应用于龙门山地震带小流域滑坡泥石流灾害监测预警技术研究与示范系统。根据示范系统运行效果，本成果与灾害监测传统方式技术参数相比，可达到如下技术指标： ？ 丢失/出错数据恢复率提高约30%，现场通信质量越差，优势越明显； ？ 视频和图像传输实时性可提高约1/3； ？ 传感节点能耗10%-50%，监测系统有效工作时间延长20-30%； ？ 网络故障对监测预警影响极大降低，网络故障带来的数据时延趋向于0。 （4）解决问题与实施效果 当前问题 解决方案与效果 技术状态 监测点部署受限于区域通信条件 中继转发技术： 采用中继转发技术，可在无信号覆盖区域建设监测点，通过中继转发技术将监测数据转移到具备GPRS/3G/卫星信号的位置。 示范系统应用 监测点的信息传输存在数据丢失、甚至意外中断的风险 集自动重传、自适应传输、机会通信于一体的传输保障技术： （1）研发低开销、高能效自动重传技术，恢复丢失数据，较传统方式的丢失/出错数据恢复率提高约30%，现场通信质量越差，优势越明显； （2）研发视频与图像自适应传输方法，提高视频、图像传输效率与可靠性，在网络信号较差时，视频和图像传输实时性可提高约1/3； （3）设计机会通信技术，传输网络中断处监测节点的数据，在邻近节点可替代传输时，可实现网络中断带来的时延效应趋于0。 授权专利2件 示范系统应用 监测点持续工作能力受到能量供应的约束 基于监测事件预测和能量均衡消耗的节能机制： （1）研发基于监测事件预测的休眠机制，降低传感节点能耗10%-50%； （2）研发能量均衡消耗方法，监测设备有效工作时间延长24.3%。 授权专利5件 示范系统应用 监测预警系统存在故障或破坏的问题 双信道、汇聚式接入的组网架构： （1）设计双信道、汇聚式接入的组网架构，支持系统部分故障时的网络自愈能力，保障监测数据传输不中断； （2）所设计组网架构下的设备可互相自动查询工作状态，设备故障可由其邻居设备主动上报，同时保留的传统设备状态查询方式，提高及时发现失效设备的能力。 授权专利2件 示范系统应用

本成果面向环境与灾害监测预警需求，可在地形复杂、通信条件受限、运营维护困难的复杂环境下，建立监测预警信息传输系统，实现监测预警工作的持续、可靠运行，解决现有监测预警网络中的覆盖面受限、长期持续监测难度高、信息传输可靠性低等问题。本成果可应用于自然灾害监测预警与应急处理、各种类型的环境监测等领域。