|
搜索
搜 索
高等教育领域数字化综合服务平台
一种基于带宽感知的 Hadoop 调度方法和系统
本发明公开了一种基于带宽感知的 Hadoop 调度方法，包括：对 Hadoop 任务调度建立一个作业时间完成模型，为 Hadoop 调度系统建 立一个数学模型，将 Hadoop 的任务调度问题转化为一个为待调度的作 业寻找一个使得该作业的作业完成时间最短的任务调度方法的问题； 利用 SDN 提供的实时网络管理与流量控制功能，提出了一种基于时隙 的网络带宽分配机制，将每一条链路的剩余带宽的占用期划分为相等 的时隙，在作业完成时间模型和网络时隙带宽分配机制的基础之上； 在为某个任务分配计算节点之前，综合考虑任务的本地性与实时网络 带宽情况，为每一个任务分配一个能够提供最早完成时间的计算节点。 本发明解决了现有方法中不能同时从全局视角和实际网络可用带宽两 方面进行任务调度的问题。
华中科技大学
2021-04-11
一种基于 Hadoop 多作业环境下的资源调度方法
本发明公开了一种基于 Hadoop 多作业环境下的资源调度方法， 包括：(1)实时采集集群负载、Hadoop 平台以及硬件三方监控信息，(2) 实时采集集群各计算节点上用户的作业执行监控信息，(3)汇总集群三 方监控数据，建模评估节点的计算能力，并将集群节点划分为优势计 算节点和劣势计算节点，(4)若节点为优势计算节点，则启动基于相似 度评估的作业任务资源需求配置策略，(5)若节点为劣势计算节点，则 还原为 Yarn
华中科技大学
2021-04-14
虚拟化环境下基于群调度的同步优化调度系统和调度方法
本发明公开了一种虚拟化环境下基于群调度的同步优化调度系 统，包括 VCPU 初始映射模块、Credit 分发模块、VCPU 调度模块、 Credit 消耗模块、以及 Credit 历史统计模块。VCPU 初始映射模块负责 将 VCPU 映射到 PCPU 的运行队列。Credit 分发模块根据权重将 S 个 时间片分发个各个 VM 的个 VCPU。VCPU 调度模块负责在每个时间 片将某个 VCPU 调度到当前 PCPU 运行，它根
华中科技大学
2021-04-14
一种基于Hadoop的海量矢量数据划分方法及系统
本发明涉及一种基于Hadoop的海量矢量数据划分方法及系统。该方法包括：基于Hilbert空间填充曲线对空间数据集中的空间要素进行空间编码；通过Map函数和Reduce函数实现空间要素的键值化，并生成空间数据样本信息集；根据所述空间数据样本信息集生成空间数据划分矩阵；根据所述空间数据划分矩阵将各个空间要素划分入对应的存储数据块中，同时将相邻数据块分发至同一集群节点上。本发明系统将Hilbert空间填充曲线引入到数据抽样和划分规则中，充分考虑空间数据相邻对象的空间位置关系、空间对象的自身大小以及相同编码块的空间对象个数等影响要素，不仅保证了样本信息集的空间分布特征，提高了海量矢量数据的空间索引效率；同时也保证了基于HDFS数据块存储的负载均衡。
中国农业大学
2021-04-11
一种基于水库调度规则合成的水库调度决策方法
本发明公开了一种基于水库调度规则合成的水库调度决策方法，包括：步骤 1，获得 K 种水库调度 规则；步骤 2，构建水库调度规则合成模型步骤 3，以 K 种水库调度规则下的水库出库流量数据和最优 调度决策下的水库出库流量数据为输入，采用客观赋权法获得水库调度规则合成模型中的权重 wk；步 骤 4，采用合成后的水库调度规则进行水库调度决策。本发明方法合成多个水库调度规则生成综合调度 规则，使水库调度决策更稳健和优越，且可生成调度决策区间，适合水库中
武汉大学
2021-04-14
一种虚拟 CPU 调度方法
一种虚拟 CPU 调度方法，属于计算机虚拟化技术领域，解决无 法及时响应 I/O 处理、负载特性得不到满足及现有调度算法中负载均 衡策略过于简单的问题。本发明包括调度初始化步骤、插入虚拟 CPU 运行队列步骤、虚拟 CPU 运行步骤、负载均衡步骤、更新信用值与系 统负载步骤、重新分配信用值步骤、重新分配物理 CPU 步骤和更改虚 拟机类型步骤。本发明将虚拟机分为三类，对不同类型负载进行了动 态隔离，绑定到两组不同类型
华中科技大学
2021-04-14
主动配电网序贯－自适应鲁棒优化调度系统及调度方法
本发明公开了一种计及不确定性的主动配电网序贯?鲁棒优化调度系统及调度方法，其中调度框架包括上层序贯优化模型和下层鲁棒自适应模型；基于所述调度框架的调度方法，包括：针对主动配电网中的传统调压设备，进行小时级优化调度，引入序贯优化理论，构建上层优化模型，降低不确定性对决策的影响；基于上层调度指令，进行小时内的下层优化，采用鲁棒自适应优化方法，构建鲁棒自适应有功?无功协调优化模型，实现对配电网的主动控制与实时优化；本发明针对大规模可再生能源接入的主动配电网，通过调用一切可控资源提供系统支撑，充分降低可再生
东南大学
2021-04-14
基于Hadoop云计算平台的海量数据挖掘研究与应用
本研究低成本搭建了弹性可扩展的Hadoop云计算平台
中山大学
2021-04-10
LTE通信系统中面向实时业务分组调度方法
本发明首先依据系统的具体负载和用户的时延特性，选出优先级最高的一组用户。其次，对优先级最高的一组用户进行组内排序，分配当前的调度资源(ResourceBlockGroup,RBG)给组内优先级最高的用户。本发明设置了优先级表达式，式中考虑了用户信道环境，同时还考虑了用户的时延和保证比特速率(GuranteedBitRate,GBR)以保证用户QoS等级，并实现不同实时业务对分组延迟要求的差异。
电子科技大学
2021-04-10
一种HSDPA系统的快速分组调度方法
本技术成果公开一种HSDPA系统的快速分组调度方法，包括以下步骤：1.根据用户移动速度和仿真环 境，估算出每个用户的下行信道质量CQI并计算出五个时隙内用户平均CQI；2.根据业务的QoS要求和用户 当前信道质量及QoS水平确定调度优先级；3.选择优先级最高的用户进行调度，并根据用户当前CQI确定传 输块大小、编码调制方式和信道个数；4.若信道有剩余，则重复步骤3，直至信道全部分配，如此完成一 次调度。
中山大学
2021-04-10