高等教育领域数字化综合服务平台
云上高博会服务平台 高校科技成果转化对接服务平台 大学生创新创业服务平台 登录 | 注册
|
搜索
搜 索
  • 综合
  • 项目
  • 产品
日期筛选: 一周内 一月内 一年内 不限
LoongStore大规模集群云存储系统
1 成果介绍网络存储技术从诞生到现在,已经经历了近二十年的历程。在这个过程中,无论是计算技术、网络通信技术还是信息储存技术都发生了翻天覆地的变化。计算技术领域,基于开放操 作系统上的集群计算技术已经取代大型机;网络通信领域,开放架构的 TCP/IP 通信已经统治了一切;在信息存储技术上,单块磁盘的容量已经从 G 级别进入 T 级别。 传统的网络存储设备,无论是 FC SAN、 NAS 还是 IP SAN,都是采用以满足单台服务器存储需要为目标的体系设计,在共享能力、性能、可靠性、扩展性以及总体拥有成本上,已经无法满足企业新的应用需求。如果 仅仅通过外围手段来弥补,必将造成存储架构越来越复杂,用户管理难度越来越大,总体拥有成本越来越高。 为了满足 IT 技术发展的挑战, LoongStore 集群存储采用了代表计算技术、网络通信技术以及文件 系统技术发展方向的体系架构,提供给用户跨平台共享、高性能、高可靠、可平滑扩展、使用和维护简单的高端存储系统。系统以开放架构平台智能存储服务器为基 本节点,通过在千兆以太网基础上不受限制地添加节点,构成了业界最高的性能、可靠性以及极低总体拥有成本的存储集群。 LoongStore 为一种大规模的文件共享存储系统,它面向海量数据、高并发访问的环境。其产品架构图如图所示: 图 1 LoongStore 产品架构 LoongStore 产品架构支持:单文件系统 100PB支持 2000 个以上节点并发支持超过 500 亿文件产品主要特点:产品架构上:实现了横向扩展。从原来的单节点增加 CPU、内存、存储等等的纵向扩展方案往增加节点数量的横向扩展方案的转变,使得容量扩展更加灵活、同时也实现了更低的起始投入成本;产品工作流上:实现了更高效的数据读写方式。通过实现元数据与数据通道分离、将数据条带化存储在不同的存储服务器上,从而高效实现数据的并行读写;产品性能上:实现了高聚合带宽。克服了以前文件集中式存储的瓶颈,实现了文件切片分布式存储方案,实现了高聚合带宽;产品性能上:实现了性能近线性增长。如:( 1)聚合带宽随着存储集群规模扩大而线性增长, ( 2)充分发挥硬件性能,如网卡性能利用率达到了 80%, ( 3)扩展到 100GB/s 以上的聚合性能;产品可靠性上:实现了无单点故障。通过( 1)为不同目录的数据设置不同的冗余度, ( 2)自动故障探测与恢复, ( 3)设备恢复速度是 RAID 的 5 倍, 750GB SATA 盘恢复时间 15 分钟, ( 4)元数据服务器每两台互备等,实现了产品的无单点故障;在产品扩展性方面:实现了在线业务扩展容量。支持不停业务在线扩容,并自动迁移均衡数据。从而实现不需要关停业务的方式轻易扩展容量;在产品管理方面:实现了单点配置管理。产品通过单点实现了所有的配置管理功能,通过内置各种自动化处理流程,减少人为参与;产品兼容性方面:兼容各种 X86 架构的服务器和 IP 网络,应用服务器端支持Linux/Windows/Mac 等等。2 应用说明LoongStore 大规模集群云存储系统能够帮助企业加速信息到价值的转换,目前已经在互联网、广电、能源、电信等数据密集型行业帮助企业实现了突破性的价值。 产品主要应用行业与应用案例有:( 1)互联网:视频, SNS 等,例如中国国家网络电视台( CNTV),人人网,搜狐;( 2)能源:大庆油田,中石油勘探开发研究院总院;( 3)动漫和广电:中影集团,教育电视台等,《建党伟业》、《建国大业》、《孔子》等大片的后期制作就是采用该存储系统;( 4)教育及其( 5)军工,航天等等领域。3 技术指标支持 PB 级的存储容量规模,最大容量可超过 100PB;可提供几十甚至上百 GByte/s 的聚合数据读写带宽,而且性能可随存储规模的扩展而线性提升;可高效支持海量小文件的存储和管理,单套系统可高效管理超过 500 亿个文件,现有在线系统已经超过百亿级文件数量规模,而且每天仍然以 2000-5000 万个新文件的速度递增,每天的下载量为 10-20 亿个文件;可支持超过 2000 多个计算节点(或者应用节点)同时高效并发访问同一套存储系统;提供完全符合 POSIX 标准的文件级接口,支持全局共享访问,无须加入第三方共享软件。前端可同时部署 Linux、 Windows、 Mac 等异构计算节点。所有应用可不经过任何修改和移植即可使用存储服务;支持在线扩展存储容量,无需终止应用的正常服务,新增容量即插即用。同时提供在线数据迁移功能,扩容后可均衡所有设备上的存储负载;内置数据高可用机制,一旦发现硬件故障将自动进行数据恢复,无需停止服务。除了能够冗余磁盘故障之外,即使整个存储服务器或者磁盘阵列故障都不影响应用正常服务也不会破坏应用数据。传统存储只能冗余磁盘故障;如果系统中正常设备上的空闲空间总和不少于故障设备上已经使用的空间即可进行数据恢复,无须加入新的设备,传统存储采用 RAID 机制必须加入新的存储设备才能进行恢复。确保了系统无间断持续运行;l 在线控制存储设备的负载。在观察到某块存储设备有异常现象时,可以在线手动禁止这块磁盘的空间分配,设置后系统不再往被禁止分配空间的磁盘内写入新的数据,原有的数据仍然可用。当设备正常时即可在线放开;提供主动数据迁移功能,方便硬件在线更换。当某些设备使用时间超过一定年限,或者是发现设备有安全隐患时,可以主动将该设备上的数据迁移到其它存储设备,迁移完成后即可将设备移除下线,不影响应用的正常服务;简易管理,通过单一图形化界面即可管理和监控整个存储系统;高硬件兼容性,既可以采用传统的 SAN 或者盘阵作为存储单元,也可以采用通用的存储服务器进行构建,硬件选型范围广,成本低,适合用于构建海量的云存储系统。
清华大学 2021-04-13
基于 CDMA 的大规模 RFID 防碰撞方法
本发明提出了一种基于 CDMA 的 RFID 防碰撞方法,该方法首先将所有的标签进行调整分组,然后 以递归的方式将碰撞的标签分组,为标碰撞标签选择码片,然后将标签数据用正交码扩频后发送出去, 并在阅读器端用相同码片进行解扩,最后对读取标签进行重复和遗漏的核查,该方法可以同时识别多个 标签,解决了现有的基于 ALOHA 算法和二进制算法方案的不足。
武汉大学 2021-04-13
大规模电动汽车与智能电网融合
V2G技术,简单的来说,就是将电动汽车的动力电池,作为电网中的分布式电源,在用电高峰时通过逆变技术向电网回馈能量,而在用电低谷时电网通过整流,对电动汽车充电,从而实现电动汽车和电网的友好能量交互。 目前,大部分研究工作主要集中在电动汽车智能充放电优化模型的建立上,很少关注到提出优化方法的求解算法。另外,鲜有文章检验其方法对于大规模电动汽车入网调度的可行性。在此背景下,蹇林旎课题组首先对
南方科技大学 2021-04-14
LoongStore 大规模集群云存储系统
1 成果介绍网络存储技术从诞生到现在,已经经历了近二十年的历程。在这个过程中,无论是计算技术、网络通信技术还是信息储存技术都发生了翻天覆地的变化。计算技术领域,基于开放操 作系统上的集群计算技术已经取代大型机;网络通信领域,开放架构的 TCP/IP 通信已经统治了一切;在信息存储技术上,单块磁盘的容量已经从 G 级别进入 T 级别。 传统的网络存储设备,无论是 FC SAN、 NAS 还是 IP SAN,都是采用以满足单台服务器存储需要为目标的体系设计,在共享能力、性能、可靠性、扩展性以及总体拥有成本上,已经无法满足企业新的应用需求。如果 仅仅通过外围手段来弥补,必将造成存储架构越来越复杂,用户管理难度越来越大,总体拥有成本越来越高。 为了满足 IT 技术发展的挑战, LoongStore 集群存储采用了代表计算技术、网络通信技术以及文件 系统技术发展方向的体系架构,提供给用户跨平台共享、高性能、高可靠、可平滑扩展、使用和维护简单的高端存储系统。系统以开放架构平台智能存储服务器为基 本节点,通过在千兆以太网基础上不受限制地添加节点,构成了业界最高的性能、可靠性以及极低总体拥有成本的存储集群。 LoongStore 为一种大规模的文件共享存储系统,它面向海量数据、高并发访问的环境。其产品架构图如图所示: 图 1 LoongStore 产品架构 LoongStore 产品架构支持:单文件系统 100PB支持 2000 个以上节点并发支持超过 500 亿文件产品主要特点:产品架构上:实现了横向扩展。从原来的单节点增加 CPU、内存、存储等等的纵向扩展方案往增加节点数量的横向扩展方案的转变,使得容量扩展更加灵活、同时也实现了更低的起始投入成本;产品工作流上:实现了更高效的数据读写方式。通过实现元数据与数据通道分离、将数据条带化存储在不同的存储服务器上,从而高效实现数据的并行读写;产品性能上:实现了高聚合带宽。克服了以前文件集中式存储的瓶颈,实现了文件切片分布式存储方案,实现了高聚合带宽;产品性能上:实现了性能近线性增长。如:( 1)聚合带宽随着存储集群规模扩大而线性增长, ( 2)充分发挥硬件性能,如网卡性能利用率达到了 80%, ( 3)扩展到 100GB/s 以上的聚合性能;产品可靠性上:实现了无单点故障。通过( 1)为不同目录的数据设置不同的冗余度, ( 2)自动故障探测与恢复, ( 3)设备恢复速度是 RAID 的 5 倍, 750GB SATA 盘恢复时间 15 分钟, ( 4)元数据服务器每两台互备等,实现了产品的无单点故障;在产品扩展性方面:实现了在线业务扩展容量。支持不停业务在线扩容,并自动迁移均衡数据。从而实现不需要关停业务的方式轻易扩展容量;在产品管理方面:实现了单点配置管理。产品通过单点实现了所有的配置管理功能,通过内置各种自动化处理流程,减少人为参与;产品兼容性方面:兼容各种 X86 架构的服务器和 IP 网络,应用服务器端支持Linux/Windows/Mac 等等。2 应用说明LoongStore 大规模集群云存储系统能够帮助企业加速信息到价值的转换,目前已经在互联网、广电、能源、电信等数据密集型行业帮助企业实现了突破性的价值。 产品主要应用行业与应用案例有:( 1)互联网:视频, SNS 等,例如中国国家网络电视台( CNTV),人人网,搜狐;( 2)能源:大庆油田,中石油勘探开发研究院总院;( 3)动漫和广电:中影集团,教育电视台等,《建党伟业》、《建国大业》、《孔子》等大片的后期制作就是采用该存储系统;( 4)教育及其( 5)军工,航天等等领域。3 技术指标支持 PB 级的存储容量规模,最大容量可超过 100PB;可提供几十甚至上百 GByte/s 的聚合数据读写带宽,而且性能可随存储规模的扩展而线性提升;可高效支持海量小文件的存储和管理,单套系统可高效管理超过 500 亿个文件,现有在线系统已经超过百亿级文件数量规模,而且每天仍然以 2000-5000 万个新文件的速度递增,每天的下载量为 10-20 亿个文件;可支持超过 2000 多个计算节点(或者应用节点)同时高效并发访问同一套存储系统;提供完全符合 POSIX 标准的文件级接口,支持全局共享访问,无须加入第三方共享软件。前端可同时部署 Linux、 Windows、 Mac 等异构计算节点。所有应用可不经过任何修改和移植即可使用存储服务;支持在线扩展存储容量,无需终止应用的正常服务,新增容量即插即用。同时提供在线数据迁移功能,扩容后可均衡所有设备上的存储负载;内置数据高可用机制,一旦发现硬件故障将自动进行数据恢复,无需停止服务。除了能够冗余磁盘故障之外,即使整个存储服务器或者磁盘阵列故障都不影响应用正常服务也不会破坏应用数据。传统存储只能冗余磁盘故障;如果系统中正常设备上的空闲空间总和不少于故障设备上已经使用的空间即可进行数据恢复,无须加入新的设备,传统存储采用 RAID 机制必须加入新的存储设备才能进行恢复。确保了系统无间断持续运行;l 在线控制存储设备的负载。在观察到某块存储设备有异常现象时,可以在线手动禁止这块磁盘的空间分配,设置后系统不再往被禁止分配空间的磁盘内写入新的数据,原有的数据仍然可用。当设备正常时即可在线放开;提供主动数据迁移功能,方便硬件在线更换。当某些设备使用时间超过一定年限,或者是发现设备有安全隐患时,可以主动将该设备上的数据迁移到其它存储设备,迁移完成后即可将设备移除下线,不影响应用的正常服务;简易管理,通过单一图形化界面即可管理和监控整个存储系统;高硬件兼容性,既可以采用传统的 SAN 或者盘阵作为存储单元,也可以采用通用的存储服务器进行构建,硬件选型范围广,成本低,适合用于构建海量的云存储系统。
清华大学 2021-04-13
一种大规模海藻育苗以及移植
要:本发明涉及一种大规模海藻育苗以及移植方法,其步骤是:选定适合海草生长的围堰池场地并修建围堰池,通过成体海草移栽和海草种子播种的形式在选定的围堰池内进行人工海草场的构建;定期对围堰池内构建的海草场进行跟踪观测,并进行补植成体海草或补种海草种子;待到围堰池海藻种苗库构建完毕并达到稳定状态,从围堰池种苗库内采集成体海草或海草种子进行海草植株移植。
安徽理工大学 2021-04-13
有关皮米尺度精确测量表面结构的研究
通过利用环形明场成像技术在皮米(0.001 纳米)尺度上精确测量阴、阳离子之间的键长来计算表面结构的细微畸变(图一)。研究表明,在不同极化取向的铁电畴中,PbZr0.2Ti0.8O3的表面原子结构完全不一样,在表面薄层中可以存在“铁电死层”和高能的带电畴壁。这些发现为铁电薄膜、铁电陶瓷、铁电表面催化等应用提供了非常重要的信息。同时,发展起来的基于环形明场像技术定量测量绝缘氧化物表面结构的方法,将极大地提高我们对这些复杂功能氧化物材料物性的认知。
北京大学 2021-04-11
一种多尺度城市扩张关联规则提取方法
本发明公开了一种多尺度城市扩张关联规则提取方法,首先依据城市发展的区域特征设计挖掘变量, 并通过地理信息系统空间分析方法,获取变量空间数据。以多级别规则格网的采样方式对挖掘变量进行 空间统计,并对挖掘变量连续值进行离散化处理,形成事务数据库。然后利用已有关联规则生成算法分 别在各级尺度格网挖掘关联规则。对各级尺度上的挖掘结果与对应格网单元进行空间匹配之后,通过本 方法提出的空间尺度匹配系数,确定最合适的格网尺度进行规则分析。本发明解决了传统关联
武汉大学 2021-04-14
院校综合数字化经营(营销)融合应用实训实践中心建设方案
希润数字技术(武汉)有限公司 2024-12-06
大规模MIMO系统的超精细信道估计方法
本发明属于无线通信技术领域,具体的说是一种大规模MIMO系统的超精细信道估计方法。本发明主要利用压缩感知原理和牛顿优化方法,在变分贝叶斯推断的基础上提出一种改进的信道估计算法,以实现信道的超精细估计。
电子科技大学 2021-04-10
马铃薯规模化种植关键技术及装备
项目立足于国家粮食高产稳产增收等重大战略需求,持续进行马铃薯机械化产学研联合攻关研发,发明了马铃薯全程机械化种植技术,提出了马铃薯高台大垄机械化栽培技术和机械化种植合理密度、水肥耦合增产集成技术栽培模式;创制了具有自主知识产权的马铃薯机械化种植的气吸播种、动力中耕除草培土防病虫害、除马铃薯秧叶、收获及分级处理5种全程机械化装备;解决了马铃薯机械化作业效率低难度大等技术难题,显著推动了马铃薯机械化装备升级换代和行业科技的提升,实现了农机农艺农技相结合的马铃薯机械化粮食增产目标。项目主要发明点如下: (1)探明了智能动态供种和负压吸种正压吹种组合作用的气吸式马铃薯播种新理论,创新了基于无液体润滑的陶瓷镀层凸凹锥体动态紧配密封的排种器气室新结构;破解了排种器因取种区供种量不恒定而取种难和排种时前惯性力作用而引起的零速投种技术难题,创制了常规薯和微型薯兼用的气吸式马铃薯精量排种器,集成创制出高速智能气吸式马铃薯精量播种机。填补了我国无气吸式马铃薯播种机田间应用的空白。 (2)项目首次基于分体刀辊独立驱动仿垄形碎土培土除草技术,提出了马铃薯动力中耕机具防除病害理论,创建了刀辊双螺旋导向输送防堵和立刀仿垄形螺旋刀辊排列技术,发明了动力中耕除草培土防害驱动式马铃薯中耕培土机。 (3)提出了马铃薯茎叶粉碎还田刀具的双刃口双旋向空间曲线设计理论,创建了双螺旋排列仿垄形清除茎叶新方法,发明了系列多功能正反转作用刀具及刀辊,突破了马铃薯除茎叶难的技术瓶颈;创制了系列马铃薯双螺旋交错组合式刀辊总成,解决了马铃薯机械化除茎叶的难题。 (4)发明了马铃薯收获机防堵技术,创制了切导土浮动圆盘减阻系统,解决了因马铃薯收获机喂入量动态不恒定导致的堵塞壅土难题;发明了去硬杂物防阻自调技术,创制了自转增隙自复位除石或硬杂物等减阻装置,解决了马铃薯收获过程中田间石块等硬杂物产生的突变阻力或卡死升运分离部件的技术难题。 (5)基于马铃薯收获升运分离技术,提出了升运链长度、频率、振幅与土壤含水率等土壤特性相匹配的薯土分离规律,创制了马铃薯收获机升运分离总成,解决了马铃薯收获机因升运分离能力差而影响马铃薯收获机收获质量的问题;避免了因升运分离技术不佳导致马铃薯机械损伤的技术难题。 (6)项目提出了马铃薯四垄归一垄的马铃薯收获新方法,创建了具有横向换向功能马铃薯横向归垄技术,创制了马铃薯收获机专用的归垄装置,解决了马铃薯收获过程中捡拾难效率低的难题。 (7)针对目前马铃薯分级机分级级数少、规格范围不可调的技术难题,发明了无级调节技术,创制了马铃薯分级机无级调控机构,解决了马铃薯分级机级数规格不可调不可控的问题。 目前该成果在东北、西北、西南、中原等马铃薯主产区大面积应用推广,满足马铃薯栽培区北方一作区和中原二作区的马铃薯机械化种植。5种装备经样机试验、性能测试生产考核技术已成熟,获得自主知识产权30余件。本项目创制的系列马铃薯装备,为马铃薯机械化种植提供可靠技术保障,为保证国家粮食安全做出了贡献。
东北农业大学 2021-05-10
首页 上一页 1 2 3 4 5 6
  • ...
  • 20 21 下一页 尾页
    热搜推荐:
    1
    云上高博会企业会员招募
    2
    64届高博会于2026年5月在南昌举办
    3
    征集科技创新成果
    中国高等教育学会版权所有
    北京市海淀区学院路35号世宁大厦二层 京ICP备20026207号-1