高等教育领域数字化综合服务平台
云上高博会服务平台 高校科技成果转化对接服务平台 大学生创新创业服务平台 登录 | 注册
|
搜索
搜 索
  • 综合
  • 项目
  • 产品
日期筛选: 一周内 一月内 一年内 不限
多维有序数据管理技术
01. 成果简介 非结构化数据是没有显式数据结构约束的非关系型数据,包括时间序列、图像、音视频等,其管理与分析技术成为国际信息领域战略竞争焦点。许多实际应用中,非结构化数据不仅总的体量大,而且数量也极为巨大。例如,我国气象预报业务每天接收到的气象数据文件达数亿非结构化气象小文件。此外,这些文件存在大量业务语义属性,这些属性形成了描述一个数据的多种维度。 针对海量非结构化数据的管理需求,清华大学软件学院提出了多维文件空间模型,并基于此模型突破了一系列非结构化数据核心技术,包括:l  非结构化数据到多维空间模型的映射方法;l  多维文件空间模型的分布式物理实现方法;l  分布式存储的副本控制方法。 该技术通过对非结构化数据的属性维度进行分类,将非结构化数据建模成多维文件空间模型,并对文件集合上的各种操作进行定义。此外,通过细粒度计算磁盘IO代价、网络代价、副本代价、CPU代价、数据分区代价,得到指定工作负载下的最优物理存储实现,进而通过排队论等方法对副本的一致性进行控制,实现满足用户SLA(服务等级保证)的柔性事务。  图1. 基于多维文件空间的最优非结构化数据存储方法示意图  相比现有对象存储等技术,该项技术可以实现更加灵活的数据访问。同时,该项技术能够建立多维文件空间到分布式物理存储的最优映射机制,保证非结构化数据总访问代价最小。相比于现有的分布式文件系统,该项技术可以确保使用少量内存管理数以亿计的海量非结构化小文件,而现有多数分布式文件系统在遇到海量文件管理时往往会出现内存爆炸问题。02. 应用前景 本成果技术可广泛用于各种类型尤其是多维度属性的非结构化数据管理。目前已经被成功应用于中国气象局和全国31个省或直辖市气象局,以及石油、风电等多家工业企业。该项成果还入选了2016国家十二五科技创新成就展和2018首届数字中国建设峰会,并作为贡献之一获得2018年教育部技术发明一等奖和中国气象学会科技进步奖一等奖。03. 知识产权 本项成果已获得发明专利授权13项。04. 团队介绍 本成果团队长期研究大数据管理与分析技术,包括分布式数据存储与查询、数据质量、深度学习与迁移学习、业务过程挖掘等方向。团队课题负责人为王建民教授、博士生导师。团队在本领域发表国际学术论文100余篇,申请专利100余项,授权专利60余项。相关成果获2018年教育部技术发明一等奖、2018年气象学会科技进步一等奖、2014年国家科技进步二等奖、2013年中国电子学会科技进步一等奖。05. 合作方式 技术许可 / 软件服务。06. 联系方式 邮箱:liuyi2017@tsinghua.edu.cn 团队电话:010-62786972;13051000520 团队邮箱:huangxdong@tsinghua.edu.cn
清华大学 2021-04-13
高性能XMLXML数据处理技术
北京工业大学 2021-04-14
时序数据水印系列算法技术
1. 痛点问题 工业时序数据具有应用领域广、数据规模大、经济价值高的特点,蕴含的巨大商业价值,因而其安全性受到不法分子采用黑客攻击等技术手段以及雇佣商业间谍等非技术手段的威胁。数据所有者通常会采用前效方法对数据库中的数据加以保护,但是这些方法只能有效防止外部人员进行非法盗窃,对于内部人员盗窃等途径并不能有效遏制。数字水印是解决数据在传播过程中安全问题的一个主流分支,通常的数字水印采用分组多数投票方法来提升算法的鲁棒性,但时序数据通常有较多的噪声,高价值数据点相对集中,因而一个未经加权的投票算法可能会因为大范围的噪声干扰而导致水印判定失效。此外,常见时序数字水印算法基于时间戳进行水印嵌入计算,容易受到更改时间戳或频率变换的攻击,一旦时间戳序列大幅度改变,水印提取算法将受到很大影响,很可能导致水印提取完全失效。 2. 解决方案 工业物联网数据是工业大数据规模迅速扩张的主要来源。各类物联网传感器以极高的频率采集其所在设备的工作状态数据,通常为一系列包含数据产生时间戳(Timestamp)和采集数据(Data)形式为(Timestamp, Data) 的元组序列,称为时间序列。工业时序数据具有应用领域广、数据规模大、经济价值高的特点,蕴含的巨大商业价值,因而其安全性受到不法分子采用黑客攻击等技术手段以及雇佣商业间谍等非技术手段的威胁。 数据所有者通常会采用前效方法对数据库中的数据加以保护,包括但不限于:数据加密、用户权限划分等等。但是,这些方法只能有效防止外部人员进行非法盗窃,对于内部人员盗窃等途径并不能有效遏制。数字水印是解决数据在传播过程中安全问题的一个主流分支,常见时序数字水印算法基于时间戳进行水印嵌入计算,容易受到更改时间戳或频率变换的攻击,一旦时间戳序列大幅度改变,水印提取算法将受到很大影响,很可能导致水印提取完全失效。此外,数字水印通常采用分组多数投票方法来提升算法的鲁棒性,但时序数据通常有较多的噪声,高价值数据点相对集中,因而一个未经加权的投票算法可能会因为大范围的噪声干扰而导致水印判定失效。 本项目针对常见的水印失效场景进行了分析,提出了能够有效提示水印鲁棒性的技术,更好的确保数据安全的管理能力。 3.合作需求 在全国范围内工业互联网/工业大数据相关领域寻求应用场景,希望能与能源/装备制造行业的大中型企业开展这方面的合作研究和落地实施;并针对上述企业开展包括二次开发在内的各类实际应用,助力企业降本增效、转型升级。
清华大学 2023-02-14
海鳗(北京)数据技术有限公司
海鳗(北京)数据技术有限公司,是专注于文旅大数据平台型及深度价值挖掘的高科技公司,公司本部设在北京,天津设有平台和数据运维团队,是国家高新技术企业和中关村高新技术企业。 海鳗云是面向智慧旅游大数据典型应用场景推出的SAAS服务平台,基于全景外部数据(互联网内容数据、手机GPS位置数据、银联清算数据、搜索数据等)对旅游目的地运营的各类场景提供大数据解决方案,为政府监管部门、景区等涉旅企业、旅游院校等提供数据驱动的新旅游生态下的行业监管、投资咨询、产品规划、管理提升、服务优化、智能营销等新能力。海鳗云客户已覆盖宁夏文旅厅、青海文旅厅、甘肃文旅厅、文山文旅局等省市级监管机构和泰山、崂山、黄山、青城山、都江堰等著名景区。 海鳗云大力推进旅游大数据的产教融合,用多年积累的旅游大数据产业应用的技术、工具和案例,帮助旅游类本科院校和高职院校构建旅游大数据实训体系,所能提供的服务包括但不限于教学实训平台、教材、课程设计、师资培训等。与北京联合大学、北京工商大学、北京第二外国语学院等保持良好的合作关系。
海鳗(北京)数据技术有限公司 2022-05-24
技术需求:超大型厂房数据分析技术
1、超大型厂房内部温度、湿度、CO2浓度和气流的分析模拟技术。2、超大型厂房内部温度、湿度、CO2浓度和气流精密控制技术与装置。
山东核电设备制造有限公司 2021-06-18
发布包含两万多拟南芥公共RNA-seq文库的生物大数据在线分析平台
翟继先课题组此次发布的数据库(Arabidopsis RNA-seq database, ARS)整合了来自GEO、SRA、ENA和DDBJ数据库的20,068个拟南芥RNA-seq数据,提供了“Google-style”在线查询工具。该研究对所有文库进行了基因表达水平定量和共表达网络分析,并将所有文库进行分类,总共涉及1176个突变体、1102种处理条件、12个组织和176个发育时期,同时也对突变体和处理条件分别同对应的对照组进行差异表达分析。
南方科技大学 2021-04-14
高通量材料计算与数据挖掘技术
自美国 2011 年实施材料基因组计划(Materials Genome Initiative,MGI),现已成为全球材料创新研发的强大助推剂,将高通量实验、材料数据和高通量计算三要素有机结合,加速材料创新性研发并降低成本。MGI 将成分-工艺-组织-性能的关联集成化、跨尺度分析,将材料的研发由传统经验式提升到科学设计。高通量材料计算和数据挖掘技术是材料基因工程的重要组成部分,通过材料的高通量热力学/动力学计算、高通量相场模拟、数据挖掘和性能预测,实现材料合金成分、制备工艺、微观组织结构和宏观力学性能的调控及优化,为新材料的开发设计提供指导,实现产品全制备周期的数字化、智能化管理,提高产品质量稳定性、降低产品研发周期和成本、提升企业的核心竞争力。
北京科技大学 2021-02-01
高通量材料计算与数据挖掘技术
自美国 2011 年实施材料基因组计划(Materials Genome Initiative,MGI),现已成为全球材料创新研发的强大助推剂,将高通量实验、材料数据和高通量计算三要素有机结合,加速材料创新性研发并降低成本。MGI 将成分-工艺-组织-性能的关联集成化、跨尺度分析,将材料的研发由传统经验式提升到科学设计。高通量材料计算和数据挖掘技术是材料基因工程的重要组成部分,通过材料的高通量热力学/动力学计算、高通量相场模拟、数据挖掘和性能预测,实现材料合金成分、制备工艺、微观组织结构和宏观力学性能的调控及优化,为新材料的开发设计提供指导,实现产品全制备周期的数字化、智能化管理,提高产品质量稳定性、降低产品研发周期和成本、提升企业的核心竞争力。
北京科技大学 2021-04-13
中国地质大学(武汉)研究团队利用大数据驱动机器学习重建地球大气氧化历史
大气氧化的过程和机制是宜居星球形成的关键。早期地球大气几乎无氧,经过至少两次主要增氧事件(元古宙早期GOE和元古宙晚期NOE)后,才达到了现今大气O2水平(21%)。
中国地质大学(武汉) 2022-10-14
海嘉船舶数据传输系统
海嘉船舶数据传输系统采用先进的通信技术与数据处理手段,系统利用高带宽卫星通信和5G网络,提供了更快速、可靠的数据传输通道。其整合物联网技术,能够从多种传感器源头实时获取船舶多维数据。创新的数据压缩和加密算法确保了数据传输的高效率和安全性。同时,系统对海上数据流量进行智能化管理,提升了传输的稳定性。
厦门大学 2025-02-07
首页 上一页 1 2
  • ...
  • 12 13 14
  • ...
  • 709 710 下一页 尾页
    热搜推荐:
    1
    云上高博会企业会员招募
    2
    64届高博会于2026年5月在南昌举办
    3
    征集科技创新成果
    中国高等教育学会版权所有
    北京市海淀区学院路35号世宁大厦二层 京ICP备20026207号-1