高等教育领域数字化综合服务平台
云上高博会服务平台 高校科技成果转化对接服务平台 大学生创新创业服务平台 登录 | 注册
|
搜索
搜 索
  • 综合
  • 项目
  • 产品
日期筛选: 一周内 一月内 一年内 不限
交互式大数据处理与分析技术
1.痛点问题 多年来,工业大数据领域大数据分析算法和模型都是基于大量代码实现,效率低,难以实现快速开发。同时,工业大数据处理分析模型处理过程多由多个算法通过一定的计算流程构成,计算流程复杂多变,迫切需要一款支持灵活定制和快速开发的处理分析技术来支持工业大数据处理分析。 2.解决方案 清华数为交互式大数据处理与分析技术针对工业大数据处理与分析任务的交互式探索、建模、调试和应用而设计。根据CRISP-DM设计原则,一般大数据处理与分析分为业务理解、数据理解、数据准备、建模、评估和部署等阶段,各阶段相辅相成,形成一个大数据处理分析生命周期。 图1.交互式大数据处理与分析技术设计思想 本成果技术基于上述CRISP-DM的设计思想而设计,完全支持大数据处理与分析生命周期。该技术的特点包括: (1)内置数百种通用和专用的大数据分析算法和模型,并提供了按需扩展机制,用户可以按照自己的需要随时添加和扩充,以支持客户特定的大数据应用需求; (2)支持拖拽方式构建处理与分析流程,完全图形化设计大数据处理分析计算流程,并能在设计过程中进行单步/多步运行调试,查看中间结果,实时调整运行结果,以获得用户期望的处理分析结果; (3)支持机器学习模型训练及使用,内置了机器学习模型训练框架,一般机器学习模型在该技术的支持下,可以实现快速训练,训练结果可支持进一步的大数据处理与分析; (4)支持数据处理与分析流程参数化,在其提供的内部数据处理与分析算法模板中,用户通过算法模板可以开发面向Java、Python的算法,并集成和扩展到该技术的算法集合,实现按需定制处理分析; (5)支持数据画像和学习模型可视化,以图形化的方式定制数据画像的方法模型,并以二维和三维图表的形式展示给用户; (6)支持批处理、流处理和流转批处理三种处理方式; (7)按需定制运行计划与资源有效利用,用户可设置任务执行计划,任务执行计划定期运行,以实现周期性处理分析,方便获得持续的运行结果。 清华数为交互式大数据处理与分析技术面向多种用户角色,包括数据工程师、数据分析师、数据科学家、算法工程师、运维工程师、代码工程师等。采用分层设计,分为客户层、服务层、计算层。 客户层包括流程建模调试工具,用户可用工具图形化拖拽式设计处理与分析计算模型,并可进行调试和查看中间结果;管理工具,针对服务层所调用和访问的计算框架或者外部系统进行管理,包括对于数据源、计算环境、存储环境等的管理工具。 服务层主要包括流程调度服务,即负责按照用户所设定的工作计划来定时调度执行计算模型;执行服务,是负责执行处理分析计算的模型和算法的服务;计算资源管理服务负责管理执行服务中所能集成的所有的服务,如计算框架和存储设施等。 计算层是执行服务在执行处理分析算法和模型中所访问的外部服务,包括计算组件或框架,以及持久化存储组件或者系统等。 图2.交互式大数据处理与分析技术架构 本成果的交互式处理与分析技术较好地解决了工业大数据处理分析工作中所遇到的问题和痛点,并且能够广泛应用于多个行业和领域中,如能源、矿山、医疗器械、装备制造业、消费品制造业、工程机械行业等。 合作需求 期待与工业、医疗等领域企业紧密合作,获得各领域的实际需求,促使该技术不断完善和升级迭代,走向成熟。 未来将在工程机械行业、医疗机械行业、矿山行业、装备制造行业、互联网电商行业等寻求更多的成果转化、深度合作机会,在合作基础上,推动上述行业领域实现数字化转型和智能化升级,为国家实现“双碳”目标做出清华贡献。
清华大学 2022-04-25
高含水有机固废直接阴燃处理技术
本技术针对高含水有机固废提出无需干化、直接阴燃的技术路线,从原理上克服了低热值固废焚烧处置的技术劣势。 一、项目分类 关键核心技术突破 二、成果简介 我国城镇有机固废具有高含水率、低热值的特点,传统的焚烧处置技术往往能耗高、投资大,难以推广应用。本技术针对高含水有机固废提出无需干化、直接阴燃的技术路线,从原理上克服了低热值固废焚烧处置的技术劣势。
华中科技大学 2022-07-26
面向大规模信息处理的 GPU 集群技术
成果简介:随着大数据分析、大规模视频监控、大规模支付系统等如火如荼地展开,提 高大规信息处理 能力已经成为业界的追逐的焦点。计算机集群技术成为重要手 段并突飞猛进,如我曙光系列、天河系 列、IBM 深蓝等超级计算机。这些高端 集群利用专用的计算节点、高速网路、特殊系统构成,具有成 本高、维护代价 高、运营成本贵等问题。利用普通的计算机、商业化的网络、通用的软件系统构 成的 普通计算机集群因其成本低、维护便宜,更适合广泛地构建大规模集群处 理和服务系统。 GOOGLE、Baidu、阿里、
上海理工大学 2021-01-12
雨水收集、处理、利用系统关键技术及工程
项目简介 分析归纳了城市雨水利用的途径、原则,通过对示范工程现场的水资源情况、雨水 径流污染的状况和水质特性的分析,进行了水量平衡计算;研究了雨水收集利用系统的230 关键技术,确定了工艺路线,主要净化工艺采用初期雨水弃流、旋流分离器和生态浮床 组合技术;开发了相关装备,实施了雨水收集、处理、利用示范工程,并对示范工程进 行技术经济分析。可根据雨水利用工程实地情况,为城市单位、大型小区及度假村等提 供雨水利用依据、技术支持和工程指导,必要情况下可结合实
江苏大学 2021-04-14
挥发性有机气体处理新技术-等离子体除臭技术
等离子体被称为是除固、液、气三态以外的第 4 种物形态,它是由电子、离子、自由基和中性粒子组成的呈电中性的导电性流体,一般分为热等离子体(平衡等离子体)和低温等离子体(非平衡等离子体),低温等离子体技术在半导体工业、聚合物薄膜、材料防腐蚀、等离子体电子学、等离子体合成、等离子体冶金、等离子体煤化工、等离子体三废处理等领域被广泛应用,通常是采用加热或放电的手段产生. 自然界中等离体产生的方式主要包括:电晕放电、介质阻挡放电、火花放电、辉光放电、汤生放电和弧光放电。其中,电晕放电和介质阻挡放电在常温常压环境下就可操作,因而被广泛应用。
北京交通大学 2021-02-01
挥发性有机气体处理新技术-等离子体除臭技术
项目成果/简介:等离子体被称为是除固、液、气三态以外的第 4 种物形态,它是由电子、离子、自由基和中性粒子组成的呈电中性的导电性流体,一般分为热等离子体(平衡等离子体)和低温等离子体(非平衡等离子体),低温等离子体技术在半导体工业、聚合物薄膜、材料防腐蚀、等离子体电子学、等离子体合成、等离子体冶金、等离子体煤化工、等离子体三废处理等领域被广泛应用,通常是采用加热或放电的手段产生. 自然界中等离体产生的方
北京交通大学 2021-01-12
一种基于系统耦合模式修复河流水质的方法
依托国家重大专项-水专项中的“伊通河河道生态修复技术研究与工程示范”子课题完成了本专利。该成果的主要内容是是将河岸植被缓冲带系统、多功能塘系统和河道滩地上的微地形改造系统有机耦合在一起,通过系统间水力联系实现对两岸面源污染的截留与上游河道污染物的净化,改善河流生态系统结构,强化其水质净化的功能,并增加系统的经济收益。主要技术指标:因受周围耕地限制,河岸植被缓冲带的宽度控制在20-40 m 间,主要对其内的植被配置进行了优化。多功能塘系统中水力停留时间约为20 d,塘中以2:2:3:2的比例放养是鲢鱼、鳙鱼、鲤鱼、鲫鱼,并设置面积为500 m2的植物浮床;塘出水利用60m2的芦苇人工湿地及高20 cm的溢流堰净化处理后排入伊通河。利用粒径200-400 mm的砾石构成的溢流堰将滩地泡沼与伊通河进行水利连通。上述系统相互作用耦合在一起形成一个耦合系统,此耦合系统的形成有助于提高对两岸面源污染截留和对上游河道污染物的净化效能,改善整体环境质量,增加生境多样性的同时,提高农民的经济收入水平,有效地缓解了经济社会发展与环境保护间的矛盾问题,并提供了一种资源可持续利用的发展模式。
东北师范大学 2021-04-29
基于物联网的水质监测预警成套设备和系统
北京工业大学 2021-04-14
小城镇分散型生活污水处理技术
构建地下渗滤系统,通过物理化学吸附与微生物降解综合技术处 理生活污水,使其达到二级排放标准。日处理量 20-100 吨。 目前国家日益重视环境保护,而随着城镇化进程加进,人民生活 水平提高。农村和小城镇生活污水对水环境造成的符合,不容忽视,是亟待解决的问题。而集中处理系统不能迅速覆盖每一个地区,因此 急需合适北方地区的分散型生活污水处理技术。 地下处理系统已经在天津武清区示范运行 5 年,运行稳定,出水 达标,对当地的景观和地表水质量有很大改观,适合在河北气候条件 下运行。 本项目具有巨大社会效益和市场需求。投资估计:200 万
南开大学 2021-04-11
小城镇分散型生活污水处理技术
构建地下渗滤系统,通过物理化学吸附与微生物降解综合技术处理生活污水,使其达到二级排放标准。日处理量 20-100 吨。 目前国家日益重视环境保护,而随着城镇化进程加进,人民生活水平提高。农村和小城镇生活污水对水环境造成的符合,不容忽视,是亟待解决的问题。而集中处理系统不能迅速覆盖每一个地区,因此急需合适北方地区的分散型生活污水处理技术。 地下处理系统已经在天津武清区示范运行 5 年,运行稳定,出水达标,对当地的景观和地表水质量有很大改观,适合在河北气候条件下运行。 本项目具有巨大社会效益和市场需求。投资估计:200 万。
南开大学 2021-02-01
首页 上一页 1 2
  • ...
  • 13 14 15
  • ...
  • 731 732 下一页 尾页
    热搜推荐:
    1
    云上高博会企业会员招募
    2
    63届高博会于5月23日在长春举办
    3
    征集科技创新成果
    中国高等教育学会版权所有
    北京市海淀区学院路35号世宁大厦二层 京ICP备20026207号-1