高等教育领域数字化综合服务平台
云上高博会服务平台 高校科技成果转化对接服务平台 大学生创新创业服务平台 登录 | 注册
|
搜索
搜 索
  • 综合
  • 项目
  • 产品
日期筛选: 一周内 一月内 一年内 不限
融合架构的高时效可扩展大数据分析平台
大数据应用的多样化 需要的计算模型、数据模型多样化; 目前每类模型需要单独的开源系统来支持(如HDFS、HBase、Neo4j、MongoDB,Flink,Spark,Tensorflow等)。 多系统导致大数据分析平台非常复杂、效率低下。研究目标:研究和开发面向新型多计算模型融合架构的、高时效、可扩展的新 一代大数据分析支撑系统与工具平台FAST(Fusion-Architecture, Scalable, Time-efficient big data analysis platform)。针对目前大数据分析平台复杂、效率低下的痛点,该系统具有三个 方面的优势:首先,这套系统采用融合架构,一方面实现关系、图、键 值、文档等多种数据模型的高效融合,另一方面实现批处理计算、流计 算的深度融合,并可以通过SQL扩展语言来进行多模型的统一查询,实现高效的跨模型查询。其次,对于复杂系统来说,时效性非常重要,这 套系统采用融合架构提高效率是实现高时效的基础,更重要的是,我们 对大数据分析从数据到用户进行了端到端的全栈时效优化。最后,对于 大数据应用来说,系统扩展性非常重要,本系统在资源层、存储层和计 算层进行了全面的扩展性优化。下面在融合架构、高时效和可扩展这三 个方面,分别详细介绍FAST系统的三个主要亮点。融合架构FAST系统的第一个亮点是融合架构,我们在技术方面的创新主要包 括多数据模型融合和多计算模型融合两方面。多数据模型融合:设计和研发了多模型数据管理与查询引擎,支持关系、图、键值、 文档等多种数据模型,实现了查询解析、查询优化、元数据管理、数据 分布等功能,将多种数据模型进行统一管理和深度融合。同时扩展了SQL语言,通过统一的查询接口支持对关系、键值、图、文档等数据进行独立访问或者跨模型查询。经过试验,多模型数据融合查询,比Spark 2.3.4的查询时间能平均减少70.7%。目前spark等现有系统还需要手工编程方式来实现跨模型查 询,所以FAST系统在易用性上也表现良好,降低使用门槛,提高开发效率。多计算模型融合:在计算层实现了最常见的批处理计算和流计算深度融合,批流融合的核心方法是在系统内部实现批和流的统一表达,批是对有限数据集 的运算,流是对无限数据流的计算,我们设计了UCollection结构对批和 流数据进行统一表达,通过识别的bounded标志,来确定是批、流、或批流融合。有了统一表达,可以开展一系列融合优化来提升系统性能。 并且对上通过Unified API统一用户的批、流接口,实现二者在编程范式上的统一表达。对于批流混合的计算,融合架构系统的查询延迟比Flink 1.4.2能减少57%,吞吐量平均可以提升到6.72倍。高时效FAST系统的第二个亮点是高时效,即缩短大数据分析的时间消耗, 提高效率。由于大数据分析平台是一个非常复杂的系统,为了做到高时效,系统不能存在性能短板,因此需要对大数据分析的整个过程进行端到端的全栈时效优化。如图中所示,自下而上,需要在多模态存储、批流融合、机器学习、人工操作各层都进行优化。对于多模态存储,面向应用负载和异构硬件特征进行自适应优化;对于批流融合计算,在统一表达基础上,进行系列融合优化技术, 包括DAG优化、迭代优化、部署优化、操作符优化等;在机器学习层面,进行模型优化、消息优化、梯度优化、概率优化 等来提高时效;而且我们也考虑到大数据分析过程中用户人工操作的时效性问题, 通过智能地进行大数据分析方法和模型的推荐,来缩减人工操作的 时间。可扩展FAST系统的第三个亮点是可扩展,由于大数据应用规模很大,数据增速快,对系统可扩展性的要求非常高,为此我们在系统的资源层、 存储层和计算层进行了全面的扩展性优化。在资源层,系统都部署在云计算的虚拟化资源之上,利用了云计算资源的弹性机制进行系统扩展。并在系统中实现了可伸缩调整模块, 能实时监控软硬件系统的状态,按照应用需求来自适应地进行弹性伸缩。在存储层,分布式存储系统扩展性的关键在于分布式共识和一致性 协议(Raft),因此提出了KV-Raft、vRaft等进行Raft的扩展优化。在计算层,我们扩展了机器学习模型的参数规模,使系统可以支持 到百亿级别的超大规模机器学习模型训练,并且性能方面有明显提 升。亮点成果:融合架构大数据分析平台目前已经在阿里巴巴双十一进行示范应用。 从2020年11月10日至11月16日一周的时间,在阿里的生产环境中,研发 的系统一直连续稳定运行,基于淘宝和天猫的实际用户信息进行大数据 分析,综合运用了本系统的存储、计算、机器学习等多个模块的能力, 累计进行了184亿件商品推荐。同时在双十一期间,基于智能交互向导技术,也面向电子商务应用 的卖家提供了“生意参谋”应用,基于大数据分析,帮助卖家分析产品 销量变化的原因,以及促销的有效手段等。
中国人民大学 2021-04-10
融合架构的高时效可扩展大数据分析平台
研究背景:  大数据应用的多样化  需要的计算模型、数据模型多样化;  目前每类模型需要单独的开源系统来支持(如HDFS、HBase、Neo4j、MongoDB,Flink,Spark,Tensorflow等)。  多系统导致大数据分析平台非常复杂、效率低下。 研究目标: 研究和开发面向新型多计算模型融合架构的、高时效、可扩展的新 一代大数据分析支撑系统与工具平台FAST(Fusion-Architecture, Scalable, Time-efficient big data analysis platform)。 针对目前大数据分析平台复杂、效率低下的痛点,该系统具有三个  方面的优势:首先,这套系统采用融合架构,一方面实现关系、图、键  值、文档等多种数据模型的高效融合,另一方面实现批处理计算、流计  算的深度融合,并可以通过SQL扩展语言来进行多模型的统一查询,实现高效的跨模型查询。其次,对于复杂系统来说,时效性非常重要,这  套系统采用融合架构提高效率是实现高时效的基础,更重要的是,我们  对大数据分析从数据到用户进行了端到端的全栈时效优化。最后,对于  大数据应用来说,系统扩展性非常重要,本系统在资源层、存储层和计  算层进行了全面的扩展性优化。下面在融合架构、高时效和可扩展这三  个方面,分别详细介绍FAST系统的三个主要亮点。 融合架构 FAST系统的第一个亮点是融合架构,我们在技术方面的创新主要包  括多数据模型融合和多计算模型融合两方面。 多数据模型融合: 设计和研发了多模型数据管理与查询引擎,支持关系、图、键值、  文档等多种数据模型,实现了查询解析、查询优化、元数据管理、数据  分布等功能,将多种数据模型进行统一管理和深度融合。同时扩展了SQL语言,通过统一的查询接口支持对关系、键值、图、文档等数据进行独立访问或者跨模型查询。 经过试验,多模型数据融合查询,比Spark 2.3.4的查询时间能平均减少70.7%。目前spark等现有系统还需要手工编程方式来实现跨模型查 询,所以FAST系统在易用性上也表现良好,降低使用门槛,提高开发效率。 多计算模型融合: 在计算层实现了最常见的批处理计算和流计算深度融合,批流融合的核心方法是在系统内部实现批和流的统一表达,批是对有限数据集  的运算,流是对无限数据流的计算,我们设计了UCollection结构对批和  流数据进行统一表达,通过识别的bounded标志,来确定是批、流、或批流融合。有了统一表达,可以开展一系列融合优化来提升系统性能。 并且对上通过Unified API统一用户的批、流接口,实现二者在编程范式上的统一表达。对于批流混合的计算,融合架构系统的查询延迟比Flink 1.4.2能减少57%,吞吐量平均可以提升到6.72倍。 高时效 FAST系统的第二个亮点是高时效,即缩短大数据分析的时间消耗,  提高效率。由于大数据分析平台是一个非常复杂的系统,为了做到高时效,系统不能存在性能短板,因此需要对大数据分析的整个过程进行端到端的全栈时效优化。如图中所示,自下而上,需要在多模态存储、批流融合、机器学习、人工操作各层都进行优化。 对于多模态存储,面向应用负载和异构硬件特征进行自适应优化; 对于批流融合计算,在统一表达基础上,进行系列融合优化技术, 包括DAG优化、迭代优化、部署优化、操作符优化等; 在机器学习层面,进行模型优化、消息优化、梯度优化、概率优化 等来提高时效; 而且我们也考虑到大数据分析过程中用户人工操作的时效性问题,  通过智能地进行大数据分析方法和模型的推荐,来缩减人工操作的  时间。 可扩展 FAST系统的第三个亮点是可扩展,由于大数据应用规模很大,数据增速快,对系统可扩展性的要求非常高,为此我们在系统的资源层、  存储层和计算层进行了全面的扩展性优化。 在资源层,系统都部署在云计算的虚拟化资源之上,利用了云计算资源的弹性机制进行系统扩展。并在系统中实现了可伸缩调整模块,  能实时监控软硬件系统的状态,按照应用需求来自适应地进行弹性伸缩。 在存储层,分布式存储系统扩展性的关键在于分布式共识和一致性 协议(Raft),因此提出了KV-Raft、vRaft等进行Raft的扩展优化。 在计算层,我们扩展了机器学习模型的参数规模,使系统可以支持  到百亿级别的超大规模机器学习模型训练,并且性能方面有明显提  升。 亮点成果: 融合架构大数据分析平台目前已经在阿里巴巴双十一进行示范应用。  从2020年11月10日至11月16日一周的时间,在阿里的生产环境中,研发 的系统一直连续稳定运行,基于淘宝和天猫的实际用户信息进行大数据 分析,综合运用了本系统的存储、计算、机器学习等多个模块的能力, 累计进行了184亿件商品推荐。 同时在双十一期间,基于智能交互向导技术,也面向电子商务应用  的卖家提供了“生意参谋”应用,基于大数据分析,帮助卖家分析产品  销量变化的原因,以及促销的有效手段等。
中国人民大学 2021-05-09
一种汽车车载CAN总线系统测控分析平台
南京工程学院 2021-04-13
基于音视频识别及语义分析的智能约谈平台
针对行政约谈场景中存在的人工记录效率低、内容理解偏差记录、资料追溯繁杂等问题,本成果开展了基于音视频识别及语义分析的智能约谈平台的研究。基于 AI 深度学习的音视频识别框架、复杂网络理论和语义知识本体的文本语义相似度计算方法,研究音视频识别的语音转写、对话管理、计算机视觉技术和内容分析的语义理解、语义优化、情感识别方法,实现网信约谈、纪委约谈、公安审讯、监狱谈话等多种行政约谈场景下的约谈智能化和数字化。其中,语音识别转写是开展智能约谈系统研究的前提和基础,本成果训练了声学模型和语言模型,构建编码器,通过音频角色分离和声纹识别技术分离说话人声音,编码器识别解码,经过文本语义处理转写为文本。而文本语义处理是智能约谈系统提升约谈效能的源动力,成果构建了基于语义本体的自动专家导引约谈知识库,通过基于复杂网络的语义相似度计算给约谈工作人员推荐约谈问题;约谈结束后,利用融合主题特征的文本自动摘要技术快速生成汇报摘要,利用基于分布式表示的事件抽取技术自动生成约谈报告。本成果研制高效、便捷的智能约谈音视频识别及语义分析平台,实现了在线约谈预约、人脸识别身份核验、语音实时转写、约谈问题智能引导提问、音视文同步显示、汇报摘要自动生成、约谈报告自动生成、约谈文件回溯、约谈大数据分析等功能。
西安电子科技大学 2022-12-15
现场总线、网络型检测仪表设计
一、 项目简介温度,压力,流量仪表设计开发,开发HART 、PROFIBUS PA通信板卡,通用性高,将通信板卡应用于差压(压力)变送器,并通过PA认证测试;完成整机的PA测试认证及认证要求的电磁兼容、本质安全等测试;二、 项目技术成熟程度已通过 国际PNO组织的 Profibus-DP,Profibus-PA两项认证,分别应用于天仪集团电动执行器,与压力变送器仪表。三、 技术指标(包括鉴定、知识产权专利、获奖等情况)1、 采用DPC31,FBC04090,HT1200M协议芯片实现Profibus-DP,PA及HART总线通讯。2、 基于ARM7系列微处理器,支持DP-V0、DPV1 从站协议。3、 支持Profibus PA 行规3.02 版本,包括:AI、AO、DI、DO和TOT功能块4、已通过Profibus 国际组织 一致性测试和互操作测试。四、 市场前景(应用领域、市场分析等)本课题的研究是及时填补了一种有极大市场潜力的研究领域,对自动化控制领域技术进步和缩小与国外技术水平的差距,具有重要意义。五、 规模与投资需求(资金需求、场地规模、人员等需求)投资小,无场地要求,人员需8-15人。六、 效益分析 填补了国内在PROFIBUS-PA产品开发领域的空白,极具市场潜力,对自动化控制技术和现场总线仪表的研究具有推动作用,具有较大的实际工程意义。七、 合作方式技术转让,合作开发八、 项目具体联系人及联系方式(包括电子邮箱)梁涛 手机:13512889536,邮箱:liangtao@hebut.edu.cn通讯地址:天津市红桥区光荣道8号,河北工业大学 7A-802室九、 高清成果图片2-3张
河北工业大学 2021-04-11
湘潭市仪器仪表有限公司
湘潭市仪器仪表有限公司是国内著名的陶瓷、玻璃、耐火材料、保温材料、石墨炭素材料等无机材料理化分析仪器专业厂商,雄厚的技术、丰富的现代知识使其综合实力在同行业具有领导地位。 产品远销国内外,并批量出口泰国,台湾,马来西亚,朝鲜等国,深得用户好评. 产品广泛应用于日用陶瓷,建筑陶瓷,工业陶瓷,耐火材料,非金属材料,铸造等行业及各大专院校,科研院所,产品质检局,玻璃行业及化工行业也是我们友好的合作伙伴. 
湘潭市仪器仪表有限公司 2021-02-01
HB8600压力仪表自动校验台
产品详细介绍概  述   本系统是我公司依照国家相关计量检定规程的要求,自主设计、研发的全量程压力校准装置。适用于对一般压力表、精密压力表、压力变送器、差压变送器、压力控制器、压力开、真空表、氧压表和乙炔表等压力仪表的校准,可扩展传感器检测、绝缘电阻测试功能。 HB8600压力仪表自动校验台主要包括:压力控制器、压力标准、校验软件三部分。如表1所示:     简 称 全   称 功能简述 1 压力控制器 电动造压、精密调节系统及校验工作台体部分   2 压力标准 高精度数字压力计及多量程压力模块部分 全量程数字压力标准 3 校验软件 微机、打印系统及自动校验、计量管理软件部分 自动校验、计量管理   由此装置建立的高精度数字式工作压力校验标准,特别适合更新和建立规范、实用的工业标准压力计量室,满足工业企业周期性、大批量、重复性计量检定工作的需要,使大量繁琐的压力控制、数据记录、计算、建档工作由自动控制器和计算机软件自动完成。即提高了工作效率,又减轻了劳动强度。 此系统还可用于建立学校专业教研室的压力实验室,配合专业软件,可作为先进压力仪表教学的示教设备。其用户可覆盖全国,广泛应用于电力、冶金、石油、化工、国防、仪表制造、教学和计量测试监督等部门的实验室及企业建标升级改造。    
北京航威硕杰电子有限责任公司 2021-08-23
上海佳航仪器仪表有限公司
佳航仪器(JiaHang Instruments) 致力于食品、药品分析测试领域的创新,推动“绿色食品”和“健康药品”。研发生产分析和测量类仪器,并提供应用、方法、服务等综合解决方案。 现公司有熔点仪、折光仪、旋光仪、密度计、电位滴定仪、浊度仪、热分析仪、样品前处理等仪器设备。 佳航仪器总部位于国际大都市上海,佳航有海外归国的研发团队、 务实的制造团队、专业的销售团队和敬业的服务团队,为食品企业、药品企业、医院、高校、科研院所、医院等提供高科技、高品质的产品和高效便捷、全方位的售前售后服务。 佳航始终坚持为客户创造价值的同时,专注科技创新丰富自身,力求与人双赢,共同成长。
上海佳航仪器仪表有限公司 2021-12-07
上海锦壮仪器仪表有限公司
上海锦壮仪器仪表有限公司——选择上海锦壮,选择放心仪器与专业服务   上海锦壮仪器仪表有限公司是专业从事水质检测仪器的研发、生产、销售和服务的高科技企业。我们的工作是为环保监测机构、自来水厂、污水处理厂、质检单位、企业单位提供质量可靠的产品和服务。公司生产的产品有:COD、氨氮、总磷、总氮测定仪,浊度、色度、悬浮物测定仪、便携式微生物检测仪、红外测油仪、国标法COD标准消解器、多(单)参数水质测定仪、多(单)参数重金属测定仪、各种无机盐有机化合物测定仪。让客户可以专注于生产,研究,教学等工作中。涉及仪器方面的咨询,售后,维修,改装等业务都可以通过我们来寻求帮助。选择上海锦壮,选择放心仪器与专业服务。                                              我们的业务——                                                       公司的产品涵盖光学仪器、测量仪器、测绘仪器、无损检测、量具量仪、实验仪器、分析仪器、水质分析、电化学仪器、物理仪器、基础仪表、电 气测量、电学仪器、教学仪器等共32大类,460余个小类,总共3000余种型号产品的大型专业精密仪器仪表企业。 各类仪器仪表产品广泛应用与机械制造、电子、电器、化工、材料、塑料、涂料、铸造冶炼、金属制品、模具、汽车汽配、制药、生物科技、食品、纸业、包装、服 装、自动化、工程建筑、环境监测等28大行业、300余个细分行业。产品不仅国内市场,并且还销售到欧洲、美国、日本、韩国,朝鲜,新加坡等国家。                                                 我们的客户——                                                           我们的客户分布于中国的各个地区,各个行业。主要为企业用户,大专院校,研究机构,质检机构及卫生单位。         在企业用户中,跨国企业或大型企业用户对于生产品质有着很高的要求,并且对服务有着更高的要求。需要及时的正确的检测仪器产品来帮助开发 新的产品,配合公司的发展。对此,我们不但提供正确可靠的产品,并且提供售后响应,处理可能发生的问题。我们深知可靠,稳定对于大企业的重要性。         对于成长中的中小企业,发展的速度很快,会需要使用更多更丰富的仪器产品来适应新的发展需求,对此,我们会努力去了解他们实际遇到的情况 以及需要检测的内容或是实验环境,来确定Z匹配合适的产品。我们理解成功经营一个中小企业所面临的挑战。我们知道,您的事务繁多,时间宝贵。我们的技术解 决方案和便利服务将帮助您获得仪器选择方面的支持。上海精密理解经营一个成功中小企业所面临的挑战。         对于大专院校,研究机构的用户,往往需要很多不同的仪器产品来建设实验室,或帮助完成专项课题。我们深知老师对于仪器的各项指标,细节的要求都会更加专业,并且我们也会配合学校的操作流程让老师在购买产品的时候得到便利。         质检单位,食品质检,海关,产品质量检验等机构对于产品的质量监督起着重要的作用,根据这些特点,我们在提供用户产品之前会反复确认仪器是否能够达到精度,及使用过程中要注意的问题。         对于卫生单位,我们同样不遗余力的提供支持,在中国有很多偏远地区的卫生体系还不健全,依靠设施简陋的乡,镇卫生站来为当地的人群提供卫 生保障,对于这样经费有限但又需要基本仪器的单位,我们始终提供Z符合其实际需求的产品。力求在同样的支出下获得更好的产品和服务,能让基本人群的医疗 服务有保障。         以上是我们对客户所提供的业务和服务。希望通过我们的产品技术,专业技术来为上述用户解决仪器仪表产品方面的疑问,让用户能够专心于自己的工作和事业,在选择仪器方面可以和我们一起获得Z合适的产品和服务。
上海锦壮仪器仪表有限公司 2021-12-07
上海昕瑞仪器仪表有限公司
上海昕瑞仪器仪表有限公司创建于2004年,是专业从事计量、检测、分析仪器的研发、生产、销售、服务为一体的实体企业。工厂地处嘉定区徐行经济技术开发区,公司市场部位于上海中心城区市北工业园区。 自创业十年多来,昕瑞公司一直秉承“服务以人为本”的宗旨,积极参与各类政府招投标活动,曾多次在全国卫生疾控系统、环境保护监测系统、农业林业科教系统、水处理工程系统中标,国内同行业综合实力持续保持稳定增长态势。 注册商标“昕瑞”牌系列水质分析仪、酒类分析仪、色度分析仪、电化学分析仪、粮油检测仪、建材测试仪等产品,广泛应用于各行各业。不仅在国内市场享有较高的声誉,而且还远销欧、美、亚、非等国家和地区。公司坚持立足于广大客户,以创新求发展,以质量求效益,以诚信经营参与竞争,以优质服务立足市场,与时俱进,共同发展。
上海昕瑞仪器仪表有限公司 2021-12-07
首页 上一页 1 2 3 4 5 6
  • ...
  • 161 162 下一页 尾页
    热搜推荐:
    1
    云上高博会企业会员招募
    2
    64届高博会于2026年5月在南昌举办
    3
    征集科技创新成果
    中国高等教育学会版权所有
    北京市海淀区学院路35号世宁大厦二层 京ICP备20026207号-1