|
搜索
搜 索
高等教育领域数字化综合服务平台
一种基于链接分析的聚焦爬虫方法
本发明针对现有技术的不足之处提供了一种基于链接分析的聚焦爬虫方法，用以解决现有聚焦爬虫抓取网页准确率和效率较低的问题。 为实现上述目的，本发明采用的技术方案为： 一种基于链接分析的聚焦爬虫方法，其特征在于，包括如下步骤： (1)抓取网页，将网页和目标样本网页的结构进行比较，确定目标网页，从网站入口链接开始，记录爬虫到目标网页的每一条链接路径，建立目标网页链接树； (2)分析目标网页链接树，归纳链接树中目标网页路径上的链接，替换链接树中的链接，形成链接模版树； (3)爬虫使用链接模版树作为导航，抓取与链接模版树相匹配的网页链接，直到整个抓取循环过程结束，最终抓取完所有目标网页。 作为优选，步骤(1)中，所述建立目标网页链接树的具体步骤如下： (11)选择一个目标网页作为目标样本网页，用于比较将下载的网页结构； (12)初始化链接树，即将链接树设置为一棵空树； (13)初始化链接队列，将网站的入口链接加入到链接队列尾部； (14)从链接队列头部取出链接，广度优先地抓取网页； (15)将抓取的网页和目标样本网页进行比较，如果结构相同，则将该目标网页的路径添加到链接树中，将目标网页的链接作为
电子科技大学
2021-04-10
一种深度多维度流量语义分析方法
一种深度多维度流量语义分析方法，使用有监督的深度学习模型来训练网络获取ｕｒｌ页面的特征向量，并综合考虑用户之间的语义关系来实现流量分析；对于网站日志的预处理，采用ｍａｐｒｅｄｕｃｅ筛选掉不符合条件的日志数据，其中包括爬虫日志数据和其他网站的数据；对于构建出来的浏览路径，设置阈值为ｎ，筛选掉长度小于ｎ的路径；对于网站ｕｒｌ页面的文本处理，采用词向量的分布式表示方法得到ｕｒｌ页面的向量，利用ｕｒｌ页面嵌套来描述用户浏览行为的语义信息；采用聚类方法对用户的浏览路径进行聚类，通过聚类来分析用户的分布情况和用户群之间的差异，聚类使用ｔ?ＳＮＥ降维来达到直观的向量空间聚类效果。
东南大学
2021-04-11
药物分析、分离材料的制备及分离、纯化技术
本项目研制的高聚物色谱材料具有硅胶基质色谱材料所无法达到的化学稳定性，且有多项功能化专利技术作支撑，在生物药物、天然药物及多种有机物的检测、分离纯化方面有许多独到之处。该材料和技术可帮助制药企业提高药品纯度，去除一些过敏源杂质，减少医药事故的出现，达到用药安全，乃至生产“安全”。 由于粒径小而均匀，耐高压，可高效能的对药物进行检测分离纯化。该高性能色谱材料的合成与功能化，为国内色谱领域填补了空白。目前全世界仅有美国、日本的5-6家公司有能力生产。 该技术在国内、国外均处于领先水平，有专利技术和独特的高性能色谱材料作支撑。 高性能色谱材料可批量生产，利巴韦林、土霉素、多烯环素、甘油果糖、头孢类等药物的检测应用开发已获成功，其它药物、食品检测的应用开发在进行中。
南京工业大学
2021-04-13
流体输送和分离过程的实验和数值分析
1. 项目概述本研究室长期从事过程装备流动分析和测量技术研究，包括泵内流场分析和外特性测量、阀门内流动分析和性能测试、漩流分离流场分析和分离效率测试、泵效率测试和评价、锅炉燃烧室内流动分析、各种换热器内的流动和传热分析评价。拥有ANASY、FLUENT、CFX等商用分析软件，建有激光粒子图像测速系统和流动分析实验装置、离心泵试验装置、泵汽蚀性能试验装置、漩流分离试验装置、锅炉燃烧室冷态流动试验装置等。可为过程工业装置提供相关分析、测试和评价服务，为产品设备改造和新产品研发提供技术支持。2. 技术优势江苏省流量专业委员会委员、江苏省流体力学专业委员会委员单位
南京工业大学
2021-04-13
河南省新冠肺炎疫情时空特征初步分析
河南大学黄河文明与可持续发展研究中心成立“新型冠状病毒感染肺炎疫情时空扩散研究”课题组，研究完成《河南省新型冠状病毒感染肺炎疫情时空特征初步分析》，围绕河南省此次疫情的输入和扩散过程、空间差异特征展开研究，建立新冠肺炎个体病例地理信息数据库，搜集并整理了自2020年1月21日以来我省18个省辖市卫健委公布的个体病例信息，通过数据分析得出疫情发展的初步判断。
河南大学
2021-04-11
复杂结构/先进材料承压设备应力分析设计
成果简介： 南京工业大学具有A1、A2、A3及SAD级特种设备（压力容器）设计资质，机械与动力工程学院化工设备设计研究所是设计证的主体部门。本项目采用弹性分析设计及基于弹塑性理论的非弹性分析设计方法为企业开展石油化工、煤化工等重要装置设备结构的优化设计及安全评定。以“极端工况”、“大型化”为特色，注重压力容器的创新设计。以国家自然科学基金“基于塑性失效的
南京工业大学
2021-01-12
旋翼/复杂地形/舰载复杂气动干扰分析技术
成果简介： 通过对复杂地形或舰载干扰环境下的旋翼系统进行流体力学数值模拟计算分析，获得旋翼系统气动性能和载荷特性，评估复杂地形或舰载环境下的旋翼系统气动特性和安全飞行区。本成果可应用于直升机作战环境或舰载着陆环境下的气动与安全一体化评估与分析，减少风洞试验测试和飞行测试风险。 技术优势： （1） &nbs
南京工业大学
2021-01-12
UnitCalcul 火电机组在线性能计算分析系统
南京工程学院
2021-04-13
基于频谱分析法的振动时效系统
经过热加工（如铸造、锻压、焊接）和压力加工的金属零件表面和内部会 存在残余应力和变形。残余应力的存在对构件是有害的，如降低工件强度和疲 劳极限、造成脆性断裂、加快构件在腐蚀大气中的腐蚀速度等；分布不均的残 余应力会对构件尺寸精度和稳定性产生极为不利的影响。因此消除残余应力是 机械制造工业技术中的一项重要课题。 当前，消除构件残余应力的方法主要有自然时效、热时效、振动时效。振 动时效较自然时效和热时效具有投资少、效率高、污染少等优点，已得到越来 越广泛的应用。但是，现有大部分的振动时效系统具有扫频速率较慢、易漏频 等缺点，而且振动时效机理尚未被解释清楚。因此，开发了基于频谱分析法的 振动时效系统，并在此系统的基础上，研究振动时效机理。 频谱分析法是将时域信号变换至频域加以分析的方法，其目的是把复杂的 时间历程波形，经过傅里叶变换以获得信号的频率结构。将此方法应用到振动 时效中获取工件固有频率，可克服传统振动时效中的缺点。此外，构建振动时 效控制系统的构建采用 VB 和 MATLAB 混编，并结合数据采集卡、变频器和激 振电机等硬件，具有开发灵活性好、自动化程度高等优点，并且缩短了产品开 发周期。经过该系统处理的试件残余应力平均下降 46.62%，达到了振动时效消 除残余应力标准。
山东大学
2021-04-13
便携式智能振动测试分析仪
便携式智能多功能振动测试分析仪是广泛应用于工业现场和复杂系统的机械设备工作可靠性分析和在线故障诊断的工具。研制成功的便携式智能多功能测试分析仪，其主要特点：体积小、重量轻、连续工作时间及待机时间长，尤其是振动测试分析仪，带有动态频谱实时显示功能，并可以进行实时频谱分析。测振笔的特点，除体积小、重量轻、连续工作时间亟待及时间长外，更特别的是可以实现加速度、速度、位移三个振动的参量的测量。 随着科学技术的发展，航空航天、军事国防、工业领域的系统设备结构越来越复杂，故障诊断已经成为这些领域亟待解决的技术问题。因此，本项目的研究不仅对便携式振动测试分析仪器的研究，而且对于设备故障诊断方法的实用化和普及有着广泛的实用价值，对复杂的大型系统的机械设备故障诊断有着广阔的应用前景。 本项目研究成果已经通过北京市科学技术委员会技术鉴定，具有完全的自主知识产权，并已申请专利两项。
北京航空航天大学
2021-04-13