|
搜索
搜 索
高等教育领域数字化综合服务平台
一种基于链接分析的聚焦爬虫方法
本发明针对现有技术的不足之处提供了一种基于链接分析的聚焦爬虫方法，用以解决现有聚焦爬虫抓取网页准确率和效率较低的问题。 为实现上述目的，本发明采用的技术方案为： 一种基于链接分析的聚焦爬虫方法，其特征在于，包括如下步骤： (1)抓取网页，将网页和目标样本网页的结构进行比较，确定目标网页，从网站入口链接开始，记录爬虫到目标网页的每一条链接路径，建立目标网页链接树； (2)分析目标网页链接树，归纳链接树中目标网页路径上的链接，替换链接树中的链接，形成链接模版树； (3)爬虫使用链接模版树作为导航，抓取与链接模版树相匹配的网页链接，直到整个抓取循环过程结束，最终抓取完所有目标网页。 作为优选，步骤(1)中，所述建立目标网页链接树的具体步骤如下： (11)选择一个目标网页作为目标样本网页，用于比较将下载的网页结构； (12)初始化链接树，即将链接树设置为一棵空树； (13)初始化链接队列，将网站的入口链接加入到链接队列尾部； (14)从链接队列头部取出链接，广度优先地抓取网页； (15)将抓取的网页和目标样本网页进行比较，如果结构相同，则将该目标网页的路径添加到链接树中，将目标网页的链接作为
电子科技大学
2021-04-10
一种深度多维度流量语义分析方法
一种深度多维度流量语义分析方法，使用有监督的深度学习模型来训练网络获取ｕｒｌ页面的特征向量，并综合考虑用户之间的语义关系来实现流量分析；对于网站日志的预处理，采用ｍａｐｒｅｄｕｃｅ筛选掉不符合条件的日志数据，其中包括爬虫日志数据和其他网站的数据；对于构建出来的浏览路径，设置阈值为ｎ，筛选掉长度小于ｎ的路径；对于网站ｕｒｌ页面的文本处理，采用词向量的分布式表示方法得到ｕｒｌ页面的向量，利用ｕｒｌ页面嵌套来描述用户浏览行为的语义信息；采用聚类方法对用户的浏览路径进行聚类，通过聚类来分析用户的分布情况和用户群之间的差异，聚类使用ｔ?ＳＮＥ降维来达到直观的向量空间聚类效果。
东南大学
2021-04-11
再生混凝土细观结构分析方法和计算软件
北京工业大学
2021-04-14
一种测量不确定度的分析方法
本发明公开了一种测量不确定度的分析方法。利用参考测量系测量各标准样件，获取测量结果 X，利用某一待分析的测量系统对标准样件进行测量，获取测量结果 Y；分别计算测量结果 X 和 Y 的方差V(X) 和 V(Y) ， 并 定 义 α ＝ V(X)/V(Y) ； 假 设 <imgfile="DDA00002582404000011.GIF" wi="39" he="46" /> 和 <imgfile="DDA00002582404000012.GIF" wi="29" he="46" /
华中科技大学
2021-04-14
光谱型共聚焦位移传感器 及形貌扫描技术的开发与应用
成果介绍传统解决方案光源、光谱仪、共焦光路等各自独立，体积大、装配繁琐；All-in-one 高集成一体化光谱共聚焦传感器方案;光源光路、共聚焦光路和光谱分析光路一体化集成；控制电路、信号处理分析电路一体化集成；测量结果显示输出一体化集成；高可靠、高精度、低装配要求、低空间占用；紧凑型光路及关键配件（如物镜等）自主设计方案；三维扫描系统及配套面型重构算法、特征提取算法；后期将开发更先进的线光源激发共聚焦测量系统。技术创新点及参数非接触测量，完美避免工件表面划伤；广泛适用于各种材料表面测量（不透明/透明/半透明、液体等）；待测工件颜色不敏感；极高的位置变化测量精度以及高的表面扫描分辨率；点成像方式，不存在通常3D扫描仪的遮挡效应；可实现大表面倾角处的位置测量；可实现多层工件（透明/半透明）各界面处的形貌扫描；无激光光源安全问题。
东南大学
2021-04-11
智能高分辨成像光谱装备
我国的高光谱成像技术起步较晚，但受日益增长的并十分迫切的社会、经济需求的激励，光谱成像技术及应用得到快速发展，光谱分析被用来解决物理学、化学、生物学、地质学、地球物理学、医学和其它学科中的基础问题和应用问题。技术团队完成以柱面C_T消像差专利结构和Offner结构为核心的紫外、可见光、近红外、短波红外、中波红外五型高光谱成像仪产品研发，实现宽波段覆盖、成像性能好、光谱分辨率高于国外同价位产品，竞争力高。同时积极拓展开发成像光谱仪产品的应用，已研发兼具空间成像和光谱分析能力的微细样品成像分析仪器——显微成像光谱仪，用于材料和生物应用。此外配套研制了功能强大的成像光谱数据采集与处理分析软件，提出了全并行处理机制，大大缩短光谱数据获取和光谱重建时间，较国外产品用户体验更便捷友好，便于大面积推广。
图1.短波红外成像光谱仪
北京理工大学
2022-12-05
快照式光谱成像芯片
利用超表面与图像传感器集成的新方案实现快照式光谱成像芯片，结合计算光谱分析原理及重建算法，研制出了可见光波段、高精度的光谱成像芯片。
清华大学
2021-02-24
生物靶标光谱指纹识别
在生物医学光学方面，本团队开展了基于低相干原理的检测技术在生物医学领域的应用，开展了低相干眼生物测量仪的研制；实现了工程样机的制备，技术成熟度 7 级；具体如图 1 所示；此设备可以开展眼轴长度，角膜曲率，角膜直径和前房深度的测量；还开展了低相干原理下的生物折射率研究，开展了液体，固体状态下的折射率测量，因为折射率与生物体的属性都有一定的相关性。
上海理工大学
2021-01-12
LED全光谱护目面板灯
深圳市拓享科技有限公司
2021-08-23
全光谱LED护眼读写灯
1、自主研发全光谱芯片，光谱为连续性，无蓝光危害；
2、类太阳光照明，Ra97，高度还原真实色彩；
3、RG0级无蓝光危害，无可视频闪，缓解用眼疲劳；
4、国AA级照度，大面积发光，无暗区，照度更均匀；
5、多功能一键触控，三档亮度轻松切换；
6、灯臂设计四处转轴，灯头上下。
了解更多产品详情，请与我们联系：021-6176 3333；15821024688
启福光照明科技（上海）有限公司
2021-08-23