登录
首页 » Others » 网络爬虫的设计与实现+毕业论文

网络爬虫的设计与实现+毕业论文

于 2020-12-06 发布
0 279
下载积分: 1 下载次数: 2

代码说明:

网络爬虫是一种自动搜集互联网信息的程序。通过网络爬虫不仅能够为搜索引擎采集网络信息,而且可以作为定向信息采集器,定向采集某些网站下的特定信息,如招聘信息,租房信息等。 本文通过JAVA实现了一个基于广度优先算法的多线程爬虫程序。本论文阐述了网络爬虫实现中一些主要问题:为何使用广度优先的爬行策略,以及如何实现广度优先爬行;为何要使用多线程,以及如何实现多线程;系统实现过程中的数据存储;网页信息解析等。 通过实现这一爬虫程序,可以搜集某一站点的URLs,并将搜集到的URLs存入数据库。

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • SIFT算法详解及应用(讲的很详细)
    SIFT算法入门时看的一篇文章,SIFT算法详解及应用(讲的很详细)SIFT简介SIFTScale Invariant Feature Transform传统的特征提取方法成像匹配的核心问题是将同一目标在不同时间、不同分辨率、不同光照、不同位姿情况下所成的像相对应。传统的匹配算法往往是直接提取角点或边缘,对环境的适应能力较差,急需提出一种鲁棒性强、能够适应不同光照、不同位姿等情况下能够有效识别目标的方法。己0]/3/己7彐SIFT简介SIFTScale Invariant Feature TransformSIFT提出的目的和意义分1999年 British columbia大学大卫.劳伊( David g.Lowe)教授总结了现有的基于不变量技术的特征检测方法,并正式提出了一种基于尺度空间的、对图像缩放、旋转甚至仿射变换保持不变性的图像局部特征描述算子一SIFT(尺度不变特征变换),这种算法在2004年被加以完善己0]/3/己7SIFT简介SIFTScale Invariant Feature Transform将一幅图像映射(变换)为一个局部特征向量集;特征向量具有平移、缩放、旋转不变性,同时对光照变化、仿射及投影变换也有一定不变性。己0]/3/己7SIFT简介SIFTScale Invariant Feature TransformSIFT算法特点SIFT特征是图像的局部特征,其对旋转、尺度缩放、亮度变化保持不变性,对视角变化、仿射变换、噪声也保持一定程度的稳定性。独特性( Distinctiveness)好,信息量丰富,适用于在海量特征数据库中进行快速、准确的匹配。多量性,即使少数的几个物体也可以产生大量SIFT特征向量。经过优化的SIFT算法可满足一定的速度需求。可扩展性,可以很方便的与其他形式的特征向量进行联合。己0]/3/己7SIFT简介SIFTScale Invariant Feature TransformSIFT算法可以解决的问题目标的自身状态、场景所处的环境和成像器材的成像特性等因素影响图像配准/目标识别跟踪的性能。而SIFT算法在一定程度上可解决:目标的旋转、缩放、平移(RST)图像仿射/投影变换(视点 viewpoint)光照影响(111 amination)目标遮挡( occlusion)杂物场景(c1 utter)噪声己0]/3/己7SIFT算法实现细节SIFTScale Invariant Feature TransformSIFT算法实现步骤简述SIFT算法的实质可以归为在不同尺度空间上查找特征点(关键点)的问题。原图像特征点特征点目标的特检测描述征点集特征点匹匹配点矫配正目标图像特征点特征点目标的特检测描述征点集SIFT算法实现物体识别主要有三大工序,1、提取关键点;2、对关键点附加详细的信息(局部特征)也就是所谓的描述器;3、通过两方特征点(附带上特征向量的关键点)的两两比较找出相互匹配的若干对特征点,也就建立了景物间的对应关系。SIFT算法实现细节SIFTScale Invariant Feature TransformSIFT算法实现步骤关键点检测己。关键点描述彐·关键点匹配4·消除错配点己0]/3/己7关键点检测的相关概念SFTiant Feature Transfor1.哪些点是SIFT中要查找的关键点(特征点)?这些点是一些十分突出的点不会因光照条件的改变而消失,比如角点边缘点、暗区域的亮点以及亮区域的暗点,既然两幅图像中有相同的景物,那么使用某种方法分别提取各自的稳定点,这些点之间会有相互对应的匹配点。所谓关键点,就是在不同尺度空间的图像下检测出的具有方向信息的局部极值点。根据归纳,我们可以看出特征点具有的三个特征:尺度方向大小己0]/3/己7
    2020-05-27下载
    积分:1
  • 高斯伪谱法
    简述高斯伪谱法,包括算法、公式、流程等。还有对软件的使用说明
    2020-07-04下载
    积分:1
  • PCB直尺——基于AD18.1.9
    新年自己设计的一款PCB直尺,开发环境为Altium Designer 18.1.9/Windows 7 64Bit。虽然淘宝上有很多卖PCB尺的,各人认为,除了NVIDIA版的PCB尺算得上是良心设计外,其他家的真是粗制滥造。看到NVIDIA的尺子有孔,自己也打孔、看到NVIDIA的尺子上有线,自己也画线,完全没有给使用者说明这些孔和线的作用是什么。所以呢,我决定自己设计一款,当然也参照了NVIDIA的设计,向大佬致敬,自己又加了些自己实验室的logo。听说下载不了了?
    2020-06-23下载
    积分:1
  • [源代码] C# WinForms 项目实战 - 人事工资管理系统
    ☆☆ 资源说明:☆☆☆ 系统功能:☆灵活的录入数据,使信息传递更快捷;系统采用人机对话方式,界面美观友好,信息查询灵活、方便,数据存储安全可靠;实现员工奖罚信息管理;实现员工工资自动计算;实现员工考评调动管理;对用户输入的数据,进行严格的数据检验,尽可能避免人为错误;系统最大限度地实现了易安装性、易维护性和易操作性;
    2020-11-30下载
    积分:1
  • 检索视频中运动的点并计算线速度角速度——图像处理matlab实现
    检测视频中运动的两个点,并绘制出轨迹,输出坐标,计算速度和角速度。此资源中的代码可能只能处理特定的视频,不过算法适用很广泛。(此资源以附带上所属视频,使用者可根据视频差异更改代码,将视频与代码放在一个文件夹下,用matlab即可运行。)
    2020-12-05下载
    积分:1
  • 《粒子群算法及其工业应用》钱锋著
    粒子群算法及其工业应用-钱锋著,是本电子书,讲解的比较详细
    2020-05-31下载
    积分:1
  • matlab三相桥式整流电路仿真模型
    最简单的matlab三相桥式整流电路仿真模型
    2020-12-05下载
    积分:1
  • Intel汇指令集(共七卷).pdf
    Intel汇编指令集(共七卷) 英特尔最新汇编指令全集,包括32为和64位汇编指南。
    2019-11-27下载
    积分:1
  • Qt5实现多窗口切换
    在很多时候我们希望在一个窗口中或者一个自定义的QWidget中实现多个窗口的实现,以此来实现当功能太多时不局限于每次单独创建其窗口去显示功能模块,写了一个简单例子
    2020-12-09下载
    积分:1
  • 基于KDtree的三维点云算法
    研究一种高效空间索引方法来管理海量点云数据,研究点云数据的管理和处理方法。
    2020-11-27下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载