登录
首页 » C# » 网络爬虫源代码

网络爬虫源代码

于 2022-03-22 发布 文件大小:780.31 kB
0 103
下载积分: 2 下载次数: 1

代码说明:

主要特性有: 可配置:线程数、线程等待时间,连接超时时间,可爬取文件类型和优先级、下载目录等。 状态栏显示统计信息:排入队列URL数,已下载文件数,已下载总字节数,CPU使用率和可用内存等。 有偏好的爬虫:可针对爬取的资源类型设置不同的优先级。 健壮性:十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 较好的性能:基于正则表达式的页面解析、适度加锁、维持HTTP连接等。

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • 半不变量法计算概率潮流
    新能源出力由于自然条件的时空关联性存在复杂的非线性相关性,为了处理这种非线性相关性,提出了一种基于 M-Copula 理论的半不变量随机潮流计算方法,将 Copula 理论与半不变量法结合起来,同时选择多个 Copula 函数模型来充分描述变量之间的复杂相关性。
    2023-08-24 04:55:03下载
    积分:1
  • a
    说明:  虚拟内窥镜关键技术研究 虚拟内窥镜技术(Virtual Endoscopy)是虚拟现实技术在现代医学中 的应用。它利用医学影像作为原始数据,融合图像处理、计算机图形学、科 学计算可视化、虚拟现实技术,模拟传统光学内窥镜的一种技术。它克服了 传统光学内窥镜需把内窥镜体插入人体内的缺点,是一种完全无接触式的检 查方法。虚拟内窥镜的研究旨在为医生提供诊断依据,还可应用于辅助诊断、 手术规划、实现手术的精确定位和医务人员的培训等。(Research on key technologies of virtual endoscopy virtual endoscopy (Virtual Endoscopy) is a virtual reality technology in modern medicine. It has made use of medical imaging as an original data, the integration of image processing, computer graphics, scientific visualization, virtual reality technology to simulate a conventional optical endoscope technology. It overcomes the traditional optical endoscope to be inserted into the endoscope body of the shortcomings of the human body is a no-contact inspection method. Virtual Endoscopy of the study was to provide diagnosis for doctors, but also applies to diagnosis, surgical planning, to achieve precise positioning of surgical and medical personnel training.)
    2007-08-05 09:53:18下载
    积分:1
  • vc-zhuru
    一段注入代码,简单易用,适合研究 用外挂的可以看看(Inject code section, easy to use, suitable for research)
    2013-03-26 22:21:43下载
    积分:1
  • RansacOpencv
    自己编写的RANSAC代码,非常好用,只有解线性方程用到了opencv自己的代码,其他的均是自己变得(I have written RANSAC code, very easy to use, only the solution of linear equations used the opencv own code, others are themselves becoming)
    2014-01-15 23:52:01下载
    积分:1
  • ANSharp165-B
    CrossOver: Run Windows on Linux, easily and affordably.
    2014-04-14 03:23:00下载
    积分:1
  • Pic18f46k20-GLCD
    ST7920 for Pic18f46k20
    2020-06-24 22:40:01下载
    积分:1
  • view
    进程模块查看 < 多任务(多进程、多线程) >(Process module view < multi-tasking (multi-process, multi-threaded)> )
    2009-04-13 13:18:41下载
    积分:1
  • learningofjQueryPackt.Publishing.Learning.jQuery
    jQuery的英文教程,非常的实用,可以参考学习下。(english version of jquery)
    2010-12-21 18:46:48下载
    积分:1
  • Serial_procedures
    串口程序,实现串口发送,接受文件,用户只有少做修改就可以为自己所有(Serial procedures, implementation serial send, receive documents, the user only a few modifications can make all their own)
    2009-03-30 23:05:51下载
    积分:1
  • 4.16、温湿度传感器
    说明:  基于STM32,通过温湿度传感器来采集温湿度数据(Collection of temperature and humidity based on STM32)
    2019-12-10 17:34:01下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载