登录
首页 » C# » 网络爬虫源代码

网络爬虫源代码

于 2022-03-22 发布 文件大小:780.31 kB
0 104
下载积分: 2 下载次数: 1

代码说明:

主要特性有: 可配置:线程数、线程等待时间,连接超时时间,可爬取文件类型和优先级、下载目录等。 状态栏显示统计信息:排入队列URL数,已下载文件数,已下载总字节数,CPU使用率和可用内存等。 有偏好的爬虫:可针对爬取的资源类型设置不同的优先级。 健壮性:十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 较好的性能:基于正则表达式的页面解析、适度加锁、维持HTTP连接等。

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • angle-time
    用于计算同步电机发生三相短路故障时,功角随时间的变化关系。(For the calculation of the three-phase short circuit fault occurs synchronous motors, power angle changes with time.)
    2015-04-14 13:23:34下载
    积分:1
  • oumuji源程序
    说明:  实现ads1110电压模数转换和lcd1602显示以及电阻测量(ADS1110 voltage analog-to-digital conversion and LCD1602 display and resistance measurement)
    2020-06-18 09:00:01下载
    积分:1
  • 最优化作业C++源代码
    用C++编的一些最优化作业中的程序,有Newton法,DFP法,共轭梯度法,单纯形法,内点法,外点法,内外点法,都能使用,我已经全部调试过了(C compile some of the most optimized operating procedures, Newton, DFP, conjugate gradient method, the simplex method, interior point method, the points outside the law, outside point method can use, I have all over Debugging)
    2021-03-29 10:49:11下载
    积分:1
  • 个人防火墙源码XFILTER
    局域网实现过程中常用的拓扑结构和传输介质、局域网协议体系结构以及LLC的详细内容。第三部分是本书的重点,主要介绍五种相关类型的局域网,内容包括以太网、令牌环网、光纤信道局域网与无线局域网以及异步传输模式(ATM)局域网。第四部分讨论有关局域网设计的一些问题,包括用网桥进行局域网互联、网际互联、网络管理及性能考虑等问题。
    2022-09-24 18:15:03下载
    积分:1
  • 人脸模型和移动
    这是模型和移动的人脸。希望你喜欢
    2022-12-19 21:55:03下载
    积分:1
  • rain-flow-counting-method
    随机载荷模拟及雨流计数方法在matlab中的实现(Random load simulation and rain flow counting method implemented in matlab)
    2013-04-23 12:20:19下载
    积分:1
  • Cmysql
    说明:  C# and mysql connect and update
    2020-06-25 16:00:01下载
    积分:1
  • ASPAJAXExtSetup
    ajax 工具箱,安装后会得到不同种类的ajax工具,直接拖拽就能使用,你懂的(ajax tools setup )
    2013-10-21 16:19:39下载
    积分:1
  • demo
    基于VC++的彩色车牌识别系统 开发环境VC6.0 定位+字码识别(Based VC++ colored license plate recognition system development environment VC6.0 positioning+ code identification)
    2013-11-04 13:11:02下载
    积分:1
  • engine
    Miniature Engine movement in OpenGL
    2020-09-05 15:38:05下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载