登录
首页 » C# » 网络爬虫源代码

网络爬虫源代码

于 2022-03-22 发布 文件大小:780.31 kB
0 120
下载积分: 2 下载次数: 1

代码说明:

主要特性有: 可配置:线程数、线程等待时间,连接超时时间,可爬取文件类型和优先级、下载目录等。 状态栏显示统计信息:排入队列URL数,已下载文件数,已下载总字节数,CPU使用率和可用内存等。 有偏好的爬虫:可针对爬取的资源类型设置不同的优先级。 健壮性:十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 较好的性能:基于正则表达式的页面解析、适度加锁、维持HTTP连接等。

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • Welcome
    C#简单例子,可以实现界面设计,下拉菜单,选项,简单计算,有了这个例子,可以给你入门是一个简单学习入门。(C# simple example, can achieve the interface design, the drop-down menu, options, a simple calculation, with this example, can give you an entry is a simple learning portal)
    2012-03-06 20:58:02下载
    积分:1
  • MouseAutoClick
    设定点击实际和坐标,运行时自动执行设置操作(Set the actual and coordinates of clicks, and automatically perform settings at runtime)
    2020-06-17 01:00:02下载
    积分:1
  • vc
    说明:  文件中含有大量的vc++语言和MATLAB语言的源代码,并附带有运算结果(File contains a large number of vc++ language and MATLAB language source code, together with an operation result)
    2010-10-08 16:40:09下载
    积分:1
  • C# 自定义组件的小例子及源代码
    C# 自定义组件的小例子及源代码,包含自定义的UserControl组件和应用该组件的MainFrame主窗体程序,需要在工具箱里右键-》选项-》.Net组件注册一下就能用了。主要通过将xml绑定到TreeView控件完成菜单导航功能,可以在同一窗体中导航不同panel,也可以导航多窗口,需要添加新菜单,只需配置Menu.xml,Menu.xml中显示treeView树形菜单中的各节点数据,将除菜单外所有panel设置为不显示。
    2022-11-10 22:05:03下载
    积分:1
  • detaii
    体现了lod(level of detail)算法 包括网格细分,空间层次(Lod (level of detail) algorithm includes grid subdivision, spatial level.)
    2018-11-19 00:34:23下载
    积分:1
  • dllexp-x64
    说明:  DLL Export Viewer v1.66
    2020-06-23 02:20:02下载
    积分:1
  • Matlabebook
    Matlab详细手册 Matlab详细手册 Matlab详细手册()
    2007-09-06 15:28:41下载
    积分:1
  • 你好大世界C #
    一个简单的Hello World C #控制台。 ;
    2022-08-18 00:45:05下载
    积分:1
  • 虚拟串口源码
    跟商业软件Virtual Serial Ports Driver XP3类似
    2022-07-11 23:06:15下载
    积分:1
  • YingYan
    arcgis 二次开发鹰眼功能的实现,详细的源代码(Hawkeye arcgis secondary development function, detailed source code)
    2014-05-12 19:43:07下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载