登录
首页 » java,html » web爬虫工具,抓取网页

web爬虫工具,抓取网页

于 2022-03-19 发布 文件大小:3.59 MB
0 161
下载积分: 2 下载次数: 1

代码说明:

基于webcollector-2.12 开发,web爬虫工具,抓取网页,使用方便快捷。 WebCollector是一个无须配置、便于二次开发的JAVA爬虫框架(内核),它提供精简的的API,只需少量代码即可实现一个功能强大的爬虫。WebCollector-Hadoop是WebCollector的Hadoop版本,支持分布式爬取。 WebCollector致力于维护一个稳定、可扩的爬虫内核,便于开发者进行灵活的二次开发。内核具有很强的扩展性,用户可以在内核基础上开发自己想要的爬虫。源码中集成了Jsoup,可进行精准的网页解析。2.x版本中集成了selenium,可以处理javascript生成的数据。

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • 校园二手书交易系统
    高校二手书交易系统,运用了javaEE中的jsp,servlet,和jdbc,以及少量的框架知识。数据库用的是MYsql,适合做期末的大作业
    2022-05-19 21:57:44下载
    积分:1
  • java web学生成绩管理系统
    大二时跟朋友一起做的java web 小项目,主要采用jsp代码及javabean来实现,直接放入myeclipse,并桥连数据库即可。对初学java web的童鞋还是很适合的!
    2022-08-10 15:39:58下载
    积分:1
  • CRM客户管理系统
    CRM是客户管理系统,对用户进行管理,用户权限的限定,以及用户的订单增、删、改、查的功能, 开发环境   Window  JDK1.7 开发工具有:Eclipse oracle数据库
    2022-02-21 16:36:20下载
    积分:1
  • 简易学生管理系统(源码)
    本项目主要实现的是学生信息的管理以及学生成绩的管理
    2022-03-03 06:31:54下载
    积分:1
  • jsp+servlet+java+mysql实现对数据表的增删改查
    功能:登录,然后对数据表增删改查,sql语句打包了
    2022-03-31 04:29:53下载
    积分:1
  • 动态网站
    1.创建WEB工程  怎样使用Myeclipse创建Web Project  Web工程目录结构  怎样删除一个Web工程 2.用户列表,创建实体类,User  User有哪些属性? Id, username realname password age gender email  包的命名规范、类的命名规范 com.公司名.模块名.pojo.类名  实体类属性的创建规范 Private setter getter  实体类属性的数据类型 Int > Integer 3. 用户列表,创建表结构,用户表  如何创建数据库 Navicat 右键链接名 > 新建数据库 > 输入数据库名、字符集名(UTF8)  如何创建用户表 右键“表” > 创建字段  用户表有哪些字段,以及每个字段的类型 字段对应实体类即可  主键设置方式 非空、主键(小钥匙)、选中自动递增(int bigint)  如何增加字段,修改字段 设计表 > 点击“添加栏位”或“修改栏位”  如何查看表数据  如何创建查询索引,唯一性索引 查询索引:提高(字段)查询效率 类型是Normal 唯一性索引:字段的值不能重复,类型:unique 4. 用户列表,创建数据库访问层,JDBC > Mysql  知道管理系统的主流架构 用户浏览器JSP > Servlet > Service > Dao  数据库访问层的作用 操作数据库,主要的操作:增删改查(CURD)  所在包的命名规范,类的命名规范 ..dao,UserDao  Web工程如何加载类库 复制粘贴,WebROOT > WEB-INF > lib  JDBC访问数据库的步骤  SQL查询语句语法 Select * from t_user where ..[and/or]  JDBC代码优化方法,抽取JdbcUtil工具类 加载驱动 > 静态代码块 获取链接 > getConn() 释放资源 > free()  封装数据库记录 Jdbc数据 封装成 User对象,最后再组装成List对象 5. 用户列表,创建业务层,Service层
    2023-03-17 16:10:04下载
    积分:1
  • SL会员商城源码原型功能需求非常详细
    SL会员商城原型源码,每个功能要求都非常详细。注册用户,修改产品,商品套餐,产品套餐,购物车,提现,后台管理等等等。
    2022-07-20 08:24:23下载
    积分:1
  • javabean技术开发图书网站数据库的增删改查操作
    javabean技术开发图书网站数据库的增删改查操作javabean技术开发图书网站数据库的增删改查操作javabean技术开发图书网站数据库的增删改查操作javabean技术开发图书网站数据库的增删改查操作
    2022-10-31 09:55:02下载
    积分:1
  • 商城后台管理
    这是一个商城的后台管理系统,里面有管理员模块,用户管理模块,商品管理和分类,4大模块,可以上传图片,还有邮件通知注册的用户,C3P0连接池,DBUtil框架。MD5加密,和过滤器**********
    2022-02-04 18:33:31下载
    积分:1
  • draw3.0
    draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0draw3.0
    2022-01-25 15:29:28下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载