知网爬虫

！！！！！！！！！！！！1！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！！

实现动态登录，部门文档库，有链接跳转，搜索未实现(Dynamic login, departmental document libraries, there are links to jump, search unrealized)

易语言的源码采集器，非常强大,想要学习什么源码就可以在上面搜索，然后下载。

说明：  基于java的文本搜索引擎的设计与实现(完整毕业论文)。页面使用 html+jsp，分词器使用lucene，网络爬虫使用java实现，数据库使用mysql。(Design and Implementation of Text Search Engine Based on Java)

百度云盘爬虫系统，可以爬取百度云的资源，搭建云盘爬取网站(Baidu cloud disk crawler system, can crawl Baidu cloud resources, build cloud disk crawl website)

新浪微薄爬虫，抓取好友信息和好友的关注列表， 保存文件格式为文本(Sina meager reptiles, grab your friends and friends of watchlist information, save the file as text format)

新浪微博的爬虫程序。程序运行方式：保存所有代码后，打开Main.py，修改LoginName为你的新浪微博帐号，PassWord为你的密码。运行Main.py，程序会在当前目录下生成CrawledPages文件夹，并保存所有爬取到的文件在这个文件夹中。(Sina microblogging reptiles. Program operation: save all the code, open Main.py, modify LoginName for your Sina Weibo account, PassWord for your password. Run Main.py, the program will generate CrawledPages in the current directory folder and save all files to crawling in this folder.)

夜幕下拾荒者个人主页网站管理系统介绍： 1.设置您的站点属性 首页音乐播放：进入首页可选择是否自动播放您推荐的音乐 名称和网址：网站名称和网站地址 网站关键字：可以根据您站点的特点来填写，有利于百度各大搜索引擎搜索，让他/她更快的找到你 (Night scavengers personal home page website management system introduced: 1. Set up your site properties Home music player: Go Home recommended you choose whether to automatically play music Name and Address: Site name and website address Website Keywords: according to the characteristics of your site to be completed in favor of Baidu major search engines, so that he/she find you faster )

搜索指定网站源码，程序结合易语言扩展界面支持库，调用搜索网站的搜索引擎，设置URL地址，搜索指定网站的内容。(Searches for the specified website source code , the program expanded interface combined with easy language support library , call the search site s search engine , set the URL address , search the contents of the Web site.)

搜索论坛最新主题搜例程，源码演示取论坛最新主题20贴，读取论坛帖子地址列表，使用正则搜索地址文本。(Search Latest Forum Posts search routines , source code demonstrate fetch Latest Forum Posts 20 , read forum posts address list , search for addresses using regular text .)