登录
首页 » Python » SinaSpider-master

SinaSpider-master

于 2016-12-23 发布 文件大小:41KB
0 190
下载积分: 1 下载次数: 5

代码说明:

  使用master-slave模式的分布式新浪微博爬虫,采用纯python代码编写。(This spider system is programmed by pure Python code and works as Master-Slave schema.)

文件列表:

SinaSpider-master
.................\.gitignore,15,2016-03-07
.................\AddAccounts.py,799,2016-03-07
.................\APISpider.py,2678,2016-03-07

.................\CommercialAPISpider.py,253,2016-03-07
.................\CompleteCrawl.py,3506,2016-03-07
.................\Config.py,683,2016-03-07
.................\CrawlTimelineByAPI.py,145,2016-03-07
.................\Dao.py,4675,2016-03-07
.................\Log
.................\...\log.txt,13963,2016-03-07
.................\Log.py,196,2016-03-07
.................\Parser.py,95723,2016-03-07
.................\README.md,2943,2016-03-07
.................\sina_weibo_table_structures.sql,7698,2016-03-07
.................\Spider.py,29484,2016-03-07
.................\Test.py,851,2016-03-07
.................\Utility.py,1606,2016-03-07
.................\Weibo.py,6574,2016-03-07

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • compass
    说明:  compass对lucene行进了封装 这个是对compass的应用,index的建立,搜索以及高级搜索(compass on the lucene marching compass of the package, this is the application, index creation, search and advanced search)
    2010-03-29 14:50:25下载
    积分:1
  • 时间就开了多久我就打开了
    啊打发时间看拉萨打开链接阿拉山口大家卡死了大家快来江东父老ask两地分居阿里山;到家了;啊时代科技啦士大夫金龙卡啊时代科技
    2022-05-20 19:18:13下载
    积分:1
  • 基于用户的协同过滤推荐算法研究
    实际投标中,由于竞争对手的投标策略是随着市场环境及自身条件的变化而变化的,因此就是对同一个包(货物类型以及对应数量完全相同),同一厂家在不同批次中的报价也可能是不同的。还需要注意价格下浮比例(或称下浮系数)以及减分速率指数对报价也会产生一定的影响
    2022-03-02 05:48:23下载
    积分:1
  • Lucene原理和应用
    从Lucene的底层原理入手,讲解了Lucene索引的创建、维护、查询等相关知识的底层原理,能有效地帮助理解Lucene的工作原理
    2022-01-31 19:31:35下载
    积分:1
  • weibobee_OpenSrc
    新浪微博爬虫程序,小蜜蜂,新浪微博爬虫程序,小蜜蜂(Sina micro-blog crawler, small bee,Sina micro-blog crawler, small bee)
    2013-09-25 09:19:51下载
    积分:1
  • 网络爬虫-Python和数据分析
    《网络爬虫-Python和数据分析》该本书详细介绍了如何使用python获取数据,很实用("Web crawler -Python and data analysis", this book describes how to use Python to obtain data, very practical)
    2017-08-23 20:31:05下载
    积分:1
  • PermissiveResearch-master
    实现一个本地搜索引擎(作者语:search engine),允许容错搜索,也就是搜索结果不需要和搜索的关键字完全精准匹配。比如,搜索”eric wang“,搜索结果可以包括Erica Watts等等。搜索效率十分高,并且支持CoreData数据搜索。可以很方便修改搜索算法或者替换成自定义的搜索算法。
    2013-12-09 13:58:16下载
    积分:1
  • 2
    说明:  JHG UI IUGFRUOYGF OIUOIYU SEOIH SF
    2009-06-30 00:44:07下载
    积分:1
  • data_collect.tar
    新浪微薄爬虫,抓取好友信息和好友的关注列表, 保存文件格式为文本(Sina meager reptiles, grab your friends and friends of watchlist information, save the file as text format)
    2014-01-29 18:32:17下载
    积分:1
  • baidu
    说明:  百度竞价自动点击程序,可以自动识别对手网站和自己的网站(Baidu bidding procedures for auto-clicks, you can automatically identify opponent and their own web site web site)
    2008-09-29 16:13:43下载
    积分:1
  • 696516资源总数
  • 106914会员总数
  • 0今日下载