查看: 478|回复: 1

手工打造python分布式爬虫

[复制链接]
新浪微博达人勋 yinong  实名认证
论坛徽章:
31
数据陷阱解读徽章
日期:2016-03-10 10:18:46matlab徽章
日期:2017-02-16 16:46:56机器学习徽章
日期:2017-03-30 17:23:20Tensorflow徽章
日期:2017-08-03 18:16:28比特币徽章
日期:2017-09-28 17:18:05金融徽章
日期:2017-12-08 10:41:29区块链徽章
日期:2017-12-25 17:32:20Excel徽章
日期:2018-01-04 17:13:02Excel徽章
日期:2018-03-01 16:43:21OpenCV徽章
日期:2018-05-10 16:26:44matlab徽章
日期:2018-05-24 16:09:45股票徽章
日期:2018-06-29 11:14:50
发表于 2018-11-12 10:39 | 显示全部楼层 |阅读模式

tm Python 基础 框架 分布式 进程

https://www.cnblogs.com/qiyeboy/p/7016540.html

这次打造的分布式爬虫采用比较简单的主从模式,完全手工打造,不使用成熟框架,基本上涵盖了前六章的主要知识点,其中涉及分布式的知识点是分布式进程和进程间通信的内容,算是对Python爬虫基础篇的总结。
回复

使用道具 举报

新浪微博达人勋 yinong  实名认证
论坛徽章:
31
数据陷阱解读徽章
日期:2016-03-10 10:18:46matlab徽章
日期:2017-02-16 16:46:56机器学习徽章
日期:2017-03-30 17:23:20Tensorflow徽章
日期:2017-08-03 18:16:28比特币徽章
日期:2017-09-28 17:18:05金融徽章
日期:2017-12-08 10:41:29区块链徽章
日期:2017-12-25 17:32:20Excel徽章
日期:2018-01-04 17:13:02Excel徽章
日期:2018-03-01 16:43:21OpenCV徽章
日期:2018-05-10 16:26:44matlab徽章
日期:2018-05-24 16:09:45股票徽章
日期:2018-06-29 11:14:50
 楼主| 发表于 2018-11-19 14:43 | 显示全部楼层
涉及分布式的知识点是分布式进程和进程间通信的内容
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

 

GMT+8, 2019-8-25 00:07 , Processed in 0.137299 second(s), 28 queries .