在我上班的企业，爬取数据时，简单地用Requests，复杂一点的用Scrapy。解析方式，用正则表达式、BeautifulSoup或Lxml的都有，怎么解析方便，就怎么解析。
技术是很灵活的，没必要非得分个子丑寅卯，怎么合适怎么来，能高效地完成工作就好。从我发布Python搞定网络爬虫以来，就有人装得好牛叉一样，说这样不是爬虫技术，说爬虫技术不是这样的，你看，这种朋友，就掉入了思维的坑里了。
当然，也有朋友提出，在爬取《盗墓笔记》时，速度很慢，从这可以看出，有人真的在实践中，不断地挑战、提高自己。这种人，假以时日，肯定会成为技术大牛的。
既然有人提到爬取速度慢的问题，在《10天搞定Python网络爬虫》的最后一天，我就补上这部分的内容吧--用简单易用的多进程(Python库)，提高爬取速度。
10.1多进程爬取
Python进行多进程爬虫，使用了multiprocessing库，为了能让你直观地看到效果，我采用了有用进程和没有用进程的方法进行比较。爬取的网址，我就不再找新的了，直接在之前的糗事百科的基础上，进行调整。
输出结果(省略了段子内容)
好了，有关多进程爬虫的内容，老陈讲完了，如果觉得对你有所帮助，希望老铁能转发点赞，让更多的人看到这篇文章。你的转发和点赞，就是对老陈继续创作和分享最大的鼓励。
#Python爬虫#