分享5个爬虫专业博客网站

近几年，爬虫发展得如火如荼，互联网、电商、社交各类行业都能看到它的身影，从获取网站数据、监控同类商品价格到模仿人类行为点赞留言、输入验证码，爬虫可谓是无孔不入。因为爬虫的泛用性，越来越多人投身于大数据行业，如果你也对此感兴趣，下面介绍的五个采集相关的国外博客对你或许能有所帮助。  

1. Scraping.pro  

Scraping.pro是一个专业的采集软件测评网站，上面有各种国外比较顶尖的采集软件测评文，比如scrapy、octoparse等，从操作界面、功能点（登陆采集、翻页、搜索查询采集、验证码采集等）、价格到客服等，都有很详细的介绍。一旦这些软件有更新，scraping.pro也会马上更新。此外，该网站也会有不同软件的对比文，可以让用户对这些软件有更直观的印象，更好挑选一款最适合的软件。  

2. Kdnuggets  

相比scraping.pro，Kdnuggets涵盖范围更广，包括商业分析、大数据、数据挖掘、数据科学等。它有几大栏目：Kdnuggets新闻、软件、工作、课程、数据和教育，有关于数据挖掘、网站采集的最新新闻以及从1993年以来关于数据挖掘的知识。它有时还会组织一些交流会供专家和读者们交流。  

3. Octoparse  

Octoparse是一款功能强大的免费采集软件，它的博客提供的内容比较广，从网站采集的具体应用到人工智能、语义分析、大数据行业都有涉及，内容比较浅显易懂，比较适合初步的网站采集用户。该平台最大的亮点是它有各种比较专业的对比文和盘点文，将上下游企业的软件都囊括了进来，不用再费心找其它的软件，比如Top 30 Big Data Tools for Data Analysis。  

4. Big Data News  

Big data news和Kdnuggets类似，涵盖的范围主要是在大数据行业方面，网站采集是其下面的一个子栏目。Big data news严格来说有点像社区，上面的内容都是用户自己上传的，编辑只负责审核，因此内容也会比较多样。如果你想成为一个数据专家，或者想跟这些专家多交流，这个网站是一个不错的选择，只要注册一个账号就可以了。

5. Analytics Vidhya  

跟Big data news类似，Analytics Vidhya是一个更专业的数据采集网站，内容涵盖数据科学、机器学习、网站采集等。除了日常订阅上面的内容外，你还可以在它的论坛上问问题，是一个很好的学习和交流平台。

以上是几个国外网站，国内也有很多好的博客，比如博客园、苏飞论坛、链滴等；提供海外爬虫IP的IPIPGO，这些对你可能都有帮助。