国内外爬虫软件对比

因为

DIFFBOT

Import.io

magic功能。输入需要采集的 址，会自动采集并按照设定好的字段（subtopic_value，subtopic_link，question_link，itemvote_value，itemvote_value_numbers，label_1，label_2，author_link，itemanswer_values，link_1，label_3）进行排序显示，采集到的内容可以导出excel或者保存api。

下图为采集知乎话题结果：

神箭手云爬虫

神箭手云爬虫是我最近刚刚接触到的一种云端爬虫。

操作步骤：购买规则-设置关键词-启动任务–自动云端采集–自动发布

和传统的采集器不同，神箭手云爬虫无需配置采集流程。规则市场中提供大量免费采集模板，只需设置关键词即可。爬虫任务全程在云端执行无需开机操作，采集结果可自动发布到多个 站（目前支持wecenter,wordpree,discuz等）。

开发者可以自己编写采集规则出售或自用，有详细的开发者文档可以创建专属于自己的爬虫。

使用截图如下：