爬虫平台 spider-flow

2019年9月25日上午8:11 • 行业观察

介绍

spider-flow，新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。

特性

支持 css 选择器、正则提取

支持 JSON/XML 格式

支持 Xpath/JsonPath 提取

支持多数据源、SQL select/insert/update/delete

支持爬取 JS 动态渲染的页面

支持代理

支持二进制格式

支持保存/读取文件(csv、xls、jpg 等)

常用字符串、日期、文件、加解密等函数

支持流程嵌套

支持插件扩展(自定义执行器，自定义函数）

支持 HTTP 接口

插件支持

Selenium 插件

Redis 插件

Mongodb 插件

Hbase 插件

IP 代理池插件

OCR 插件

部分截图

声明：本站部分文章及图片源自用户投稿，如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢！

润和软件第三季度盈利5882万同比下滑27.51%

上一篇 2019年9月25日

哪些企业需要智能排班软件？

下一篇 2019年9月25日