WebScrapper for developers - Free - Remotal
截图:
简介:
Remotal.io 的 WebScrapper。
构建您的抓取工具以抓取任何网站(适用于 Javascript 开发人员)。
你可以:
- 报废无限数量的页面
- 导出和导入项目
- 浏览页面导航列表(适用于:ajax 刷新、页面重新加载和部分重新加载)
- 处理验证码或2Factor或任何需要手动操作的情况,等待用户交互解决并恢复报废
- 将数据发送到您的服务器或将其保存在本地文件中
v2.0.1
- 修复了阻止扩展工作的关键错误
V2.0.0
- 多次使用不同的参数抓取 URL
- URL 的参数可以是静态的或动态的,方法是在抓取页面之前从您的服务器获取它们
- 使用开关,您可以决定在每次迭代后自动将数据发送到您的服务器
- 您可以安排您的项目以不同的时间间隔自动运行
文档:https://github.com/remotal-io/webscrapper-free
示例:https://github.com/remotal-io/webscrapper-free/tree/master/examples
如果您发现任何问题,请在此处提交 https://github.com/remotal-io/webscrapper-free/issues 以解决
如果您需要帮助,请在此处加入我们:https://gitter.im/webscrapper-free/community