WebHarvy是一款网页数据抓取工具,界面简洁,操作简单,拥有自动检测模式,可以提取任一页面的数据,包括文本、图片等等,输入网址即可打开,默认使用内部浏览器,提取到的数据可导到数据库或文件夹中。
功能介绍
点击界面
WebHarvy是一个视觉网络刮板。绝对不需要编写任何脚本或代码来抓取数据。您将使用WebHarvy的内置浏览器浏览网页。您可以选择要点击的数据。这很容易!
自动模式检测
WebHarvy自动识别网页中发生的数据模式。因此,如果您需要从网页上刮取项目列表(名称,地址,电子邮件,价格等),则无需执行任何其他配置。如果数据重复,WebHarvy会自动删除它。
导出抓取的数据
您可以以多种格式保存从网页中提取的数据。WebHarvyWebScraper的当前版本允许您将抓取的数据导出为Excel,XML,CSV,JSON或TSV文件。您也可以将抓取的数据导出到SQL数据库。
从多个页面提取数据
通常,网页在多个页面上显示产品列表等数据。WebHarvy可以自动抓取并从多个页面提取数据。只需指出“链接到下一页”,WebHarvyWebScraper就会自动从所有页面中抓取数据。
基于关键字的Scraping
通过自动提交搜索表单的输入关键字列表来抓取数据。任何数量的输入关键字可以提交给多个输入文本字段来执行搜索。可以提取所有输入关键字组合的搜索结果数据。
通过代理服务器
为了匿名抓取并防止网络抓取软件被网络服务器阻止,您可以选择通过代理服务器或V PN访问目标网站。可以使用单个代理服务器地址或代理服务器地址列表。
类别提取
WebHarvyWebScraper允许您从链接列表中获取数据,从而导致网站中出现类似的页面/列表。这使您可以使用单一配置来刮取网站内的类别和子类别。
正则表达式
WebHarvy允许您在网页的文本或HTML源代码上应用正则表达式(RegEx)并删除匹配的部分。这种强大的技术为您提供更多的灵活性,同时抓取数据。
运行JavaScript
在提取数据之前在浏览器中运行您自己的JavaScript代码。这可以用来与页面元素交互或者调用已经在目标页面中实现的JavaScript函数。
下载图片
可以下载图像或者提取图像URL。WebHarvy可以自动提取电子商务网站的产品详细信息页面中显示的多个图像。
自动浏览器交互
WebHarvy可以很容易地配置执行任务,如点击链接,选择列表/下拉选项,输入文本到一个字段,滚动页面等。
更新日志
修复了页面启动的时候可能导致禁用连接。
可以对页面模式配置专属的连接方式。
可以自动搜索HTML上可以配置的资源。
增加了键盘向下滚动下一页的功能。
增加了通过Java脚本加载下一页。
添加了URL配置的功能。
可以将关键字输入一个列表上2搜索。
用户还下载了:
- IE Tab插件 V14.11.12.1 绿色免费版
- ADSafe净网大师 V5.4.408.7000 最新正式版
- TamperMonkey(油猴插件)正式版 V4.16.0 最新版
- 石青新浪股吧推广软件1.2.10
- enable copy(解除网页复制限制chrome插件) V1.26 绿色免费版
- Xmanager6标准版 6.0.0080
- 猫抓插件 V1.0.16 官方版
- 火车采集器(LocoySpider)V10.1 官方版
- ITab新标签页(浏览器插件) V1.2.29.6 官方版
- 百度云分享链接搜寻 V1.1 绿色最新版
- 老铁流量宝工具1.0.0.1 绿色版
- 古剑奇谭破解补丁免费版v1.71