WebHarvy是一款网页数据抓取工具,用户界面简洁,操作简单,拥有自动检测模式,可以提取任一页面的数据,包括文本、图片等等,输入网址即可打开,默认使用内部浏览器,提取到的数据可导到数据库或文件夹中。
功能介绍
点击界面
WebHarvy是一个视觉网络刮板。绝对不需要编写任何脚本或代码来抓取数据。您将使用WebHarvy的内置浏览器浏览网页。您可以选择要点击的数据。这很容易!
自动模式检测
WebHarvy自动识别网页中发生的数据模式。因此,如果您需要从网页上刮取项目列表(名称,地址,电子邮件,价格等),则无需执行任何其他配置。如果数据重复,WebHarvy会自动删除它。
导出抓取的数据
您可以以多种格式保存从网页中提取的数据。WebHarvyWebScraper的当前版本允许您将抓取的数据导出为Excel,XML,CSV,JSON或TSV文件。您也可以将抓取的数据导出到SQL数据库。
从多个页面提取数据
通常,网页在多个页面上显示产品列表等数据。WebHarvy可以自动抓取并从多个页面提取数据。只需指出“链接到下一页”,WebHarvyWebScraper就会自动从所有页面中抓取数据。
基于关键字的Scraping
通过自动提交搜索表单的输入关键字列表来抓取数据。任何数量的输入关键字可以提交给多个输入文本字段来执行搜索。可以提取所有输入关键字组合的搜索结果数据。
通过代理服务器
为了匿名抓取并防止网络抓取软件被网络服务器阻止,您可以选择通过代理服务器或V PN访问目标网站。可以使用单个代理服务器地址或代理服务器地址列表。
类别提取
WebHarvyWebScraper允许您从链接列表中获取数据,从而导致网站中出现类似的页面/列表。这使您可以使用单一配置来刮取网站内的类别和子类别。
正则表达式
WebHarvy允许您在网页的文本或HTML源代码上应用正则表达式(RegEx)并删除匹配的部分。这种强大的技术为您提供更多的灵活性,同时抓取数据。
运行JavaScript
在提取数据之前在浏览器中运行您自己的JavaScript代码。这可以用来与页面元素交互或者调用已经在目标页面中实现的JavaScript函数。
下载图片
可以下载图像或者提取图像URL。WebHarvy可以自动提取电子商务网站的产品详细信息页面中显示的多个图像。
自动浏览器交互
WebHarvy可以很容易地配置执行任务,如点击链接,选择列表/下拉选项,输入文本到一个字段,滚动页面等。
更新日志
修复了页面启动的时候可能导致禁用连接。
可以对页面模式配置专属的连接方式。
可以自动搜索HTML上可以配置的资源。
增加了键盘向下滚动下一页的功能。
增加了通过Java脚本加载下一页。
添加了URL配置的功能。
可以将关键字输入一个列表上2搜索。
墨记PC版官方最新版是一款简单好用的日记软件,该软件不仅能够多平台进行使用,还拥有简单好用的图文编辑功能,让用户能够更好地进行操作。墨记PC版官方最新版支持离线使用,没有网络也可以写日...
360亿方云电脑版是专业好用的云存储与协作软件,提供了超大的存储空间,满足不同用户的存储需求,还支持实时同步,简单便捷。360亿方云电脑版拥有智能的AI文档助手,能够结合各岗位工作需要,全...
360安全浏览器15,全新升级,搭载Chromium114内核,提升了性能,网页加载的速度更快。360安全浏览器15给用户们提供阅读编辑器、AI写作、截图OCR、登录管家等多项功能,满足用户的各种使用需求。...
腾讯会议是一款适合多种工作会议场景的软件,帮助企业开一个高效,低成本更有价值的会议。腾讯会议采用先进的音视频技术,打破时空障碍,满足企业用户的工作沟通需求,让企业用户轻松参与各种会...
联想个人云(原数据守护者)电脑版提供了大容量的云存储空间,支持用户存储和备份各种类型文件。联想个人云(原数据守护者)电脑版采用先进的加密技术,确保数据安全性,用户也可以随时随地访问、分...
小智双核浏览器是一款很实用的浏览器软件,软件启动速度快,界面十分简洁,完美双核,是速度与兼容性的王者,还支持安装谷歌插件拓展程序、自定义主页、主题皮肤更换和快速划词翻译功能,大大的...
发表评论
共0条
评论就这些咯,让大家也知道你的独特见解
立即评论以上留言仅代表用户个人观点,不代表系统之家立场