get-set, Fetch! web scraper
ID
obanemoliijohdnhjjkdbekbhdjeolnk支持导出 CSV 和 ZIP 的开源数据抓取程序,提供抓取场景,只需少量配置即可快速抓取。
应用截图
详细介绍
支持导出 CSV 和 ZIP 的开源数据抓取程序,提供抓取场景,只需少量配置即可快速抓取。
支持导出 CSV 和 ZIP 的开源数据抓取程序。
此扩展程序采用模块化架构,提供一系列带有预定义默认值的抓取场景,只需少量配置即可快速抓取。
二进制数据(图片、PDF 文件等)可以导出为 ZIP 压缩包,文本数据可以导出为 CSV 文件。
查看扩展程序中的“Examples”部分,了解它能做什么。
创建新项目
• 填写项目名称、起始 URL、抓取场景和各种插件选项。
• 内置两个场景:scrape-static-content 和 scrape-dynamic-content,分别用于抓取普通 HTML 页面和基于 JavaScript 的 HTML 页面。
• 您可以从场景列表页面安装社区提供的其他场景。
开始抓取
• 点击项目列表中相应的“scrape”按钮。
• 待抓取的 URL 将依次在新标签页中打开,间隔时间在创建项目时设定。
• 您可以随时关闭新打开的标签页来结束抓取。下次开始抓取时,进程会从中断处继续。
导出结果
• 根据项目设置,您可以将文本数据导出为 CSV,将二进制数据导出为 ZIP。
故障排查
• 在日志页面查找警告或错误记录。
• 您可以在设置页面调整日志级别。
• 如果发现错误,请在 https://github.com/get-set-fetch/extension/issues/ 提交问题,并在评论中附上相关日志记录。