V2EX 16小时前
[分享发现] 浏览器自动化、爬虫、RPA 工具整理
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

这份合集整理了多种浏览器自动化、爬虫和RPA工具,涵盖浏览器插件、无头浏览器、RPA平台、网页截图、前端截图、开源爬虫框架和API服务,以及网页转换工具。无论你是开发者、数据分析师还是自动化爱好者,这些工具都能帮你提升工作效率,从简单的数据提取到复杂的自动化流程,应有尽有,收藏备用。

🔍 Automa、Easy Scraper、Web Scraper等浏览器插件自动化工具,可快速实现网页数据提取,操作简单,适合新手。

🚀 Playwright、DrissionPage、Cypress等无头浏览器自动化框架,支持现代网页测试和自动化,性能稳定,适合复杂场景。

🤖 影刀、后羿采集器、八爪鱼采集工具等RPA平台,提供可视化操作和智能采集,适合企业级自动化需求。

📸 ScreenshotOne、Screenshot Wizard、Screenshot Machine等远程截图服务,以及html2canvas、Screen.guru等前端截图工具,满足不同场景下的网页截图需求。

🌐 Crawl4AI、ScrapeCreators、PulpMiner等开源爬虫框架和API服务,支持LLM友好的网络爬虫和数据采集,适合开发者快速构建爬虫项目。

🔄 Jina Reader、MarkdownDown、WebScraper等网页转换工具,可将网页内容转换为Markdown格式,方便数据存储和分享。

分享一份精心整理的浏览器自动化、爬虫和 RPA 工具合集!无论你是开发者、数据分析师还是自动化爱好者,这些工具都能帮你提升工作效率。从简单的浏览器插件到专业的爬虫框架,从网页截图到数据转换,应有尽有。收藏备用!

浏览器自动化、爬虫、RPA 工具整理

浏览器自动化工具

浏览器插件自动化:
- Automa - 浏览器插件自动化工具
https://www.automa.site/
- Easy Scraper - 简易网页数据提取工具
https://easyscraper.com
- Web Scraper - 网页数据采集插件
https://webscraper.io/

无头浏览器自动化:
- Playwright - 现代化无头浏览器自动化框架
https://playwright.dev/
- DrissionPage - 中文无头浏览器自动化库
https://drissionpage.cn/browser_control/introduction
- Cypress - 网页自动化测试工具
https://www.cypress.io/

RPA 爬虫采集工具

- 影刀 - 企业级 RPA 自动化平台
https://www.yingdao.com/
- 后羿采集器 - 可视化网页数据采集工具
https://www.houyicaiji.com/
- 八爪鱼采集工具 - 智能数据采集平台
https://rpa.bazhuayu.com/

网页截图工具

远程截图服务:
- ScreenshotOne - 专业网页截图 API
https://screenshotone.com/
- Screenshot Wizard - 批量网页截图工具
https://www.screenshotwizard.com/
- Screenshot Machine - 网页截图生成器
https://screenshotmachine.com/
- URLScan.io - 免登录网页截图服务
https://urlscan.io/liveshot/?url=https://yix.ai

前端截图工具:
- html2canvas - 前端网页截图库
https://html2canvas.hertzen.com/
- Screen.guru - 开源截图工具
https://screen.guru/
源码: https://github.com/premieroctet/screen-guru

专业爬虫工具

开源爬虫框架:
- Crawl4AI - 开源 LLM 友好的网络爬虫
https://github.com/unclecode/crawl4ai

爬虫 API 服务:
- ScrapeCreators - 社交网络爬虫 API
https://scrapecreators.com/
- PulpMiner - 网页转 JSON 爬虫 API
https://www.pulpminer.com/
- InstantAPI - 网页转结构化数据服务
https://web.instantapi.ai/

网页转换工具

Markdown 转换:
- Jina Reader - 开源网页转 Markdown 工具
https://github.com/jina-ai/reader/
- MarkdownDown - 在线网页转 Markdown
https://markdowndown.vercel.app
- WebScraper - 开源网页数据提取工具
https://github.com/zzzgydi/webscraper
- code-html-to-markdown - 专注代码转换的 Markdown 工具
https://github.com/SivilTaram/code-html-to-markdown

整理时间:2025 年 7 月

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

浏览器自动化 爬虫 RPA 工具合集
相关文章