web-scraping

Skill

by zhangqixin9527

clawhub⭐ 07/10

从网站提取结构化信息：简单页面使用 web_fetch，动态网站、登录验证、分页及无限滚动等复杂场景则使用浏览器自动化。

通过web_fetch和浏览器自动化从网页提取结构化数据，支持动态渲染、登录验证、分页和无限滚动等复杂场景。

📊 商业分析

商业模式
freemium
独特价值
融合静态抓取与浏览器自动化，支持登录态和无限滚动分页场景
竞品
Firecrawl：专注LLM友好输出，生态更成熟；Apify：平台化方案，Actor市场丰富但价格较高；ScrapeGraphAI：AI驱动抓取但部署复杂。本Skill优势在于集成browser automation处理动态页面和登录流程

🎯 应用场景

目标用户
数据分析师与研究人员增长黑客与市场营销人员AI应用开发者(需要训练数据/RAG数据源)

📦 安装方式

openclaw install zhangqixin9527-web-scraping
🔗 安装/下载链接 →

工具信息

类型
Skill
平台
clawhub
Stars
⭐ 0
价值评分
7/10
子分类
网页数据采集与结构化提取
可商业化
✅ 是

AI 标签

网页爬虫数据采集结构化提取浏览器自动化动态页面抓取

相关工具推荐

xiaohongshutoolsSKILL

XiaoHongShu (Little Red Book) data collection and interaction toolkit. Use when working with XiaoHongShu (小红书) platform for: (1) Searching and scraping notes/posts, (2) Getting user profiles and details, (3) Extracting comments and likes, (4) Following users and liking posts, (5) Fetching home feed and trending content. Automatically handles all encryption parameters (cookies, headers) including a1, webId, x-s, x-s-common, x-t, sec_poison_id, websectiga, gid, x-b3-traceid, x-xray-traceid. Supports guest mode and authenticated sessions via web_session cookie.

9/10⭐ 11
data-storytellingSKILL

将原始数据转化为结构化叙事，融合可视化建议、上下文解读与说服性框架，专为高管汇报和商业决策场景设计

8/10⭐ 30,590
risk-metrics-calculationSKILL

自动计算投资组合VaR、CVaR、夏普比率、索提诺比率及最大回撤，支持风险限额设定与实时风险监控系统构建

8/10⭐ 30,590
senior-data-engineerSKILL

面向数据工程师的AI助手，覆盖ETL/ELT、Spark、Airflow、dbt、Kafka等现代数据栈，支持管道设计、数据建模与质量治理全流程

8/10⭐ 2,218
excel-xlsxMCP

AI驱动创建、检查和编辑Excel工作簿，支持公式计算、日期类型、格式保留与模板复用，无损操作XLSX文件

8/10⭐ 107