xcrawl-map

Skill

by wykings

clawhub05/10

用于XCrawl地图任务,包括全站爬取前的站点URL发现、正则过滤、范围估算和爬取规划。

XCrawl专属前置规划工具,支持站点URL发现、正则过滤、范围估算与爬取计划生成,为全站爬取提供结构化准备

📊 商业分析

商业模式
bundle
独特价值
爬取前自动完成URL发现、正则过滤与范围估算的规划层
竞品
1. Firecrawl(功能更完整,含抓取执行层);2. Spider.cloud(商业化更成熟,API直接可用);3. Apify(生态更丰富,支持完整爬虫编排);差异:本Skill仅做前置规划,不执行实际爬取

🎯 应用场景

目标用户
数据工程师SEO技术人员爬虫开发者

📦 安装方式

openclaw install wykings-xcrawl-map
🔗 安装/下载链接 →

工具信息

类型
Skill
平台
clawhub
Stars
0
价值评分
5/10
子分类
网络爬虫与数据采集
可商业化
❌ 否

AI 标签

网络爬虫站点地图URL发现爬取规划正则过滤