scrape
Skillby ivangdavila
合法网页抓取：遵守robots.txt协议、进行频率限制，并符合GDPR/CCPA数据处理规范。
Legal web scraping with robots.txt compliance, rate limiting, and GDPR/CCPA-aware data handling.
🎯 应用场景
工具信息
- 类型
- Skill
- 平台
- clawhub
- Stars
- ⭐ 4
- 价值评分
- 8/10
- 子分类
- 网页爬虫, 数据采集, 合规数据处理
- 复杂度
- medium
- 可商业化
- ✅ 是
AI 标签
相关工具推荐
XiaoHongShu (Little Red Book) data collection and interaction toolkit. Use when working with XiaoHongShu (小红书) platform for: (1) Searching and scraping notes/posts, (2) Getting user profiles and details, (3) Extracting comments and likes, (4) Following users and liking posts, (5) Fetching home feed and trending content. Automatically handles all encryption parameters (cookies, headers) including a1, webId, x-s, x-s-common, x-t, sec_poison_id, websectiga, gid, x-b3-traceid, x-xray-traceid. Supports guest mode and authenticated sessions via web_session cookie.
将原始数据转化为结构化叙事，融合可视化建议、上下文解读与说服性框架，专为高管汇报和商业决策场景设计
自动计算投资组合VaR、CVaR、夏普比率、索提诺比率及最大回撤，支持风险限额设定与实时风险监控系统构建
面向数据工程师的AI助手，覆盖ETL/ELT、Spark、Airflow、dbt、Kafka等现代数据栈，支持管道设计、数据建模与质量治理全流程
AI驱动创建、检查和编辑Excel工作簿，支持公式计算、日期类型、格式保留与模板复用，无损操作XLSX文件