构建全自动公网数据采集代理,定时抓取、智能丰富并保存到常用数据平台。
复制安装指令,让 AI 自动完成配置 · 推荐新手
请帮我安装 askskill 上的 "data-scraper-agent" 技能: 1. 下载 https://raw.githubusercontent.com/affaan-m/ECC/main/docs/ja-JP/skills/data-scraper-agent/SKILL.md 2. 保存为 ~/.claude/skills/data-scraper-agent/SKILL.md 3. 装好后重载技能,告诉我可以用了
请帮我设计一个自动化数据采集代理:每天抓取指定招聘网站上的“数据分析师”和“机器学习工程师”岗位,提取职位名称、公司、地点、薪资、发布时间和职位链接;用 LLM 统一标签并判断是否远程;结果保存到 Google Sheets,并按天去重,输出实现方案与提示词。
一套岗位监控代理方案,包含抓取字段、定时流程、LLM 丰富规则、去重逻辑及表格存储设计。
帮我创建一个价格追踪数据代理:每6小时抓取 5 个竞品电商页面的商品价格、库存状态、折扣文案和评分;识别价格波动与促销活动,并把清洗后的结果写入 Supabase,另外生成适合周报使用的摘要字段。
一个竞品价格监控流程,涵盖页面抓取、变化检测、结构化入库和周报摘要生成规则。
请为我搭建一个 GitHub 动态采集代理:每天收集指定开源项目的 star、fork、issue、release 和 commit 信息,用 LLM 生成项目进展摘要与风险提示,保存到 Notion 数据库,并支持根据我的反馈调整摘要风格。
一套 GitHub 项目追踪方案,包含数据源字段、每日调度、AI 摘要生成和基于反馈优化的机制。
任意のパブリックデータソース用の本番環境対応、AI搭載データ収集エージェントを構築。 スケジュールで実行され、無料LLMで結果を豊かにし、データベースに保存し、時間とともに改善されます。
スタック:Python · Gemini Flash(無料) · GitHub Actions(無料) · Notion / Sheets / Supabase
すべてのデータスクレイパーエージェントには3つのレイヤーがあります:
COLLECT → ENRICH → STORE
│ │ │
Scraper AI (LLM) Database
runs on scores/ Notion /
schedule summarises Sheets /
& classifies Supabase
| Layer | Tool | Why |
|---|---|---|
| COLLECT | Playwright/BeautifulSoup | 無料のオープンソーススクレイピング |
| ENRICH | Gemini Flash | 無料で高速LLM |
| STORE | Supabase / Sheets | 無料データベースとスプレッドシート |
| SCHEDULE | GitHub Actions | 無料クロンジョブ |
为 TypeScript、JavaScript、React 与 Node.js 提供统一编码规范与最佳实践建议
帮助开发者掌握 Ktor 服务端常用模式、认证依赖注入与测试实践。
帮助开发者为代码代理配置性能优化、安全防护与研究优先工作流。
为 Windows 原生桌面应用生成并执行端到端自动化测试流程。
帮助 Swift 开发者实现基于 Actor 的线程安全内存与文件持久化方案
帮助团队编排多代理协作流程,管理任务归属、看板流转与交接控制。
帮你搭建可定时抓取、分析并存储公开数据的全自动智能采集代理
为 AI 代理提供网页抓取、爬取与站点映射能力,快速收集结构化信息。
通过 Apify 自动运行网页抓取任务、管理数据集并获取结构化采集结果。
提供可直接复用的 AI 代理技能库,低成本完成搜索、抓取、PDF与加密任务
让 AI 代理跨平台搜索并读取全网内容,低成本获取社媒与代码情报
智能选择抓取策略并生成 TypeScript 优先的网页采集方案与代码