SkillFeeder › 全部 Skill › 数据与复盘 › data-engineering
构建健壮的 ETL 流水线,自动完成数据抽取、转换与入库
data-engineering
data-engineering 是 SkillFeeder 收录的Agent Skill,来自 GitHub 仓库 rohitg00/awesome-claude-code-toolkit,★ 2,826。构建健壮的 ETL 流水线,自动完成数据抽取、转换与入库。适合数据工程师、ETL 开发者。场景是数据与复盘 · 分析解读。能做的事包括生成带错误追踪和耗时统计的 PipelineResult 对象、内置订单-客户关联查询模板,支持增量同步、结构化封装 Spark 和数据质量校验接入点。打开 GitHub 自行安装。
能做什么
- 生成带错误追踪和耗时统计的 PipelineResult 对象
- 内置订单-客户关联查询模板,支持增量同步
- 结构化封装 Spark 和数据质量校验接入点
原文简介
Data engineering patterns for ETL pipelines, data warehousing, Apache Spark, and data quality validation
同场景推荐
- chart-visualization所在仓库 bytedance/deer-flow,仓库 ★ 85,186自动生成适配数据特征的图表图片
- data-analysis所在仓库 bytedance/deer-flow,仓库 ★ 85,186用 SQL 快速分析 Excel/CSV 文件,生成统计摘要、透视表和导出结果。
- claude-certification所在仓库 rohitg00/ai-engineering-from-scratch,仓库 ★ 78,051手把手辅导你通过Claude四大认证考试
- data-manager-api-event-ingestion所在仓库 google/skills,仓库 ★ 23,503Guides developers through implementing event and conversion ingestion to Google…
- pro所在仓库 tanweai/pua,仓库 ★ 19,814自动升级行为标准,持续压缩失败经验,生成可追踪的KPI式总结
- ablation-planner所在仓库 wanshuiyin/Auto-claude-code-research-in-sleep,仓库 ★ 18,864自动生成论文投稿所需的消融实验设计方案
- analyze-results所在仓库 wanshuiyin/Auto-claude-code-research-in-sleep,仓库 ★ 18,864自动分析机器学习实验结果,生成统计表格和可读洞察。
- experiment-audit所在仓库 wanshuiyin/Auto-claude-code-research-in-sleep,仓库 ★ 18,864自动交叉验证实验结果真实性,揪出伪造数据、评分作弊和范围不足问题