Data Pipeline Builder

4.7
4500 下载量
310 Stars

自动化构建数据处理管道,支持多种数据源和转换操作

数据处理 ETL 自动化 数据工程

概述

产品介绍

Data Pipeline Builder 让你可以快速构建健壮的数据处理管道,无需编写大量样板代码。

主要特性

  • 多数据源支持: 数据库、API、文件系统、云存储等
  • 可视化构建: 通过交互式界面设计管道
  • 自动优化: 智能优化数据流和性能
  • 错误处理: 内置重试和错误恢复机制
  • 监控告警: 实时监控管道运行状态

使用案例

从多个数据源收集数据,进行清洗、转换、聚合,最后加载到数据仓库。

安装方法

claude-code skill install data-pipeline-builder

使用示例

创建数据管道

从多个数据源创建 ETL 管道

@build-pipeline create --source db,api --target warehouse

数据转换

定义数据转换规则

@build-pipeline transform --config transform.yaml

Skill.md

这是原始的 Skill 定义文档,包含了 Skill 的完整技术规格和配置信息。

Front Matter

---
title: "Data Pipeline Builder"
description: "自动化构建数据处理管道,支持多种数据源和转换操作"
date: 2026-01-14
author: "DataFlow"
version: "2.1.0"
license: "MIT"
rating: 4.7
downloads: 4500
stars: 310
repository: "https://github.com/example/data-pipeline-builder"
category: "数据工程"
tags:
  - "数据处理"
  - "ETL"
  - "自动化"
  - "数据工程"
topics:
  - "AI 工程师"
  - "数据工程师"
installation: "claude-code skill install data-pipeline-builder"
examples:
  - title: "创建数据管道"
    description: "从多个数据源创建 ETL 管道"
    code: "@build-pipeline create --source db,api --target warehouse"
  - title: "数据转换"
    description: "定义数据转换规则"
    code: "@build-pipeline transform --config transform.yaml"
---

Markdown Content


## 产品介绍

Data Pipeline Builder 让你可以快速构建健壮的数据处理管道,无需编写大量样板代码。

### 主要特性

- **多数据源支持**: 数据库、API、文件系统、云存储等
- **可视化构建**: 通过交互式界面设计管道
- **自动优化**: 智能优化数据流和性能
- **错误处理**: 内置重试和错误恢复机制
- **监控告警**: 实时监控管道运行状态

## 使用案例

从多个数据源收集数据,进行清洗、转换、聚合,最后加载到数据仓库。

基本信息

作者
DataFlow
版本
2.1.0
许可证
MIT
更新于
2026-01-14
分类
数据工程