Data Platform Kanban Средняя команда Опубликована

Spark Data Engineering

Версия 1.0.0 Обновлено: 2026-01-25T13:12:44Z

Модель для команды Data Engineering с Apache Spark и обработкой больших данных.

SparkPythonAirflowBigData
Автор: DevPod Test User
Spark Data Engineering
Статистика модели
3
Ролей
4
Артефактов
3
Процессов
Фильтр:
Найдено: 0 элементов

Роли 3

Без департамента 3
Data Engineering Lead

Лидер Data Engineering

Уровень:Middle
Spark, Python, Data Architecture
Data Engineer

Data Engineer

Уровень:Junior
Spark, Python, Airflow, SQL
Platform Engineer

Платформенный инженер данных

Уровень:Junior
Kubernetes, Spark on K8s, Data Platform

Артефакты 4

ETL Pipelines

ETL пайплайны

Airflow DAGs

Airflow DAG'и

Data Lake

Data Lake

Data Quality Rules

Правила качества данных

Процессы 3

Подробнее →
Pipeline Development

Разработка пайплайнов

Data Quality Check

Проверка качества данных

Pipeline Deployment

Деплой пайплайнов

RACI матрица

Для этой модели пока не определены связи ролей с артефактами.
RACI матрица будет доступна после добавления связей.

R — Responsible A — Accountable C — Consulted I — Informed
Последовательность процессов
1
Pipeline Development
Разработка пайплайнов
2
Data Quality Check
Проверка качества данных
3
Pipeline Deployment
Деплой пайплайнов
Детали процессов
Pipeline Development

Разработка пайплайнов

Участники
Артефакты
Data Quality Check

Проверка качества данных

Участники
Артефакты
Pipeline Deployment

Деплой пайплайнов

Участники
Артефакты
Этапы жизненного цикла
1
Development
Разработка
2
Testing
Тестирование
3
Production
Production
Артефакты по этапам
1
Development
Разработка
2
Testing
Тестирование
3
Production
Production

Понравилась модель?

Форкните эту модель и адаптируйте её под свои нужды, или создайте собственную RAP модель с нуля.