Инженеринг на данни
( 24 Модули )

модул #1
Въведение в инженерството на данни
Преглед на инженерството на данни, важността и ролята в науката за данните

модул #2
Основи на инженерството на данни
Обработка на данни, съхранение на данни и основи на архитектурата на данни

модул #3
Модели за приемане на данни
Проектиране и внедряване на тръбопроводи за поглъщане на данни

модул #4
Опции за съхранение на данни
Релационни бази данни, NoSQL бази данни и съхранение на данни

модул #5
Решения за съхранение на големи данни
HDFS, HBase и друго съхранение на големи данни опции

модул #6
Основи на обработката на данни
Пакетна обработка, поточна обработка и обработка в реално време

модул #7
Основи на Apache Spark
Въведение в Apache Spark, Spark Core и Spark SQL

модул #8
Пакетна обработка с Apache Spark
Случаи на употреба и реализации на пакетна обработка с Spark

модул #9
Поточна обработка с Apache Spark
Случаи на употреба и реализации на поточна обработка с Spark

модул #10
Обработка в реално време с Apache Flink
Въведение в Apache Flink и случаи на използване на обработка в реално време

модул #11
Тръбопроводи за данни и управление на работния поток
Проектиране и внедряване на канали за данни с Apache Airflow и Apache NiFi

модул #12
Качество на данните и управление на данните
Показатели за качество на данните, управление на данните и произход на данните

модул #13
Сигурност на данните и контрол на достъпа
Най-добри практики за криптиране на данни, контрол на достъпа и сигурност

модул #14
Инженеринг на данни, базирани на облак
Базирани на облак данни инженерство с AWS, GCP и Azure

модул #15
Контейнеризация и оркестрация
Контейнеризация с Docker и оркестрация с Kubernetes

модул #16
Мониторинг и регистриране в Data Engineering
Мониторинг и регистриране на най-добри практики в инженеринга на данни

модул #17
Тестване и валидиране в инженерството на данни
Стратегии за тестване и валидиране на канали за данни и системи

модул #18
Инженерство на данни за машинно обучение
Инженерство на данни за модели за машинно обучение и AI приложения

модул #19
Реално- Случаи на използване на World Data Engineering
Казуси и примери от реалния свят на приложения за инженеринг на данни

модул #20
Инструменти и технологии за инженеринг на данни
Проучване на инструменти и технологии за инженеринг на данни

модул #21
Най-добри практики за инженеринг на данни
Най-добри практики за проектиране, разработка и внедряване на инженеринг на данни

модул #22
Инженеринг на данни в мащаб
Съображения за мащабируемост и производителност за широкомащабни системи за инженеринг на данни

модул #23
Инженеринг на данни за наука за данни
Сътрудничество между инженери по данни и учени по данни

модул #24
Обобщение на курса и заключение
Планиране на следващите стъпки в кариерата на Data Engineering

Готови ли сте да научите, споделяте и се състезавате?