دوره آموزشی مبانی مهندسی داده مدرن
1 ساعت 23 دقیقهمتوسط2026-02-23
مدرسین

Pearson
جزئیات دوره
دادهها همهجا هستند و هر روز هم حجمشون بیشتر میشه؛ به همین خاطر اگر میخوای تو دنیای تکنولوژی و هوش مصنوعی عقب نمونی، باید مهارتهات رو در حوزه Big Data و مهندسی داده بهروز نگه داری.
در این دوره با مفاهیم پایه تا پیشرفته دنیای داده آشنا میشی؛ از معماری دیتالیکها (Data Lake) گرفته تا مهندسی پایگاه داده، تبدیل دادهها (Data Transformation) و هماهنگسازی فرآیندهای داده (Data Orchestration).
همچنین یاد میگیری چطور با ابزارهای مدرن و واقعی این حوزه کار کنی و جریانهای کاری (Workflows) مربوط به داده رو به شکل عملی پیادهسازی کنی.
در طول آموزش، با ابزارهای مهم و پرکاربرد مثل DuckDB برای ذخیره و تحلیل داده، dbt برای تبدیل دادهها و ابزارهای orchestration مثل Airflow، Dagster و Prefect کار میکنی.
یکی از بخشهای مهم دوره اینه که یاد میگیری چطور این ابزارها رو با هم ترکیب کنی و یک سیستم کامل و واقعی مهندسی داده بسازی که در پروژههای واقعی قابل استفاده باشه.
در نهایت هم مسیر رشد حرفهای در دنیای داده بهت معرفی میشه؛ اینکه چه مهارتها، تجربهها و مدارکی لازم داری تا بتونی در حوزه Data Engineering حرفهای بشی.
این دوره برای توسعهدهندهها، دانشمندهای داده (Data Scientists) و مهندسهایی طراحی شده که میخوان وارد دنیای دادههای بزرگ بشن یا مهارتشون رو ارتقا بدن.
🎯 اهداف یادگیری
درک مفاهیم پایه و پیشرفته Data Engineering
کار با مفاهیم Big Data و سیستمهای دادهای مدرن
بارگذاری داده در DuckDB
استفاده از dbt برای تبدیل دادهها (Data Transformation)
طراحی و اجرای Data Pipeline
مدیریت جریان داده با ابزارهای Orchestration
کار با Apache Airflow برای مدیریت Workflow
استفاده از Dagster در مهندسی داده
کار با Prefect برای اتوماسیون داده
یکپارچهسازی dbt با Dagster
ساخت سیستم کامل Data Pipeline
درک معماری Data Lake
مدیریت و پردازش دادههای حجیم
بهینهسازی گردش کار داده
درک مهارتها و مسیر شغلی Data Engineer
آمادهسازی برای ورود به بازار کار داده
افزایش توانایی در پروژههای واقعی داده
کار با ابزارهای مدرن داده
تحلیل و پردازش داده در مقیاس بزرگ
توسعه مهارتهای حرفهای در Data Engineering
در این دوره با مفاهیم پایه تا پیشرفته دنیای داده آشنا میشی؛ از معماری دیتالیکها (Data Lake) گرفته تا مهندسی پایگاه داده، تبدیل دادهها (Data Transformation) و هماهنگسازی فرآیندهای داده (Data Orchestration).
همچنین یاد میگیری چطور با ابزارهای مدرن و واقعی این حوزه کار کنی و جریانهای کاری (Workflows) مربوط به داده رو به شکل عملی پیادهسازی کنی.
در طول آموزش، با ابزارهای مهم و پرکاربرد مثل DuckDB برای ذخیره و تحلیل داده، dbt برای تبدیل دادهها و ابزارهای orchestration مثل Airflow، Dagster و Prefect کار میکنی.
یکی از بخشهای مهم دوره اینه که یاد میگیری چطور این ابزارها رو با هم ترکیب کنی و یک سیستم کامل و واقعی مهندسی داده بسازی که در پروژههای واقعی قابل استفاده باشه.
در نهایت هم مسیر رشد حرفهای در دنیای داده بهت معرفی میشه؛ اینکه چه مهارتها، تجربهها و مدارکی لازم داری تا بتونی در حوزه Data Engineering حرفهای بشی.
این دوره برای توسعهدهندهها، دانشمندهای داده (Data Scientists) و مهندسهایی طراحی شده که میخوان وارد دنیای دادههای بزرگ بشن یا مهارتشون رو ارتقا بدن.
🎯 اهداف یادگیری
درک مفاهیم پایه و پیشرفته Data Engineering
کار با مفاهیم Big Data و سیستمهای دادهای مدرن
بارگذاری داده در DuckDB
استفاده از dbt برای تبدیل دادهها (Data Transformation)
طراحی و اجرای Data Pipeline
مدیریت جریان داده با ابزارهای Orchestration
کار با Apache Airflow برای مدیریت Workflow
استفاده از Dagster در مهندسی داده
کار با Prefect برای اتوماسیون داده
یکپارچهسازی dbt با Dagster
ساخت سیستم کامل Data Pipeline
درک معماری Data Lake
مدیریت و پردازش دادههای حجیم
بهینهسازی گردش کار داده
درک مهارتها و مسیر شغلی Data Engineer
آمادهسازی برای ورود به بازار کار داده
افزایش توانایی در پروژههای واقعی داده
کار با ابزارهای مدرن داده
تحلیل و پردازش داده در مقیاس بزرگ
توسعه مهارتهای حرفهای در Data Engineering
سرفصل ها
مقدمه
- مهندسی داده مدرن
دریاچههای داده مدرن
- تاریخچه مختصری از کلان داده
- چشمانداز دادههای مدرن
- انبارهای داده و دریاچهها در زمینه هوش مصنوعی
اصول مهندسی پایگاه داده
- مدلهای داده رابطهای در مقابل مدلهای داده غیررابطهای
- ذخیرهسازی دادههای سطری در مقابل ستونی
- نسخه آزمایشی عملی - بارگذاری دادهها در DuckDB
- طراحی برای عملکرد
تبدیل دادهها
- استخراج، تبدیل، بارگذاری در مقابل استخراج، بارگذاری و تبدیل
- SQL یا پایتون
- نسخه آزمایشی عملی - راهاندازی هسته dbt
هماهنگسازی گردش کار
- کنار هم گذاشتن همه چیز - داگستر و دیبیتی
- نسخه آزمایشی عملی - داراییهای داگستر
نتیجهگیری - آینده مهندسی داده
- مدرک یا حکم
- محدوده - چرا متخصصان بر متخصصان پیروز خواهند شد
- طراحی برای عملکرد
دوره های مرتبط
- دوره آموزشی ساخت جستوجو و توصیهگرهای هوشمند در خردهفروشی با استفاده از Vertex AI Search for Commerce
- دوره آموزشی Presto : علم داده
- دوره آموزشی خطوط داده و پردازش جریان با Deno
- دوره آموزشی زبان برنامه نویسی گو (Golang): برنامهنویسی عملی
- دوره آموزشی آمادگی برای مدرک توسعهدهنده سیشارپ مونگودیبی (MongoDB)
- دوره آموزشی آمادگی برای مدرک توسعهدهنده Node.js مونگودیبی (MongoDB)
- دوره آموزشی علم داده بازاریابی
- دوره آموزشی مبانی برنامه نویسی: ساختار داده ها (2019)
مسیرهای مرتبط
- مسیر آموزشی موفق شدن به عنوان یک مدیر فناوری اطلاعات از راه دور
- مسیر آموزشی تبدیل شدن به یک استاد تحول دیجیتال
- مسیر آموزشی ساخت مهارتهای آماده برای آینده در عصر هوش مصنوعی مولد
- مسیر آموزشی تبدیل شدن به یک مهندس ضبط
- مسیر آموزشی تبدیل شدن به یک مدیر شبکه
- مسیر آموزشی ایجاد یک سازمان اثبات آینده
- مسیر آموزشی تبدیل شدن به یک مهندس DevOps
- مسیر آموزشی تبدیل شدن به یک مدیر زنجیره تامین