دوره آموزشی مهارتهای بنیادی مهندسی داده
1 ساعت 29 دقیقهمبتدی2023-04-28
مدرسین

Vinoo Ganesh
CEO and founder of Stealth Startup
جزئیات دوره
📌 در دنیای امروز که مملو از داده است، سازمانها و شرکتها به دنبال اتخاذ تصمیمهای مبتنی بر داده هستند. اما بسیاری از متخصصان جدید داده، آموزش رسمی در زمینه ساخت پایپلاینهای دادهای پایدار و مقیاسپذیر ندیدهاند.
💡 در این دوره، "وینو گانش" اصول و ابزارهای کلیدی مهندسی داده را آموزش میدهد تا بتوانید مشکلات پیچیده دادهای را بهصورت کارآمد و در مقیاس بزرگ حل کنید.
📖 آنچه در این دوره یاد میگیرید:
✅ مبانی و ابزارهای اصلی مهندسی داده
✅ درک اصول ELT، OLTP/OLAP و مدیریت داده
✅ مقدمهای بر ارکستراسیون داده و DAGs
✅ راهاندازی Apache Airflow بهصورت محلی
✅ ساخت پایپلاینهای ETL در مقیاس صنعتی
✅ کاربرد مهندسی داده در سناریوهای واقعی
🎯 پس از این دوره، شما قادر خواهید بود دادههای سازمانی را به شیوهای بهینه پردازش کنید و پایپلاینهای دادهای پایدار بسازید.
💡 در این دوره، "وینو گانش" اصول و ابزارهای کلیدی مهندسی داده را آموزش میدهد تا بتوانید مشکلات پیچیده دادهای را بهصورت کارآمد و در مقیاس بزرگ حل کنید.
📖 آنچه در این دوره یاد میگیرید:
✅ مبانی و ابزارهای اصلی مهندسی داده
✅ درک اصول ELT، OLTP/OLAP و مدیریت داده
✅ مقدمهای بر ارکستراسیون داده و DAGs
✅ راهاندازی Apache Airflow بهصورت محلی
✅ ساخت پایپلاینهای ETL در مقیاس صنعتی
✅ کاربرد مهندسی داده در سناریوهای واقعی
🎯 پس از این دوره، شما قادر خواهید بود دادههای سازمانی را به شیوهای بهینه پردازش کنید و پایپلاینهای دادهای پایدار بسازید.
مهارت ها
Data EngineeringData ScienceOne-Off
سرفصل ها
0. مقدمه
- 01 - مهندسی داده عملی
- 02 - دانش پیشینه
- 03 - تاریخچه دادهها در شرکت
- 04 - نحوه استفاده از GitHub Codespace با این دوره
1. دریافت بلبرینگ
- 05 - مهندسی داده و خطوط لوله داده
- 06 - ارکستراسیون - به معنای امروزی
- 07 - استخراج، تبدیل، بارگذاری (ETL)
- 08 - وظایف، DAGها و وابستگی ها
2. معرفی جریان هوا
- 09 - مقدمه ای بر جریان هوا
- 10 - نصب جریان هوا
- 11 - اجرای وب سرور و زمانبندی Airflow
- 12 - تنظیم تنظیمات پیکربندی جریان هوا
- 13 - یک DAG 1 Task بسازید
- 14 - یک DAG 2 Task بسازید
3. ETL پایه در جریان هوا
- 15 - ETL در جریان هوا
- 16 - یک کار مهندسی داده در دنیای واقعی
- 17 - استخراج دادهها به صورت دستی
- 18 - استخراج دادهها با Airflow
- 19 - تبدیل دادهها به صورت دستی
- 20 - تبدیل دادهها با جریان هوا
- 21 - بارگذاری اطلاعات به صورت دستی
- 22 - بارگذاری دادهها با جریان هوا
- 23 - ساخت ETL DAG با جریان هوا
- 24 - چالش - سؤالات ETL را مرور کنید
- 25 - راه حل - راه حل سؤالات ETL
نتیجه
- 26 - آینده مهندسی داده
دوره های مرتبط
- دوره آموزشی یادگیری اصولی PySpark: معرفی ساخت خطوط پردازش داده
- دوره آموزشی معرفی عملی PyTorch برای یادگیری ماشین
- دوره آموزشی مقدمه ای بر مهندسی داده در AWS: منبع یابی و ذخیره سازی داده ها
- دوره آموزشی مقدمهای بر مهندسی داده مدرن با Snowflake
- دوره آموزشی مبانی برنامهنویسی: ساختارهای داده
- دوره آموزشی یادگیری جامع زبان R: گردآوری و تجسم داده ها
- دوره آموزشی یادگیری ماشین و آمار فضایی در پایتون
- دوره آموزشی راهنمای کامل زبان برنامه نویسی R: بحث، تجسم، و مدل سازی داده ها
مسیرهای مرتبط
- مسیر آموزشی تمرین عملی مهندسی داده
- مسیر آموزشی گواهینامه حرفهای مبانی مهندسی داده
- مسیر آموزشی توسعه مهارت های Rust خود برای مهندسی داده
- مسیر آموزشی توسعه دادن مهارت های Scala خود برای مهندسی داده
- مسیر آموزشی تبدیل شدن به یک توسعه دهنده NoSQL
- مسیر آموزشی گواهینامه حرفهای مهندسی داده از Snowflake
- مسیر آموزشی کاوش در هوش مصنوعی برای مهندسی داده
- مسیر آموزشی راهنمای شروع سریع برای برنامه نویسی جاوا