توضیحات
Data Streaming Nanodegree ، دوره جریان داده توسط آکادمی Udacity منتشر شده است. یاد بگیرید که چگونه بلادرنگ داده ها را با استفاده از آپاچی کافکا و اسپارک تحلیل کنید و برنامه هایی برای پردازش اطلاعات زنده از داده ها در مقیاس بسازید. پردازش بلادرنگ داده ها با ایجاد ابزارهای مدرن مهندسی داده، مانند Apache Spark,Kafka, Spark Streaming, and Kafka Streaming. فارغ التحصیلان این دوره می توانند اجزای سیستم های جریان داده را درک کنند. وارد کردن بلادرنگ داده ها با استفاده از آپاچی کافکا و اسپارک و تحلیل اجرا. از کتابخانه Faust Stream Processing پایتون برای ساخت یک برنامه مبتنی بر استریم بلادرنگ استفاده کنند. ترکیب داده های بلادرنگ و اجرای تجزیه و تحلیل زنده، و همچنین استخراج اطلاعات از گزارش های تولید شده توسط کنسول در حال جریان. اکوسیستم کافکا یاد می گیرید و انواع مشکلات و راه حل هایی که برای آن ها طراحی شده است.
برای مدیریت ساده موضوع، تولید و مصرف از کتابخانه Confluent Kafka پایتون استفاده می کنید. توضیح اجزای استریمینگ اسپارک (معماری و API)، ادغام استریمینگ ساختار اسپارک و آپاچی کافکا، دستکاری داده ها با استفاده از اسپارک، و خواندن دیتابیس ها در کنسول استریم اسپارک.این دوره از 2 پروژه تشکیل شده است. هر پروژه ای که می سازید، فرصتی برای نشان دادن آنچه در این دوره آموخته اید خواهد بود و به کارفرمایان بالقوه نشان خواهد داد که در این زمینه ها مهارت دارید. هدف از این دوره نشان دادن دانش ابزارهای آموزش داده شده از جمله کافکا Consumers، تولیدکنندگان و موضوعات، منابع اتصال کافکا و Sinks، کافکا REST Proxy برای تولید داده است.
آنچه خواهید آموخت
- توصیف و توضیح فروشگاه های داده در حال جریان و پردازش جریان
- توصیف و توضیح کاربردهای واقعی پردازش جریان
- توصیف و توضیح معماری کافکا
- تشریح و توضیح موضوعات و پیکربندی کافکا
- استفاده از پایتون کافکا برای ایجاد موضوعات و پیکربندی
- توصیف و توضیح تولیدکنندگان، مصرف کنندگان و پیکربندی کافکا
- سناریوهای رایج برای جریان را توصیف و توضیح دهید
- استراتژی های رایج پردازش جریان
- شرح و توضیح نحوه کار زمان و پنجره سازی در پردازش جریان
این دوره برای چه کسانی مناسب است
- مهندسان نرم افزاری که به دنبال ایجاد مهارت پردازش داده های بلادرنگ هستند
- مهندسان داده که به دنبال افزایش مهارت خود همگام با پیشرفت های مهندسی داده هستند.
مشخصات دوره Data Streaming Nanodegree
- ناشر : Udacity
- مدرس : Ben Goldberg , David Drummond , Judit Lantos , Sean Murdock
- زبان: انگلیسی
- سطح آموزش: پیشرفته
- تعداد دروس: 19
- مدت زمان آموزش : حدودا 2 ماه با احتساب 5 تا 10 ساعت کار در هفته
سر فصل های دوره Data Streaming Nanodegree
Welcome to the Data Streaming Nanodegree Program
Lesson 01: Data Streaming Nanodegree Program Introduction
Lesson 02: Introduction to Data Streaming
Lesson 03: Nanodegree Career Services
Data Ingestion with Kafka & Kafka Streaming
Lesson 01: Introduction to Stream Processing
Lesson 02: Apache Kafka
Lesson 03: Data Schemas and Apache Avro
Lesson 04: Kafka Connect and REST Proxy
Lesson 05: Stream Processing Fundamentals
Lesson 06: Stream Processing with Faust
Lesson 07: KSQL
Lesson 08: Optimizing Public Transportation
Lesson 09: Optimize Your GitHub Profile
Apache Spark and Spark Streaming
Lesson 01: The Power of Spark
Lesson 02: Data Wrangling with Spark
Lesson 03: Intro to Spark Streaming
Lesson 04: Structured Streaming APIs
Lesson 05: Integration of Spark Streaming and Kafka
Lesson 06: SF Crime Statistics with Spark Streaming
Lesson 07: Take 30 Min to Improve your LinkedIn
پیش نیاز های دوره
- Intermediate SQL, and Python. And experience with ETL.
- Basic familiarity with traditional batch processing and traditional service architectures is desired, but not required.
تصاویر
فیلم نمونه
راهنمای نصب
به منظور مشاهده دروس دوره به صورت سازمان دهی شده و مرتب فایل index.html را اجرا کرده و از طریق این فایل ویدیوها را اجرا کنید.
زیرنویس: ندارد
کیفیت: 720p
لینک دانلود
گذرواژه فایل(ها): www.downloadly.ir
حجم فایل
1.46 گیگابایت
