Udemy Apache Spark 3 Real-time Stream Processing using Scala
من ( مربی دوره آموزشی ) در حال ایجاد Apache Spark 3 پردازش جریان در زمان واقعی با استفاده از دوره Scala هستم تا به شما کمک کند پردازش جریان Real-Time Stream را با استفاده از Apache Spark درک کنید و از این دانش برای ساخت راه حل های پردازش جریان در زمان واقعی استفاده کنید. این دوره مثال محور است و یک جلسه کاری مانند رویکرد را دنبال می کند. ما یک رویکرد کدگذاری زنده را دنبال خواهیم کرد و تمام مفاهیم مورد نیاز را در این راه توضیح خواهیم داد. من این دوره را برای مهندسین نرم افزاری که مایل به تولید خط لوله و برنامه پردازش جریان در زمان واقعی با استفاده از Apache Spark هستند ، طراحی کردم. من همچنین این دوره را برای معماران داده و مهندسان داده ایجاد می کنم که مسئولیت طراحی و ساخت زیرساخت داده محور سازمان را دارند. گروه دیگری از افراد مدیران و معماران هستند كه مستقیماً با اجرای Spark كار نمی كنند. هنوز هم آنها با افرادی کار می کنند که Apache Spark را در سطح زمین پیاده سازی می کنند. من همه کد منبع و مثالهای استفاده شده در این دوره را در مورد توزیع منبع باز Apache Spark 3.0.0 آزمایش کرده ام.- آنچه یاد خواهید گرفت :
- مفاهیم پردازش جریان در زمان واقعی
- Spark Streamed Streaming API و معماری
- کار با File Stream ها
- تحولات جریانی بدون حالت و حالت کامل
- جمع آوری پنجره ها با استفاده از Spark Stream
- Streaming Joins و Aggregation
- رسیدگی به مشکلات حافظه با پخش جریانی
- نیازمندی ها :
- اصول Spark و قرار گرفتن در معرض API Spark Dataframe
- اصول کافکا و دانش کار Apache Kafka
- دانش برنامه نویسی با استفاده از زبان برنامه نویسی Scala
- این دوره اموزشی برای چه کسانی است :
- مهندسان نرم افزار و معماری که مایل به طراحی و توسعه پروژه های مهندسی Bigdata با استفاده از Apache Spark هستند
- برنامه نویسان و توسعه دهندگانی که مشتاق رشد و یادگیری مهندسی داده با استفاده از Apache Spark هستند