קורס מעשי ומקיף זה מעניק היכרות מעמיקה עם Apache Spark ותפקידו בבניית תהליכי עיבוד נתונים בסקייל גדול. במהלך הקורס המשתתפים ילמדו את ארכיטקטורת Spark, מודל ההרצה ועקרונות העיבוד המקבילי, ויתרגלו עבודה ע ם RDDs, DataFrames, Spark SQL ו־Spark Streaming. הקורס כולל עיבוד Batch ו־Streaming, Structured Streaming עם Kafka, אסטרטגיות Partitioning, כיוונון ביצועים וניטור באמצעות Spark UI. בסיום הקורס המשתתפים יוכלו לתכנן, לפתח ולייעל Pipelines סקיילביליים בעולמות ה־Data Engineering בסביבות אמת.
מרצה
ערן קורן
Senior Advisor
ערן הינו יועץ מוביל ובכיר בנאיה טכנולוגיות בתחום מסדי נתונים ו-Big Data.
במסגרת תפקידו ערן מתמחה בניהול מסדי נתונים, בניית ארכיטקטורה, וכן בפלטפורמות NoSQL מובילות בעולם Big Data.
ערן מתמחה במסדי נתונים של חברות Oracle ו-Microsoft ובין היתר עובד כ-DBA מוביל בארגונים רבים.
כמו כן, ערן בעל שנות ניסיון רבות בהדרכה, החל מגרסאות Oracle 7 ו-SQL Server 2000, מדריך קורסים בארץ ובחו”ל ברמות שונות ומביא עימו להדרכות ניסיון מעשי רב.
התמחות
Relational, BIG DATA, Cloud and integration, Python
בעולם שבו ארגונים מעבדים כמויות עצומות של נתונים בזמן אמת, Apache Spark הפכה לאחת מפלטפורמות ה־Big Data החשובות והנפוצות ביותר בתעשייה. יכולות העיבוד המבוזר, הביצועים הגבוהים והתמיכה בעיבוד נתונים אצווי (Batch) ובזרמי נתונים (Streaming) הופכים את Spark לטכנולוגיה מרכזית בפרויקטי Data Engineering, אנליטיקה מתקדמת ובינה מלאכותית. קורס Practical Apache Spark של NAYA College מעניק למשתתפים הכשרה מעשית ומקיפה בפיתוח תהליכי עיבוד נתונים מודרניים באמצעות Apache Spark, תוך התמקדות ביישומים אמיתיים מהתעשייה.
במהלך הקורס ילמדו המשתתפים את ארכיטקטורת Spark, עקרונות העיבוד המקבילי, מודל ההרצה של המערכת ויכולות העבודה עם RDDs, DataFrames ו־Spark SQL. בנוסף, יכירו את מנגנוני ה־Lazy Execution, עבודה עם מקורות נתונים שונים, פונקציות אנליטיות, UDFs וטכניקות מתקדמות לעיבוד נתונים מבוזר בקנה מידה גדול.
חלק מרכזי מההכשרה מוקדש לעבודה עם Spark Streaming ו־Structured Streaming, המאפשרים עיבוד נתונים בזמן אמת ושילוב עם מערכות Messaging כגון Apache Kafka. המשתתפים ילמדו כיצד לבנות יישומי Streaming מתקדמים, לנהל Stateful Streaming, ולפתח Pipelines המסוגלים לעבד זרמי מידע באופן רציף, אמין וסקיילבילי בסביבות Production.
בנוסף, הקורס עוסק בהיבטי ביצועים וניטור של מערכות Spark. המשתתפים ילמדו לעבוד עם Spark UI, לנתח תוכניות הרצה (Execution Plans), לזהות צווארי בקבוק, לבצע Performance Tuning, לנהל חלוקת נתונים (Partitioning) ולשפר את ביצועי המערכת באמצעות אופטימיזציה של תהליכי העיבוד. יכולות אלו מהוות מרכיב קריטי בפיתוח מערכות Big Data יציבות ויעילות.
התוכנית משלבת למידה Hands-On, תרגול מעשי ועבודה על תרחישים אמיתיים מעולם ה־Data Engineering. בסיום הקורס יהיו הבוגרים מסוגלים לתכנן, לפתח ולבצע אופטימיזציה של Pipelines לעיבוד נתונים בקנה מידה גדול, לעבוד עם Batch ו־Streaming באמצעות Apache Spark, וליישם פתרונות Big Data מתקדמים בארגונים המבוססים על נתונים.
צוות הקורס
אופיר עפרי
CTO
אופיר הינו בעל ניסיון של למעלה מעשור בהובלה טכנולוגית, ארכיטקטורת דאטה ופתרונות Big Data בסביבות ארגוניות מורכבות. משמש כ CTO ב-NAYA Technologies משנת 2023, ולאורך השנים כיהן גם כ Head of Data Engineering וכ Tech Lead, עם אחריות על תכנון ארכיטקטורות, כתיבת מסמכי HLD/LLD והובלת צוותים טכנולוגיים. בעל מומחיות עמוקה בעולמות הענן (AWS, GCP, Azure), Big Data ופלטפורמות כגון Spark, Kafka, Hadoop, Cloudera, ELK ו-NoSQL, לצד ניסיון Hands On בפיתוח ב Java, Scala ו-Python. מוביל פרויקטים של הקמת תשתיות, מיגרציה מ On Prem לענן, Microservices ו Data Platforms מקצה לקצה. בנוסף, בעל ניסיון עשיר בהדרכה ובהכשרת צוותים בטכנולוגיות Big Data מתקדמות, תוך שילוב ראייה מערכתית וניסיון מעשי רחב מהתעשייה.
אלין עובדיה
מומחית Big Data
אלין הינה Senior Data Engineer עם ניסיון רב בתכנון, ניהול והובלת תשתיות Data ו-Big Data בארגונים גדולים.
משמשת כ Data Eningeer בכירה ב-NAYA Technologies משנת 2021, עם אחריות על ניהול ופיתוח אקוסיסטם בעולמות של AWS ,Cloudera, עבודה עם Spark, Hive, Impala, NiFi ו-Kafka, ותמיכה שוטפת בצוותי Data Science ו-Analytics.
בעלת ניסיון בהובלת מיגרציות טכנולוגיות, שדרוג תשתיות ויישום פתרונות מתקדמים.
בעבר שימשה כ Analytics Team Lead ב Deloitte, שם הובילה צוותים של עשרות עובדים, ניהלה פרויקטים מרובי ממשקים והניעה תהליכי קבלת החלטות מבוססי נתונים. משלבת מומחיות טכנולוגית עמוקה, יכולות הנהגה, תקשורת בין-אישית מצוינת וניסיון בהדרכה והעברת סדנאות מקצועיות.
אבי ישר
Data Engineering
אבי הינו מומחה בתחום Big Data העוסק בתחום Data Engineering ופיתוח BI מזה מספר שנים בחברות הייטק. אבי הינו בוגר תואר ראשון ושני מחקרי (MSc) בהנדסת תעשייה וניהול בהצטיינות יתרה, התמחות ב – Big Data .אבי סיים את לימודיו בגיל 23 בעודו בשירות קבע בחיל המודיעין. כמו כן, אבי בוגר נאיה קולג’ במסלול הכשרה Data Engineering, אשר גויס לחברת נאיה טכנולוגיות מיד עם תום המסלול לאור הרמה הגבוהה של ידע והפוטנציאל המקצועי שהפגין.
