מהנדס נתונים - קורס 89,000 רובל. מאוטוס, אימון 4 חודשים, תאריך 30 בנובמבר 2023.
Miscellanea / / December 03, 2023
מה הקורס הזה ייתן לך?
- הבנת הדרכים העיקריות לשילוב, עיבוד ואחסון ביג דאטה
- יכולת עבודה עם רכיבי מערכת אקולוגית של Hadoop, פתרונות אחסון מבוזרים וענן
- מיומנויות מעשיות בפיתוח שירותי נתונים, חלונות ראווה ואפליקציות
- הכרת עקרונות ארגון ניטור, תזמור, בדיקות
הקורס מטופל מפתחים, מנהלי DBMS וכל מי שמבקש לשפר את רמתו המקצועית, לשלוט בכלים חדשים ולעסוק במשימות מעניינות בתחום העבודה עם הנתונים.
לאחר לימודי הנדסת נתונים, תהפוך למומחה מבוקש אשר:
- פורס, מתאים ומייעל כלי עיבוד נתונים
- מתאים מערכי נתונים לעבודה נוספת וניתוח
- יוצרת שירותים המשתמשים בתוצאות של עיבוד כמויות גדולות של נתונים
- אחראי על ארכיטקטורת הנתונים בחברה
מקרי מקרה אמיתיים: דוגמאות של יישומים, שימוש בכלים, אופטימיזציה של ביצועים, בעיות, שגיאות ותוצאות יישומיות
אוריינטציה מעשית ביותר:
במהלך הקורס ניצור בהדרגה מוצר עובד, פתרון בעיות יישומיות
תמונה הוליסטית של האתגרים והמשימות של עסקים מודרניים, ותפקידו של מהנדס הנתונים בפתרונם
ביקוש בקרב מעסיקים
40 מעסיקים כבר מוכנים לזמן את בוגרי הקורס לראיון
6
קורסיםמהנדס נתונים ב-Wildberries, דובר קורס DE Junior. יותר מ-7 שנים ב-IT
בוגר אוניברסיטת וורונז' בהצטיינות. כיום סטודנט בתכנית לתואר שני ב-HSE "הנדסת מערכת ותוכנה". ניסיון מקצועי - שנתיים של עבודה כמנתח נתונים ומהנדס נתונים. כעת הוא עובד עם 5 מאגרי מידע פופולריים, מפתח ב-Python ומפתח במהירות את כישוריו. מוכן לחלוק את החוויה שלי.
1
נוהוא מפתח את האנליטיקה בחברה כבר יותר מ-10 שנים. בין ההישגים: - בניית מערכת ניתוח אינטרנט מקצה לקצה משלנו; - בניית מחסן אנליטי מבוסס MPP Vertica; - ארגון עיבוד נתונים על בסיס Spark, Kafka, HDFS; -...
הוא מפתח את האנליטיקה בחברה כבר יותר מ-10 שנים. בין ההישגים: - בניית מערכת ניתוח אינטרנט מקצה לקצה משלנו; - בניית מחסן אנליטי מבוסס MPP Vertica; - ארגון עיבוד נתונים על בסיס Spark, קפקא, HDFS;- בניית תהליכי עבודה עם נתונים, לרבות איכות נתונים;- יצירת מספר כלים פנימיים לעבודה ובניית מטא נתונים (Data Catalog);- בניית מערכת דיווח תאגידית, כולל זמן אמת; - מזה למעלה מ-5 שנים, הוא מגביר את ה-Data Literacy בתוך החברה, מעביר הדרכות שונות בעבודה עם נתונים, כלים, SQL; הוא גם פיתח כמה מובילי ניתוח שעובדים כיום בחברות גדולות. ההתמקדות העיקרית היא בהבנת בעיות עסקיות בעבודה עם נתונים ופתרונן.
1
נוראש מחלקה, Sberbank 8 שנות ניסיון בפיתוח תעשייתי, כולל יצירה ותחזוקה של אפליקציות אינטרנט הן בחברות גדולות והן בסטארטאפים. 3 שנים של פיתוח מערכות מבוזרות לממשל גדול...
ראש מחלקה, Sberbank 8 שנות ניסיון בפיתוח תעשייתי, כולל יצירה ותחזוקה של אפליקציות אינטרנט הן בחברות גדולות והן בסטארטאפים. 3 שנים של פיתוח מערכות מבוזרות ללקוחות ממשלתיים גדולים. ביצע שלושה פרויקטים מאפס, מאב טיפוס ועד מוכן לשימוש תעשייתי. עוסקת כיום בפיתוח מלא ללקוחות פנימיים בבנק, בפתרון בעיות הקשורות לניתוח נתונים והנדסה. ניסיון בתכנות ב-Java, Scala, Python, Javascript. מגוון רחב של תחומי עניין מקצועיים, החל מבניית מערכות מבוזרות ועד לניתוח חזוי וניתוח כוונות. השכלה: תואר ראשון מ- UrFU ע"ש. ב.נ. ילצין "טכנולוגיות מידע".
ארכיטקטורת נתונים
-נושא 1. מהנדס נתונים. משימות, מיומנויות, כלים, צרכי שוק
-נושא 2.ארכיטקטורה של יישומים אנליטיים: מרכיבים ועקרונות בסיסיים
-נושא 3.On premises / פתרונות ענן
-נושא 4. אוטומציה ותזמור צינורות – 1
-נושא 5. אוטומציה ותזמור צינורות – 2
אגם נתונים
-נושא 6. מערכות קבצים מבוזרות. HDFS/S3
-גישה לנושא 7.SQL ל-Hadoop. Apache Hive/Presto
-נושא 8. פורמטים של אחסון נתונים ותכונותיהם
-נושא 9. ניתוח שלט רחוק למקרה 1
-נושא 10.תורי הודעות. סקירה כללית של קפקא.
-נושא 11.הורדת נתונים ממערכות חיצוניות
-נושא 12.Apache Spark – 1
-נושא 13.Apache Spark – 2
DWH
-נושא 14. DBMS אנליטי. מסדי נתונים של MPP
-נושא 15. דוגמנות DWH – 1. יסודות dbt
-נושא 16. דוגמנות DWH – 2. כספת נתונים 2.0
-נושא 17. שיטות DevOps ביישומים אנליטיים. CI+CD
-נושא 18. ניתוח שלט רחוק למקרה 2
-נושא 19. איכות נתונים. ניהול איכות נתונים
-נושא 20. פריסת פתרון BI
-נושא 21. ניטור / מטא נתונים
NoSQL/NewSQL
-נושא 22.אחסון NoSQL. עמודה רחבה וערך מפתח
-נושא 23.אחסון NoSQL. מכוון מסמכים
-נושא 24.ELK
-נושא 25. קליקהאוס
-נושא 26. ניתוח שלט רחוק למקרה 3
MLOps
-נושא 27.ארגון ואריזת קוד
-נושא 28. ארכיטקטורת דוקר ו-REST
-נושא 29.MLFlow + DVC
-נושא 30. פריסת מודלים
-נושא 31. ניתוח שלט רחוק למקרה 4
-נושא 32. ניתוח שלט רחוק למקרה 5
פרויקט גמר
-נושא 33. בחירת נושא וארגון עבודת הפרויקט
-נושא 34. ייעוץ
-נושא 35. הגנה