מנתח מחסן נתונים - קורס חינם מבית Otus, הכשרה 5 חודשים, תאריך 30.11.2023.
Miscellanea / / December 04, 2023
יישומים אנליטיים כיום בנויים בצומת של פרקטיקות הנדסיות (הנדסת תוכנה/נתונים), הבנת הפרטים של המוצרים והעסקים (Data/Business Analysis), אספקה מהירה ואיכותית של שירותים (DevOps).
מטרת הקורס ללמד את התלמידים כיצד להרכיב פתרונות אנליטיים מלאים מקצה לקצה באמצעות הכלים הרלוונטיים והמבוקשים ביותר.
החומר נלמד הן לעומק (למשל, עקרונות התפקוד של DBMSs אנליטיים) והן לרוחב (השוואת כלים, ניתוח חוזקות וחולשות של פתרונות).
אילו דברים חדשים אני יכול ללמוד?
לתפקידים מדען נתונים, מנתח נתונים, מנתח מוצר:
- עקרונות תפעול של DBMS אנליטי ובניית צינורות ELT
- שימוש בשיטות עבודה מומלצות ליצירת מודלים של מחסני נתונים ומרץ
– יישום הדפוסים האדריכליים הנכונים בעת בניית פתרונות
לתפקידים מהנדס נתונים, מפתח אחורי, DBA, מנהל מערכת:
- פרקטיקות של בניית פתרונות אנליטיים מקצה לקצה
- מיומנויות יישומיות בהדמיה, דשבורד, BI
- התמקדות ביצירת ערך עסקי
הקורס יכסה:
– מיומנויות בבניית ELT-pipelines: זרימת אוויר, Nifi, Stitch
– עקרונות תפעול של DBMS אנליטי: Redshift, Greenplum, Clickhouse
– שיטות עבודה מומלצות למידול נתונים: dbt, Data Vault
- ויזואליזציה ו-BI: Metabase, Superset, DataLens
- אנליטיקה מתקדמת: KPI, משפכים, ייחוס שיווקי, Cohort, RFM
- שיטות DevOps: אינטגרציה מתמשכת, פעולות Github
6
קורסיםמהנדס נתונים ב-Wildberries, דובר קורס DE Junior. יותר מ-7 שנים ב-IT
בוגר אוניברסיטת וורונז' בהצטיינות. כיום סטודנט בתכנית לתואר שני ב-HSE "הנדסת מערכת ותוכנה". ניסיון מקצועי - שנתיים של עבודה כמנתח נתונים ומהנדס נתונים. כעת הוא עובד עם 5 מאגרי מידע פופולריים, מפתח ב-Python ומפתח במהירות את כישוריו. מוכן לחלוק את החוויה שלי.
1
נולמעלה מ-6 שנות ניסיון בפיתוח מחסני נתונים, צינורות ELT, ניתוח נתונים והדמיה. ניסיון בתחום ביטחון המדינה, יצירה והטמעה של KHD LLC "קבוצת חברות "SBSV-Klyuchavto", כיום...
למעלה מ-6 שנות ניסיון בפיתוח מחסני נתונים, צינורות ELT, ניתוח נתונים והדמיה. ניסיון בתחום ביטחון המדינה, יצירה ויישום של QCD LLC "קבוצת חברות "SBSV-Klyuchavto", מפתחת כיום QCD עבור קבוצת החברות של Delo אני בטוח שהנתונים הם הנפט השני, סוג של נכס שאתה צריך כדי להיות מסוגל לנהל להיפטר מ. הנוכחות של נתונים מאורגנים, האחסון, השימוש, המכירה והאנוניזציה הנכונים שלהם מעידים על רמה גבוהה של בגרות דיגיטלית. מוֹרֶה
3
קוּרסאלכסנדרה עובדת בתחום האנליטיקה וה-BI משנת 2019. בשלב זה היא קיבלה תואר ראשון בהנדסת תוכנה מאוניברסיטת סנט פטרבורג סטייט למינהל התעופה, ולאחר מכן תואר שני. צעדים ראשונים ב...
אלכסנדרה עובדת בתחום האנליטיקה וה-BI משנת 2019. בשלב זה היא קיבלה תואר ראשון בהנדסת תוכנה מאוניברסיטת סנט פטרבורג סטייט למינהל התעופה, ולאחר מכן תואר שני. הצעדים הראשונים בקריירה שלו נעשו בחברת Intermedia Cloud Communications האמריקאית כמנתח נתונים זוטר, ועד 2021 הוא הספיק להיות ראש צוות האנליטיקס. כל השנה הזו הוקדשה לפרויקט חוצה צוות חדש לניהול פיננסי בינלאומי בערימת Microsoft (MS SQL שרת, SSRS, SSIS, Power BI). מאז מרץ 2022, הוא עובד בקבוצת החברות של Tinkoff Bank כאנליסט מחסנים נתונים. מספק תמיכה להנהלה העליונה של המחלקה הפיננסית בבניית אבות טיפוס של תהליכי ETL באמצעות Greenplum, ניתוח אד-הוק ב-Python, דיווח והדמיה ב-Tableau. בשנת 2020 קיבלה השכלה נוספת בכיוון של מנהלת ניהול פרויקטים ב-IT. הוא תומך נלהב במתודולוגיות פיתוח גמישות. מאמין שההשקעות הרווחיות ביותר הן השקעות בפיתוח עצמו. מחסנית: SQL, SAS DIS, SSIS, Tableau, Power BI, Python
ELT: מבנה וסוגי מקורות נתונים
-נושא 1. מקורות נתונים: סיווג ותכונות
-נושא 2. כלים להורדת נתונים – 1
-נושא 3. כלים להורדת נתונים – 2
יסודות DWH
-נושא 4. מנועים אנליטיים (DBMS) לעבודה עם נתונים
-נושא 5.עקרונות בניית DWH
-ניתוח נושא 6.DZ - העלאת נתוני מונה אינטרנט
-נושא 7.מבוא לכלי בניית נתונים
-נושא 8.DBT: הנדסת אנליטיקה
DWH בינוני
-נושא 9.תזמור של תסריטים ומשימות – 1
-נושא 10. תזמור תסריטים ומשימות – 2
-ניתוח נושא 11.DZ – הגדרה והשקה של פרויקט dbt
-נושא 12. איכות נתונים
-נושא 13. בעיות אופטימיזציה של ביצועים
-נושא 14. כספת נתונים – 1
-נושא 15. כספת נתונים – 2
-ניתוח נושא 16.DZ – הכנה והגדרת לוח זמנים DAG להורדת נתונים ממקורות
מודיעין עסקי
-נושא 17.BI: סקירה כללית
-נושא 18.BI: פריסה
-נושא 19.BI: דוגמנות והספקה
ניתוח נושא 20.DZ – ארגון שכבת DWH מפורטת באמצעות מתודולוגיית Data Vault
-נושא 21.אנליטיקה: חלונות ראווה אנליטיים בסיסיים
-נושא 22.BI: שאלות עומק
-נושא 23. DZ Razor – הגדרה ופריסה של פתרון BI
-נושא 24.Analytics: תצוגות ניתוח מתקדם
DWH נושאים מתקדמים
-נושא 25.DWH: נושאים מתקדמים
-נושא 26.DBT: הרחבה עם מודולים
-נושא 27.DWH: ניטור + ניהול עומסי עבודה
-ניתוח נושא 28.DZ - ויזואליזציה ודשבורד למצגות ראווה אנליטיות
-נושא 29.DWH: נתונים חיצוניים + מובנים למחצה
-נושא 30.DWH: Reverse-ETL
-נושא 31.DWH: יכולות למידת מכונה
לסכם
-נושא 32. ניתוח מקרה: פתרון מקצה לקצה
-ניתוח נושא 33.DZ - DWH מתקדם: הגדרת CI, מודולי dbt, טבלאות חיצוניות
-נושא 34. המשך פיתוח מיומנויות
פרוייקט עבודה
-נושא 35. בחירת נושא וארגון עבודת הפרויקט
-נושא 36.הגנה על עבודת עיצוב