Schița de curs
Introducere în ecosistemul Big Data
- Prezentarea tehnologiilor și arhitecturilor big data
- Procesare batch vs. procesare în timp real
- Strategii de stocare a datelor pentru scalabilitate
Procesare avansată a datelor cu Apache Spark
- Optimizarea job-urilor Spark pentru performanță
- Transformări și acțiuni avansate
- Lucrul cu structured streaming
Machine Learning pe scară largă
- Tehnici de antrenare a modelurilor distribuite
- Reglarea hiperparametrilor pe seturi mari de date
- Deploy-ul modelurilor în medii big data
Deep Learning pentru Big Data
- Integrarea TensorFlow și PyTorch cu Spark
- Antrenare distribuită în pipeline-uri de deep learning
- Cazuri de utilizare în analiza imaginilor, textului și seriilor temporale
Analitică în timp real și streaming de date
- Apache Kafka pentru ingestiunea de flux de date
- Framework-uri de procesare a fluxurilor
- Monitorizare și alertare în sistemele în timp real
Data governance, securitate și etică
- Recomandări privind confidențialitatea datelor și conformitatea
- Controlul accesului și criptarea în sistemele big data
- Aspecte etice în analitica pe scară largă
Integrarea Big Data cu Business Intelligence
- Vizualizarea datelor și dashboard-uri pentru big data
- Conectarea pipeline-urilor big data la instrumente BI
- Obținerea de rezultate de business prin analitică avansată
Rezumat și pași următori
Cerințe
- Înțelegere solidă a conceptelor de analiză a datelor și a modelării statistice
- Experiență în utilizarea instrumentelor de procesare a datelor și a limbajelor de programare, precum Python, R sau Scala
- Familiaritate cu framework-uri de calcul distribuit, precum Hadoop sau Spark
Public țintă
- Științifici de date care își propun să stăpânească procesarea datelor pe scară largă și analitica predictivă
- Analiști seniori care caută să proiecteze și să implementeze workflow-uri analitice avansate
- Specialiști în cercetare-dezvoltare (R&D) concentrați pe soluții inovatoare bazate pe date
Mărturii (3)
Aflarea despre QGIS și un instrument care poate fi utilizat de către alți profesioniști din diferite domenii, precum topografii
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Curs - QGIS for Geographic Information System
Tradus de catre o masina
Cum să folosești datele satelitare deschise pentru aplicații reale
Tshering Dorji - Druk Holding and Investments
Curs - Advanced Geographic Information Systems (GIS)
Tradus de catre o masina
Exemplele practice ne-au permis să ne facem o idee clară despre modul în care funcționează programa. Explicațiile bune și integrarea conceptelor teoretice cu aplicările practice au fost apreciate.
Ian - Archeoworks Inc.
Curs - ArcGIS Fundamentals
Tradus de catre o masina