Apache Airflow for Data Science: Automating Machine Learning Pipelines Training Course
Το Apache Airflow είναι μια πλατφόρμα ανοιχτού κώδικα για την ενορχήστρωση ροών εργασίας και την αυτοματοποίηση πολύπλοκων αγωγών δεδομένων.
Αυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών (διαδικτυακή ή επιτόπου) απευθύνεται σε συμμετέχοντες μεσαίου επιπέδου που επιθυμούν να αυτοματοποιήσουν και να διαχειριστούν ροές εργασιών μηχανικής εκμάθησης, συμπεριλαμβανομένης της εκπαίδευσης μοντέλων, της επικύρωσης και της ανάπτυξης χρησιμοποιώντας το Apache Airflow.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το Apache Airflow για ενορχήστρωση ροής εργασιών μηχανικής εκμάθησης.
- Αυτοματοποιήστε την προεπεξεργασία δεδομένων, την εκπαίδευση μοντέλων και τις εργασίες επικύρωσης.
- Ενσωματώστε το Airflow με πλαίσια και εργαλεία μηχανικής εκμάθησης.
- Αναπτύξτε μοντέλα μηχανικής εκμάθησης χρησιμοποιώντας αυτοματοποιημένες σωληνώσεις.
- Παρακολουθήστε και βελτιστοποιήστε τις ροές εργασιών μηχανικής εκμάθησης στην παραγωγή.
Μορφή του μαθήματος
- Διαδραστική διάλεξη και συζήτηση.
- Πολλές ασκήσεις και εξάσκηση.
- Πρακτική εφαρμογή σε περιβάλλον ζωντανού εργαστηρίου.
Επιλογές προσαρμογής μαθήματος
- Για να ζητήσετε μια εξατομικευμένη εκπαίδευση για αυτό το μάθημα, επικοινωνήστε μαζί μας για να κανονίσουμε.
Course Outline
Εισαγωγή στο Apache Airflow για το Machine Learning
- Επισκόπηση του Apache Airflow και η συνάφειά του με την επιστήμη των δεδομένων
- Βασικά χαρακτηριστικά για την αυτοματοποίηση των ροών εργασιών μηχανικής εκμάθησης
- Ρύθμιση ροής αέρα για έργα επιστήμης δεδομένων
Κτίριο Machine Learning Αγωγοί με ροή αέρα
- Σχεδιασμός DAG για ροές εργασιών ML από άκρο σε άκρο
- Χρήση τελεστών για απορρόφηση δεδομένων, προεπεξεργασία και μηχανική χαρακτηριστικών
- Προγραμματισμός και διαχείριση εξαρτήσεων αγωγών
Εκπαίδευση και επικύρωση μοντέλου
- Αυτοματοποίηση εργασιών εκπαίδευσης μοντέλων με Airflow
- Ενσωμάτωση Airflow με πλαίσια ML (π.χ., TensorFlow, PyTorch)
- Επικύρωση μοντέλων και αποθήκευση μετρήσεων αξιολόγησης
Ανάπτυξη και παρακολούθηση μοντέλου
- Ανάπτυξη μοντέλων μηχανικής μάθησης με χρήση αυτοματοποιημένων αγωγών
- Παρακολούθηση αναπτυγμένων μοντέλων με εργασίες ροής αέρα
- Χειρισμός επανεκπαίδευσης και ενημερώσεων μοντέλων
Προηγμένη προσαρμογή και ενσωμάτωση
- Ανάπτυξη προσαρμοσμένων τελεστών για εργασίες ειδικές για ML
- Ενσωμάτωση Airflow με πλατφόρμες cloud και υπηρεσίες ML
- Επέκταση των ροών εργασίας Airflow με πρόσθετα και αισθητήρες
Βελτιστοποίηση και Κλιμάκωση Σωληνώσεων ML
- Βελτίωση της απόδοσης ροής εργασιών για δεδομένα μεγάλης κλίμακας
- Κλιμάκωση αναπτύξεων ροής αέρα με Celery and Kubernetes
- Βέλτιστες πρακτικές για ροές εργασίας ML ποιότητας παραγωγής
Μελέτες Περιπτώσεων και Πρακτικές Εφαρμογές
- Πραγματικά παραδείγματα αυτοματισμού ML με χρήση Airflow
- Πραγματική άσκηση: Κατασκευή ενός αγωγού ML από άκρο σε άκρο
- Συζήτηση προκλήσεων και λύσεων στη διαχείριση ροής εργασιών ML
Περίληψη και Επόμενα Βήματα
Requirements
- Εξοικείωση με ροές και έννοιες μηχανικής μάθησης
- Βασική κατανόηση του Apache Airflow, συμπεριλαμβανομένων των DAG και των χειριστών
- Ικανότητα στον προγραμματισμό Python
Ακροατήριο
- Επιστήμονες δεδομένων
- Μηχανικοί μηχανικής εκμάθησης
- Προγραμματιστές AI
Open Training Courses require 5+ participants.
Apache Airflow for Data Science: Automating Machine Learning Pipelines Training Course - Booking
Apache Airflow for Data Science: Automating Machine Learning Pipelines Training Course - Enquiry
Upcoming Courses
Related Courses
AdaBoost Python for Machine Learning
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και μηχανικούς λογισμικού που επιθυμούν να χρησιμοποιήσουν το AdaBoost για να δημιουργήσουν αλγόριθμους ενίσχυσης για μηχανική μάθηση με το Python.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το απαραίτητο περιβάλλον ανάπτυξης για να ξεκινήσετε τη δημιουργία μοντέλων μηχανικής εκμάθησης με το AdaBoost.
- Κατανοήστε την προσέγγιση εκμάθησης συνόλου και πώς να εφαρμόσετε την προσαρμοστική ενίσχυση.
- Μάθετε πώς να δημιουργείτε AdaBoost μοντέλα για την ενίσχυση των αλγορίθμων μηχανικής εκμάθησης στο Python.
- Χρησιμοποιήστε συντονισμό υπερπαραμέτρων για να αυξήσετε την ακρίβεια και την απόδοση των μοντέλων AdaBoost.
Anaconda Ecosystem for Data Scientists
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων που επιθυμούν να χρησιμοποιήσουν το οικοσύστημα Anaconda για να συλλάβουν, να διαχειριστούν και να αναπτύξουν πακέτα και ροές εργασίας ανάλυσης δεδομένων σε μια ενιαία πλατφόρμα.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Εγκαταστήστε και διαμορφώστε στοιχεία και βιβλιοθήκες Anaconda.
- Κατανοήστε τις βασικές έννοιες, τα χαρακτηριστικά και τα οφέλη του Anaconda.
- Διαχειριστείτε πακέτα, περιβάλλοντα και κανάλια χρησιμοποιώντας το Anaconda Navigator.
- Χρησιμοποιήστε πακέτα Conda, R και Python για επιστήμη δεδομένων και μηχανική εκμάθηση.
- Γνωρίστε ορισμένες περιπτώσεις πρακτικής χρήσης και τεχνικές για τη διαχείριση πολλαπλών περιβαλλόντων δεδομένων.
AutoML with Auto-Keras
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων καθώς και σε λιγότερο τεχνικά άτομα που επιθυμούν να χρησιμοποιήσουν το Auto-Keras για να αυτοματοποιήσουν τη διαδικασία επιλογής και βελτιστοποίησης ενός μοντέλου μηχανικής εκμάθησης.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Αυτοματοποιήστε τη διαδικασία εκπαίδευσης μοντέλων μηχανικής μάθησης υψηλής απόδοσης.
- Αυτόματη αναζήτηση για τις καλύτερες παραμέτρους για μοντέλα βαθιάς εκμάθησης.
- Δημιουργήστε μοντέλα μηχανικής εκμάθησης υψηλής ακρίβειας.
- Χρησιμοποιήστε τη δύναμη της μηχανικής μάθησης για να λύσετε επιχειρηματικά προβλήματα στον πραγματικό κόσμο.
AutoML
14 HoursΑυτή η ζωντανή εκπαίδευση από εκπαιδευτές στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε τεχνικά άτομα με υπόβαθρο στη μηχανική εκμάθηση που επιθυμούν να βελτιστοποιήσουν τα μοντέλα μηχανικής εκμάθησης που χρησιμοποιούνται για την ανίχνευση πολύπλοκων προτύπων σε μεγάλα δεδομένα.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Εγκαταστήστε και αξιολογήστε διάφορα εργαλεία ανοιχτού κώδικα AutoML (H2O AutoML, auto-sklearn, TPOT, TensorFlow, PyTorch, Auto-Keras, TPOT, Auto-WEKA, κ.λπ.)
- Εκπαιδεύστε μοντέλα μηχανικής εκμάθησης υψηλής ποιότητας.
- Επιλύστε αποτελεσματικά διαφορετικούς τύπους εποπτευόμενων προβλημάτων μηχανικής εκμάθησης.
- Γράψτε μόνο τον απαραίτητο κώδικα για να ξεκινήσει η διαδικασία αυτοματοποιημένης μηχανικής εκμάθησης.
Creating Custom Chatbots with Google AutoML
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε συμμετέχοντες με διαφορετικά επίπεδα τεχνογνωσίας που επιθυμούν να αξιοποιήσουν την πλατφόρμα Google AutoML για να δημιουργήσουν προσαρμοσμένα chatbots για διάφορες εφαρμογές.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Κατανοήστε τις βασικές αρχές της ανάπτυξης chatbot.
- Πλοηγηθείτε στο Google Cloud Platform και αποκτήστε πρόσβαση στο AutoML.
- Προετοιμάστε δεδομένα για εκπαίδευση μοντέλων chatbot.
- Εκπαιδεύστε και αξιολογήστε προσαρμοσμένα μοντέλα chatbot χρησιμοποιώντας το AutoML.
- Αναπτύξτε και ενσωματώστε chatbots σε διάφορες πλατφόρμες και κανάλια.
- Παρακολουθήστε και βελτιστοποιήστε την απόδοση του chatbot με την πάροδο του χρόνου.
DataRobot
7 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και αναλυτές δεδομένων που επιθυμούν να αυτοματοποιήσουν, να αξιολογήσουν και να διαχειριστούν προγνωστικά μοντέλα χρησιμοποιώντας τις δυνατότητες μηχανικής εκμάθησης του DataRobot.
Μέχρι το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Φορτώστε σύνολα δεδομένων στο DataRobot για ανάλυση, αξιολόγηση και έλεγχο ποιότητας δεδομένων.
- Δημιουργήστε και εκπαιδεύστε μοντέλα για τον εντοπισμό σημαντικών μεταβλητών και την επίτευξη στόχων πρόβλεψης.
- Ερμηνεύστε μοντέλα για να δημιουργήσετε πολύτιμες γνώσεις που είναι χρήσιμες στη λήψη επιχειρηματικών αποφάσεων.
- Παρακολουθήστε και διαχειριστείτε μοντέλα για να διατηρήσετε μια βελτιστοποιημένη απόδοση πρόβλεψης.
Data Mining with Weka
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε αρχάριους έως μεσαίου επιπέδου αναλυτές δεδομένων και επιστήμονες δεδομένων που επιθυμούν να χρησιμοποιήσουν το Weka για την εκτέλεση εργασιών εξόρυξης δεδομένων.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Εγκαταστήστε και διαμορφώστε το Weka.
- Κατανοήστε το περιβάλλον Weka και τον πάγκο εργασίας.
- Εκτελέστε εργασίες εξόρυξης δεδομένων χρησιμοποιώντας το Weka.
Google Cloud AutoML
7 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων, αναλυτές δεδομένων και προγραμματιστές που επιθυμούν να εξερευνήσουν AutoML προϊόντα και δυνατότητες για να δημιουργήσουν και να αναπτύξουν προσαρμοσμένα μοντέλα εκπαίδευσης ML με ελάχιστη προσπάθεια.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Εξερευνήστε τη σειρά προϊόντων AutoML για να εφαρμόσετε διαφορετικές υπηρεσίες για διάφορους τύπους δεδομένων.
- Προετοιμάστε και επισημάνετε σύνολα δεδομένων για τη δημιουργία προσαρμοσμένων μοντέλων ML.
- Εκπαιδεύστε και διαχειριστείτε μοντέλα για την παραγωγή ακριβών και δίκαιων μοντέλων μηχανικής μάθησης.
- Κάντε προβλέψεις χρησιμοποιώντας εκπαιδευμένα μοντέλα για την κάλυψη των επιχειρηματικών στόχων και αναγκών.
Kaggle
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και προγραμματιστές που επιθυμούν να μάθουν και να χτίσουν τη σταδιοδρομία τους στο Data Science χρησιμοποιώντας το Kaggle.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Μάθετε για την επιστήμη των δεδομένων και τη μηχανική μάθηση.
- Εξερευνήστε την ανάλυση δεδομένων.
- Μάθετε για το Kaggle και πώς λειτουργεί.
Machine Learning for Mobile Apps using Google’s ML Kit
14 HoursΑυτή η ζωντανή εκπαίδευση μέσω εκπαιδευτών (διαδικτυακή ή επιτόπου) απευθύνεται σε προγραμματιστές που επιθυμούν να χρησιμοποιήσουν το Google ML Kit για να δημιουργήσουν μοντέλα μηχανικής εκμάθησης που είναι βελτιστοποιημένα για επεξεργασία σε κινητές συσκευές.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το απαραίτητο περιβάλλον ανάπτυξης για να ξεκινήσετε την ανάπτυξη λειτουργιών μηχανικής εκμάθησης για εφαρμογές για κινητά.
- Ενσωματώστε νέες τεχνολογίες μηχανικής εκμάθησης σε Android και iOS εφαρμογές χρησιμοποιώντας τα ML Kit API.
- Βελτιώστε και βελτιστοποιήστε τις υπάρχουσες εφαρμογές χρησιμοποιώντας το ML Kit SDK για επεξεργασία και ανάπτυξη στη συσκευή.
Accelerating Python Pandas Workflows with Modin
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και προγραμματιστές που επιθυμούν να χρησιμοποιήσουν το Modin για να δημιουργήσουν και να εφαρμόσουν παράλληλους υπολογισμούς με το Pandas για ταχύτερη ανάλυση δεδομένων.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το απαραίτητο περιβάλλον για να ξεκινήσετε την ανάπτυξη Pandas ροών εργασίας σε κλίμακα με Modin.
- Κατανοήστε τα χαρακτηριστικά, την αρχιτεκτονική και τα πλεονεκτήματα του Modin.
- Γνωρίστε τις διαφορές μεταξύ Modin, Dask και Ray.
- Εκτελέστε τις λειτουργίες Pandas πιο γρήγορα με το Modin.
- Εφαρμόστε ολόκληρο το Pandas API και τις λειτουργίες.
Machine Learning with Random Forest
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και μηχανικούς λογισμικού που επιθυμούν να χρησιμοποιήσουν το Random Forest για τη δημιουργία αλγορίθμων μηχανικής εκμάθησης για μεγάλα σύνολα δεδομένων.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το απαραίτητο περιβάλλον ανάπτυξης για να ξεκινήσετε τη δημιουργία μοντέλων μηχανικής εκμάθησης με το Random Forest.
- Κατανοήστε τα πλεονεκτήματα του Random Forest και πώς να το εφαρμόσετε για την επίλυση προβλημάτων ταξινόμησης και παλινδρόμησης.
- Μάθετε πώς να χειρίζεστε μεγάλα σύνολα δεδομένων και να ερμηνεύετε πολλαπλά δέντρα αποφάσεων στο Random Forest.
- Αξιολογήστε και βελτιστοποιήστε την απόδοση του μοντέλου μηχανικής εκμάθησης ρυθμίζοντας τις υπερπαραμέτρους.
Advanced Analytics with RapidMiner
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακή ή επιτόπου) απευθύνεται σε αναλυτές δεδομένων μεσαίου επιπέδου που επιθυμούν να μάθουν πώς να χρησιμοποιούν το RapidMiner για την εκτίμηση και την προβολή τιμών και τη χρήση αναλυτικών εργαλείων για την πρόβλεψη χρονοσειρών.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Μάθετε να εφαρμόζετε τη μεθοδολογία CRISP-DM, επιλέξτε κατάλληλους αλγόριθμους μηχανικής εκμάθησης και βελτιώστε την κατασκευή και την απόδοση του μοντέλου.
- Χρησιμοποιήστε το RapidMiner για να εκτιμήσετε και να προβάλετε τιμές και να χρησιμοποιήσετε αναλυτικά εργαλεία για την πρόβλεψη χρονοσειρών.
RapidMiner for Machine Learning and Predictive Analytics
14 HoursΤο RapidMiner είναι μια πλατφόρμα λογισμικού επιστήμης δεδομένων ανοιχτού κώδικα για γρήγορη δημιουργία πρωτοτύπων και ανάπτυξη εφαρμογών. Περιλαμβάνει ένα ενσωματωμένο περιβάλλον για προετοιμασία δεδομένων, μηχανική μάθηση, βαθιά μάθηση, εξόρυξη κειμένου και προγνωστική ανάλυση.
Σε αυτήν τη ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών, οι συμμετέχοντες θα μάθουν πώς να χρησιμοποιούν το RapidMiner Studio για προετοιμασία δεδομένων, μηχανική εκμάθηση και ανάπτυξη προγνωστικών μοντέλων.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Εγκατάσταση και διαμόρφωση RapidMiner
- Προετοιμασία και οπτικοποίηση δεδομένων με RapidMiner
- Επικύρωση μοντέλων μηχανικής μάθησης
- Συνδυάστε δεδομένα και δημιουργήστε προγνωστικά μοντέλα
- Λειτουργία προγνωστικών αναλυτικών στοιχείων σε μια επιχειρηματική διαδικασία
- Αντιμετώπιση προβλημάτων και βελτιστοποίηση RapidMiner
Ακροατήριο
- Επιστήμονες δεδομένων
- Μηχανικοί
- προγραμματιστές
Μορφή του μαθήματος
- Μέρος διάλεξη, μέρος συζήτηση, ασκήσεις και βαριά πρακτική εξάσκηση
Σημείωμα
- Για να ζητήσετε μια εξατομικευμένη εκπαίδευση για αυτό το μάθημα, επικοινωνήστε μαζί μας για να κανονίσουμε.
GPU Data Science with NVIDIA RAPIDS
14 HoursΑυτή η ζωντανή εκπαίδευση υπό την καθοδήγηση εκπαιδευτών στο Ελλάδα (διαδικτυακό ή επιτόπου) απευθύνεται σε επιστήμονες δεδομένων και προγραμματιστές που επιθυμούν να χρησιμοποιήσουν το RAPIDS για να δημιουργήσουν επιταχυνόμενες αγωγούς δεδομένων, ροές εργασίας και οπτικοποιήσεις, εφαρμόζοντας αλγόριθμους μηχανικής μάθησης, όπως XGBoost, cuML κ.λπ.
Με το τέλος αυτής της εκπαίδευσης, οι συμμετέχοντες θα είναι σε θέση:
- Ρυθμίστε το απαραίτητο περιβάλλον ανάπτυξης για τη δημιουργία μοντέλων δεδομένων με τη NVIDIA RAPIDS.
- Κατανοήστε τα χαρακτηριστικά, τα στοιχεία και τα πλεονεκτήματα του RAPIDS.
- Αξιοποιήστε GPU για να επιταχύνετε αγωγούς δεδομένων και αναλυτικών στοιχείων από άκρο σε άκρο.
- Εφαρμόστε GPU-επιταχυνόμενη προετοιμασία δεδομένων και ETL με cuDF και Apache Arrow.
- Μάθετε πώς να εκτελείτε εργασίες μηχανικής εκμάθησης με αλγόριθμους XGBoost και cuML.
- Δημιουργήστε οπτικοποιήσεις δεδομένων και εκτελέστε ανάλυση γραφημάτων με το cuXfilter και το cuGraph.