Prediction Framework, un gain de temps pour les projets Data Science de prédiction
ven, 07/01/2022 - 12:58
Prediction Framework est un pipeline entièrement personnalisable qui vous permet de simplifier la mise en œuvre de projets de prédiction. Vous n'avez besoin que de la source de données d'entrée, de la logique pour extraire et traiter les données et d'un modèle Vertex AutoML prêt à l'emploi avec la bonne liste de fonctionnalités, et le framework sera chargé de créer et de déployer les artefacts requis. Avec une configuration simple, tous les artefacts communs des différentes étapes de ce type de projets seront créés et déployés pour vous : extraction de données, préparation des données (feature engineering), filtrage, prédiction et post-traitement, en plus de quelques autres fonctionnalités opérationnelles, y compris le remplissage, la limitation (pour les limites de l'API), la synchronisation, le stockage et la création de rapports.
Le framework de prédiction a été conçu pour être hébergé dans la plate-forme Google Cloud et il utilise Cloud Functions pour effectuer tout le traitement des données (extraction, préparation, filtrage et traitement post-prédiction), ainsi queFirestore, Pub/Sub et les planificateurs pour le système de limitation. Enfin, pour coordonner les différentes phases du processus prédictif, il utilise Vertex AutoML pour héberger votre modèle de machine learning et BigQuery comme stockage final de vos prédictions.
Architecture de Prediction Framework
Pour et commencer à utiliser Prediction Framework, un fichier de configuration doit être préparé avec quelques variables d'environnement sur le projet Google Cloud à utiliser, les sources de données, le modèle de ML pour faire les prédictions et le planificateur pour le système de limitation. De plus, des requêtes personnalisées pour l'extraction, la préparation, le filtrage et le post-traitement des données doivent être ajoutées dans la personnalisation des fichiers de déploiement . Ensuite, le déploiement se fait automatiquement à l'aide d'un script de déploiement fourni par l'outil.
Prediction Framework est un logiciel libre sous licence Apache 2.0, disponible sur GitHub.
