If you manage a data and analytics pipeline in Google Cloud, you may want to monitor it and obtain a comprehensive view of the end-to-end analytics process in order to react quickly when something breaks. This article shows you how you can capture Cloud Dataprep jobs status via APIs leveraging Cloud Functions. We then input […]
More Victor Coustenoble • July 28, 2020 With a better mastery of Cloud Functions, you can trigger a Dataprep job via API when a file lands in a Cloud Storage bucket Ever dreamt about automating your entire data pipeline to load your data warehouse? Without automation each user needs to manually upload its data, then manually start a transformation job or wait […]
More Victor Coustenoble • May 26, 2020 Dans mon article précédent j’expliquais ce qu’est le Data Wrangling, on peut alors maintenant se demander comment choisir une solution de Data Wrangling ou de Préparation de données ? Premièrement, depuis maintenant plus de 4 ans les analystes ont reconnu le besoin et un marché à part entière pour les solutions de préparation de données. […]
More Victor Coustenoble • May 7, 2018 Après mes voeux et quelques idées pour 2018 inspirés par le CEO de Trifacta, rentrons maintenant dans le vif du sujet et répondons à la question “Qu’est ce que le Data Wrangling ?”. Des données brutes à l’analyse : Le Data Wrangling, aussi appelé Préparation de Données en Self-Service, est le processus qui permet à […]
More Victor Coustenoble • February 26, 2018