Partitionnement Athena : diviser les coûts par 10 (partitions S3)
Sur Athena, il y a deux façons de payer moins, lire moins de colonnes et lire moins de lignes. On...
Idriss BENBASSOU
Athena : CSV vs Parquet, diviser la donnée scannée
Lors de notre première requête sur Athena, on a pris le réflexe de lire la donnée scannée, et on a...
Amazon Athena : requêter son data lake S3 en SQL
On a précédemment structurer le lake et alimenter le data catalogue. Il est maintenant temps de requêter. Avec Athena, le...
Glue Data Catalog et crawler : rendre son data lake S3 requêtable
On a structuré le lake en zones. Mais pour AWS, commandes.csv reste un fichier d'octets. Impossible de...
Data lake S3 : organiser les zones raw, clean, curated (+ versioning et lifecycle)
Dans la collecte des données, on a fait atterrir le dataset e-commerce dans le bucket 's3://ibdata-datalake-...
Collecte de données sur AWS : envoyer des fichiers dans S3 (console, CLI, boto3)
Le compte est prêt, et la CLI est installée. On attaque maintenant la première étape d'un projet data...