Delta Lake avec Apache Spark
Il existe différent format de fichier pour stocker la donnée : parquet, avro, csv. Connaissez-vous le format Delta Lake ? Découvrons les fonctionnalités de ce format.
Tous nos articles sur les dernières tendances en architecture et DevOps
Tester son script Apache Spark avec pytest
Dans le domaine de la data, la qualité de la donnée est primordiale. Pour s'en assurer, plusieurs moyens existent, et nous allons nous attarder dans cet article sur l'un d'entre eux : tester unitairement avec Pytest.
Démarrer avec Apache Spark étape par étape
Le domaine de la data est présent dans le quotidien de chacun : la majorité de nos actions peut être traduite en données. Le volume croissant de ces données exploitables a un nom : "Big Data". Dans cet article, nous verrons comment exploiter ce "Big data" à l'aide du framework Apache Spark.
Gestion de ressources externes et platform engineering depuis un cluster Kubernetes avec Crossplane
Découvrez Crossplane, un outil open-source qui étend Kubernetes avec des concepts de platform engineering et permet de gérer le cycle de vie de vos ressources cloud dans une boucle de réconciliation.
Construction d'une plateforme Data, retour d'expérience (REX)
Les besoins en analyse de données sont grandissants. Avec quelques outils, il est possible de faire des extractions, de la transformation et de la visualisation très rapidement. Cependant, pour assurer la pérénnité et l'évolutivité de ces analyses, il est nécessaire de monter une plateforme dédiée et d'industrialiser les différents processus. C'est le sujet de cet article.
Comment implémenter une Event Driven Architecture ? Définition et exemples
Pourquoi, quand et comment mettre en place une event driven architecture ? Exemples et conseils
Comprendre et Personnaliser son environnement Docker
Comprendre comment fonctionne Docker et être capable de créer son environnement sur mesure
Comment créer de la dette technique dès le début d’un nouveau projet ?
Quand on arrive sur un projet existant, on doit souvent subir une dette technique qui nous fait perdre du temps et qui nous rend fou au point de vérifier qui a fait le code. Vous aussi vous voulez entrer dans la postérité lors d’un git blame et mal concevoir votre produit ?
Archi - L’outil de modélisation qui vous veut du bien
Quand il s’agit de faire des schémas d’architectures en projection ou en documentation, il y a pléthore d’outils disponibles, que ce soit en client lourd, web, SaaS… Et avec eux, une multitude de “templates”, presque propres à chaque outil, avec des problématiques de passage à l’échelle dès que l’on commence à avoir plusieurs contributeurs sur ces documents.
Mon top 5 des PIRES erreurs sous Symfony
La numéro 2 va vous surprendre 😱
Organiser son pipeline Gitlab CI avec les templates
Lorsqu'il y a plusieurs services à maintenir et à déployer, le code des pipelines des différents services est très souvent copié-collé. Nous verrons dans cet article comment mutualiser le code !
Introduction à Microsoft Azure
Si vous avez lu Microsoft et que vous n’avez pas fui, bienvenue sur cette introduction à la solution de Cloud Microsoft.
Quelle est la chose la plus importante que le DevOps nous aide à réaliser ?
La chose la plus importante que le DevOps nous aide à réaliser est la collaboration et l'intégration continue entre les équipes de développement et d'exploitation. En favorisant une culture de la collaboration et en automatisant les processus, le DevOps permet d'éliminer les silos organisationnels, d'accélérer le déploiement des applications et d'améliorer la réactivité aux changements. En fin de compte, il contribue à créer un environnement où le développement et l'exploitation travaillent de concert, facilitant ainsi une livraison plus rapide, plus fiable et plus efficace des logiciels, tout en favorisant l'innovation continue et l'optimisation des performances.
Découvrir notre expertise DevOps