Optimiser les coûts de stockage Big Data avec le Sliding Window
Le choix du moyen de stockage de données peut être décisif sur les performances d’une application. Entre HDFS, Apache Kudu et Amazon S3, les avantages varient et les inconvénients aussi.
Comment migrer vers le Cloud AWS des clusters Hadoop en 5 étapes
Migrer une infrastructure composée de plusieurs dizaines de serveurs vers des environnements cloud comme ceux proposés par AWS implique de se fixer des objectifs clairs, de recenser précisément l’infrastructure existante et de concevoir une méthodologie pour mettre en place un processus de migration efficace.
Architecture Lambda, Kappa ou Datalake : comment les exploiter ?
Aucune technologie ne permettant de résoudre seule des problématiques complexes liées à l’exploitation des données, trois types d’architectures Big Data ont été pensées pour y répondre. Celles-ci touchent à la transformation rapide des données stockées, au traitement des données et à la configuration de vues complètes des données traitées. Nos explications sur l’architecture Lambda, l’architecture Kappa et le Datalake dans cet article.
Conteneurisation et Virtualisation : où se situe le point de bascule ?
Bien que la virtualisation reste encore la technologie la plus en vue sur le marché du Cloud, la conteneurisation répond elle aussi à des besoins d’hébergement d’applications métiers, web et mobile. L’adoption de ces solutions semble être d’ailleurs partagée auprès des DSI d’entreprises.
Mais alors dans quel cas le choix d’une solution est-il fait au dépend de l’autre ? Rentrent-elles vraiment en concurrence ? « Oui et Non ». Nous vous éclairons ici sur cette bonne réponse de normand qui ne semble pas être si loin de la vérité… 🙂
L’industrialisation du cloud au service de l’architecture Big Data
A l’air du Big Data et de la Fast Data, les enjeux de rapidité et d’efficacité sont majeurs. Le cloud ayant pris place dans les infrastructures IT, il est difficile de ne pas être tenté d’associer les deux.
Hadoop et Ansible – épisode 3 : Hive/Impala
A l’ère du tout automatique, penchons-nous sur une méthode qui fait ses preuves chez nos clients : incorporer Ansible dans les déploiements Big Data. Pour clore cette série d’articles, nous allons voir comment gérer automatiquement les structures des tables Impala et Hive avec Ansible. Episode 3 – Impala / Hive Dans certains projets clients on …
Continuer la lecture de « Hadoop et Ansible – épisode 3 : Hive/Impala »
Temps réel ou streaming de données : préparation et optimisation
Derrière le buzz word “IOT” (Internet Of Things) se trouve la notion de temps réel. Celle-ci permet par exemple de récupérer des données de téléphones, de géolocalisation (etc.) en continu et de les stocker dans un Datalake à des fins d’analyse. Ces systèmes sont de plus en plus utilisés pour gérer les événements des différents systèmes …
Continuer la lecture de « Temps réel ou streaming de données : préparation et optimisation »
Hadoop et Ansible – épisode 2 : Module Ansible HDFS
A l’air du tout automatique, penchons-nous sur une méthode qui fait ses preuves chez nos clients : incorporer Ansible dans les déploiements Big Data. Pour cette série d’articles nous allons voir comment nous automatisons nos déploiements Big Data avec Ansible. Episode 2 : Module Ansible HDFS Contexte Précédemment nous vous parlions d’une méthode que nous avons …
Continuer la lecture de « Hadoop et Ansible – épisode 2 : Module Ansible HDFS »
Conteneurs et automatisation, rassembler pour mieux régner
Les conteneurs sont devenus en quelques années, un enjeu de taille ! A droite, à gauche, il y en a partout. Mais comment s’y retrouver ? Continuons de creuser l’automatisation (des conteneurs) avec différents articles qui ont retenu notre attention en Mai. “One product to rule them all” Distelli est un ensemble de 4 produits …
Continuer la lecture de « Conteneurs et automatisation, rassembler pour mieux régner »
Hadoop et Ansible – épisode 1 : HDFS
A l’air du tout automatique, penchons-nous sur une méthode qui fait ses preuves chez nos clients : incorporer Ansible dans les déploiements Big Data. Pour cette série d’articles nous allons voir comment nous automatisons nos déploiements Big Data avec Ansible. Episode 1 : HDFS Contexte Nous intervenons la majeure partie du temps sur des environnements sécurisés …
Continuer la lecture de « Hadoop et Ansible – épisode 1 : HDFS »
Page Linkedin Cyrès
[ARTICLE 💬]
Comment optimiser les coûts de stockage Big Data avec le Sliding Window ?
👉 https://t.co/WTehl8L6UJ
#slidingwindow #bigdata #kudu #hdfs #S3
[Article] L’approche DevOps, bien plus qu’un retour de hype* 🚀
https://t.co/vQDZbYXRDt
#devops #devsecops #containers https://t.co/JpNHK2kIzk
