Dev | Blog dcube

HdInsight : lancer des requêtes hive en python

Nicolas Bailly | mai 24, 2019

Nous allons voir dans cet article comment lancer des requêtes Hive en python à l’aide de PyHive.Le langage Hive permet d’effectuer des requêtes sur les données mais n’est pas dynamique. Impossible d’utiliser des variables ou de faire des boucles par exemples. C’est pourquoi, il peut être intéressant d’utiliser un langage dynamique comme Python. La librairie que nous allons utiliser pour effectuer les requêtes est PyHive. Nous allons voir comment...

.Net ASP.NET Dev HTTP

Passer à HTTP/2 pour améliorer les performances d’utilisation d’une API

Eric FAUQUEMBERGUE | juillet 19, 2018

Lorsque l’on développe ou utilise une API, on souhaite que celle-ci puisse être consommée de la manière la plus performante possible; il existe aujourd’hui une mesure technique relativement simple (quand on en remplit les prérequis), qui ne nécessite quasiment aucun développement et n’introduit pas de risque de régression : passer le protocole de communication entre le client et l’API de HTTP 1.1 à HTTP 2.0. Lors d’une de mes interventions chez un client, nous...

.Net Dev Non classé

Faciliter l’écriture de clients HTTP avec Flurl

Eric FAUQUEMBERGUE | juillet 9, 2018

Dans cet article, je souhaite vous faire découvrir Flurl, un petit bijou de librairie .Net qui permet d’écrire de manière très simple et très lisible des clients HTTP dans vos applications. Flurl ? La librairie s’appelle Flurl en référence à Fluent URL. Comme vous allez le voir, sa syntaxe d’utilisation est en mode fluent, ce qui la rend extrêmement lisible. Il s’agit d’un projet open source (source sur GitHub), à la fois stable (le projet a 2 ans), vivant...

.Net Azure BigData Dev

Scale automatique HdInsight

Nicolas Bailly | juin 20, 2018

Avec HdInsight, il est possible de modifier le nombre de worker node depuis le portail azure. Mais une fois que c’est fait, il faut encore modifier les configurations dans Ambari pour que les modifications Hardware soient prises en compte au niveau software. Cela peut s’avérer fastidieux si on le fait souvent, nous allons voir comment automatiser tout ça. I. Mise à l’échelle de HdInsight Grâce au package nuget Microsoft.Azure.Management.HDInsight, nous pouvons...

.Net Dev

Fiabiliser les applications .Net avec l’amie Polly

Eric FAUQUEMBERGUE | août 8, 2017

Polly n’est pas qu’une balade de Nirvana, que les jeunes générations peuvent ne pas connaître mais qui, pour les autres, vous restera maintenant en tête pendant la lecture du reste de cet article. Polly est aussi une librairie Open Source .NET permettant de renforcer considérablement la robustesse de votre application en implémentant assez simplement des politiques de rejeu (retry), de circuit breaker, de gestion des timeouts, d’isolation et de fonctionnement de repli...

Dev GDPR

Les impacts de la GDPR …. pour nous les devs

Eric FAUQUEMBERGUE | juin 13, 2017

Une fois n’est pas coutume, nous n’allons pas parler ici d’un sujet purement technique, mais des impacts pour nos métiers de l’introduction d’une réglementation européenne majeure, la GDPR. La GDPR ? L’acronyme GDPR fait référence à l’ « EU General Data Protection Regulation »; c’est un règlement européen qui vise à protéger les données personnelles des citoyens et résidents de l’Union Européenne (508 millions de personnes … avant le...