Déploiement automatisé d’un projet dbt
Nous retrouvons de plus en plus d’architecture Data contenant du dbt. Nous verrons dans cet article comment déployer dbt et l’exécuter dans une Azure Container App par terraform et CI/CD
3. Pipelines de déploiement d’un environnement Databricks (Infra, paramétrage, notebooks,…)
Dans ce 3ème article, nous allons maintenant voir comment déployer Databricks avec des pipelines de déploiement Azure Devops pour l’infrastructure et les notebooks
2. Paramétrage d’un workspace Databricks par Terraform
Databricks nous met à disposition un provider Terraform avec lequel nous pouvons déployer des clusters, des Sql Warehouses, des clusters, … Nous allons voir dans cet article comment utiliser ce provider avec quelques exemples de workload
1. Déploiement d’un Workspace Databricks dans Azure avec Terraform
Découvrez, dans cet article, un exemple de déploiement d’un workspace Databricks en utilisant des scripts Terraform.
Un workspace est déployé sur lequel les flux réseaux sont controlés pour restreindre les accès à un data lake et à un coffre de clé.
Industrialiser ses déploiements API Management
Différents moyens permettent d’industrialiser des services cloud. Cet article compare 3 techniques d’industrialisation du service Azure API Management : une extension Azure DevOps, de l’IAC avec Pulumi et de l’IAC Azure Bicep.
Azure : Déployer à l’échelle dans un réseau privé en maitrisant les coûts
Introduction Pour isoler de l’internet une ressource Azure une des méthodes recommandées est de l’héberger dans un réseau privé virtuel. Dans notre cas, ce sera une App Service. Ce qui nous permettra de la protéger des accès non désirés et de réduire la surface d’attaque. Elle reste cependant accessible aux …
Créer une image Docker pour une connexion ODBC à Databricks
Si vous voulez créer des dashboards en dehors d’un Notebook, dans une Web Application par exemple, vous devrez d’abord permettre la connexion à Databricks en utilisant le driver fournit par l’éditeur. Dans cet article nous allons voir comment créer une image contenant tout ce qu’il faut pour permettre une connexion …
Création d’un service SFTP dans Azure
Si vous avez besoin d’avoir un serveur FTP(ou SFTP) pour transférer des fichiers, il y a plusieurs solutions et vous vous tournerez probablement vers la création d’une VM, ce qui a l’inconvénient du coût de maintenance et d’exploitation de celle-ci.Il n’existe malheureusement pas de service managé prévu à cet effet …