Azure Databricks

Résumé

Property	Valeur
Connecteur	Azure Databricks
Produits	Power BI (modèles sémantiques) Power Query Online
État de mise en production	Disponibilité générale
Category	Database
Types d’authentification	Azure Active Directory Informations d’identification du client Databricks Jeton d’accès personnel
Authentification spécifique au produit	principal de service (Power BI / Fabric) Identité de l’espace de travail (Power BI/Fabric)
Type de source de données	Databricks
Documentation de référence sur les fonctions	Databricks.Catalogs Databricks.Contents Databricks.Query

Prerequisites

Pour les réseaux privés, vous devez implémenter les paramètres réseau suivants :

• *.blob.core.windows.net* et *.store.core.windows.net doivent être ouverts dans votre environnement réseau.
• Cette liste de téléchargements et de révocations de certificats doit également être ajoutée à votre liste d'autorisation.
• Si la prise en charge du pare-feu est activée sur votre compte de stockage d’espace de travail Databricks, vous devez configurer une passerelle de données de réseau virtuel ou une passerelle de données locale pour autoriser l’accès privé au compte de stockage. Cela garantit que l’service Power BI Fabric peut continuer à accéder au compte de stockage de l’espace de travail et que CloudFetch continue de fonctionner correctement. Vous pouvez également désactiver CloudFetch avec la configuration EnableQueryResultDownload=0.

Fonctionnalités prises en charge

• Importer
• DirectQuery (modèles sémantiques Power BI)

Parameters

Point d’entrée :Databricks.Catalogs

Nombre de paramètres requis : 2

Champs dans options

Se connecter à partir de Power Query Desktop

AWS, Azure ou GCP

Pour vous connecter à Databricks à partir de Power Query Desktop, procédez comme suit :

1. Dans l’expérience Obtenir des données, recherchez Databricks pour sélectionner le connecteur Databricks, Azure Databricks. Utilisez le connecteur Azure Databricks pour toutes les données Databricks SQL Warehouse, sauf indication contraire de votre représentant Databricks.

   

2. Fournissez le nom d’hôte du serveur et le chemin HTTP pour votre Databricks SQL Warehouse. Reportez-vous à Configurer les pilotes ODBC et JDBC Databricks pour obtenir des instructions pour rechercher votre « nom d’hôte serveur » et votre « chemin HTTP ». Entrez ces informations en conséquence. Vous pouvez éventuellement fournir un catalogue et/ou une base de données par défaut sous options avancées. Sélectionnez OK pour continuer.

   

3. Fournissez vos informations d’identification pour vous authentifier auprès de votre Databricks SQL Warehouse. Il existe trois options pour les informations d’identification :

   • Informations d’identification du client Databricks. Reportez-vous à Databricks OAuth M2M pour obtenir des instructions sur la génération des informations d’identification du client Databricks OAuth M2M.

   • Jeton d’accès personnel (utilisable pour AWS, Azure ou GCP). Pour obtenir des instructions sur la génération d’un jeton d’accès personnel (PAT), consultez jetons d’accès personnels.

   • Azure Active Directory (utilisable uniquement pour Azure). Connectez-vous à votre compte professionnel à l’aide de la fenêtre contextuelle du navigateur.

     

   Remarque

   Une fois que vous avez entré vos informations d’identification pour un Databricks SQL Warehouse particulier, Power BI Desktop met en cache et réutilise ces mêmes informations d’identification lors des tentatives de connexion suivantes. Pour modifier ces informations d’identification, accédez à Fichier > Options et paramètres > Paramètres de la source de données. Informations supplémentaires : Modifier la méthode d’authentification

4. Une fois que vous vous connectez, le navigateur affiche les données disponibles sur le cluster. Vous pouvez choisir Transform Data pour transformer les données à l’aide de Power Query ou Load pour charger les données dans Power Query Desktop.

   

Se connecter à partir de Power Query Online

Pour vous connecter à Databricks à partir de Power Query Online, procédez comme suit :

1. Sélectionnez l’option Azure Databricks dans l’expérience obtenir des données. Différentes applications ont différentes manières d'accéder à l'expérience d'acquisition de données dans Power Query Online. Pour plus d’informations sur la façon d’accéder à l'expérience de collecte de données de Power Query Online depuis votre application, rendez-vous à Où obtenir des données.

   Sélectionnez les connecteurs Databricks disponibles à l'aide du champ de recherche. Utilisez le connecteur Azure Databricks pour toutes les données Databricks SQL Warehouse, sauf indication contraire de votre représentant Databricks.

   

2. Entrez le nom d’hôte Server et le chemin HTTP pour votre Databricks SQL Warehouse. Reportez-vous à Configurer les pilotes ODBC et JDBC Databricks pour obtenir des instructions pour rechercher votre « nom d’hôte serveur » et votre « chemin HTTP ». Vous pouvez éventuellement fournir un catalogue et/ou une base de données par défaut sous options avancées.

   

3. Fournissez vos informations d’identification pour vous authentifier auprès de votre Databricks SQL Warehouse. Il existe quatre options pour les informations d’identification :

   • Informations d’identification du client Databricks. Pour obtenir des instructions sur la génération des informations d’identification du client Databricks OAuth M2M, consultez Databricks OAuth M2M.
   • Jeton d’accès personnel (utilisable pour AWS, Azure ou GCP). Reportez-vous à jetons d’accès personnels pour obtenir des instructions sur la génération d’un jeton d’accès personnel (PAT).
   • Azure Active Directory (utilisable uniquement pour Azure). Connectez-vous à votre compte professionnel à l’aide de la fenêtre contextuelle du navigateur.
   • Principal de service (utilisable uniquement pour Azure). Authentifiez-vous auprès d’un principal de service Microsoft Entra ID. Cette option est disponible lors de la configuration d’une connexion cloud ou de passerelle.

4. Une fois que vous vous connectez, le navigateur apparaît et affiche les données disponibles sur le serveur. Sélectionnez vos données dans le navigateur. Sélectionnez ensuite Next pour transformer les données dans Power Query.

   

Informations supplémentaires

Implémentation du connecteur du pilote Arrow de connectivité aux bases de données

Vous pouvez utiliser le pilote Arrow Database Connectivity (ADBC) pour le connecteur Azure Databricks dans Power BI. À mesure que nous continuons à améliorer et à ajouter de nouvelles fonctionnalités à ce connecteur, nous vous recommandons de procéder à une mise à niveau vers la dernière version pour l’essayer et envoyer des commentaires sur le produit.

Pour basculer vers le driver ADBC :

1. Ouvrez votre tableau de bord souhaité dans Power BI.
2. Sélectionnez Transformer les données.
3. Sélectionnez Éditeur avancé dans la section de l’option Query.
4. Spécifiez Implementation="2.0" pour ADBC.

   let
       Source = Databricks.Catalogs("adb-<workspace-id>.<random-number>.azuredatabricks.net", "/sql/1.0/warehouses/<sql-warehouse-id>",
           [Catalog=null, Database=null, EnableAutomaticProxyDiscovery=null, Implementation="2.0"]),
       powerbi_Database = Source{[Name="powerbi",Kind="Database"]}[Data],
       default_Schema = powerbi_Database{[Name="default",Kind="Schema"]}[Data],
       dashboard_data_Table = default_Schema{[Name="dashboard_data",Kind="Table"]}[Data]
   in
       dashboard_data_Table
   

Limitations et considérations

• Le connecteur Azure Databricks prend en charge proxy web. Toutefois, les paramètres de proxy automatique définis dans les fichiers .pac ne sont pas pris en charge.
• Dans le connecteur Azure Databricks, la source de données Databricks.Query n'est pas prise en charge avec le mode DirectQuery du modèle sémantique Power BI.