Dublowany katalog Dremio

Mirrorowany katalog Dremio w Fabric integruje dane zarządzane przez Dremio z resztą danych w Fabric. Możesz ciągle replikować katalog Dremio bezpośrednio do OneLake platformy Fabric.

Aby zapoznać się z samouczkiem dotyczącym konfigurowania środowiska Dremio na potrzeby dublowania katalogu Dremio w Fabric, zobacz Tutorial: Konfigurowanie dublowanego katalogu Dremio.

Ważna

Ta funkcja jest dostępna w wersji zapoznawczej.

Podczas dublowania katalogu Dremio nie ma przenoszenia danych ani replikacji danych. Tylko struktura katalogu Dremio jest odwzorowana w Fabric, a bazowe dane katalogu są dostępne za pomocą skrótów. Zmiany w danych źródłowych mogą nie pojawiać się natychmiast w Fabric. Propagacja może potrwać od kilku sekund do kilku minut, zgodnie z opisem w dokumentacji wydajności punktu końcowego analizy SQL.

Jakie rozwiązania analityczne są wbudowane

Katalogi lustrzane to elementy w Fabric, które są odrębne od innych elementów, takich jak Lakehouses i punkty końcowe do analizy SQL.

Podczas odzwierciedlania katalogu Dremio, Fabric tworzy następujące elementy:

Dostęp do zduplikowanych danych katalogu Dremio można uzyskać na wiele sposobów:

  • Użyj poleceń języka T-SQL, aby zdefiniować i wysyłać zapytania o obiekty danych z punktu końcowego analizy SQL tylko do odczytu. Każdy dublowany element wykazu Dremio ma automatycznie wygenerowany punkt końcowy analizy SQL, który zapewnia zaawansowane środowisko analityczne utworzone przez proces dublowania.
  • Użyj Power BI z trybem Direct Lake, aby utworzyć raporty względem dublowanego elementu wykazu Dremio.
  • Użyj innych obciążeń Fabric do wykonywania zapytań dotyczących tabel w zmirorowanym elemencie katalogu Dremio.

Tabele lustrzane są dostępne do odpytania w ciągu kilku sekund po wybraniu, a kompleksowa propagacja metadanych zwykle trwa od kilku sekund do kilku minut.

Łączenie i uwierzytelnianie

Funkcja mirroringu łączy się z punktem końcowym Dremio Iceberg REST Catalog. Obsługiwane są następujące metody uwierzytelniania:

  • Udostępnianie poświadczeń – Dremio zapewnia krótkotrwałe poświadczenia do uzyskiwania dostępu do danych bazowej tabeli Iceberg.
  • Osobisty token dostępu ( PAT) — uwierzytelnianie przy użyciu osobistego tokenu dostępu wystawionego przez platformę Dremio.

Aby uzyskać szczegółowe instrukcje dotyczące konfigurowania połączenia i uwierzytelniania, zobacz Samouczek: konfigurowanie dublowanego katalogu Dremio.

Synchronizacja metadanych

Podczas tworzenia nowego dublowanego katalogu Dremio w Fabric opcja Automatycznie synchronizuj przyszłe tabele jest domyślnie włączona. Następujące zmiany metadanych są odzwierciedlane ze środowiska Dremio do Fabric, jeśli włączono automatyczną synchronizację:

  • Dodawanie przestrzeni nazw do katalogu
  • Usuwanie przestrzeni nazw z katalogu
  • Dodawanie tabel do przestrzeni nazw
  • Usuwanie tabel z przestrzeni nazw
  • Po włączeniu opcji Automatycznie synchronizuj przyszłe tabele nowo utworzone tabele Iceberg w wybranych przestrzeniach nazw są automatycznie uwzględniane w usłudze Fabric bez konieczności ręcznego odświeżania.
  • Zmiany schematu i danych w istniejących tabelach są zgodne z normalnymi interwałami propagacji.

Wybór schematu/tabeli:

  • Użytkownik może wybrać, które przestrzenie nazw powinny być dołączone jako schematy, i mogą wykluczyć niektóre tabele.
  • Usunięcie zaznaczenia przestrzeni nazw usuwa zaznaczenie wszystkich tabel w przestrzeni nazw.
  • Jeśli użytkownik wróci i wybierze przestrzeń nazw, wszystkie tabele w przestrzeni nazw zostaną ponownie wybrane.