Pozyskiwanie danych z usługi Fabric OneLake

Power Automate Process Mining umożliwia przechowywanie i odczytywanie danych dziennika zdarzeń bezpośrednio z Fabric OneLake za pośrednictwem Fabric Lakehouse. Ta funkcja upraszcza zarządzanie wyodrębnianiem, przekształcaniem i ładowaniem (ETL), łącząc się bezpośrednio z usługą OneLake.

Ta funkcja obecnie obsługuje importowanie następujących:

Tabele i widoki

  • Tabele Delta
    • Pojedyncza tabela Delta w usłudze Fabric Lakehouse.
  • zmaterializowane widoki
    • Pojedynczy zmaterializowany widok w magazynie lakehouse usługi Fabric.

Pliki i foldery

  • CSV
    • Jeden plik CSV.
    • Folder z wieloma plikami CSV o tej samej strukturze. Wszystkie pliki zostały zaimportowane.
  • Parquet
    • Pojedynczy plik parquet.
    • Folder z wieloma plikami parquet o tej samej strukturze. Wszystkie pliki zostały zaimportowane.
  • Delta-parquet
    • Folder zawierający strukturę Delta-parquet.

Wymagania wstępne

  • Upewnij się, że opcja Użytkownicy mogą uzyskiwać dostęp do danych przechowywanych w usłudze OneLake za pomocą aplikacji zewnętrznych względem usługi Fabric została włączona w ustawieniach dzierżawcy OneLake.

  • Obszar roboczy Fabric, który różni się od domyślnego Mój obszar roboczy.

  • Rola Admin musi zostać przypisana użytkownikowi, który przeprowadza początkową konfigurację obszaru roboczego w danym środowisku dla pozostałych użytkowników w tym samym środowisku.

  • Przestrzeń robocza Fabric musi zostać udostępniona jednostce usługi produkcyjnej wyników analiz procesu z rolą administratora. Aby zarejestrować nazwę główną usługi Process Insights Prod, wykonaj czynności opisane w sekcji Instalowanie narzędzi platformy Azure.

    Zrzut ekranu ustawień obszaru roboczego Fabric z udostępnianiem jednostki usługi Wyniki analiz procesu.

  • W tym obszarze roboczym należy utworzyć magazyn lakehouse Fabric z danymi w obsługiwanych formatach.

  • Dane CSV w Twoim Lakehouse powinny spełniać następujące wymagania dotyczące formatu plików CSV:

    • Typ kompresji: brak
    • Ogranicznik kolumny: Przecinek (,)
    • Separator wierszy: Domyślny i kodowanie. Na przykład domyślne (\r,\n lub \r\n)

    Zrzut ekranu ustawień formatu pliku.

  • Wszystkie dane muszą mieć format dziennika zdarzeń końcowych i muszą spełniać wymagania określone w wymaganiach dotyczących danych. Dane powinny być gotowe do mapowania na schemat eksploracji procesów. Przekształcenia danych nie są dostępne po ingestii.

  • Rozmiar (szerokość) wiersza nagłówka jest obecnie ograniczony do 1 MB.

Ważne

Upewnijcie się, że znacznik czasu w pliku CSV jest zgodny ze standardowym formatem ISO 8601 (na przykład YYYY-MM-DD HH:MM:SS.sss lub YYYY-MM-DDTHH:MM:SS.sss).

Połącz się z Fabric OneLake

  1. W okienku nawigacji po lewej stronie wybierz pozycję Badanie procesów>Rozpocznij tutaj.

  2. W polu Nazwa procesu wybierz typ procesu i wprowadź nazwę procesu.

  3. W nagłówku Źródło danych wybierz pozycję OneLake>Kontynuuj.

    Zrzut ekranu z kroku „Utwórz nowy proces”.

  4. Wybierz obszar roboczy Power BI lub Fabric albo wybierz Pomiń.

  5. Na ekranie Konfiguracja połączenia wybierz Obszar roboczy Fabric z menu rozwijanego. Spowoduje to wypełnienie menu rozwijanego Magazyn lakehouse. Z menu wybierz magazyn lakehouse zawierający dane, a następnie wybierz przycisk Dalej.

  6. Przejrzyj strukturę folderów typu Magazyn lakehouse i wybierz tabelę delty, plik lub folder zawierający dane dziennika zdarzeń.

    Można wybrać pojedynczą tabelę Delta, pojedynczy plik lub folder z wieloma plikami. Wszystkie pliki muszą mieć te same nagłówki i formaty.

  7. Wybierz Dalej.

  8. Na ekranie Mapowanie danych zamapuj dane na wymagany schemat.

    Zrzut ekranu ekranu „Mapowanie danych”.

  9. Zakończyć połączenie, wybierając przycisk Zapisz i przeanalizuj.

Określ ustawienia odświeżania przyrostowego danych

Proces pozyskany z platformy Fabric OneLake można odświeżać według harmonogramu, stosując odświeżanie pełne lub przyrostowe. Chociaż nie ma zasad retencji, możesz pozyskiwać dane przyrostowo, używając jednej z poniższych metod:

Jeśli w poprzedniej sekcji wybrano pojedynczą tabelę Delta, dołącz do niej więcej danych.

Jeśli w poprzedniej sekcji wybrałeś pojedynczy plik, dołącz więcej danych do wybranego pliku.

Jeśli w poprzedniej sekcji wybrałeś folder, dodaj pliki przyrostowe do wybranego folderu.

Ważne

Podczas dodawania plików przyrostowych do wybranego folderu lub podfolderu należy upewnić się, że kolejność przyrostów jest oznaczona przez nadanie plikom nazw takich jak YYYMMDD.csv lub YYYYMMDDHHMMSS.csv.

Aby odświeżyć proces:

  1. Przejdź do strony Szczegóły procesu.

  2. Wybierz Ustawienia odświeżania.

  3. Na ekranie Zaplanuj odświeżanie wykonaj następujące kroki:

    1. Włącz przełącznik Zachowuj dane na bieżąco.
    2. Z listy rozwijanej Odśwież dane co wybierz częstotliwość odświeżania.
    3. W polach Rozpocznij od wybierz datę i godzinę rozpoczęcia odświeżania.
    4. Włącz przełącznik Odświeżanie przyrostowe.