Przykładowy raport trendu podsumowania testów

Azure DevOps Services | Azure DevOps Server | Azure DevOps Server 2022

Raport trendu podsumowania testów można utworzyć, wykonując zapytania dotyczące potoków obejmujących zadania testowe. Na przykład poniższy raport przedstawia liczbę przebiegów testów zakończonych niepowodzeniem w przeliczeniu na kolumnę w ciągu 24 dni, wraz z wykresem liniowym przedstawiającym trend wskaźnika zdawalności testów. Aby uzyskać informacje na temat dodawania testów do potoku, odnieś się do Zasoby zadań testowych w dalszej części tego artykułu.

Zrzut ekranu przedstawiający raport wykresu liniowego skumulowanego trendu podsumowania testu.

Ten artykuł zawiera przykładowe zapytania dotyczące generowania następujących raportów:

  • Trend podsumowania testów dla procesu budowy
  • Trend podsumowania testów dla procesu wydania
  • Trend podsumowania testów dla określonej gałęzi
  • Trend podsumowania testu dla określonego pliku testowego
  • Trend podsumowania testu dla określonego właściciela testu

Uwaga

Przykładowe zapytania w tym artykule wymagają wersji 3.0-preview lub nowszej źródła OData Analytics. Podziel się swoją opinią.

Kategoria Wymagania
poziomy dostępu - Członek projektu.
— Co najmniej dostęp w warstwie podstawowej.
Uprawnienia użytkownika Domyślnie członkowie projektu mają uprawnienia do wykonywania zapytań w usłudze Analytics i tworzenia widoków. Aby uzyskać więcej informacji na temat innych wymagań wstępnych dotyczących włączania usługi i funkcji oraz ogólnych działań śledzenia danych, zobacz Uprawnienia i wymagania wstępne dotyczące dostępu do analizy.

Uwaga

W tym artykule założono, że przeczytasz Przegląd przykładowych raportów przy użyciu zapytań OData i masz podstawową wiedzę na temat Power BI.

Przykładowe zapytania

Użyj następujących zapytań zestawu encji TestRuns, aby utworzyć różne, ale podobne raporty podsumowujące trendy testów potoku. Ten zestaw encji jest dostępny tylko wtedy, gdy uwzględniasz zadania testowe w ramach definicji pipeline'u.

Uwaga

Aby znaleźć dostępne właściwości filtrowania lub raportowania, zobacz dokumentację Metadata dla analizy planów testów i Metadata dla Azure Pipelines. Zapytania lub właściwości zwracane można filtrować przy użyciu dowolnej Property wartości zdefiniowanej pod EntityType, lub dowolnej NavigationPropertyBinding Path wartości wymienionej dla EntitySet. Każda EntitySet mapuje na EntityType, który dokumentuje typ danych dla każdej właściwości.

Trend podsumowania testów dla przepływu kompilacji

Użyj następujących zapytań, aby wyświetlić trend podsumowań testów dla projektu kompilacji.

Skopiuj i wklej następujące zapytanie Power BI bezpośrednio do okna Pobierz dane>Blnk Query. Aby uzyskać więcej informacji, zobacz Omówienie przykładowych raportów przy użyciu zapytań OData.

let
   Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
                &"Pipeline/PipelineName eq '{pipelineName}' "
                &"and CompletedOn/Date ge {startdate} "
                &"and Workflow eq 'Build' "
            &") "
        &"/groupby( "
          &"(CompletedOn/Date), "
          &"aggregate( "
            &"ResultCount with sum as ResultCount, "
            &"ResultPassCount with sum as ResultPassCount, "
            &"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
            &"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
            &"ResultFailCount with sum as ResultFailCount "
         &")) "
       &"/compute( "
       &"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
    ,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4]) 
in
    Source

Trend podsumowania wyników testów dla przepływu pracy wersji

Użyj następujących zapytań, aby wyświetlić trend podsumowania testu potoku zdefiniowanego dla przepływu pracy wydania .

Skopiuj i wklej następujące zapytanie Power BI bezpośrednio do okna Pobierz dane>Blnk Query. Aby uzyskać więcej informacji, zobacz Omówienie przykładowych raportów przy użyciu zapytań OData.

let
   Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
                &"Pipeline/PipelineName eq '{pipelineName}' "
                &"and CompletedOn/Date ge {startdate} "
                &"and Workflow eq 'Release' "
            &") "
        &"/groupby( "
          &"(CompletedOn/Date), "
          &"aggregate( "
            &"ResultCount with sum as ResultCount, "
            &"ResultPassCount with sum as ResultPassCount, "
            &"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
            &"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
            &"ResultFailCount with sum as ResultFailCount "
         &")) "
       &"/compute( "
       &"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
    ,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4]) 
in
    Source

Trend podsumowania testu filtrowany według gałęzi

Aby wyświetlić trend podsumowania testu potoku dla określonej gałęzi, użyj następujących zapytań. Aby utworzyć raport, wykonaj następujące dodatkowe kroki wraz z elementami określonymi w dalszej części tego artykułu.

  • Rozwiń Branch na Branch.BranchName.
  • Wybierz wizualizację fragmentatora Power BI i dodaj pole Branch.BranchName do fragmentatora.
  • Wybierz nazwę gałęzi z fragmentatora, dla którego chcesz wyświetlić podsumowanie wyników.

Aby uzyskać więcej informacji na temat używania fragmentatorów, zobacz Slicers w Power BI.

Skopiuj i wklej następujące zapytanie Power BI bezpośrednio do okna Pobierz dane>Blnk Query. Aby uzyskać więcej informacji, zobacz Omówienie przykładowych raportów przy użyciu zapytań OData.

let
   Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
                &"Pipeline/PipelineName eq '{pipelineName}' "
                &"and CompletedOn/Date ge {startdate} "
                &"and Workflow eq 'Build' "
            &") "
        &"/groupby((Branch/BranchName, CompletedOn/Date), "
          &"aggregate( "
            &"ResultCount with sum as ResultCount, "
            &"ResultPassCount with sum as ResultPassCount, "
            &"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
            &"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
            &"ResultFailCount with sum as ResultFailCount "
         &")) "
       &"/compute( "
       &"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
    ,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4]) 
in
    Source

Trend podsumowania testu filtrowany według pliku testowego

Aby wyświetlić trend podsumowania testu potoku dla określonego pliku testowego, użyj następujących zapytań. Aby utworzyć raport, wykonaj następujące dodatkowe kroki wraz z definicją w dalszej części tego artykułu.

  • Rozwiń Test na Test.ContainerName.
  • Wybierz wizualizację fragmentatora Power BI i dodaj pole Test.ContainerName do fragmentatora.
  • Wybierz nazwę kontenera z fragmentatora, dla którego chcesz wyświetlić podsumowanie wyników.

Skopiuj i wklej następujące zapytanie Power BI bezpośrednio do okna Pobierz dane>Blnk Query. Aby uzyskać więcej informacji, zobacz Omówienie przykładowych raportów przy użyciu zapytań OData.

let
   Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
                &"Pipeline/PipelineName eq '{pipelineName}' "
                &"and CompletedOn/Date ge {startdate} "
                &"and Workflow eq 'Build' "
            &") "
        &"/groupby((Test/ContainerName, Date/Date), "
          &"aggregate( "
            &"ResultCount with sum as ResultCount, "
            &"ResultPassCount with sum as ResultPassCount, "
            &"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
            &"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
            &"ResultFailCount with sum as ResultFailCount "
         &")) "
       &"/compute( "
       &"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
    ,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4]) 
in
    Source

Trend podsumowania testu filtrowany przez właściciela testu

Aby wyświetlić trend podsumowania testu potoku dla testów należących do określonego właściciela testu, użyj następujących zapytań. Aby utworzyć raport, wykonaj następujące dodatkowe kroki wraz z definicją w dalszej części tego artykułu.

  • Rozwiń Test na Test.TestOwner.
  • Wybierz wizualizację fragmentatora Power BI i dodaj pole Test.TestOwner do fragmentatora.
  • Wybierz właściciela testu z fragmentatora, dla którego musisz wyświetlić podsumowanie wyników.

Skopiuj i wklej następujące zapytanie Power BI bezpośrednio do okna Pobierz dane>Blnk Query. Aby uzyskać więcej informacji, zobacz Omówienie przykładowych raportów przy użyciu zapytań OData.

let
   Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v4.0-preview/TestRuns?
$apply=filter("
                &"Pipeline/PipelineName eq '{pipelineName}' "
                &"and CompletedOn/Date ge {startdate} "
                &"and Workflow eq 'Build' "
            &") "
        &"/groupby((Test/TestOwner, Date/Date), "
          &"aggregate( "
            &"ResultCount with sum as ResultCount, "
            &"ResultPassCount with sum as ResultPassCount, "
            &"ResultNotExecutedCount with sum as ResultNotExecutedCount, "
            &"ResultNotImpactedCount with sum as ResultNotImpactedCount, "
            &"ResultFailCount with sum as ResultFailCount "
         &")) "
       &"/compute( "
       &"iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate) "
    ,null, [Implementation="2.0",OmitValues = ODataOmitValues.Nulls,ODataVersion = 4]) 
in
    Source

Ciągi podstawienia i podział zapytań

Zastąp następujące ciągi swoimi wartościami. Nie uwzględniaj nawiasów klamrowych {} w podstawieniu. Jeśli na przykład nazwa organizacji to "Fabrikam", zastąp ciąg {organization}Fabrikam, a nie {Fabrikam}.

  • {organization} — Nazwa organizacji.
  • {project} — Nazwa projektu zespołowego.
  • {pipelineName} — Nazwa potoku. Przykład: Fabrikam hourly build pipeline.
  • {startdate} — Data rozpoczęcia raportu. Format: RRRR-MM-DDZ. Przykład: 2023-01-01Z reprezentuje 1 stycznia 2023 r. Nie umieszczaj tekstu w cudzysłowie ani w nawiasach kwadratowych.

Podział zapytań

W poniższej tabeli opisano każdą część zapytania.

Część kwerendy

Opis

$apply=filter(

Rozpocznij klauzulę filter().

Pipeline/PipelineName eq '{pipelineName}'

Zwrot przebiegów testów dla określonego potoku.

and CompletedOn/Date ge {startdate}

Zwracany test jest uruchamiany w określonym dniu lub po określonej dacie.

and Workflow eq 'Build'

Zwracanie przebiegów testów dla potoku za pomocą Build przepływu pracy.

)

Zamknij filter() klauzulę.

/groupby(

Rozpocznij klauzulę groupby().

(CompletedOn/Date),

Grupuj według daty ukończenia przebiegu testu.

aggregate(

Rozpocznij klauzulę aggregate. Dla wszystkich przebiegów testów spełniających kryteria filtrowania zsumuj liczby.

ResultCount with sum as ResultCount,

Zlicz łączną liczbę przebiegów testów jako ResultCount.

ResultPassCount with sum as ResultPassCount,

Zlicz łączną liczbę przebiegów testów zakończonych powodzeniem jako ResultPassCount.

ResultNotExecutedCount with sum as ResultNotExecutedCount,

Zlicz łączną liczbę niewykonanych przebiegów testowych jako ResultNotExecutedCount.

ResultNotImpactedCount with sum as ResultNotImpactedCount

Zlicz łączną liczbę przebiegów testów, których nie dotyczy problem, jako ResultNotImpactedCount.

ResultFailCount with sum as ResultFailCount

Zlicz łączną liczbę przebiegów testu zakończonych niepowodzeniem jako ResultFailCount.

))

Zamknij aggregate() i groupby() klauzule.

/compute(

Rozpocznij klauzulę compute().

iif(ResultCount gt ResultNotExecutedCount, ((ResultPassCount add ResultNotImpactedCount) div cast(ResultCount sub ResultNotExecutedCount, Edm.Decimal)) mul 100, 0) as PassRate

Dla wszystkich dni oblicz wartość PassRate.

)

Zamknij compute() klauzulę.

(Opcjonalnie) Zmienianie nazwy zapytania

Możesz zmienić nazwę domyślnej etykiety zapytania Query1 na bardziej zrozumiałą. Wprowadź nową nazwę w okienku Ustawienia zapytania .

 Zrzut ekranu przedstawiający opcje menu zapytania Power BI, zmień nazwę kwerendy.

Rozwiń kolumnę CompletedOn w Power BI

Rozwiń kolumnę CompletedOn . Rozszerzanie kolumny spłaszcza rekord do określonych pól. Aby dowiedzieć się, jak to zrobić, zobacz dane Transform Analytics w celu generowania raportów Power BI, Rozwiń kolumny.

Zmienianie typu danych kolumny

W Edytor Power Query wybierz kolumnę PassRate. Wybierz pozycję Typ danych z menu Przekształć , a następnie wybierz pozycję Liczba dziesiętna.

Aby uzyskać więcej informacji na temat zmiany typu danych, zobacz Transform Analytics dane, aby generować raporty Power BI oraz Przekształć typ danych kolumny.

Zamknij zapytanie i zastosuj zmiany

Po zakończeniu wszystkich przekształceń danych wybierz pozycję Zamknij i zastosuj z menu Narzędzia główne . Ta akcja zapisuje zapytanie i zwraca cię do karty Report w Power BI.

Zrzut ekranu przedstawiający opcję Zamknij i Zastosuj w Edytor Power Query.

Tworzenie raportu wykresu liniowego i kolumnowego stosu

  1. W Power BI w sekcji Visualizacje wybierz wykres liniowy i kolumnowy Line and stack, a następnie przeciągnij pola do odpowiednich obszarów wykresu.

    Zrzut ekranu przedstawiający wybrane pola wizualizacji dla raportu wykresu słupkowego trendu podsumowania testu.

  2. Dodaj CompletedOn.Date do osi X. Kliknij prawym przyciskiem myszy pole i wybierz pozycję Date.Date , a nie Hierarchia dat.

  3. Dodaj ResultFailCount do kolumnowej osi Y.

  4. Dodaj do osi y linii .

Raport powinien wyglądać podobnie do poniższej ilustracji.

Zrzut ekranu przykładowego raportu wykresu słupkowego skumulowanego trendu podsumowania testu.

Testowanie zasobów zadań