Saiba mais sobre o Mapa de Dados do Microsoft Purview

O Mapa de Dados do Microsoft Purview fornece a base para a descoberta e governança de dados. Ele captura metadados sobre dados presentes em análise, software como serviço (SaaS) e sistemas operacionais em ambientes híbridos, locais e multinuvem. O mapa de dados permanece atualizado com seu sistema integrado de digitalização e classificação.

Todas as contas do Microsoft Purview têm um mapa de dados que começa em uma unidade de capacidade e pode crescer elasticamente. Eles são escalados e reduzidos verticalmente com base na carga de solicitação e nos metadados armazenados no mapa de dados.

Unidade de capacidade de mapa de dados

O Mapa de Dados tem dois componentes: armazenamento de metadados e taxa de transferência de operação, representada como uma unidade de capacidade (). Todas as contas do Microsoft Purview, por padrão, começam com uma unidade de capacidade e aumentam elasticamente com base no uso. Cada unidade de capacidade do mapa de dados inclui uma taxa de transferência de 25 operações/s e 10 GB de limite de armazenamento de metadados.

Operações

As operações são a medida de taxa de transferência do Mapa de Dados do Microsoft Purview. Elas incluem quaisquer operações Criar, Ler, Gravar, Atualizar e Excluir em metadados armazenados no Mapa de Dados. Alguns exemplos de operações são:

  • Criar um ativo no Mapa de Dados
  • Adicionar uma relação a um ativo, como proprietário, administrador, pai, linhagem e assim por diante
  • Edite um ativo para adicionar metadados de negócios, como descrição, termo do glossário e assim por diante
  • A pesquisa por palavra-chave retornando resultados para a página de resultados da pesquisa

Armazenamento

O armazenamento é o segundo componente do Mapa de Dados e inclui o armazenamento de metadados técnicos, comerciais, operacionais e semânticos.

Os metadados técnicos incluem esquema, tipo de dados, colunas e assim por diante, que o processo de verificação do Microsoft Purview descobre. Os metadados de negócios incluem metadados automatizados, como metadados promovidos de conjuntos de dados do Microsoft Power BI ou descrições de tabelas SQL e marcação manual de descrições, termos do glossário e assim por diante. Exemplos de metadados semânticos incluem o mapeamento da coleção para fontes de dados ou classificações. Os metadados operacionais incluem cópia do data factory e status de execução da atividade de fluxo de dados e tempos de execução.

Trabalhando com o Mapa de Dados

  • Elastic Data Map com dimensionamento automático – comece com um Data Map tão baixo quanto uma unidade de capacidade que pode ser dimensionada automaticamente com base na carga. Para a maioria das organizações, esse recurso leva a uma economia maior e a um preço mais baixo para iniciar projetos de governança de dados. Esse recurso afeta os preços.

  • Varredura e ingestão aprimoradas – rastreie e controle a população dos ativos de dados, classificação e linhagem nos processos de varredura e ingestão. Esse recurso afeta os preços.

Cenário

Claudia é uma administradora do Microsoft Azure na Contoso que deseja criar uma nova conta do Microsoft Purview no portal do Azure. Ela não sabe o tamanho necessário do Mapa de Dados do Purview para dar suporte ao estado futuro da plataforma. No entanto, ela sabe que o Data Map é cobrado usando unidades de capacidade, que o armazenamento e a taxa de transferência das operações afetam. Ela quer criar o menor Mapa de Dados para manter o custo baixo e aumentar o tamanho do Mapa de Dados elasticamente com base no consumo.

Claudia pode criar uma conta do Microsoft Purview com o tamanho do Mapa de Dados padrão de uma unidade de capacidade que pode escalar e reduzir verticalmente automaticamente. O recurso de dimensionamento automático também permite que a capacidade seja ajustada com base em intermitências de dados intermitentes ou planejadas durante períodos específicos. Claudia segue as próximas etapas na experiência de criação para definir a configuração de rede e conclui a criação.

No portal do Azure, na guia métricas da conta do Microsoft Purview, Claudia pode ver o consumo da taxa de transferência de armazenamento e operações do Mapa de Dados. Ela pode configurar ainda mais um alerta quando a taxa de transferência de armazenamento ou operações atingir um determinado limite para monitorar o consumo e a cobrança da nova conta do Microsoft Purview.

Mapeamento de dados cobrança

Você paga por uma unidade de capacidade (25 ops/s e 10 GB). A cobrança extra é baseada no consumo de cada unidade de capacidade extra acumulada até a hora. As operações do Mapa de Dados são dimensionadas em incrementos de 25 operações/s e o armazenamento de metadados é dimensionado em incrementos de 10 GB. O Mapa de Dados pode escalar e reduzir verticalmente automaticamente dentro da janela de elasticidade (marcar os limites atuais). No entanto, para obter o próximo nível de elasticidade da janela, você precisa criar um tíquete de suporte.

As unidades de capacidade do Data Map vêm com um limite na taxa de transferência e no armazenamento de operações. Se o armazenamento exceder a unidade de capacidade atual, você pagará pela próxima unidade de capacidade, mesmo que não use a taxa de transferência de operações. A tabela a seguir mostra os intervalos de unidades de capacidade do Mapa de Dados. Entre em contato com o suporte se a unidade de capacidade do Mapa de dados ultrapassar 100 unidades de capacidade.

Mapa de Dados Unidade de Capacidade Taxa de transferência de Operações/s Capacidade de armazenamento em GB
1 25 10
2 50 20
3 75 30
4 100 40
5 125 50
6 150 60
7 175 70
8 200 80
9 225 90
10 250 100
100 2500 1000

Exemplos de cobrança

  • A taxa de transferência de operação do Mapa de Dados para a hora especificada é menor ou igual a 25 Ops/s e o tamanho do armazenamento é de 1 GB. Você paga por uma unidade de capacidade.

  • A taxa de transferência de operação do Data Map para a hora especificada é menor ou igual a 25 Ops/s e o tamanho do armazenamento é de 15 GB. Você paga por duas unidades de capacidade.

  • A taxa de transferência de operação do Data Map para a hora determinada é de 50 Ops/s e o tamanho do armazenamento é de 15 GB. Você paga por duas unidades de capacidade.

  • A taxa de transferência de operação do Data Map para a hora determinada é de 50 Ops/s e o tamanho do armazenamento é de 25 GB. Você paga por três unidades de capacidade.

  • A taxa de transferência de operação do Data Map para a hora determinada é de 250 Ops/s e o tamanho do armazenamento é de 15 GB. Você paga por unidades de capacidade 10.

Exemplo detalhado de cobrança

O exemplo de cobrança do Mapa de Dados mostra um Mapa de Dados com armazenamento crescente de metadados e operações variáveis por segundo em uma janela de seis horas, das 12h às 18h. A linha vermelha no gráfico é o consumo de operações por segundo e a linha pontilhada azul é o consumo de armazenamento de metadados nesta janela de seis horas:

Gráfico que mostra o número de operações e o crescimento dos metadados ao longo do tempo.

Cada unidade de capacidade do Mapa de Dados dá suporte a 25 operações por segundo e 10 GB de armazenamento de metadados. O Mapa de Dados é cobrado por hora. O processo de faturamento considera as unidades de capacidade máximas do Mapa de Dados necessárias em uma hora, com no mínimo uma unidade de capacidade. Às vezes, você pode precisar de mais operações por segundo em uma hora, e mais operações aumentam o número de unidades de capacidade necessárias nessa hora. Em outros momentos, o uso de operações por segundo pode ser baixo, mas talvez você ainda precise de um grande volume de armazenamento de metadados. O armazenamento de metadados determina quantas unidades de capacidade você precisa dentro da hora.

A tabela mostra o número máximo de operações por segundo e o armazenamento de metadados usado por hora para este exemplo de cobrança:

Tabela que mostra o número máximo de operações e o crescimento dos metadados ao longo do tempo.

Com base nas operações do Mapa de Dados por segundo e no consumo de armazenamento de metadados nesse período, esse Mapa de Dados é cobrado por 22 horas da unidade de capacidade durante esse período de seis horas (1 + 3 + 4 + 5 + 6 + 3):

Tabela que mostra o número de horas de ao longo do tempo.

Importante

O Mapa de Dados pode escalar e reduzir verticalmente automaticamente dentro da janela de elasticidade (marcar os limites atuais). Para obter o próximo nível da janela de elasticidade, crie um tíquete de suporte.

Aumentar o limite da taxa de transferência das operações

O limite padrão para o máximo de operações por segundo é de 10 unidades de capacidade. Se você estiver trabalhando com um ambiente grande do Microsoft Purview e precisar de uma taxa de transferência maior, poderá solicitar uma janela de capacidade maior de elasticidade criando uma solicitação de cota. Selecione a unidade de capacidade do mapa de dados como o tipo de cota. Forneça o máximo de informações relevantes possível sobre seu ambiente e a capacidade extra desejada.

Importante

Não há limite padrão para o armazenamento de metadados. À medida que você adiciona mais metadados ao Mapa de Dados, ele aumenta elasticamente.

Ao aumentar o limite da taxa de transferência das operações, você também aumenta o número mínimo de unidades de capacidade. Por exemplo, se você aumentar o limite da taxa de transferência para 20, pagará por um mínimo de duas unidades de capacidade. A tabela a seguir mostra as possíveis opções de taxa de transferência. O número inserido na solicitação de cota é o número mínimo de unidades de capacidade na conta.

Unidades de capacidade mínima Limite da taxa de transferência de operações
1 10 (padrão)
2 20
3 30
4 40
5 50
6 60
7 70
8 80
9 90
10 100

Mapa de Dados de Monitoramento

As unidades de capacidade do mapa de dados de métricas e o tamanho de armazenamento do mapa de dados podem ser monitorados para entender o tamanho do patrimônio de dados e o faturamento.

  1. Vá para o portal do Azure, navegue até a página de contas do Microsoft Purview e selecione sua conta do Purview

  2. Selecione Visão geral e role para baixo para observar a seção Monitoramento para obter as métricas de Unidades de Capacidade do Mapa de Dados e Tamanho de Armazenamento do Mapa de Dados em diferentes períodos de tempo

    Captura de tela do menu mostrando a página de visão geral das métricas do mapa de dados elásticos.

  3. Para outras configurações, navegue até Monitoramento --> Métricas para observar as Unidades de Capacidade do Mapa de Dados e o Tamanho do Armazenamento do Mapa de Dados.

    Captura de tela do menu mostrando as métricas.

  4. Selecione as Unidades de Capacidade do Mapa de Dados para exibir o uso da unidade de capacidade nas últimas 24 horas. Observe que passar o mouse sobre o gráfico de linhas indica as unidades de capacidade do Mapa de Dados consumidas naquele horário específico no dia específico.

    Captura de tela do menu mostrando as unidades de capacidade do mapa de dados consumidas em 24 horas.

  5. Selecione a Hora Local: Últimas 24 horas (Automático - 1 hora) no canto superior direito da tela para modificar o intervalo de tempo exibido para o gráfico.

    Captura de tela do menu mostrando as unidades de capacidade do mapa de dados consumidas em um intervalo de tempo personalizado.

    Captura de tela do menu mostrando as unidades de capacidade do mapa de dados consumidas em um intervalo de três dias.

  6. Personalize o tipo de gráfico selecionando a opção:

    Captura de tela do menu mostrando as opções para modificar o tipo de gráfico.

  7. Selecione o Novo gráfico para adicionar o gráfico ao gráfico Tamanho de Armazenamento do Mapa de Dados.

    Captura de tela do menu mostrando o tamanho de armazenamento do mapa de dados usado.

Resumo

O Data Map fornece uma barreira de baixo custo para os clientes iniciarem sua jornada de governança de dados. O Data Map pode crescer elasticamente com um modelo de pagamento conforme o uso a partir de uma unidade de capacidade. Você não precisa se preocupar em escolher o tamanho correto do Mapa de Dados para seu acervo de dados no momento da criação.

Próximas etapas