Criar um conjunto de regras de varredura no Mapa de Dados

No Mapa de Dados do Microsoft Purview, você pode criar conjuntos de regras de verificação para personalizar as verificações da fonte de dados em sua organização.

Um conjunto de regras de verificação é um contêiner que agrupa um conjunto de regras de verificação. Você pode associar facilmente um conjunto de regras de verificação a uma verificação. Por exemplo, você pode criar um conjunto de regras de verificação padrão para cada um dos tipos de fonte de dados e usá-los por padrão para todas as verificações em sua empresa. Você também pode querer que os usuários com as permissões certas criem outros conjuntos de regras de verificação com configurações diferentes com base na necessidade comercial.

Etapas para criar um conjunto de regras de verificação

Para criar um conjunto de regras de verificação:

  1. No portal do Microsoft Purview, selecione a solução Mapa de Dados .

  2. Na seção Gerenciamento de origem , selecione Verificar conjuntos de regras e selecione Novo.

  3. Na página Novo conjunto de regras de verificação , selecione as fontes de dados compatíveis com o verificador de catálogo na lista suspensa Tipo de origem. Você pode criar um conjunto de regras de verificação para cada tipo de fonte de dados que pretende verificar.

  4. Insira um Nome para o conjunto de regras de verificação. O comprimento máximo é de 63 caracteres, sem espaços permitidos. Opcionalmente, insira uma Descrição. O comprimento máximo é de 256 caracteres.

  5. Selecione um domínio.

    Importante

    Você só pode usar o conjunto de regras de verificação no domínio em que você o cria.

  6. Selecione Continuar.

    A página Selecionar tipos de arquivo é exibida. Observe que as opções de tipo de arquivo nesta página variam com base no tipo de fonte de dados que você escolheu na página anterior. Todos os tipos de arquivo estão habilitados por padrão.

    Captura de tela mostrando a página Selecionar tipos de arquivo.

    A seleção de tipos de arquivo de documento nesta página permite incluir ou excluir os seguintes tipos de arquivo do Microsoft Office: .doc; .docm; .docx; .dot; .odp; .ods; .odt; .pdf; .pot; .pps; .ppsx; .ppt; .pptm; .pptx; .xlc; .xls; .xlsb; .xlsm; .xlsx; xlt.

  7. Habilite ou desabilite um tipo de arquivo para esquema e classificação marcando ou desmarcando sua caixa de marcação. Se você escolher uma fonte de dados do tipo Data Lake (por exemplo, Azure Data Lake Storage Gen2 ou Blob do Azure), habilite os tipos de arquivo para os quais você deseja que o esquema seja extraído e classificado.

    Importante

    Desmarcar um tipo de arquivo não impede a ingestão. As informações do arquivo ainda são ingeridas, mas seu esquema e suas classificações não são extraídos.

  8. Para determinados tipos de fonte de dados, também é possível Criar um tipo de arquivo personalizado.

  9. Selecione Continuar.

    A página Selecionar regras de classificação é exibida. Esta página exibe as regras do Sistema e as regras personalizadas selecionadas, e o número total de regras de classificação selecionadas. Por padrão, todas as caixas de marcar regras do sistema são marcadas.

  10. Para as regras que você deseja incluir ou excluir, marque ou desmarque as caixas de seleção Regras de classificação de regras do sistema globalmente por categoria.

    Captura de tela mostrando a página Selecionar regras de classificação.

  11. Você pode expandir o nó da categoria e marcar ou desmarcar caixas de marcação individuais. Por exemplo, se a regra para o Número Argentina.DNI tiver altos falsos positivos, você poderá desmarcar essa caixa de marca específica.

    Captura de tela mostrando como selecionar regras do sistema.

  12. Selecione Criar para concluir a criação do conjunto de regras de verificação.

Criar um tipo de arquivo personalizado

O Microsoft Purview dá suporte à adição de uma extensão personalizada e à definição de um delimitador de coluna personalizado em um conjunto de regras de verificação.

Para criar um tipo de arquivo personalizado:

  1. Siga as etapas 1 a 5 em Etapas para criar um conjunto de regras de verificação ou editar um conjunto de regras de verificação existente.

  2. Na página Selecionar tipos de arquivo , selecione Novo tipo de arquivo para criar um novo tipo de arquivo personalizado.

    Captura de tela mostrando como selecionar o Novo tipo de arquivo na página Selecionar tipos de arquivo.

  3. Insira uma extensão de arquivo e uma descrição opcional.

    Captura de tela mostrando a página Novo tipo de arquivo personalizado.

  4. Faça uma das seguintes seleções para Conteúdo do arquivo dentro para especificar o tipo de conteúdo do arquivo dentro do seu arquivo:

    • Selecione Delimitador Personalizado e insira seu próprio Delimitador Personalizado (apenas um caractere).

    • Selecione Tipo de arquivo do sistema e escolha um tipo de arquivo do sistema (por exemplo, XML) na lista suspensa Tipo de arquivo do sistema .

  5. Selecione Criar para salvar o arquivo personalizado.

    O sistema retorna à página Selecionar tipos de arquivo e insere o novo tipo de arquivo personalizado como um novo bloco.

    Captura de tela mostrando o bloco do novo tipo de arquivo personalizado na página Selecionar tipos de arquivo.

  6. Selecione Editar no bloco do novo tipo de arquivo se quiser alterá-lo ou excluí-lo.

  7. Selecione Continuar para concluir a configuração do conjunto de regras de verificação.

Ignorar padrões

O Microsoft Purview dá suporte à definição de expressões regulares (regex) para excluir ativos durante a verificação. Durante a verificação, o Purview compara a URL do ativo com essas expressões regulares. O Microsoft Purview ignora todos os ativos que correspondem a qualquer um dos regexes.

O painel Ignorar padrões preenche previamente um regex para arquivos de transação do Spark. Você poderá remover o padrão preexistente se isso não for necessário. Você pode definir até 10 padrões ignorados.

Captura de tela mostrando a folha ignorar padrões com quatro expressões regulares definidas. O primeiro é o regex de transação do Spark pré-preenchido, o segundo é \\.txt$, o terceiro é \\.csv$ e, finalmente, .folderB/.*.

No exemplo anterior:

  • Os Regexes 2 e 3 ignoram todos os arquivos que terminam com .txt e .csv durante a verificação.
  • A Regex 4 ignora /folderB/ e todo o seu conteúdo durante a verificação.

Aqui estão mais algumas dicas que você pode usar para ignorar padrões:

  • Durante o processamento do regex, o Microsoft Purview adiciona $ ao regex por padrão.

  • Para entender qual URL o agente de verificação compara com sua expressão regular, navegue pelo Catálogo Unificado do Microsoft Purview, localize o ativo que você deseja ignorar no futuro e veja seu FQN (nome totalmente qualificado) na guia Visão geral.

    Captura de tela mostrando o nome totalmente qualificado na guia de visão geral de um ativo.

Conjuntos de regras de verificação do sistema

Os conjuntos de regras de verificação do sistema são conjuntos de regras de verificação definidos pela Microsoft que são criados automaticamente para cada catálogo do Microsoft Purview. Cada conjunto de regras de verificação do sistema está associado a um tipo de fonte de dados específico. Ao criar uma verificação, você pode associá-la a um conjunto de regras de verificação do sistema. Sempre que a Microsoft fizer uma atualização nesses conjuntos de regras do sistema, você poderá atualizá-los em seu catálogo e aplicar a atualização a todas as verificações associadas.

  1. Para exibir a lista de conjuntos de regras de verificação do sistema, selecione Conjuntos de regras de verificação no Centro de Gerenciamento e escolha a guia Sistema .

    Captura de tela mostrando a lista de conjuntos de regras de verificação do sistema.

  2. Cada conjunto de regras de verificação do sistema tem um Nome, um Tipo de Origem e uma Versão. Se você selecionar o número de versão de um conjunto de regras de verificação na coluna Versão , verá as regras associadas à versão atual e às versões anteriores (se houver).

    Captura de tela mostrando uma página de conjunto de regras de verificação do sistema.

  3. Se uma atualização estiver disponível para um conjunto de regras de verificação do sistema, você poderá selecionar Atualizar na coluna Versão . Na página regra de verificação do sistema, escolha uma versão na lista suspensa Selecione uma nova versão para atualizar . A página fornece uma lista de regras de classificação do sistema associadas à nova versão e à versão atual.

    Captura de tela mostrando como alterar a versão de um conjunto de regras de verificação do sistema.

Associar uma verificação a um conjunto de regras de verificação do sistema

Ao criar uma verificação, opte por associá-la a uma regra de verificação do sistema definida da seguinte forma:

  1. Na página Selecionar um conjunto de regras de verificação , selecione o conjunto de regras de verificação do sistema.

    Captura de tela mostrando como selecionar um conjunto de regras de verificação do sistema para uma verificação.

  2. Selecione Continuar e, em seguida, selecione Salvar e Executar.