Sinalizar dados como certificados ou preteridos

Você pode certificar um ativo de dados para sinalizar que ele atende aos padrões da sua organização, ou despreciá-lo para alertar que está desatualizado e não deve ser usado. Esses sinais fazem parte da semântica do Catálogo Unity. Domínios, visualizações métricas e Páginas definem o significado dos seus dados, enquanto certificação adiciona uma camada de confiança e autoridade sobre essas definições. Isso ajuda a Genie One a melhorar suas respostas ao priorizar os ativos que sua organização garante.

Esta página mostra como aplicar marcas do sistema a objetos para marcá-las como certificadas ou preteridas.

Marca do sistema de status de certificação

A tag do sistema de status de certificação permite que os usuários marquem objetos, como catálogos, esquemas, tabelas, dashboards, Agentes do Genie, aplicativos do Databricks e notebooks, com indicadores de qualidade dos dados ou status do ciclo de vida. É uma etiqueta governada pelo sistema com dois valores de etiqueta: certificado e obsoleto. Isso ajuda as organizações a impor a governança, melhorar a descoberta de dados e aumentar a confiança em aplicativos de análise e IA. A tag é exibida ao lado dos nomes de objetos no workspace e influencia como os dados são exibidos em notebooks e no editor SQL.

A chave de marca é system.certification_status e há dois valores de marca:

  • certified: indica que um ativo de dados atendeu aos padrões internos de precisão, integridade e confiança. Os ativos certificados exibem uma marca de verificação no espaço de trabalho.

    Etiqueta de sistema certificada.

  • deprecated: avisa que um ativo de dados está desatualizado, não é mais confiável ou não deve ser usado em novos fluxos de trabalho. Os ativos obsoletos exibem um ícone de restrição no workspace.

    Etiqueta de sistema obsoleta.

Tipos de objeto com suporte

Você pode aplicar a marca de status de certificação aos seguintes objetos:

  • Catálogos
  • Esquemas
  • Tabelas
  • Visões
  • Volumes
  • Functions
  • Modelos registrados
  • Dashboards
  • Agentes do Genie
  • Aplicativos do Databricks
  • Notebooks

Permissões exigidas

Você deve ter a permissão ASSIGN na marca regida por system.certification_status para aplicá-la a objetos. Consulte Gerenciar permissões em tags gerenciadas.

Para adicionar marcas a objetos protegíveis do Catálogo do Unity, você deve ser proprietário do objeto ou ter todos os seguintes privilégios:

  • APPLY TAG no objeto
  • USE SCHEMA no esquema pai do objeto
  • USE CATALOG no catálogo pai do objeto

Atribuir status certificado ou obsoleto a objetos

Você pode atribuir status certificado ou preterido a objetos usando a interface do usuário do workspace ou o SQL.

Interface do usuário do workspace

  1. Navegue até um objeto com suporte.

  2. Clique no menu kebab Ícone de menu Kebab. e selecione Atribuir certificação.

  3. Selecione Certificado, Preterido ou Nenhum.

    Editar a certificação e a descontinuidade.

  4. Clique em Salvar.

Você pode atualizar ou remover o status a qualquer momento.

SQL

-- Apply certified tag key
SET TAG ON TABLE main.sales.transactions `system.certification_status` = `certified`;

-- Apply deprecated tag key
SET TAG ON TABLE main.sales.old_summary `system.certification_status` = `deprecated`;

Automatizar certificação e depreciação em escala

Os passos acima aplicam a tag de status de certificação a um objeto de cada vez. Para certificar ou desvalorizar dados em muitos objetos, o Azure Databricks recomenda automatizar a atribuição de tags. Uma automação atribui a system.certification_status tag a toda tabela ou volume do Unity Catalog que corresponda a condições que você define, como uso de consulta, idade do ativo, proprietário, descrição, nome ou tags existentes.

Por exemplo, a automação a seguir desvaloriza tabelas não utilizadas. Ele corresponde a todas as tabelas do temp catálogo sem consultas de leitura ou escrita nos últimos 30 dias, atribui system.certification_status o valor deprecatede envia e-mails para os proprietários do ativo:

Uma automação direcionada às tabelas de um catálogo, correspondendo tabelas sem consultas de leitura ou gravação nos últimos 30 dias e atribuindo a tag de status de certificação obsoleta.

Para mais informações, veja Atribuição automática de tags (beta).

Pesquisar por status de certificação

Você pode filtrar ativos certificados ou preteridos diretamente na página de pesquisa. No campo Pesquisa , use a certificationStatus palavra-chave para consultar objetos pelo status de certificação.

Observação

A pesquisa usando tags não é compatível com dashboards, agentes do Genie ou aplicativos do Databricks.

Por exemplo, o snippet a seguir retorna apenas tabelas certificadas:

type:table certificationStatus:certified

O trecho a seguir retorna apenas ativos obsoletos de diferentes tipos de objetos suportados.

certificationStatus:deprecated
  • Nos filtros de pesquisa, você também pode selecionar Certificado ou Preterido no menu do filtro Status de certificação.

    Pesquise por status de certificação.

Observação

Pode levar alguns minutos para que as atualizações de certificação ou descontinuação apareçam nos resultados de pesquisa.