Planejar o Catálogo unificado com práticas recomendadas

Este artigo fornece estratégias de governança de dados para manter dados íntegros, valiosos e detectáveis. Para obter uma lista de etapas técnicas para configurar o Catálogo unificado, consulte o guia de introdução.

Conheça seus dados com conceitos de negócios

Os conceitos de negócios no Catálogo unificado são as ferramentas que você usa para unir seus dados às suas práticas comerciais diárias. Essa abordagem não apenas torna mais fácil para os consumidores de dados entenderem os dados que estão usando, mas também permite democratizar a governança de dados desses recursos. Use seus especialistas e defensores de dados existentes para criar o Catálogo unificado em um recurso avançado.

Quando nos referimos a conceitos de negócios no Catálogo unificado, estamos falando sobre estes cinco elementos:

1. Domínios de governança
2. Produtos de dados
3. Elementos de dados críticos (versão prévia)
4. Termos do glossário
5. Objetivos e resultados-chave (OKRs)

Vá para uma seção abaixo para obter práticas recomendadas e orientações baseadas em cenário sobre:

Criar domínios de governança

Use domínios de governança para distribuir a propriedade e as tarefas de manutenção. Eles também facilitam para os usuários encontrar os dados de que precisam. A distribuição de informações por domínios de governança permite que os usuários alcancem o nível certo de informações de que precisam, sem a necessidade de percorrer todo o seu acervo de dados.

Ao criar domínios de governança ou revisar sua estrutura de domínio de governança, considere os seguintes fatores:

1. Modelo de estrutura de domínio de governança
2. Planejamento de desenvolvimento

Modelos de estrutura de domínio de governança

• Domínio central (bom): o uso de um único domínio pode ser eficiente para pequenas organizações, mas pode não ser bem dimensionado e sujeito a gargalos durante o crescimento.
• Domínios baseados em departamentos (bom): os departamentos não tomam decisões de forma consistente e, se os departamentos mudarem regularmente, talvez seja necessário mudar sua estrutura de Catálogo Unificado.
• Domínios funcionais/de linha de governança (melhores): concedem flexibilidade às equipes e se alinham ao modelo de negócios existente. Essa estrutura pode ser difícil de gerenciar em escala e pode precisar de muitos subdomínios para capacitar os tomadores de decisão de dados. Ele também pode criar silos de uso de dados, que é a antítese da abordagem de governança do Catálogo unificado.
• Combinação de domínios (melhor): ter uma combinação de domínios entre áreas temáticas/domínios de dados, domínios funcionais, domínios regulatórios e domínios de projeto alinha seus dados aos seus especialistas. No Catálogo unificado, seus especialistas em dados são seu recurso mais poderoso. Eles sabem quais políticas precisam ser aplicadas e o que os outros precisam saber para aproveitar ao máximo os dados. Essa estrutura também é a mais durável para atualizações organizacionais, pois se baseia em como os dados são usados no dia-a-dia, em vez de em estruturas de negócios.

Planejamento do desenvolvimento do domínio de governança

1. Ao começar a criar seus domínios de governança, comece com alguns domínios alinhados às equipes que já têm uma forte administração de dados:
   1. Atribua administradores de dados e proprietários de produtos de dados aos seus domínios de governança e faça com que eles comecem o desenvolvimento de um glossário e produtos de dados que se alinhem às suas práticas atuais.
   2. Se necessário, digitalize os dados no Mapa de Dados em paralelo para complementar seus produtos de dados.
   3. Deixe seu domínio de governança em um estado de rascunho até que alguns produtos de dados sejam desenvolvidos e estejam prontos para os usuários.
2. Publique seu domínio de governança e atribua permissões de Leitor de Catálogo Global aos seus primeiros usuários para que eles comecem a explorar.
3. Com os comentários do primeiro lote de usuários, itere os produtos de dados existentes ou expanda para os próximos produtos de dados ou domínios de governança.
4. Começar com alguns domínios de governança que têm cobertura quase completa com produtos de dados garante aos consumidores de dados que o Catálogo unificado tem o que eles precisam e que eles podem continuar voltando.

Criar produtos de dados

Muitos dos dados que você armazena hoje têm pouco ou nenhum valor conhecido. Pode levar tempo e esforço manual para avaliar e entender antes que você possa removê-lo ou melhorá-lo. Quando você se concentra em dados com valor e uso conhecidos, mais equipes podem criar valor consistente e mostrar os benefícios de ter dados bem compreendidos e altamente utilizados. Esse foco impulsiona a adoção de práticas de governança de dados e facilita o esforço para limpar os ativos de dados à medida que o valor de cada ativo de dados se torna mais claro.

Concentre-se nos recursos de dados que já existem em sua organização. Adicionar esses recursos como produtos de dados no Catálogo unificado torna mais fácil para os usuários descobri-los. Ele também torna o acesso mais escalável e melhora a confiabilidade com linhagem, qualidade de dados e responsabilidade. Alguns exemplos de recursos de dados existentes são:

1. Data lakes de zona Gold, armazenamentos SQL altamente selecionados, data warehouses coletados e data lakehouses que as equipes usam para dar suporte às práticas diárias.
2. Relatórios usados para tomar decisões.
3. Tabelas de dados usadas em ambientes de relatórios.
4. Dados mestre e de referência.

Planejamento de desenvolvimento de produtos de dados

1. Planeje produtos de dados como parte do processo de admissão ao adicionar fontes de dados ao Mapa de Dados. Os proprietários de produtos de dados devem saber quais armazenamentos de dados você está registrando e verificando e quais armazenamentos de dados têm ativos de dados prontos para serem adicionados ao Catálogo unificado.
2. Crie seus primeiros produtos de dados a partir dos principais ativos de dados que você digitalizou no Mapa de Dados.
3. Publique seus primeiros produtos de dados quando os usuários estiverem prontos para consumir dados com esse domínio.

Definir termos do glossário

Ao criar termos, comece com o que você já sabe e continue a criar valor a partir de seus dados para mostrar onde o esforço é mais impactante. Siga estas dicas ao criar e gerenciar termos do glossário para criar o máximo de valor.

1. Forneça dados aos usuários mais apaixonados para demonstrar a capacidade de continuar aumentando o valor e fornecer priorização para mais governança.
2. Muitas equipes de negócios já possuem um glossário para ajudar os novos funcionários a se orientarem para os negócios. Use-os como alguns de seus candidatos de primeiro mandato para descrever um domínio de governança e seus dados.
3. Se você não tiver certeza se um termo representa outro conceito (como uma entidade ou processo de negócios), adicione um termo para que você possa coletar os metadados mais básicos. Se necessário, você pode expirar o prazo e usar um novo conceito para coletar mais metadados e impulsionar a experiência de ponta a ponta pretendida.
4. Depois de adicionar os termos do glossário, vincule-os a produtos de dados para melhorar a descoberta de produtos de dados e aprimorar o conhecimento dos consumidores sobre os dados.
5. Periodicamente, marcar os produtos de dados mapeados para um termo para permitir que os administradores de dados entendam melhor seu uso em todo o acervo de dados.
6. Sempre melhore e edite as definições de termo. Aguardar para publicar um termo até que ele esteja totalmente alinhado atrasa o uso do termo pelas equipes e impede a criação de novo valor ou o escalonamento de possíveis melhorias.

Planejamento de desenvolvimento a prazo

1. Os administradores de dados devem aprender a estrutura do domínio de governança e, em seguida, começar a adicionar termos conhecidos e começar a desenvolver novos.
2. Desenvolva definições de termos que contenham informações valiosas para os consumidores entenderem seu contexto e uso.
3. Publicar o primeiro conjunto de termos e produtos de dados juntos para que os consumidores possam iniciar seus casos de uso de dados e descoberta de dados no Catálogo unificado.
4. A construção do conhecimento semântico nunca para, portanto, faça um plano sobre como você pode permitir que sua equipe continue a contribuir com termos ao longo do ciclo de vida de governança.

Criar e aplicar metadados personalizados

Os metadados personalizados desempenham um papel crucial na capacitação das organizações para controlar seus dados com eficiência. Ao permitir que os usuários definam atributos adaptados às suas necessidades específicas, os metadados personalizados promovem uma melhor organização, acessibilidade e utilização dos ativos de dados. Em uma era em que os dados são a espinha dorsal da tomada de decisões, os metadados personalizados permitem que as organizações simplifiquem processos, garantam a conformidade e desbloqueiem todo o potencial de seus recursos de dados.

Ir para o Catálogo unificadoGerenciamento>de> catálogoMetadados personalizados para criar e gerenciar atributos de conceito de negócios e atributos de ativos de dados. Atualmente, você pode gerenciar seus atributos personalizados para tipos de conceito de negócios e tipos de ativos de dados.

Desbloqueie o valor comercial tornando os dados acessíveis

Agora que suas estruturas básicas de Catálogo unificado estão prontas, é hora de começar a desbloquear o valor de seus dados, tornando-os acessíveis aos usuários e vinculando-os diretamente às suas metas de negócios. A criação de valor a partir dos dados vem do uso desses dados, mas o uso de dados significa que todas as pessoas na empresa precisam encontrar os dados certos no momento certo e no formato certo para fornecer os insights ou funcionalidades necessárias. Os consumidores de dados são a chave para criar novo valor comercial a partir dos dados.

Vá para uma seção abaixo para obter práticas recomendadas e orientações baseadas em cenário sobre:

Permitir que os usuários pesquisem e naveguem por seus domínios de governança e produtos de dados

Você dedicou tempo para criar domínios de governança e produtos de dados, portanto, dê aos seus consumidores de dados acesso para usá-los e ver como eles se saem. Os usuários de negócios podem estar procurando relatórios estratégicos que já estejam disponíveis com os insights necessários para tomar decisões de negócios de maneira oportuna e bem informada.

Veja como você pode pensar em conceder acesso aos seus usuários de forma estratégica:

• Não conceda acesso ao Catálogo unificado a todos na sua empresa. Habilite as equipes que precisam dos dados que você tem em seu catálogo primeiro. Se seus produtos de dados não estiverem disponíveis no formato que os cientistas de dados precisam ou se os dados não estiverem em relatórios predefinidos para usuários corporativos, eles perderão a confiança em seu catálogo. Habilite as funções certas para usar o catálogo primeiro para criar o caminho para o sucesso.
• Comece com as equipes que precisam dos dados que você tem em seu catálogo. Para quem você criou seus produtos de dados? Quais equipes ajudaram a desenvolver seus termos do glossário? Esses são bons candidatos iniciais.
• Comece com analistas e especialistas em dados que podem dizer onde existem lacunas no catálogo. Eles podem ajudar a apontar para especialistas e proprietários de negócios que podem contribuir para o Catálogo unificado. Com o tempo, a integridade do Catálogo unificado será grande o suficiente para que todos na empresa possam encontrar a maioria de suas necessidades de dados.

Crie OKRs

Demonstre o valor comercial de seus dados criando objetivos e resultados-chave (OKRs) e vinculando-os aos produtos de dados que ajudam a impulsionar ou medir esse valor. Quando os líderes empresariais apreciam o valor de seus dados e a importância da governança, eles priorizam esses esforços e criam novas sinergias na forma como as equipes constroem, mantêm e controlam seus dados para criar insights.

A criação de um objetivo fornece reconhecimento imediato da importância dos dados para os usuários e os negócios que eles impulsionam. Esse reconhecimento aumenta muito a compreensão do papel que determinados dados desempenham nos processos de negócios ou na capacidade de atingir seus objetivos.

1. Considere os OKRs para melhorias de processo, problemas de qualidade, principais objetivos estratégicos e qualquer outra coisa que você mediria com dados para demonstrar o valor e a mudança nos negócios.
2. Certifique-se de criar um resultado-chave para cada objetivo para mostrar como o objetivo está sendo medido e avaliado e crie responsabilidade para atingir essa meta.
3. Objetivos complexos podem exigir muitos resultados importantes para serem alcançados. Os principais resultados podem progredir independentemente dos outros resultados principais. A medição pode mostrar as áreas que precisam de priorização ou ajuda para voltar aos trilhos.

Acesso a dados em conformidade

Fornecer acesso aos dados pode introduzir riscos para sua empresa. Seguir padrões e políticas conhecidos é essencial para garantir que o acesso seja concedido adequadamente e que haja uso responsável dos dados. Os usuários no Catálogo unificado podem preencher um formulário para acesso a dados no momento da descoberta ou uso de dados. Manter esse formulário e processo como parte do catálogo torna o acesso seguro, rápido e consistente para um acervo de dados altamente variável e técnico. Aqui estão algumas maneiras de configurar com sucesso o acesso em seu catálogo:

• Certifique-se de que os aprovadores apropriados estejam em vigor nos produtos de dados e que eles entendam as necessidades de processamento dos produtos de dados.
• Alguns produtos de dados podem ter centenas ou milhares de solicitações de acesso, portanto, ter uma equipe em fusos horários distribuídos pode ser necessário para garantir a aprovação e o provisionamento de acesso em tempo hábil.
• Prepare grupos ou faça backup dos aprovadores caso haja férias ou folgas não planejadas.
• Os proprietários do domínio de governança devem marcar o resumo das solicitações de acesso periodicamente para validar as expectativas e ver se as alterações nos controles que monitoram o processo de solicitação de acesso estão impulsionando os tempos de resposta desejados.

Criar modelos de dados lógicos com elementos de dados críticos (versão prévia)

Melhorar a compreensão técnica profunda e as expectativas de entidades e elementos de dados inclui novos controles para afirmar se os dados atendem a essas expectativas. A criação de dicionários de dados e modelos lógicos de dados fornece a estrutura e as profundas expectativas de negócios dos dados para garantir que os dados sejam adequados para sua finalidade. Ao incorporar esse conhecimento ao Catálogo unificado, as equipes imediatamente entendem como os dados são estruturados e por quê, e como o que está disponível no acervo de dados físicos pode ser diferente.

• Concentre-se nos elementos de dados mais importantes para seu domínio. Os elementos de dados críticos mostram a profunda experiência e a importância que os dados têm em seus negócios.
• Não se concentre na integridade dos elementos em um domínio inteiro. Nem todas as colunas precisam desse nível de controle, e muitos elementos de dados podem ser autoexplicativos para os usuários.
• Avaliar elementos de dados críticos em diferentes equipes garante que as equipes de negócios tenham um entendimento comum de seus dados e como o que uma equipe cria afeta muitas outras áreas do negócio.
• O alinhamento das políticas de acesso com elementos de dados críticos garante que os controles de acesso adequados estejam em vigor para dados críticos em todo o seu patrimônio de dados.
• A criação de regras de qualidade de dados para elementos de dados críticos garante que os dados atendam às expectativas, não importa onde ou como estejam sendo usados.

Aprimorar a maturidade dos dados

Melhore seu patrimônio de dados e governança para preencher lacunas e remover gargalos para a criação de valor:

• Monitore suas ações de integridade para melhorar a governança de forma incremental em todo o seu Catálogo Unificado.
• Otimize para novos usos dos dados e elimine problemas de dados melhorando a qualidade dos dados.
• Crie os melhores produtos de dados da categoria para fontes únicas de verdade com o gerenciamento de dados master.
• Avalie a integridade dos seus dados e priorize para obter o maior impacto de valor.

Investir profundamente nos dados principais que administram sua empresa garante que esses dados sejam utilizáveis em toda a empresa de forma consistente. Ao eliminar problemas de dados e fornecer uma base estável para a criação de insights, você aprimora a confiabilidade dos dados. Ter evidências de problemas de dados ajuda a garantir a capacidade de ação da governança de dados. Ele impulsiona melhorias que desbloqueiam imediatamente um novo valor sem investir em áreas de dados que têm baixo valor ou ainda não são totalmente compreendidas. A melhoria contínua da maturidade dos dados ajuda as equipes a compartilhar aprendizados entre si e mostrar a prova da melhoria à medida que as mudanças ocorrem.

Vá para uma seção abaixo para obter práticas recomendadas e orientações baseadas em cenário sobre:

Melhore os produtos de dados com ações focadas na governança

Construir confiança nos dados requer melhoria e suporte contínuos. Embora os consumidores dediquem tempo para encontrar e aplicar dados, eles chamam a atenção para problemas ou necessidades de suporte. Você pode tomar ações fáceis com antecedência com base nas práticas recomendadas. As ações de saúde na gestão de saúde fornecem uma lista completa dessas ações úteis para o Catálogo unificado, para ajudá-lo a se concentrar no que você pode fazer a seguir para melhorar sua governança. Aqui estão algumas práticas recomendadas para usar ações de integridade a fim de obter o máximo valor:

• Verifique as ações de seus produtos de dados enquanto eles ainda estão em um estado de rascunho. Essa marca garante que, ao publicar os dados, eles tenham o básico coberto e forneça conforto aos consumidores de que você publicou os dados com cuidado.
• Execute ações em momentos diferentes. Algumas ações levam tempo para serem resolvidas à medida que você aprende mais sobre os dados ou trabalha com administradores para criar mais clareza. Continue verificando as ações para ver onde as novas melhorias estão prontas para serem feitas.
• Se as ações parecerem esmagadoras, desnecessárias ou perturbadoras, considere fazer alterações em seus controles de saúde. Otimizar o número de ações que qualquer pessoa realiza garante que o nível certo de governança seja aplicado aos dados.

Melhore a confiabilidade de seus dados com a qualidade dos dados

Muitas vezes, a qualidade dos dados é um projeto único para corrigir um problema específico nos dados. Essas melhorias não duram. Uma boa qualidade de dados requer avaliação e melhoria contínuas para garantir que os problemas não retornem ou que novos problemas não sejam criados.

• Depois de definir uma linha de base de expectativas de qualidade de dados, crie um plano para corrigir os problemas em tempo hábil. Este plano é essencial para manter o negócio funcionando com dados adequados para uso.
• Agende suas verificações de qualidade de dados para serem executadas regularmente. Essa programação ajuda a garantir aos consumidores que os dados estão sendo aprimorados continuamente e são altamente suportados.
• Defina alertas sobre as regras críticas e alterações de pontuação. Esses alertas permitem que os provedores de dados corrijam problemas antes que um consumidor encontre ou tenha um problema. O alerta também pode ser usado para compartilhar de forma transparente com os consumidores problemas antes que eles os encontrem em uma experiência ou tomando uma decisão com base em dados de baixa qualidade.

Crie produtos de dados de origem da verdade com o gerenciamento de dados master

Alguns dados são tão críticos para quase todos os processos e para todo o negócio que merecem níveis excepcionais de gerenciamento e governança. Essas entidades de dados geralmente são entidades transversais, como listas de clientes ou perfis de funcionários. Eles podem exigir profundo conhecimento de negócios e experiência em muitos processos de negócios. Alguns dados são altamente utilizáveis, mas de baixa escala, e ainda se beneficiam do nível mais profundo de controle e gerenciamento. Exemplos desses dados incluem atributos de dados de referência de país ou região, moeda ou segmentos do setor. Cada um desses tipos de dados se beneficia de soluções de gerenciamento de dados master para criar uma fonte de verdade adequada para uso em toda a sua empresa.

• Pratique o gerenciamento de dados master com qualidade de dados para garantir que esses dados vitais estejam limpos e consistentes.
• Escolha elementos de dados valiosos ou elementos de dados de alto risco para garantir que seu esforço produza alto valor. Esse nível de gerenciamento de dados exige muito.
• Crie um elemento de dados crítico e um produto de dados para dados master. Esses objetos de parceiros ajudam a elevar seus dados master no Catálogo unificado e aumentar seu uso e compreensão.
• Crie novos controles de integridade para master dados para avaliar continuamente seu uso em escala e impedir que novos dados não controlados sejam usados e causem confusão em um patrimônio de dados em rápida evolução.

Meça a maturidade da governança com controles de integridade de dados

Para garantir que a governança seja eficaz e crie valor comercial, você precisa avaliar a maturidade da governança de dados em escala em toda a empresa. Ao aplicar a medição interna de controles, o gerenciamento de integridade permite que o escritório central de dados ou um domínio de governança individual veja onde eles podem melhorar. A coleta dessas evidências em escala eleva rapidamente os problemas de dados mais críticos que afetam os negócios e mostra onde um problema afeta muitas áreas dos negócios. Essa evidência ajuda a resolver problemas de priorização ao fazer alterações no gerenciamento de dados e demonstra rapidamente o valor de ter o nível certo de governança em vigor.

1. Estabeleça um ritmo de negócios para revisar as práticas de gestão da saúde:
   1. Faça uma revisão mensal com os líderes de domínio de governança e o escritório central de dados para discutir prioridades e necessidades para novas soluções técnicas ou de governança.
   2. Capacite as equipes a se aprofundarem em seus relatórios de gerenciamento de saúde para garantir que possam tomar as melhores decisões para criar o valor de que precisam em seus negócios.
   3. Levar a gestão da saúde a todos os níveis do negócio, desde o SLT até o administrador individual, para garantir que a governança seja nivelada e consistentemente acionável.
   4. Quando os dados tiverem problemas maiores que exijam colaboração entre empresas ou governança mais profunda, considere a criação de um novo domínio de governança e a definição de propriedade para impulsionar a governança desses dados.
2. Não espere que todos os domínios de governança tenham o mesmo nível de maturidade ou se concentrem nos mesmos aspectos da governança:
   1. Habilitar a governança no nível certo capacita os proprietários de negócios a tomar as decisões mais valiosas sobre o que fazer com seus dados.
   2. Nem todas as partes do negócio têm as mesmas necessidades de seus dados, e forçar níveis mais profundos de governança pode não ajudar a criar valor comercial quando o foco está em outro lugar.
   3. Alguns dados são menos valiosos ou emergentes no acervo de dados, e o valor ainda não é totalmente conhecido. Permitindo que as equipes se movam rapidamente e se adaptem às suas necessidades para que possam amadurecer sua governança com o valor dos dados.
3. Avalie consistentemente o gerenciamento de saúde para procurar grandes mudanças que possam indicar grandes problemas ou novos aprendizados que precisam de atenção.
4. Compartilhe suas pontuações de gerenciamento de saúde. O compartilhamento pode reunir as equipes para saber o que funciona para elas ou como estão encontrando novos controles para criar um novo valor em um domínio. Ver como é uma saúde "boa" pode motivar outras equipes a melhorar e garantir que também estejam fornecendo dados valiosos aos seus consumidores.

Criar padrões específicos do domínio

Os proprietários de negócios dos dados são mais adequados para garantir que a governança de dados seja do tamanho certo para o nível de valor e controle necessário. Essas equipes de negócios já têm dependências dos dados e estão na melhor posição para definir suas expectativas e necessidades para garantir que os dados sejam valiosos.

• Capacite os domínios de governança para criar novos controles para seus dados, independentemente de onde os dados sejam usados.
• Não espere que todos os domínios de governança precisem do mesmo nível de controles ou adotem todos os controles. Os dados confinados para uso a uma única parte da empresa por design podem não se beneficiar de um alto nível de controle. Criar mais controle sobre dados que não têm o valor apropriado pode impedir que as equipes coletem ou mantenham dados que não são totalmente utilizados.
• Use o nível certo de controle para ajudar a priorizar onde os dados de baixo valor podem ser removidos do domínio de governança para eliminar riscos e aumentar o valor do patrimônio de dados.

Pronto para começar?

Para criar uma prática de governança de dados em sua organização usando o Catálogo unificado e o Mapa de dados, consulte Introdução à governança de dados ou Marque o passo a passo de configuração de exemplo para obter mais um exemplo baseado em cenário de como executar funções-chave no Catálogo unificado.