4.5 4.5 - Governança de dados.
4.5.1 4.5.1 - Conceito e noção básica.
A governança de dados é um processo que visa garantir o uso eficiente, seguro e ético dos dados em uma organização, para gerar valor e apoiar a tomada de decisão.
Um exemplo prático de governança de dados é a implementação da Lei Geral de Proteção de Dados (LGPD), que estabelece regras para o tratamento dos dados pessoais dos cidadãos, garantindo seus direitos e deveres.
Para cumprir a LGPD, as organizações precisam definir políticas, padrões, funções, responsabilidades e métricas que orientem o ciclo de vida dos dados pessoais, desde a sua coleta até a sua análise e compartilhamento.
Além disso, é necessário utilizar ferramentas e tecnologias que facilitem o gerenciamento, a qualidade, a catalogação, o perfilamento e a proteção dos dados pessoais, de acordo com as normas legais e regulatórias vigentes.
A governança de dados é um elemento essencial para a transformação digital e a inovação nas organizações, pois permite extrair insights valiosos dos dados e criar uma cultura orientada a dados.
4.5.2 4.5.2 - Arquitetura de Dados.
Ensinar arquitetura de dados é uma tarefa importante para garantir a qualidade, a segurança e a eficiência dos dados nas organizações.
A arquitetura de dados define como os dados são coletados, armazenados, processados, distribuídos e consumidos pelos diferentes usuários e sistemas.
A governança de dados é um conjunto de políticas, processos e ferramentas que visam garantir o cumprimento das normas, regulamentos e boas práticas relacionados aos dados.

Alguns dos aspectos da governança de dados são:
  • Implementação de padrões e metadados. Metadados são dados sobre os dados, ou seja, informações que descrevem as características, o conteúdo, a origem, a qualidade e o uso dos dados. Os metadados facilitam a localização, o entendimento e a integração dos dados pelos usuários e sistemas. Por exemplo, um metadado pode indicar o nome, o tipo, o formato, a fonte e a data de atualização de um dado.
  • Definição de papéis e responsabilidades. Cada pessoa ou entidade envolvida na gestão dos dados deve ter clareza sobre suas atribuições, direitos e deveres em relação aos dados. Por exemplo, um papel pode ser o de produtor, provedor, consumidor ou administrador de dados.
  • Gestão do ciclo de vida dos dados. Os dados devem ser gerenciados desde a sua criação até a sua eliminação, passando por etapas como coleta, validação, transformação, armazenamento, distribuição, análise e arquivamento. Por exemplo, uma etapa pode ser a de aplicar regras de negócio para transformar os dados brutos em dados refinados.
  • Proteção da privacidade e da segurança dos dados. Os dados devem ser tratados com respeito e cuidado, seguindo as leis e os princípios éticos que protegem os direitos dos titulares dos dados. Os dados devem ser protegidos contra acessos não autorizados, alterações indevidas ou perdas acidentais. Por exemplo, uma medida pode ser a de criptografar os dados sensíveis ou sigilosos.
  • Avaliação da qualidade e da confiabilidade dos dados. Os dados devem ser verificados quanto à sua precisão, consistência, completude, atualidade e relevância para os propósitos pretendidos. Os dados devem ser confiáveis para apoiar a tomada de decisões baseadas em evidências. Por exemplo, um critério pode ser o de verificar se os dados estão alinhados com as expectativas dos usuários ou com as metas da organização.
  • Promoção da cultura e da ética de dados. As organizações devem estimular o uso adequado e responsável dos dados, bem como o desenvolvimento de competências e conhecimentos sobre os dados. As organizações devem incentivar a transparência, a colaboração e a inovação com os dados. Por exemplo, uma ação pode ser a de realizar treinamentos ou workshops sobre arquitetura e governança de dados.

A análise de dados é um processo que envolve a aplicação de técnicas estatísticas, matemáticas ou computacionais para extrair insights ou conhecimentos dos dados.
A análise de dados pode ter diferentes objetivos, como descrever fenômenos, explorar padrões ou tendências, testar hipóteses ou prever resultados.
A análise de dados depende da qualidade e da confiabilidade dos dados disponíveis, bem como das habilidades e das ferramentas do analista.

Portanto, ensinar arquitetura de dados no que se refere à governança de dados é essencial para formar profissionais capacitados para lidar com os desafios e as oportunidades da era digital.
A arquitetura e a governança de dados são áreas estratégicas que podem trazer benefícios para as organizações em termos de eficiência operacional, competitividade de mercado e conformidade legal.
4.5.3 4.5.3 - Qualidade de Dados.
A qualidade de dados é um aspecto essencial da governança de dados, pois se refere ao grau em que os dados atendem aos requisitos e expectativas dos usuários e das partes interessadas.
Os dados de qualidade devem ser precisos, completos, consistentes, confiáveis, relevantes e oportunos.
A qualidade de dados pode afetar diretamente o desempenho, a eficiência, a conformidade e a inovação de uma organização.

Para ensinar qualidade de dados no que se refere à governança de dados, é importante abordar os seguintes tópicos:
  • O que é governança de dados e quais são seus objetivos, benefícios e desafios.
  • O que são metadados e como eles facilitam a compreensão, o gerenciamento e o uso dos dados.
  • Quais são os princípios, as dimensões e os indicadores da qualidade de dados.
  • Quais são as etapas e as ferramentas para avaliar, monitorar e melhorar a qualidade de dados.
  • Quais são as melhores práticas e os padrões para garantir a qualidade de dados em todo o ciclo de vida dos dados.

Um possível roteiro para ensinar qualidade de dados no que se refere à governança de dados é:
  • Introduzir o conceito de governança de dados e explicar sua importância para as organizações que lidam com grandes volumes e variedades de dados.
  • Apresentar os principais componentes da governança de dados, como políticas, normas, papéis, responsabilidades e processos.
  • Definir o que são metadados e como eles descrevem as características, o contexto e o significado dos dados.
  • Mostrar exemplos de tipos de metadados, como técnicos, operacionais e de negócios, e como eles podem ser gerenciados por meio de catálogos ou repositórios.
  • Discutir o conceito de qualidade de dados e sua relação com a governança de dados.
  • Explicar os princípios da qualidade de dados, como adequação ao uso, adequação ao propósito e adequação ao contexto.
  • Apresentar as dimensões da qualidade de dados, como precisão, completude, consistência, confiabilidade, relevância e oportunidade.
  • Demonstrar como medir a qualidade de dados por meio de indicadores quantitativos ou qualitativos, como taxa de erro, taxa de preenchimento, taxa de duplicação, nível de confiança, nível de satisfação e nível de impacto.
  • Descrever as etapas para avaliar, monitorar e melhorar a qualidade de dados, como definir requisitos, coletar dados, analisar dados, implementar ações corretivas ou preventivas e verificar resultados.
  • Apresentar as ferramentas disponíveis para apoiar a gestão da qualidade de dados, como validadores, limpadores, enriquecedores, padronizadores e integradores de dados.
  • Recomendar as melhores práticas e os padrões para garantir a qualidade de dados em todo o ciclo de vida dos dados, como seguir as normas da organização ou do setor, documentar os metadados e os processos envolvidos na produção e no consumo dos dados, estabelecer responsabilidades claras pela qualidade dos dados entre os produtores e os consumidores dos dados e promover uma cultura de qualidade de dados na organização.
  • Adicionar um exemplo prático de como aplicar os conceitos de qualidade de dados em um cenário real. Por exemplo: Suponha que uma empresa quer analisar o perfil dos seus clientes para oferecer produtos personalizados. Para isso, ela precisa ter dados confiáveis sobre as características demográficas (como idade, gênero e localização), comportamentais (como preferências, hábitos e interesses) e transacionais (como histórico de compras) dos seus clientes. No entanto, ela enfrenta alguns problemas com a qualidade dos seus dados: alguns campos estão vazios ou incompletos; alguns valores estão incorretos ou inconsistentes; alguns registros estão duplicados ou desatualizados; alguns clientes não autorizaram o uso dos seus dados para fins comerciais. Para resolver esses problemas, ela precisa seguir as seguintes etapas: definir os requisitos da qualidade dos seus dados com base nos objetivos da análise; coletar os dados dos seus clientes a partir de diferentes fontes, como sistemas internos, redes sociais ou pesquisas; analisar os dados para identificar e quantificar os problemas de qualidade; implementar ações para corrigir, completar, padronizar, enriquecer e integrar os dados; verificar os resultados para garantir que os dados atendem aos requisitos de qualidade; documentar os metadados e os processos de qualidade dos dados; atribuir responsabilidades pela qualidade dos dados entre as equipes de marketing, vendas e TI; criar uma cultura de qualidade de dados na empresa, incentivando o uso adequado e ético dos dados dos clientes.

4.5.4 4.5.4 - Metadados.
Metadados são informações que descrevem os dados em termos de sua origem, estrutura, qualidade, significado e uso.
A governança de dados é o conjunto de políticas, processos e ferramentas que garantem a integridade, segurança, disponibilidade e conformidade dos dados de uma organização.
Ensinar metadados no que se refere à governança de dados é uma forma de capacitar os profissionais e usuários de dados a entenderem melhor os ativos de informação da organização e a utilizá-los de forma eficiente e responsável.
  • Para- Um analista de dados precisa encontrar um conjunto de dados sobre as vendas da empresa nos últimos meses. Com o auxílio dos metadados, ele pode localizar rapidamente os dados que atendem aos seus critérios de busca, como a fonte, o período, o formato e a qualidade dos dados.
  • Um desenvolvedor de sistemas precisa integrar os dados de dois sistemas diferentes que usam terminologias distintas para os mesmos conceitos. Com o auxílio dos metadados, ele pode mapear as correspondências entre os campos e as tabelas dos sistemas, garantindo a consistência e a interoperabilidade dos dados.
  • Um gestor de dados precisa garantir que os dados da sua organização estejam em conformidade com as leis e regulamentos vigentes. Com o auxílio dos metadados, ele pode identificar quais dados são sensíveis ou confidenciais e aplicar as medidas de segurança e privacidade adequadas.
  • Um líder de negócio precisa tomar uma decisão estratégica baseada nos dados disponíveis. Com o auxílio dos metadados, ele pode avaliar a confiabilidade e a relevância dos dados que está usando, bem como a sua origem e o seu contexto. ilustrar a importância dos metadados na governança de dados, podemos citar alguns exemplos práticos: