Assessoria em qualidade de dados (Data Quality Assessment)

“As organizações de hoje precisam abordar com urgência o problema de integração e qualidade dos dados, pois estão afetando gravemente a confiabilidade das soluções de apoio à tomada de decisões” dizem os analistas de IDC.

As soluções de BI e Enterprise Planning ainda não conseguiram ser reconhecidas como o melhor veículo de uso estratégico na informação organizacional. A combinação de dados de multidão de fontes; transformando-os em informação que entregue uma visão confiável do desempenho dos processos de negócio; e assegurar que chegue às pessoas corretas da organização a informação correta para tomar decisões consistentemente.

Com isto em mente, e tendo em conta que BI e EP devem-se basear em dados de qualidade, resultará oportuno e com visão no futuro abordar a problemática da qualidade dos dados como parte de sua implementação de BI & EP. Todos procuramos ter a segurança de ter dados da melhor qualidade possível nos quais basear-nos para tomar as decisões críticas de negócio.

Como a tecnologia pode apoiar o processo de qualidade de dados?

Os dados que são carregados dentro de um data warehouse normalmente estão cheios de vários tipos de erros. Estes são os tipos erro mais conhecidos:

Completitude: Estão presentes todos os dados necessários?
Conformidade: Que dados estão armazenados num formato não estandardizado?
Consistência: Que valores dão informação conflitiva?
Duplicação: Que registros de dados estão repetidos?
Integridade: Que dados importantes perderam o vínculo de relações?
Oportunidade: A idade dos dados com os pedidos dos usuários?

Os erros de Conteúdo, Estrutura e Consistência são de tratamento básico. Em primeiro lugar, pode suceder que os dados fisicamente não concordem com seu metadata: por exemplo, você tem um valor alfabético dentro de um campo definido para suportar um valor numérico. Em outras palavras, o dado é inválido. Em segunda instância, pode suceder que o dado é válido, mas incorreto. Por exemplo, o endereço postal pode estar num formato correto, mas atualmente não corresponde com algum endereço conhecido.

Como apoiamos sua organização com o problema de qualidade de dados?

Mediante o que denominamos uma análise rápida sobre a qualidade dos dados, efetuamos uma análise e descoberta dos principais problemas, focados para as tabelas de dimensões e as tabelas de fatos que estão suportando os sistemas que provêem a informação para a tomada de decisões. Este assessment leva entre 1 e 2 semanas.

Os temas que se incluem são:

• Análise e descoberta da qualidade dos dados para incrementar o conhecimento sobre a disposição dos dados e os problemas de qualidade

• Qualidade estrutural dos dados permite apreciar o risco e estimar o orçamento requerido para desenvolver o projeto de qualidade dos dados

• Estabelecer scorecard de qualidade de dados onde definem-se métricas de qualidade para ter pontos de controle e avanço, ao igual que se desenha com tecnologia a estratégia para o desenvolvimento

• Informe do assessment neste ponto entrega-se um relatório com métricas, um processo básico e uma estratégia recomendada para desenvolver os seguintes passos.