Qualidade de Dados / Data Quality

Curiosamente depois do post de ontem chegou-me um email com um artigo que acaba por reiterar o que disse.

Resumidamente o que a Gartner vem mostrar são os 10 mitos que o conceito de gestão de dados (MDM) que se iniciou como uma forma de manter as informações actualizadas e uniformes em toda a organização, mas que durante o tempo tem existido alguns equívocos sobre a sua necessidade e implementação. No ponto 9 fala-se precisamente de qualidade de dados.

Mito 1: O MDM é implementar uma tecnologia
Realidade: MDM é muito menos sobre tecnologia e muito mais sobre a compreensão de como os processos de negócios é suposto trabalharem.

Mito 2: MDM é um projecto
Realidade: MDM é implementado como um programa que muda para sempre a maneira como a empresa cria e gere os seus dados. No entanto, para adoptar o MDM vai exigir numerosos projectos distintos.

Mito 3: Não necessitamos de MDM, temos um Enterprise Data Warehouse (EDW)
Realidade: MDM deve / irá abranger a organização em todas as unidades de negócios e processos (incluindo os armazéns de dados operacionais e analíticos).

Mito 4: Implementação de ERP significa que não necessita de MDM
Realidade: Geralmente o Enterprise Resource Planning (ERP), significa uma estratégia empacotada de aplicações de negócio, na maioria das vezes centrada num único grande fornecedor. Está implícito no ERP, mas raramente é realizado para a organização do utilizador, um único processo e modelo de dados em toda a organização.

Mito 5: O MDM é apenas para empresas grandes e complexas
Realidade: O princípio da MDM é aplicada sempre que dois ou mais processos de negócio devem exibir ou partilhar dados. Isto significa que a maioria das organizações têm uma necessidade para a disciplina de MDM, mesmo que não lhe chamem assim, ou se implementaram uma tecnologia separada chamada MDM.

Mito 6: Os metadados são 'a' Chave para MDM
Realidade: Os metadados são essenciais para MDM (e muitos esforços fora do MDM), mas como metadados é aplicado no contexto do MDM difere por domínio, a indústria, forma de uso e estilo de implementação.

Mito 7: MDM é um esforço de TI
Realidade: MDM deve ser conduzido pela empresa, um caso de negócio, e apoiados / habilitados por TI.

Mito 8: MDM é simplesmente muito grande para fazer
Realidade: MDM pode ser e está sendo adoptado por um domínio ou uma província de cada vez, e um caso de uso de cada vez.

Mito 9: MDM é separado da Data Governance e Data Quality (Qualidade de dados)
Realidade: MDM inclui a gestão (dos dados) e a qualidade (de dados) - MDM não pode ser estabelecida sem eles.

Mito 10: Não importa qual fornecedor de tecnologia utilizado - They All 'Do' MDM
Realidade: MDM é complexa, raramente duas organizações têm programas de MDM parecidos. Vendedor de MDM tem a capacidade, de focar na especialização em domínio de dados, na indústria, forma de uso, organização e estilo de execução. Por conseguinte, a seleção do fornecedor é crítica em organizações que buscam encontrar o parceiro certo.

Fonte

Podem existir muitas razões, mas em grande parte dos casos a resposta é simples. Falta de qualidade de dados!

Como se pode ter bons resultados se os dados, que são os alicerces de toda a estrutura não estão consolidados, têm erros, existe falta de dados essenciais e muitos outros problemas?

A maioria das empresas acha que os seus dados estão excelentes, porque os devolvidos não são contabilizados, são apenas "despejados" para uma arrecadação da empresa, ou chegam aos destinatários apenas porque o carteiro já conhece o nome da pessoa. Mas, estamos a assistir a uma renovação dos carteiros e isso vai levar à existência de mais devolvidos. mais uma vez como voltam para a tal arrecadação, continua a não existir o problema.

Os custos de uma devolução não podem ser contabilizados, porque para alem dos custos dos portes, do envelope, da carta ou peça publicitaria existente no envelope, existem depois outros que são impossíveis de contabilizar. Por exemplo o custo da imagem. Um cliente que não recebe uma comunicação importante, ou que recebe um folheto publicitário várias vezes, pode ser um cliente perdido.

Alguns dos problemas que se encontram muitas vezes e que impedem os sistemas de ter bons resultados são:

• o mesmo cliente existe em vários registos porque não existe um processo fiável de verificação de duplicados, fazendo com que um excelente cliente, seja considerado apenas várias vezes como clientes medianos.
• os dados da morada do cliente não são normalizados/ verificados/ corrigidos, fazendo com que por exemplo não seja atribuído à respectiva área geográfica. Em muitos casos apenas existe o campo do Endereço Postal, não existindo também o campo Localidade, que em Portugal pode ser o suficiente para a devolução de correspondência.
• Como os dados não estão correctos, não é possível geo-referenciar. A georeferenciação é hoje em dia uma ferramenta muito importante para quase todos os negócios.
• existem erros em dados fulcrais por falta de um sistema de monitorização, que impeça esses erros de continuarem no sistema, muitas vezes ad eternum.
• Dados dos vários sistemas não são cruzados porque os sistemas usam ID's diferentes para o mesmo cliente e como tal falta informação no sistema principal para que se possa ter uma melhor noção da situação real.

Tudo isto pode ser ser evitado, tomando alguns cuidados.

• Existir apenas um responsável pelos dados da empresa. A noção que os dados são responsabilidade de todos é sem duvida teoricamente uma boa politica, mas na realidade acaba por desresponsabilizar todos, tendo um efeito contrario na qualidade dos dados.
• Fazer um profiling dos dados de forma a saber quais os erros que existem em BD. Desta forma é possível não apenas corrigir os erros existentes, mas também tomar medidas para prevenir que voltem a ocorrer.
• Fazer uma normalização/ correcção/ verificação dos dados e uma deduplicação de forma a consolidar os dados em modo batch. Desta forma os dados ficam com qualidade.
• Ter a noção que a perfeição em qualidade de dados é impossível de alcançar. Todos os dias trabalhamos para nos aproximar, mas todos os dias há novos dados, dados alterados. O problema mais uma vez é o pensar que os dados estão correctos. Isso nunca acontece. Há formas de minimizar os erros, umas melhores (online), outras com altos e baixos (batch periódico).
• Colocação de um software de monitorização dos dados, para que possam existir alarmes quando um erro está a ser colocado no sistema e não traga problemas posteriormente.

Soluções Data Quality da Uniserv para ERP - elevada qualidade dos dados em todas as áreas da empresa

As soluções de Data Quality da Uniserv vai ajudá-lo a desenhar o seu planeamento empresarial e controlar de modo que seja mais flexível, mais transparente e mais confiável. Corrigir os dados de forma consistente e completa no seu sistema ERP para garantir a eficácia, os processos de negócio operacionais e decisões de negócio mais informadas.

Data Quality Batch Suite da Uniserv para ERP: A suite completa de produtos para a verificação em batch de forma totalmente automática e limpeza dos dados de cliente e de fornecedor, material e os dados do produto e para o acompanhamento regras de negócio no seu sistema ERP.

Data Quality Real Time Service para ERP: Para a protecção imediata da sua qualidade de dados ao criar contas de clientes e fornecedores e para fazer a comparação com listas de embargo da UE.

A nossa contribuição para o sucesso do seu ERP: Rápido, tolerante ao erro na pesquisa, o reconhecimento e agrupamento automático de duplicados por nome e morada, validação de dados e complementarização ou sincronização com outros sistemas são apenas algumas das funções do DQ Batch Suite e do DQ-Real Time Services da Uniserv - a nossa contribuição para o uso eficiente do seu sistema ERP.

Quanto mais flexível e mais confiável for o planeamento corporativo e as funções de controle, maior será o potencial para identificar oportunidades de negócios com mais rapidez e acompanhar a evolução do mercado, sem quaisquer problemas. Isso exige um eficiente sistema de Enterprise Resource Planning (ERP), que fornece uma visão única de todas as áreas da empresa, tais como finanças e controle, produção e logística, gestão de materiais, marketing, vendas e gestão de pessoal.

Muito frequentemente, contudo, master data inconsistente e sua má qualidade significa que os processos de negócio cooperativo não podem ser adequadamente implementados e as decisões estratégicas devem ser feitas sem uma base de informação forte.

Desafios
Informações incorrectas de clientes na master data - maior consumo de recursos, custos elevados
A má qualidade dos dados do cliente na base de dados pode significar que as mercadorias não sejam entregues, e é preciso grande esforço para investigar os endereços. Sistematicamente, o planeamento de rotas rentável para a logística, torna-se uma loteria, e detalhes de contas bancárias incorreras, fornecidas de forma intencional ou inadvertidamente, pode levar a atrasos no pagamento ou mesmo o não-pagamento.

Dados incorrectos fornecedor - mal informados, maior risco
Endereços de fornecedor correctos e os números de telefone têm um papel importante, especialmente na compra, contratualização, engenharia de qualidade e logística. Num caso extremo, dados de baixa qualidade podem causar problemas de abastecimento que pode até resultar no parar de uma produção de custos elevados - com consequências imprevisíveis para o relacionamento com o cliente. Por outro lado, informações adicionais, por exemplo, sobre a credibilidade dos fornecedores, podem elevar consideravelmente a gestão do risco.

Aplicação inadequada de dados - o risco de consequências jurídicas
Todas as empresas na União Europeia são obrigadas a comparar todos os parceiros de negócios em relação à lista embargo da UE para produtos e operações de pagamento e, por exemplo a informar as autoridades se suspeita de terrorismo. Pesadas multas pode ser a consequência, se este não for cumprido em virtude da fraca qualidade dos dados. A reputação da empresa também sofre, pelo que a confiança dos clientes e parceiros é afectada, o que coloca as actividades da empresa em risco.

Master data de produtos e materiais inconsistente - um travão no processo efectivo
Os registos de dados de produtos e materiais em bases de dados das grandes empresas frequentemente chegam aos cinco dígitos. Isso torna difícil para os funcionários seleccionarem o produto correcto de forma inequívoca e as descrições de materiais que cumpram com as directrizes ao criar os dados. Isso resulta em descrições individuais que só podem ser encontrados por outros funcionários, após prolongada procura ou quando não em todos, em alguns casos. Base de dados com pobre qualidade dos dados diminui a produtividade das empresas, atrasos dos processos e fazem com que haja custos de investigação desnecessários.

Processos ineficientes de negócio - um terreno fértil para as decisões empresariais incertas
Os dados de um sistema ERP não são apenas necessários para os processos de negócio cooperativo, mas também servem como base para análises e decisões estratégicas (Business Intelligence). Má qualidade dos dados pode comprometer o cumprimento das regras de negócios, reduzir a utilidade das análises e adiar decisões de negócio importantes ou significar que sua base está doente.

Focus: Orientação para o cliente

Reforçar relações com os clientes
A concorrência para o auxilio ao cliente é uma questão central no planeamento estratégico de negócios no que diz respeito à transparência do mercado e da permutabilidade dos produtos e serviços. Orientação sistemática para o cliente e a gestão de informações abrangentes são indispensáveis quando se trata de ganhar vantagens competitivas decisivas.
Como resultado, a actualidade dos dados com alta qualidade e a preparação da informação desempenham hoje em dia um papel cada vez mais importante no incremento do desempenho empresarial e na criação de valor.
Isto aplica-se particularmente à administração profissional e manutenção de informações de endereço, porque estes são os sustentáculos de qualquer relacionamento com o cliente e com o mercado.

O potencial de sucesso do endereço
Os especialistas concordam que bases de dados correctas, actualizadas, completas e, acima de tudo, livres de duplicados são um factor crítico para o sucesso e para a aplicação uniforme de uma comunicação individualizada no atendimento ao cliente em toda a empresa.
Além disso, são indispensáveis para uma gestão profissional dos clientes, orientadas para a qualidade com uma base de dados qualificada um-para-um no Ponto de Venda. Só nesta base se pode desenvolver e implementar estratégias de sucesso para a ligação com o cliente e incrementar o mercado. O mesmo se aplica às avaliações aos clientes, envio de cheques de crédito, consignações ou envios de facturas e transacções que são diferenciadas de acordo com o cliente ou destinatário. As informações do endereço com qualidade optimizada é um pré-requisito em todos os casos.

Valor acrescentado para mySAP™ Business Suite

Address Management no ambiente do mySAP™ Business Suite
Sistemas integrados globais, tais como o mySAP™ Business Suite têm o objectivo de actualizar e disponibilizar informações transparentes em toda a empresa por meio de aplicativos de negócios abrangentes e flexíveis com funções altamente desenvolvidas.Com seu conceito de aplicação aberta, o mySAP™ Business Suite suporta a integração de soluções de software externas complementares. Como resultado, os endereços de clientes potenciais, clientes, fornecedores ou parceiros administrados no mySAP™ Business Suite podem ser perfeitamente geridos e mantidos "up-to-date".
As soluções desenvolvidas pela Uniserv para verificação de endereços em toda a empresa, tolerantes ao erro, procuram com acesso directo à base de dados de endereços atender à demanda de optimizar tanto a interacção como o diálogo com os parceiros de negócios.

mySAP™ Business Suite - Maximização dos benefícios
Ampliamos o âmbito da actividade do SAP® R/3®, da solução mySAP ERP e da aplicação mySAP™ CRM, funções de front-end que são essenciais para os seus processos de negócio. Como resultado, pode optimizar a utilização do mySAP™ CRM para gestão de relacionamento de forma global e sistemática.
Além disto, a integração em aplicações web, como o Webclient IC é possível. Isto permite o uso móvel da função independentemente da localização.
As soluções de software independentes da Uniserv, assumem, assim, um papel-chave na sua estratégia de TI focada em parceiros de negócios e de mercado, independentemente do sistema operativo utilizado e dos antecedentes da aplicação.

A alta qualidade para os dados do cliente também para Oracle Siebel CRM: Com DQ Connector Real-Time Siebel CRM, a Uniserv integra validação postal e deduplicação em Oracle Siebel CRM

A solução de qualidade de dados da Uniserv GmbH tem as funções de validação postal e deduplicação disponíveis para os utilizadores do Oracle Siebel CRM da versão 8.0 através do conector DQ Real-Time. Como resultado, a qualidade dos dados das soluções post e mailRetrieval podem ser integradas no cliente Oracle Siebel Relationship Management (CRM) sistema para Siebel Enterprise Applications e Siebel Industry Applications. Uma validação postal tolerante ao erro tal como a deduplicação podem ser ativadas para a entrada de novos contactos e para alterar informações de endereço de dados de clientes existentes. Desta forma, teremos informação sempre up-to-date, correta, coerente e completa de informações relacionadas com cliente e que podem ser fornecidas para todos os utilizadores de um sistema de CRM, permitindo assim uma gestão eficiente e bem sucedida de todos os trabalhos, vendas e marketing, assim como de todos os processos controlados por este. Nenhuma programação manual por parte do cliente é necessária para ativar o conector DQ no ambiente Siebel CRM da Oracle: Os plug-ins são integrados através de processos automatizados, utilizando os recursos padrão disponíveis no Siebel.

"Com o conector DQ Real-Time Siebel CRM, estamos agora também a apoiar as empresas que utilizam o Siebel CRM para uma gestão eficiente dos dados dos seus clientes, garantindo assim o sucesso de solução de gestão de clientes, principalmente através de uma alta qualidade, de forma consistente, das informações armazenadas do cliente. Após a apresentação da integração Plug&Play no Microsoft Dynamics CRM em Novembro de 2009, o DQ Connector Real-Time Siebel CRM é um passo decisivo para tornar os serviços de qualidade de dados da Uniserv disponíveis para os principais sistemas de CRM", diz o CEO da Uniserv Roland Pfeiffer, comentando sobre a nova oferta.

• Especialista em qualidade de dados viu bem sucedida a re-certificação nas últimas versões SAP das suas ferramentas de validação de endereços e de limpeza de duplicados
• "SAP Certified Integration with SAP Netweaver" atesta a capacidade de integração consistente e a capacidade de ser altamente user-friendly.

A Uniserv GmbH é o maior fornecedor especializado de soluções de qualidade de dados na Europa, com um portfólio de software utilizável a nível internacional e, em colaboração com o parceiro estratégico SAP Paricon, mais uma vez, recebeu o certificado "SAP Certified Integration with SAP Netweaver" para as últimas versões SAP, demonstrando assim as capacidades das ferramentas Unicode para validação de endereços (Uniserv post SAP) e limpeza de duplicados (Uniserv mail SAP). O parceiro de longa data da SAP, tem provado a capacidade de integração consistente das suas soluções de software para a garantia da qualidade e melhoria da qualidade na gestão de dados de clientes e negócios em aplicações SAP, pela terceira vez consecutiva. Além disso, a SAP enfatizou que a manipulação das soluções foi "user friendly" no processo de certificação para os aspectos técnicos e funcionais nas soluções de normalização e deduplicação com base em testes padronizados.

"Com mais de 40 anos experiência como especialista em qualidade de dados, especialmente no ambiente SAP, combinamos as vantagens de um fornecedor de produtos com os de uma empresa de projecto experiente e fornecedor de soluções, podendo oferecer aos utilizadores de soluções SAP, que são precisamente adaptadas aos seus processos de ERP ou CRM através dos efeitos de sinergia decorrentes no nosso Centro de Competência ", diz Georg Seitz, diretor da SAP Uniserv DQ Competence Center , sumariando os benefícios. "Estudos realizados por analistas de renome mostram que a questão da qualidade dos dados está sendo cada vez mais levado em linha de conta no mercado SAP existindo cada vez mais pedidos de informação- a este respeito, nós oferecemos tanto aos especialistas como aos utilizadores finais neste ambiente conceitos convincentes e transparentes de qualidade de dados medidas de uma única fonte. "

A Uniserv SAP DQ Competence Center tem pacotes especiais de baixo custo, à disposição das empresas com utilizadores SAP. Cada oferta inclui uma análise da qualidade da base de dados, incluindo uma descrição dos défices, o desenvolvimento das estratégias necessárias para a sua eliminação e prevenção, bem como a aplicação das ferramentas que serão posteriormente implementadas para garantir a qualidade dos dados. Ferramentas utilizáveis internacionalmente estão disponíveis como uma solução in-house, mas também podem ser usadas on-demand como Software as a Service (SaaS); combinação das duas formas de implementação também é possível.

____________________________________________________________________________

*SAP, R/3, SAP NetWeaver, Duet, PartnerEdge, ByDesign, SAP Business ByDesign e outros produtos e serviços SAP mencionados no texto assim como os respectivos logos são registados ou marca registada da SAP AG na Alemanha e outros países. Todos os outros nomes de produtos e serviços são marca registada das respectivas empresas.

Fonte