Unknown

[Música] [Música] [Música] [Música] [Aplausos] [Música] [Música] [Música] [Música] [Música] [Música] [Música] estamos ao vivo em mais uma palestra da semana dados BR Boa tarde a todos sejam muito bem-vindos e a mais um momento especial me chamo Fabiano graça sou Red do governança de dados no Serpro faço parte da organização da semana e vou auxiliar na conduta desta palestra que será com professor Marcelo de Oliveira sobre qualidade de dados como requisito essencial para transformação digital um tema que é extrema relevância e que precisa fazer parte do processo de gestão de dados das organizações mas antes de

começarmos temos alguns Breves avisos na semana de dados está sendo organizada pela Controladoria Geral da União pelo Ministério da gestão inovação e serviços públicos e pelo núcleo de informação e coordenação do ponto br E tem como objetivo principal o compartilhamento de conhecimento e experiências de especialistas nacionais e internacionais em diversas áreas ligadas a dados visando o fomento de uma cultura orientada a dados no Brasil a semana da arte BR também conta com apoio patrocínio da Dataprev do servo do Instituto serzedelo Correia e sem eles não serem possível realizar um evento desse porte então pouco tempo

agora vamos falar um pouquinho sobre o nosso palestrante professor Marcelo de Oliveira ele menciona a disciplina gestão de idade nos cursos MBA engenharia de dados e Big Data na Escola Politécnica na Universidade de São Paulo MBA in Big Data engenharia de dados na FIAP e no curso de pós-graduação em Business intelligence da Faculdade Impacta ele também é diretor de projetos e serviços de gestão de dados dá acesso membro do comitê organizador do CJ latam a tua profissionalmente no campo gestão e qualidade de dados há 20 anos com experiência de projetos nos setores financeiros de varejo

e como estaria comunicações logística e serviço pode graduado em marketing pela escola superior de propaganda e marketing como Bacharelado em análise de sistemas pela PUC de Campinas sobre a dinâmica da apresentação palestrante terá uma fase de aproximadamente 30 minutos e após a palestra teremos um espaço de 15 minutos para perguntas quem desejar fazer perguntas pode fazer ela diretamente pelo chat do YouTube que nossa equipe selecionar algumas e serão feitas que serão feitas ao final agradeço a participação antecipadamente aí do professor Marcelo e é com você professor obrigado obrigado pessoal é um prazer participar aqui deste

evento com vocês um evento dessa magnitude né desenvolvido aí pelo Governo Federal isso é muito importante para nossa área de gestão de governança de dados né Isso mostra a importância do tema para todas as organizações e não é diferente também para as organizações governamentais isso é muito deixa muito contente e é uma oportunidade tanto para nós Compartilhamos conhecimento né todos que estão aqui acho que convida Inclusive a conferirem as demais palestras que aconteceram na semana vai ser muito importante então hoje o meu tema aqui vai ser qualidade de dados um tema extremamente importante um dos

das disciplinas dentro da gestão de dado e eu vou conversar com vocês a respeito do impacto da qualidade da informação no processo de eu sou o Marcelo eu sou uma pessoa branca estou usando óculos estou usando aqui uma camiseta polo Verde aqui com vocês e o primeiro assunto importante para nós comentarmos diz respeito à transformação digital que todos nós em todas as áreas em todas as organizações né estamos estamos vendo acontecer né de uma maneira muito forte né desde a frutaria lá do meu bairro que me atende até as grandes corporações por conta aí da

convite por conta da pandemia tiveram Impacto muito grande de se desenvolveram digitalmente foram obrigados a desenvolver digitalmente então a transformação digital nada mais é do que a integração da tecnologia digital em todas as áreas de negócio da organização isso gera um impacto muito grande nas pessoas nos processos dessas Organizações e o principal positivo dessas empresas é aprimorar por exemplo engajamento do seu cliente aumentar a sua eficiência operacional começar a produzir ter oportunidade de produzir e lançar produtos e serviços não é existem diversas pesquisas mostrando que esse assunto é prioridade em diversas organizações isso não deve

ser diferente também nos governos em todo mundo em todos os países há um movimento na direção da transformação digital também no ambiente governamental no governo no ambiente estatal nós aqui no Brasil temos a grata surpresa e alegria de ser reconhecido né o nosso governo reconhecido como o segundo país do mundo com mais alta maturidade no governo digital não é essa pesquisa aqui do Banco Mundial mostra isso é o caminho que o nosso país está tomando na linha da transformação digital isso nos deixa bastante orgulhosos e como cidadão todos nós aqui acredito já estamos percebendo esse

movimento a quantidade de transações de processos que nós conseguimos fazer hoje no nosso celular no nosso tablet no nosso tipo que isso é muito importante isso é sinal que a transformação digital está realmente abrangendo abrangendo todos os processos em todos os ambientes isso está acontecendo isso não é história isso não é previsão de futuro isso está acontecendo é presente dentro da transformação digital como eu comentei existe o componente humano da das pessoas dos colaboradores que são muito impactados por essa mudança que está acontecendo numa velocidade inacreditável mas nós temos ali o personagem muito importante que

é a informação e na minha experiência aqui junto com as empresas muitas vezes eu pergunto como é que tá dado dentro da sua organização os dados dentro da sua empresa Eu muitas vezes recebo feedback olha temos ali alguns problemas mas eu tenho controle a empresa tá andando os processos estão conseguindo entregar os nossos serviços os meus produtos não é mas de novo experiência nos projetos que eu desenvolvo com diversas empresas Eu percebo que há uma falta de visibilidade realmente qual é a situação do dado dentro dessa empresa e principalmente os impactos da má qualidade desse

dado dentro dos seus processos dentro do seu produto do engajamento com seu cliente e assim por diante então é esse é o assunto né o impacto da informação dentro da transformação digital e também obviamente dentro dos processos operacionais estratégicos e assim por diante e quais são os sintomas da qualidade da má qualidade desse dado do dado não adequado dentro das empresas dentro das organizações né então os processos de negócio sejam quais são sejam eles começam a perceber dados inconsistentes dados duplicados ausentes os executivos e os profissionais responsáveis pela tomada de decisão perdem a confiança naquelas

informações Então passa utilizá-las para sua tomada de decisão os os clientes passam as estratégias de relacionamento passam a não ser tão efetivas por conta da má qualidade desse dado os consumidores de dados internos as áreas internas passam a não ter credibilidade nessa inflam no uso desse dado e passa a usar muitas vezes sistemas aplicações internas por conta da uma qualidade de trabalho né Isso é algo muito comum muitas vezes eu recebo percebo a área de tecnologia se queixando da implantação de um novo produto uma nova solução interna e que o usuário não adota não usa

aquela solução e muitas vezes a causa dessa não utilização é a informação né então eu tenho uma aplicação que funciona de alta tecnologia mas com dado de má qualidade Outro ponto outro sintoma muito comum dessa realidade é o descumprimento de obrigações legais fiscais ou regulatórias por conta da má qualidade de dado então a empresa entrega um relatório que o órgão regulador com erro ou entrega atrasado isso gera consequências multas sanções e assim por diante para essas organizações não é acho que um ponto importante para falar é que esse sintomas esses problemas com dados não são

recentes não é algo da nossa tecnologia mais recente do nosso mundo aqui mais moderno né trago para vocês um exemplo clássico aqui da nossa disciplina durante as guerras napoleônicas lá em 1800 dois impérios Áustria Rússia decidiram se juntar contra Napoleão e perceberam que juntos poderiam ter ali uma chance muito maior de conseguir sucesso numa batalha contra o exército de Napoleão e marcaram ali uma data para que isso acontecesse então dia 20 de outubro na Bavária uma questão importante não foi levada em conta o calendário utilizado na época pela Áustria era o calendário gregoriano já Rússia

utilizava o calendário Juliano existia existe uma diferença de 10 dias entre os dois calendários E aí a consequência você já podem imaginar não é os exércitos de Napoleão renderam a australiano dia 21 de outubro e os russos chegaram 9 dias depois né e todo o plano foi não foi efetivo Eles foram derrotados por conta de uma interpretação por conta da qualidade da informação dentro desse projeto veja um exemplo da época de 1800 que hoje nós encontramos exemplos similares em todas as organizações né todas as organizações tem problemas tem e que geram consequências geram impactos grandes

nos seus processos de negócio dentro do contexto da transformação digital em uma disciplina importante é que hoje nós estamos falando muito são os processos os algoritmos de analíticos de matinilani de Inteligência Artificial e igualmente a informação a má qualidade do dado tem consequência é muito forte dentro desses processos não é dados imprecisos dados incompletos inconsistentes podem levar modelos treinados com esses dados a produzir previsões incorretas não confiáveis se eu estou provendo dados de uma qualidade a possibilidade de que os modelos não atendam ao meu objetivo é muito grande né a má qualidade do dado exige

mais pode exigir mais recurso computacional para o treinamento e inferência desses modelos por exemplo de uma Shineray as equipes de ciências de dados de Engenheiros imaginando por exemplo historicamente nós estamos percebendo isso gasta uma quantidade significativa de tempo para revisar e ajustar esses dados para torná-los adequados para os modelos e dos algoritmos né isso resulta em retrabalho atraso no desenvolvimento dos nossos modelos e dos projetos dados de má qualidade também podem dificultar a escalabilidade dos modelos de Maximiliano a medida que os volumes de dados aumentam e isso é uma característica dos projetos atuais os problemas

de qualidade dados se tornam ainda mais graves né tornando o processo de escalonamento ainda mais desafiador para as organizações uma característica do dado importante a medida que os dados envelhece a qualidade pode-se determinar ainda mais isso é uma característica da informação manter a qualidade do data ao longo do tempo requer a criação de processos contínuos de monitoramento e Recuperação e aprimoramento da qualidade Hoje nós estamos falando muito de Inteligência Artificial e já existem pesquisas já trago aqui para o nosso para nossa conversa uma pesquisa do Garten extremamente recente mostrando o impacto da qualidade do dado

dentro dos programas dos projetos que envolvem Inteligência Artificial então é uma ainda uma das cinco maiores Barreiras dentro do desenvolvimento de projetos de Inteligência Artificial gosto muito dessas duas frases aqui que traduz de maneira muito simples o impacto dessa informação da má qualidade do dado dado ruim lixo que entra lixo que sai não é e a segunda frase aqui que fala que a fruta o produto reflete a sua semente então se nós estamos alimentando o nosso projeto o nosso plano estamos alimentando o nosso programa de transformação digital com dados de má qualidade nós estamos impactando

de maneira significativa esse programa então a qualidade do dado ela ela tem um impacto proporcional a importância do dado Nesse contexto da transformação digital uma barreira também extremamente importante e comum nas organizações Estive ontem aí participando do evento presencialmente em Brasília e não foi diferente também no contexto governamental é uma barreira que também foi nos foi trazida no evento lá nos Estados Unidos não é mentira a respeito de qualidade da informação numa palestra o responsável pela gestão de dados nas Forças Armadas Americanas ele deu uma um exemplo ou ele nos contou qual era a principal

barreira que ele enfrentava dentro das forças armadas para implantar um programa de gestão de dado que envolve Inclusive a qualidade da informação e lá e nos diz que o maior problema dele era o data mãe no primeiro momento eu não entendi o que ele tava querendo dizer E aí ele mostrou esta esta figura né era o data mãe o dato é meu então uma grande barreira para o uso da informação nos projetos de transformação digital e nos projetos de uma maneira global é o fato de que muitas áreas dentro das organizações entendem que o data

dele e não permitem o compartilhamento dessa informação entre as áreas no caso do ambiente governamental entre os Ministérios entre a secretarias e uma característica importante do dado que vale a pena ser destacado aqui o fato do que nós só conseguimos realmente gerar riqueza gerar resultado gerar valor Condado quanto ele é compartilhado quando ele trafega entre as áreas da empresa entra a secretarias entre os Ministérios então uma grande barreira para o uso do dado isso não é diferente nos projetos de transformação digital é a compartilhamento dos dados muito bem existem diversas linhas de estudo a respeito

da qualidade da informação da gestão de dados no mundo como a Dama mas que também teve representantes que no evento de dados BR e outras como ticm no mundo todo desenvolvendo e catequizando e terminando esse tema em diversos países e continentes né eu trago para vocês aqui uma das Linhas pioneiras de estudo desta disciplina no mundo que é o tdqm totalmente desenvolvido nos Estados Unidos por um grupo de pesquisadores professores e profissionais da área né inclusive um dos representantes do professor do enxergongue teve presente até ontem no evento deu a palestra de abertura aqui no

BR convidam aqui ainda não teve a oportunidade de assistir que acesse aí o vídeo Ele conversou a respeito do desafio da gestão de dados nas organizações em especial nos governos também mas que é importante dentro dessa dos do programa de gestão de dados desenvolvido Não é esse programa é um conjunto de conceitos fundamentos melhores práticas ele aproveita se apodera da definição de qualidade que já vem lá do tqm todo Quality esses conceitos a informação ao dado e a partir daí desenvolve o conjunto de conceitos melhores práticas que eu quero trazer aqui para vocês não é

Pontos importantes para que todos nós estejamos atentos na questão da qualidade de dados dentro das empresas e das organizações né um ponto crucial e no atoa que ele é o primeiro desses princípios desenvolvidos pelo Enem entender a necessidade do consumidor da informação qualidade significa atender a necessidade qualidade não significa atender 100% significa atender a necessidade então para entender qual é o nível de qualidade adequado daquela informação para um determinada área determinado departamento é necessário que nós entendamos e temos claramente Qual são as necessidades daquela área e essas necessidades são diferentes para diferentes consumidores diferentes então

primeiro ponto entender e ter claramente as necessidades desse consumido o segundo ponto é tratar a informação como um produto Porque a partir disso nós entendemos que a informação assim como qualquer produto né é desenvolvido produzido por uma fábrica ela tem um ciclo de produção muito bem definido isso não é diferente da informação e aí nós podemos começar a gerenciar esse ciclo da vida da inflamação obviamente primeiro nós precisamos conhecer e aí já é um primeiro Grande Desafio conhecer esse ciclo onde a informação nasce porque existem diversos canais outras informação nascem por onde ela trafega dentro

da organização e porque ela consumida eu preciso conhecer esse ciclo porque tal qual as empresas as fábricas o conceito da qualidade tem que ser aplicado em todos não basta aplicarmos uma qualidade ou verificarmos a qualidade lá na ponta no momento em que a informação é consumida nós temos que usar o exemplo das fábricas que aplicam esses conceitos desde a matéria-prima desde o nascedor dos seus produtos né e controla isso em todo o seu ciclo de vida então nos processos de ingestão de dados do conceito da qualidade validar a qualidade tem que estar ali nas transformações

desse dado no momento do seu armazenamento e obviamente também no momento do seu consumo então se nós queremos tratar a qualidade desse dado nós temos que aplicar isso em todo o seu ciclo de vida esse é um grande desafio e o quarto conceito é eu tenho nós temos que as empresas têm que definir um gestor responsável algum Líder para as iniciativa qualidade de gestão de dados né no emitir nós usamos o conceito do Cidinho mas existem outras variações do mundo Apesar que o ser de outra sendo amplamente utilizado em diversas empresas de organizações inclusive em

governos Como o próprio governo americano que já possui como Norma a instituição de um Cid 1 em diversos de departamentos estados Universidades em diversas estados americanos Eles já possuem essa figura que é o líder é muito importante lembrar que não é ele o único responsável pela qualidade da informação todos envolvidos dentro do ciclo de vida do dado desde a sua captura até o seu consumo tem responsabilidade não é tem a sua participação em manter a qualidade mas é importante que haja um líder uma área orquestrando todas as iniciativas de maneira que a informação seja realmente

útil E adequada para toda a empresa do ponto muito importante dentro desse conceito é trazido pelo MT dentro do tdqm do sítio é o fato de muitas vezes a percepção das pessoas é que a qualidade do dado está ligada apenas a consistência do dado que dá tá errado ele não reflete a realidade ele não reflete um fato correto não é aquilo que aconteceu outra coisa que aconteceu então a maioria das pessoas dos profissionais liga a qualidade do dado somente a consistência né e uma das principais contribuições te traz para a disciplina da governança da gestão

de dados é trazer à tona para nós que a qualidade de dados ele vai além da consistência e nos apresenta 16 dimensões de qualidade Isso significa que além da consistência que obviamente é uma dimensão extremamente importante relevante no contexto do dado nós temos que olhar outras questões então aqui alguns aqui todas as 16 dimensões vamos falar de algumas delas então além da consistência do dado eu tenho que olhar por exemplo a atualidade da informação porque ela pode estar consistente mas ela não pode não estar atualizada no nível na adequação que eu preciso na minha necessidade

Então eu preciso desse dado atualizado Outra área está fazendo um outro trabalho pode utilizar um dado atualizado um dia atrás dois dias atrás porque para o seu objetivo este nível de atualidade atende então para ele a informação tem qualidade para mim que precisa de um dado atualizado essa informação não tem qualidade Apesar dela estar consistente ela não está atualizada ela para mim não atende a necessidade então além da atualidade nós temos que olhar também a completude do dado o dado pode estar completo para uma área e não tão completo para outra então ele está consistente

mas ele não está completo o volume de dados eu tenho disponível né então quando eu vou consultar lá o cadastro de uma de um material de um produto eu percebo que eu tenho repetições daquele cadastro e agora como é que eu uso essa informação né Eu uso mas se sente eu pego mais antigo eu combino como é que é fácil né então isso traz uma consequência um do uso do dado para quanto dado está adequado para o meu consumo e isso impacta então na visão da qualidade do dado percebam que aqui eu tô trazendo exemplos

sempre ligados à Ótica do Consumidor e isso vem da qualidade quem dá o selo de qualidade para um produto é o seu consumidor é ele que consagra um produto da mesma forma a informação então é o seu consumidor que diz este dado realmente tem qualidade e por que tem qualidade porque me atende né outro exemplo extremamente comum né de dimensão não atendida E aí a percepção de uma qualidade é a credibilidade o dado ele está consistente o dado está completo ele está atualizado mais o consumidor o usuário daquela área daquele departamento da secretaria não confia

no dado vindo daquele sistema daquela origem daquela empresa ele não confia então para ele ele dado não tem qualidade apesar das demais características então vejam o desafio não é E aí alguém pode perguntar puxa então para o dado ter qualidade ele precisa atender todas as 16 dimensões não até porque imagine o custo para que as empresas mantenham o dado um livro de qualidade 100% em todas essas dimensões isso é praticamente é inviável E aí nós temos que recorrer novamente ao conceito da qualidade significa atender a necessidade então estando atento a necessidade Quais são as dimensões

prioritárias para que ele consumidor para aquela empresa para aquele departamento E aí que nós temos dentro de um programa de gestão de dados que atacar prioritariamente Então dentro dos projetos de qualidade de dados de gestão de idade então nós buscamos entender Quais as dimensões mais importantes mais relevantes e prioritariamente vamos atacar essas tenho certeza pela pela experiência nos projetos que isso já é um grande desafio e esse é um Desafio que rapidamente trará resultado trará Impacto para empresa não é então dentro dos projetos de qualidade de gestão de dados o primeiro trabalho é entender o

dado sobre a ótica da qualidade Quais são as dimensões necessárias lembrem-se do primeiro conceito do primeiro fundamento entender a necessidade Então qual a necessidade de completude do dado que o meu cliente tem Qual a necessidade de atualidade do dado que ele tem Qual a necessidade de volume do dado que ele tem a partir daí nós começamos a olhar agora o dado qual é a situação da informação dentro da empresa Como é que está a completude da empresa como é que tá Tá chegando para ele atualizado não tá e com base neste mapa nós temos aí

a visão de quais são realmente os problemas retratos que nós temos dentro dessas dimensões né só esse mapa com esse mapa nós conseguimos Aí sim priorizar os assuntos definir os projetos para aprimorar a qualidade muito bem até aqui já é um grande desafio estão passando tudo isso esta necessidade por conta do próprio mercado né a competição alta que as empresas sofrem hoje vivem hoje em dia em todos os mercados essas necessidades mudam né porque o ambiente é vivo hoje nós estamos aqui a empresa é adquirida ou adquire outra empresa abre uma filial e outra e

outro país enfim abre uma nova área de negócio né e lembre-se abrir desenvolver novos produtos e serviços é um dos objetivos da transformação digital Então tudo isso também vai impactando e vai modificando as necessidades de dados então o gestor o sediou tinha 70 ósseo responsável por dados dentro da empresa tem esse desafio de entender e monitorar essa necessidade monitorar o nível de qualidade de dados atual da empresa e é conseguir aprimorar esse nível dentro de todo esse ambiente de mudança é constante Esse é o grande desafio de todas as empresas e alguém pode perguntar Poxa

enorme empresa eu não tenho nenhum tipo de atuação nessa linha o que que tá acontecendo provavelmente muito dos seus processos operacionais só o impacto Grande pela má qualidade né e percebe-se uma eficiência operacional mas talvez não tenha consciência ainda do impacto do dado nesse projeto não é então muitas empresas ainda não perceberam o impacto da informação nos seus processos operacionais e no seu mal desempenho em deficiência de algum desses processos outras empresas percebem Mas tem uma atuação mas reativa em relação a isso então vai Apagando os na medida que eles vão aparecendo mas dentro do

conceito de gestão de dados a qualidade de dados ela tem que ser um processo proativo monitorado de maneira que eu entendo que está acontecendo e atue preventivamente através de um programa de gestão de dados de um programa de monitoramento de qualidade com isso nós vamos conseguir evitar que o processo produtivo entregue para o seu consumidor um dado de má qualidade é isso é isso que a gente não quer porque senão lá na frente o meu consumidor não vai conseguir escolher adequadamente o produto no seu aplicativo mas vai receber um produto duplicado um produto errado eu

vou perder a oportunidade de fazer uma oferta para ele adequada vou perder oportunidade de prover para ele um serviço digital rápido é para querer resolver um problema com imposto com Estadual Municipal e assim por diante muito bem para fechar aqui eu deixo para vocês um check list aqui de qualidade de dados né para fortificar Relembrar os principais pontos que nós discutimos aqui primeiro ponto que eu queria ressaltar é entenda monitórias necessidades dos seus consumidores não é conheça os seus consumidores entenda o que eles realmente precisam não é use até as dimensões para mapear essas necessidades

em qual por exemplo qual livro de completude qual o nível de atualidade e assim por diante Estabeleça métricas de qualidade as métricas representa de uma maneira mais amigável pai Qual o nível de qualidade isso é muito importante para que toda a empresa entenda e toda empresa pode ser engajada no objetivo de aprimorar cada vez mais a qualidade né monitora qualidade porque isso muda a cada momento a cada tempo né monitores fluxo de produção e o uso da informação isso tem a ver com conceito lado tqm então trazer o conhecimento das empresas das fábricas do processo

produtivo que trabalha com qualidade a décadas trazer para o ambiente da informação que dá né então monitorar o fluxo no uso da inflamação é importante estabelecer um processo para identificação e identificação da causa raiz então eu eu entendi reconheci um problema de dados eu tenho que chegar a sua causa raiz né Essa é uma nomenclatura muito utilizada até pelos processos de qualidade total também né eu identifico a casa raiz que pode no contexto da informação pode estar lá no processo de ingestão Então o meu processo de gestão está causando um problema uma duplicidade está causando

um truncamento aí leva um problema de completude e assim por diante então Estabeleça um projeto aqui um processo que uma vez identificado o problema também Identifique e solucione a causa Raiz e a partir daí o nosso monitoramento inclusive vai validar se essa nossa ação foi efetiva ou não ponto importante é não tente resolver 100% dos problemas né Nós temos que priorizar qualidade e aprender a necessidade e na enorme na maioria das vezes as necessidades de qualidade não significa 100%, então entenda necessidade Aprimore acessibilidade Esse é um olhando ali às 16 dimensões acessibilidade o acesso ao

dado é um dos grandes problemas e muitas vezes resolver essa Não envolve tanto investimento tanta tecnologia assim então Aprimore e acessibilidade é publique a existência do dado né dentro da dentro da disciplina de gestão de dados nós temos os metadados que nada mais é documentação do dado e essa documentação facilita o acesso à informação né Garanta que os processos Garanta que os processos de qualidade de dados sejam escaláveis Essa é a realidade das empresas então Garanta que esses processos possam crescer a medida que o volume de dados também cresce Essa realidade da maioria das organizações

se preocupe em automatizar esses processos que avaliam monitoram a qualidade tem que estar automatizados tem que usar a tecnologia de machine learning de Inteligência Artificial também no monitoramento no aprimoramento dos dados Então olha que interessante a qualidade ela impacta ela pode ser usada para aprimorar os modelos de analíticos Inteligência Artificial também pode ser utilizados tá aprimorar monitorar a qualidade da informação não é outro ponto importantíssimo inclusive é uma das dimensões da qualidade de nada é questão da segurança da proteção em especial da proteção de dados pessoais isso é prioridade para qualquer iniciativa de qualidade da

informação e um outro item muito importante é a possibilidade e talvez ao direcionamento para que nós consigamos adotar os conceitos de qualidade de dados desde o princípio de projeto né como uma ideia de um deitar desde o início desde o planejamento desde o desenho tenho certeza que isso vai trazer benefícios para o projeto como tudo e o uso da qualidade dos conceito de qualidade de dados dentro do Projeto vai impactar maneira significativa a entrega do dado entrega final do seu projeto muito bem uma mensagem final aqui eu acredito que tenha trazido aqui o assunto à

tona tem trazido aqui para vocês fatos questões que levam a conclusão que promo organização seja ela privada o pública que deseja ser orientada por dados desejos se transformar deseja digitalizar suas operações ela precisa de dados em Que ela possa confiar Que ela possa utilizar para que a gente tenha dados confiáveis toda organização precisa implementar um programa contínuo de qualidade de dados pessoal antes das perguntas e da nossa troca de experiências eu deixo para vocês aqui no material algumas referências de livros inclusive livros de autores nacionais né fiquem à vontade aqui para se deliciarem aqui com

falei aqui de muitos assuntos né histórias Fatos e aqui eu deixo para vocês referências aqui para que vocês possam aprofundar ainda mais nesse assunto muito bem deixa também aqui os meus contatos fique à vontade para entrar para conversar comigo sobre esse assunto será um prazer e agora devolva aqui para o Fabiano para que a gente possa ouvir um pouquinho das dúvidas que apareceram aí durante a apresentação muito bom Marcelo muito interessante o assunto né a gente aqui do certo já trabalha com esse assunto alguns anos também né mas é vale a pena né ressaltar que

data Quality é uma área de conhecimento dentro do da gestão de idade governança de dados e eu diria que hoje se falar de transformação digital né sem pensar ali na base no chão né na qualidade de dados eu diria que a empresa ela tá achando que está se transformando e na verdade ela vai chegar lá na frente né Essas Organizações e vão ver que elas estão doentes né ouse dizer que elas temos um problema tomadas de decisões não tão sendo precisas né a gente deixa de ter um diferencial competitivo de repente por dados sujos e

consequentemente a gente vai acabar tendo problema é que é uma das coisas principais aí hoje em dia né online no mundo digital que a gente vive que a questão do marketing né campanha de Marte direcionadas e personalizados como é que você consegue por exemplo fazer campanhas de Marketing direcionadas e personalizados se você não tem certeza dos dados que você tá trabalhando e uma coisa muito interessante que você mencionou né que muita gente confunde como data Quality qualidade dados como um projeto né um projeto ele tem início meio e fim né então é muito importante a

gente entender que data Quality ele é um programa né Ele é um programa porque você tem é cíclico né você roda de novo os requisitos as questões de qualidade que são que foram definidas né é importante também a gente ressaltar aqui o data Quality ele além de ser um programa né ele não existe um processo Pronto né para trabalhar com data Aquático você ressaltou isso nas suas apresentações na sua apresentação né que na verdade data Quality ele é muito personalizado para cada caso para cada organização né E já se precisar precisava se dele lá em

outros séculos né quando se mencionou a batalha Se tivesse de repente uma qualidade de informação ali mais precisa né consequentemente não teria que ele erro ali de calendário né então é basicamente eu poderia dizer né que a qualidade de dados é um processo onde você é a parte inicial para minha parte fundamental é a questão da promoção né do assunto da organização né você passar essa cultura para empresa mostrar que é importante né porque hoje fala-se muito de Inteligência Artificial né analítico só que a gente tem que entender que que tudo sem os dados nada

disso existiria né e obviamente a qualidade de idade ela como Eu mencionei ela atua ali no chão né de todo esse processo né então a gente tem a parte de data pro fale né que é você entender fazer um diagnóstico né entender como é que com os dados né informação dos dados sobre os dados né Depois você faz toda a questão de análise e o principal que é quando você consegue atingir todo esse processo você passa por uma limpeza e correção desses dados né que a data clínicas que chamam né em inglês então esse processo

de correção né Ele é um processo extremamente importante porque também muitas pessoas confundem que limpou aqueles dados ali e eles estão resolvidos não ele na verdade se você não tiver um processo né que você avalia o score né de qualidade daquelas informações não consiga executar ciclicamente né é todo todas essas etapas de qualidade de dados Lembrando que é customizado para cada organização não ser extremamente personalizada a gente acaba entrando nesse grande erro que achou que limpou e resolveu se o problema tiver Numa regra de negócio de um sistema por exemplo se você não corrigir essa

regra de negócio esse problema tá então por isso que esse monitoramento ele é muito importante para que essa recorrência né de novos problemas eles não retornem eu olhando aqui o chat né tô vendo que o pessoal tá tendo não tem perguntas ainda é não tem nenhuma pergunta mas eu tenho algumas perguntas aqui né com relação a [Música] desatar com a gente pode ser posso fazer Só para esquentar para o pessoal vamos começar e colocar no chat né então uma das perguntas né que eu tenho com relação dos benefícios né Quais são os benefícios que a

gente pode trazer com relação ao investimento né dessa área de conhecimento que é o data quartz para dentro da organização olha essa pergunta é muito boa porque hoje qualquer projeto que nós iniciamos dentro da empresa a primeira pergunta que nos fazem é qual é o retorno né que valor muitas vezes financeiro é esse projeto vai trazer para organização isso não é diferente também quando nós falamos de qualidade de dados né e dentro da metodologia Nossa aqui de gestão de dados é nós procuramos sempre identificar porque as oportunidades ligadas à qualidade dados elas são muitas normalmente

né dentro de uma organização mas nós temos sempre procurando achar as primeiras as primeiras ações que possam trazer benefícios rápido para organização e que possam e que normalmente a gente procura também conseguir mensurar monetariamente né porque a partir momento que a organização ela percebe o retorno percebe que puxa se eu melhorei eu melhorei a qualidade daquela informação isso já trouxe é um retorno rápido para empresa puxa eu preciso então investir porque se eu investir mais nessa iniciativa vou trazer mais retorno né e eu tenho aqui posso te dar alguns exemplos muito interessantes a respeito de

retorno para uma organização né não dos nossos clientes aqui por exemplo eles tinham faziam toda a sua divulgação de marketing até Como que você comentou aqui né é considerando as pessoas né considerando os cadastros de próspedes que eles tinham as informações que eles recebiam e assim por diante no entanto o produto que eles vendiam tinha uma característica familiar quer dizer se uma pessoa daquela família é falar adquirir-se aquele produto não preciso mais oferecer aquele produto para outra família né então se eu se organizo informação de forma que eu já entenda que aquela família já tem

Ou aquele produto que essas pessoas são da mesma família eu posso fazer uma única comunicação para ele eu vou me comunicar melhor eu vou usar melhor a minha verba de marketing por exemplo de divulgação para conseguir atingir um público maior com a mesma verba né então isso rapidamente eles puderam perceber o retorno é do investimento no tratamento da informação e na organização do dado quando nós falamos de dados de materiais por exemplo né de produtos é a incidência de duplicidade por exemplo dentro dos cadastros Impacto muito grande para operação da empresa Então você imagina que

eu tenho o mesmo produto aqui básico ele está duplicado triplicado dentro do meu sistema e alguém Ali vai verificar se eu preciso comprar aquele produto vai lá e olha um deles só puxa verdade que eu tenho meu estoque tá baixo então preciso comprar mais mas ele não percebeu que aquele mesmo material que ele mesmo produto ali triplicado para duplicado Então veja ele tá comprando algo que ele não precisa comprar não é e tá mantendo ali um estoque ele podia consumir então isso dentro do mundo das empresas da Fábrica das fábricas inclusive o custo de movimentação

custo de aquisição ele tem um boy né um retorno sobre o investimento rápido de ser calculado então a empresa rapidamente percebe que puxa o dado agora com o melhor qualidade eu estou comprando melhor os meus os meus materiais produtos eu estou movimentando de uma maneira mais inteligente e assim por diante eu dei aqui Fabiano um exemplo é um exemplo não trouxe aqui para nossa reflexão o fato de que hoje a realidade e muitas grupos e áreas de ciências de dados o fato de os cientistas de dados perderem terem que investir muito tempo na preparação do

dado né esse é um retorno é rápido também porque a medida que os processos de qualidade preparam melhor o dado para o uso do time de ciência de dados eles têm mais tempo para poder investir no estudo nos levantamento de hipóteses na aplicação de modelos mudado então isso traz um retorno visível rápido para aquela iniciativa dentro das empresas então eu acho uma uma dica ou algo que nós aqui na acesso sempre utilizamos é procurar iniciativas que Tragam um retorno rápido e a partir daí você faz escalando você vai buscando outras iniciativas até porque a medida

que você vai conhecendo as áreas conhecendo os consumidores eles mesmos vão trazendo sugestões então eu diria para você que é esse é um caminho e assim procurar o objetivo aqui é sempre trazer valor né trazer benefício para organização muito legal é o Walter Costa ele comentou né sua apresentação falou que você é muito didático conteúdo muito profundo né conhecer duas do assunto ele fez um comentário interessante que eu acho que eu já até mencionei né Porque que a dentro da transformação digital né esse assunto ele acaba sendo um elo perdido né o data Quality ele

passa a cena do perdido por que não se fala muito desse assunto dentro de transformação digital olha excelente pergunta e eu diria o seguinte você mesmo comentou né a qualidade ela é base ela é o alicerce não só da transformação digital o alicerce dentro das construções né todas as vezes que nós vemos um prédio construção né imponente toda de vidro com arquitetura atualizada assim por diante a primeira a primeira impressão que nós temos onde nós prestamos mais atenção e na arquitetura que tá aparente né mas a gente muitas vezes não imagina todo o trabalho estudo

e até mesmo a tecnologia que foi investida na Fundação daquela daquele prédio né para que ele possa realmente ter aquela imponência Qual foi a tecnologia utilizada ali para garantir que aquele prédio não vai começar com o tempo é importar né ele não fica mais na vertical né e olhando as iniciativas não só de transformação digital mas outras iniciativas as empresas muitas vezes por conta da má qualidade do dado que é alicerce o alicerce não for bem feito a gente sabe o que acontece com a construção né se construir a casa na areia a casa o

prédio ele começa a envergar ele começa a conforto não é isso acontece nas empresas né então muitas vezes as empresas se empolgam com a digitalização com a inteligência artificial com chat GPT e esquece da base do alicerce não é isso é muito importante então nós temos que pensar nisso porque essa é a semente Essa é a semente o prédio arquitetura não é a fachada é é o fruto Então a gente tem que garantir aqui que a semente é boa que ela está bem fundada né que ela está bem alicerçada que ela foi construída com a

tecnologia adequada para que sim ela possa trazer os frutos desejados então isso não é diferente na transformação digital e sim posso participante aí tá correto né é isso é muitas vezes negligenciado pelas empresas Com certeza eu faço até uma analogia né com a construção civil né o costume dizer que a qualidade de dados é como você construir uma casa né se você constrói uma casa com materiais de primeira qualidade certamente essa casa ela vai ser sólida uma resistente uma durabilidade maior ao longo do tempo agora se você usa materiais de baixa qualidade defeituosa né que

a gente pode fazer uma comparação com os dados sujos né ela vai aparecer bem por fora né mas por dentro ela tá cheia de problemas ocultos né então acaba que você vai ter muito mais esforço e muito mais custo com manutenção e reformas aí posso traduzir senhora Extra né em pessoas ali é podendo estar construindo coisas novas tendo que ficar dando manutenção um processo que não foram construídas anteriormente como o data Quality então eu gosto muito dessa analogia de comparar com uma construção de uma casa temos mais uma pergunta aqui que é do Manuel Francisco

Dutra Lopes Júnior Ele pergunta se a governança de dados também envolve qualidade ou só faz parte da gestão de dados Boa pergunta Boa pergunta a qualidade é sim dentro do conceito até do próprio tdqm emitir trazendo aqui também para mesa o que a própria dama falo né dama para quem não conhece uma referência importantíssima e dentro da gestão de dados e enfim tá inclusive nas referências que eu deixo aqui para todos a qualidade ela tá ali como uma das disciplinas não é da gestão de dados não é e a governança tem o papel de orquestrar

todas essas disciplinas né então a gente eu até citei aqui hoje o metadados que também é outra disciplina extremamente importante então nós temos que olhar as iniciativas ligadas à qualidade por exemplo as iniciativas ligadas ao metadados que são que a documentação do dado existe uma série de disciplinas dentro da gestão de dados que precisam ser levadas em conta e a governança é a disciplina que orquestra não é porque todas essas iniciativas arquitetura de dados todas elas têm que ter um objetivo único né Eu gosto de nas aulas é trazer uma analogia como uma orquestra não

é então numa orquestra você tem músicos ali normalmente de estudiosos e extremamente técnicos mas que precisam ali de um Maestro que orquestra para que todo mundo esteja na mesma sintonia no mesmo ritmo nos mesmo tom no mesmo volume adequado então ele é o responsável e garantir que do mundo esteja sincronizado então a governança de dardos tem esse desafio de orquestrar todas as iniciativas e a qualidade é uma dessas iniciativas não é o metadados é outro iniciativa arquitetura de dados iniciativa Então esse é o desafio da governança na extremamente importante o que a gente vê nas

empresas aqui no Brasil eu diria que não é muito diferente em outros países também é Muitas delas começam pela qualidade porque de novo é ali que começa a perceber os sintomas eu não consigo mais entregar eu tenho pedidos aqui internos que estão estão sendo cancelados é que eu não consigo entregar adequadamente Porque será que isso está acontecendo e começa a investigar e percebe que tem um problema de dados então é muito comum que as empresas comecem pela qualidade porque ali que normalmente os sintomas são mais são mais fortes e impactam até muitas vezes financeiramente e

a medida que a maturidade da organização vai crescendo ela começa a perceber Puxa vida para eu não ser mais reativo né até comentei isso na apresentação né para não ser reativo eu preciso entender a causa a causa envolve por exemplo a minha arquitetura de dados envolve meu processo de ingestão eu preciso documentar melhor o dado para que o meu usuário entenda aquela informação posso usar um dashbor de uma maneira mais adequada e assim por diante Então eu acho que uma um cenário aí relacionando todas as disciplinas é que a gestão de dados uma série delas

Inclusive a qualidade e a governança tem um papel Central ali de orquestrar todas essas iniciativas é legal Bergson né que o Bergson Lopes né que é um dos entusiastas e ativistas lei de dados eles fala Exatamente esse que é o governança ao telhado né o telhado ali que traz a proteção né para todas essas áreas de conhecimento seja gestão de metadados seja seja data Quality mdm modelagem enfim ela é basicamente trabalha com Cultura né pessoas processos né e Tecnologias para poder auxiliar no trabalho você pesquisa você comentou bem aí desculpa te interromper outra disciplina dentro

desse do contexto da gestão de dados são os Dados Mestres por exemplo que é outra disciplina então e que se interligam também né a gente não pode falar de qualidade sem falar de metadados sem falar e mdm Master deita tem uma relação muito grande com qualidade Então tudo tá muito Inter eu só tenho um receio muitas vezes quando a gente vai falando né porque o pessoal pode começar nossa mas eu tenho que cuidar de dado mestre eu tenho que cuidar do documento Isso aqui é uma jornada gente isso aqui é um a gente tem que

olhar tudo todas as oportunidades é direcionar As Nossas ações para aquilo que vai trazer retorno mais rápido porque aí a gente vai conseguir apoio vai conseguir mais braço mas mais equipe mais investimento para que a gente possa Aí sim aumentar essa essa atividade dentro da empresa trazer ainda mais retorno para organização acho que essa é uma ideia desculpa te interrompido nada que é isso mas é isso mesmo é exatamente isso é temos mais uma pergunta né que eu acho que essa eu posso até responder e você complementar que é uma pergunta mais voltada para administração

pública federal né então a Levi Ramos Pereira pergunta se essa sistemática da utilização dos dados de conhecimento em suas habilidades também será levado para toda administração pública federal é a gente aqui o certo né a gente sempre faz várias palestras sobre o assunto né seja interno tá no nosso planejamento estratégico de ti que é público né o pet pdpi sobre data Quality a gente também trabalha prestando consultorias né para alguns órgãos do governo inclusive executando algumas atividades de qualidade de dados nas bases gestão de pessoas do governo federal né Tem mais outros projetos Então quem

tiver interessado pode buscar o certo né buscar a gente depois eu posso até deixar meu contato né que a gente já tem esse normal aí para alguns públicos aí de como a gente trabalhar processo etc Lembrando que como eu falei lá no início é cada situação uma situação né não existe um processo para que seja um processo genérico que atenda com toda a situação então a gente chama de Estação das Dores né a gente entende Qual é quais são as dores do cliente a gente executa o diagnósticos engajamento para que que seja feito a correção

dos dados etc e como professor Marcelo mencionou ao longo do tempo né esse roi nesse retorno sobre investimento ele vem aparecendo seja com consumo menor de recursos de armazenamento limpeza de dados né duplicados e etc então a gente a gente trabalha já Para administração pública com relação a esse assunto tá complementando complementando a tua resposta acho que também aproveitar oportunidade para convidar todos aqui que estão participando dessa Live estão vendo o vídeo em algum momento aí no futuro para também assistir a apresentação da representante lá do Governo da Dinamarca que foi extremamente interessante na iniciativas

muito interessantes que já e que já vem desenvolvendo aí um programa de compartilhamento de parceria entre com o Brasil também que são exemplos é muito interessante de como os governos estão usando qualidade gestão de dados nos seus processos acho que também é isso trouxe uma visibilidade muito grande dentro aí do evento da BR acho que é muito interessante bacana mais uma pergunta que dalize Karen né dados abertos são publicados em tratamento estado bruto muitas vezes quando publicidade a qualidade seria mostrar como os dados estão nas bases Originalmente além da atualização certo uma pergunta Boa pergunta

é obviamente por conta aí da legislação de toda a questão regulatório os dados abertos pelos governos eles são disponibilizados ali da maneira original né a qualidade aplicada qualquer informação ela ela mostra quais regras estão não estão sendo cumpridas para aquele dado né então se ele não está completo Se ele não está preenchido né e assim por diante então a qualidade no primeiro momento ela vai mostrar é olhando a necessidade do uso daquele dado quais questões não estão sendo cumpridas não estão sendo preenchidas E aí eu posso usar as próprias dimensões para demonstrar isso né então

a própria exemplo dela o dado tá duplicado tá mal preenchido não está padronizada adequadamente e a partir daí ele é dificulta a sua interpretação o seu entendimento né que é uma dimensão é muito interessante ele é muito comum o dado ele está correto ele está consistente ele está atualizado mas ele está representado de uma forma que o seu consumidor ele não entende então muitas vezes a gente quer fazer aquele aquele dashbor né para ganhar o Oscar do dashbor né mas o consumidor ali ele quer ele queria só de repente três números quatro números ou um

número né e ele tem dificuldade né a gente tem que entender que cada consumidor vai ter a sua característica então é a forma como dado é apresentado interfere muito na sua na sua interpretação Então qual é o papel da qualidade dentro dos dados abertos ele tá mostrando a realidade né a qualidade vai dar oportunidade para quem é por dono daquele dado para quem gerou aquela informação de perceber até problemas operacionais né e a utilização por exemplo de métricas de qualidade poderia apresentar para quem vai utilizar esse dado aqui para uma análise para um estudo de

entender qual é o nível de qualidade e aí decidir se aquele dado pode ser utilizado ou não utilizado não é porque sem essa percepção de qualidade a gente vai acabar usando o dado sem saber que aquele dato não é adequado né E aí quando que a gente vai perceber que aquele dado não é adequado quando lá no final do meu processo quando eu apresentar o meu estudo é olhar e fala Puxa vida mas parece que não é a resposta essa resposta não tá coerente né não é possível essa resposta e a gente vai olhando e

percebe Puxa vida o dado que eu utilizei é a minha matéria prima ela não tinha qualidade Então acho que o papel da qualidade nos dados abertos ele ele tá em dois momentos um é mostrar para a organização que ela tem problema dois mostrar para quem vai usar o dado aberto né porque um benefício da défice além da fiscalização é possibilitar a construção de outros deitar prontos né produtos de dados em cima daquela informação Então quem vai utilizar pode usar a métrica para falar poxa esse dado Aqui não está com nível de qualidade adequado para o

meu consumo então não vou utilizar e assim por diante excelente pergunta aí Bacana Então estamos chegando no final da nossa transmissão vou fazer a última pergunta tá do Jonathan Nunes Olá eu tenho eu trabalho com sistemas embarcados e redes de sensores nesse esquema eu estou mais envolvido na geração de dados logo que preocupações eu deveria ter no que corresponde a qualidade de dados ó Fabiano pessoal demorou para perguntar mas as perguntas estão boas hein Olha só esse é um tema muito interessante né e é uma área né Falando de ioti não é informações que são

geradas por máquinas por dispositivos que também tem problema com informação aliás eu costumo brincar que problema de data é algo inerente ao data até porque a gente comentou aqui que o envelhecimento do dado pode normalmente é um problema então e o dado Vai envelhecer ali na atualização ele vai envelhecer Mas voltando para a pergunta do Jonathan é os dados por exemplo de sensores que ele comentou tem problemas por exemplo é muito comum aqui já trabalhamos em projetos que precisavam trabalhar a padronização dessa informação e a validação também porque a geração estudado a sua ingestão pode

gerar problemas tá então recebeu dado de um sensor você pode perceber que aquele dado chegou incorretamente por um problema de transmissão problema de hardware e assim por diante então você pode ali perceber que aquele dado está inconsistente né aquele problema de hardware de transmissão gerou uma inconsistência naquele dado outro outro problema de dado muito comum nesse universo nesse domínio de dados de máquina são as questões ligadas a padronização porque você pode ter ali sensores equipamentos diversos fornecedores que vão usar diversos padrões né obviamente existe nesta indústria uma tentativa de padronização mas como em várias áreas

existe ainda vários patrões diversos padrões e para que você utilize o dado Veja a qualidade sem estar aqui do lado do Consumidor eu preciso é ter uma visão única padronizar essa informação entender que é o mesmo dado com o formato e condomínio diferente eu consigo então uma vez unificando E padronizando aí sim tem uma visão consolidada de todos aquelas informações então sim Jonathan você precisa também nesses ambientes utilizar processos contínuos para monitorar aprimorar a qualidade do dado acho que vai de encontro que você mencionou né que é o data Quality by design né assim tá

trabalhando com dados né tem que pensar em qualidade de desde o início do processo Independente se o volume é aquilo né se o volume tá menor melhor ainda né já vai começar certo se tem um volume maior mais trabalho você vai ter no futuro Isso é a única certeza que a gente vai ter se não tiver um processo bem estruturado de qualidade exato excelente vamos chegando ao fim da nossa transmissão queria agradecer aí ao professor Marcelo pela rica apresentação né até hoje já tô na área há alguns anos né Eu continuo aprendendo a cada a

cada palestra cada evento que a gente participa né queria agradecer também a semana dados BR pelo oportunidade né da gente tá falando abordando esse assunto né que é um assunto que que precisa ser mais democratizado dentro do mundo digamos assim né falando nem me limitar ao Brasil né no mundo né hoje as empresas elas estão cada vez mais digitalizadas né os processos menos burocráticos e isso significa que cada vez mais temos informações dentro de base de dados né E essas informações podem ser podem entrar por pessoas né Ou seja pode estar iminentemente ele pode ter

um erro né Por uma ação humana né ou por integrações fusões de sistema né aí vem a questão do mdm como você mencionou a questão que a qualidade de idade ela até passa a ser um processo dentro do mdm um dos principais processos para gerar o Golden Record e queria agradecer a participação de todos as perguntas a gente começou meio tímido mas no final acho que as perguntas foram muito boas né e agradecer ao evento aí pela participação e principalmente o professor Marcelo o Fabiano também agradeço aí a tua ajuda a discussão A conversa é

sempre muito rica né esse é um assunto que eu gosto muito e a gente podia aqui falar sobre cada um desses temas aqui que a gente envolveu é sempre muito gostoso falar eu só queria deixar aqui que esse evento foi muito bom e que ainda bem que ele está disponível né Isso é muito importante para disseminar esses conceitos então todas as palestras palestras de altíssimo nível estão aí disponíveis isso é muito importante para o crescimento dessa área né de maneira que a gente possa levar e disseminar todas esses conceitos para todas todas as pessoas e

todas as indústrias enfim é muito importante e agradecer aí ao convite do pessoal do ministério de gestão e inovação em serviços públicos o pessoal da companhia Controladoria Geral da União também foi um prazer participar do evento e outras perguntas que possam aparecer no material que também acho que vai ser disponibilizados tem no meu contato fica à disposição aí para que outras pessoas também possam se porventura não tiverem oportunidade para não deu tempo da gente responder que fica à disposição para responder depois Muito obrigado um abraço para todos vocês Obrigado tchau tchau [Música]