Introdução à Arquitetura de Dados - Parte 1 (Overview)

o preço por gente o Papa aqui vou falar um pouco sobre deitar arquiteto ali né a ideia eu vou abordar falando um pouco do que é uma arquitetura de dados né importância dela o papel de um arquiteto de dados e também vou mostrar algumas opções de arquitetura de dados olhando multi-cloud ou seja não olhando só encher como outras como a wsp e focado um pouco na questão do Big deitar né que isso hoje é o grande onde a gente mais tem vivido hoje em dia né Toda a qualquer projeto hoje em dia acaba se tornando

um projeto de Big Data E aí vamos falar um pouco mais também de detalhes específicos do da arquitetura de dados E aí sintam-se à vontade em alguma dúvida em algum momento para questionar tá bom bom venda São três grandes itens então uma visão geral né hum Oi Nilde sobre arquitetura sobre o vou dizer assim é que ela arquitetura de dados mas abordando também o arquiteto falar dos componentes então uma proposta de componente de Big deita olhando para as três clouds né não focada só encher que é o que a gente tem costumeiramente trabalhando aqui pelo

menos eu pessoal que trabalha na super Digitam e falar um pouco mais do do deitar Quitete mesmo né seus rolos E como que o que se espera de um arquiteto de dados tá o quê que é que te tura de dados né é eu coloquei tudo em inglês até para gente poder aproveitar esse outro momento né então o processo de feitura de dado é você criar um padrão né de como a organização vai coletar esses dados vai guardá-los transformá-los distribuídos né que muitas vezes a gente faz toda essa parte de coletar o dado de guardar

ele de transformar ele e depois a gente vai distribuir os analistas que usam esse dado para poder tomar decisão Em cima dele ou seja até para outros sistemas que conectam nele para poder por exemplo um algoritmo de previsão de produção de fraude de clusterização aí você tem que distribuir E aí e o uso dessa desse dado né então a o principal corda criatura de dados é você criar um padrão para isso de como a empresa vai organizar seus dados né É Vai coletar ele vai guardar transformar distribuir e o uso dela né que de nada

adianta se a gente fazer todo esse papel a gente não usar ela né e o gol né o principal objetivo de um da arquitetura de dados é você entregar dados que sejam relevantes para as pessoas que precisam disso né quando eles precisam também né Não só precisar mas quando eles precisam bom e você ajudá-los né até um um senso sobre isso né vamos assim ele teu entendimento sobre isso para poder usá-lo né em baixo a imagem aqui ilustra né a pirâmide que é bem conhecida né que seria você primeiro você é a base da pirâmide

ao dado né a segunda base seria as informações que se dado gera a terceira base e aí seria o conhecimento sobre esses dados né O que você aprende dele ali e por fim a sabedoria né então são quatro grandes steps que cada dentro de cada um desses steps existem diversos passos que são executados dentro da estrutura de dados Como conectar a transformar distribuiu o uso dela e o uso basicamente seria a sabedoria que você tem desse dado né então você saber quando que você deve aplicar um algoritmo o resultado daquele algoritmo que ele pode te

dar né enfim todas o que está relacionada e ligado ao dado no que hoje é mais que sabido por todo mundo né vou chover no molhado aqui mas é aquela famosa história né o dado é o petróleo do nosso Milênio então com ele e você consegue tomar decisões que você pode não só maximizar os custos Como reduzir teu Max desculpa maximizar suas receitas como reduzir seus custos né através de dados de padrões de dados enfim você entender tudo aquilo E aí feito isso a gente tem na uma ideia né do que arquitetura da importância que

ela tem existe um ponto muito legal que vale frisar aqui que é não confunda arquitetura de dados com modelo de dados né são coisas totalmente distintas né e muita gente acaba confundindo isso é comum né arquitetura de dados como modelo de dados não arquitetura uma coisa e modelação de dados é outra apesar de levar deita né arquiteture e arquitetura Tá parecido com moderação né Tem uma uma certa similaridade vamos ver assim não tem nada a ver né porque a arquitetura de dados você vai aplicar ela em alto nível né e é uma visão de como

a empresa vai trabalhar com esses dados né como isso vai ser categorizado integrado e guardado né E aí percebe que eu já mudei um pouco a palavra né então categorizar seus dados integrar ele guardar eles e você trabalhar conhecido se eu deitar Madrid né na verdade o deitar mostrem Ele trabalha meio que junto com arquitetura entre aspas por isso existe Muita confusão mas a modelação do dado é você vai ter que aplicar regras específicas e detalhadas desses dados né de parte desses dados Estão guardados no seu Database no teu no teu deitar lei que enfim

no teu no teu DW para que vocês consigam tirar valor Então veja só um complemento outro sem arquitetura você não vai conseguir ter a tua modelação e se você tiver uma arquitetura muito boa não tiver modelação tá meio de nada adianta embaixo o desenho apresenta muito legal que é um Framework para o entendimento da arquitetura Então olha só a arquitetura trabalha muito com a estratégia dos dados da governança dos dados né e meio que como um pai dele deita modo em que abaixo eles vão distribuir integração as plataformas e ferramentas para isso E as novas

técnicas que serão adotadas né exemplo muito prático e pensa que eu tô querendo dizer é quem trabalha na chuca digita hoje o tato na frente tá super digital junto com alguns colegas que aqui estão E lá nós estamos indo para uma adotar uma nova tecnologia que seja uma ferramenta para ajudar não toda a parte de governança dos dados e seria um catálogo de dados Ah não vou entrar muito no detalhe disso aqui tá gente não é o foco é falar mais sobre arquitetura a importância dela mas só para você fazer um gancho é de como

arquitetura muito importante ela para mim é como se ela fosse o alicerce da casa né então todo o resto vem depois então tem que fazer o alicerce da casa e depois você vai colocar o teu telhado o piso da cor que você quer as coisas de parede mas se você não tivesse a tua arquitetura muito bem definida e pode ser que quando você iniciar nessa outra parte você não consiga garantir sucesso naquilo que você procura