{"id":3783,"date":"2022-11-09T16:44:32","date_gmt":"2022-11-09T19:44:32","guid":{"rendered":"https:\/\/programathor.com.br\/blog\/?p=3783"},"modified":"2022-11-09T16:44:34","modified_gmt":"2022-11-09T19:44:34","slug":"data_warehouse_e_data_lake","status":"publish","type":"post","link":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/","title":{"rendered":"Data Warehouse e Data Lake: conhe\u00e7a as diferen\u00e7as"},"content":{"rendered":"\n<p>Talvez voc\u00ea j\u00e1 tenha ouvido falar nesses termos: Data Warehouse e <a href=\"https:\/\/programathor.com.br\/blog\/ja-ouviu-falar-em-data-lake-saiba-mais-sobre-esse-conceito-de-armazenamento-e-disponibilizacao-de-dados\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\">Data Lake<\/a>. Principalmente se voc\u00ea \u00e9 um profissional da \u00e1rea de TI.\u00a0<\/p>\n\n\n\n<p>No entanto, nem todo mundo sabe do que se trata ou entende as diferen\u00e7as entre essas duas solu\u00e7\u00f5es de banco de dados. Pensando nisso, trouxemos esse conte\u00fado. Continue a leitura e saiba mais!<\/p>\n\n\n\n<!--more-->\n\n\n\n<h2 class=\"wp-block-heading\"><strong>Antes de mais nada, para que servem essas solu\u00e7\u00f5es?<\/strong><\/h2>\n\n\n\n<p>J\u00e1 comentamos em alguns dos outros conte\u00fados do blog, sobre a import\u00e2ncia dos dados para as empresas e o quanto eles t\u00eam sido cada vez mais relevantes nas decis\u00f5es estrat\u00e9gicas. No entanto, para que isso seja poss\u00edvel \u00e9 necess\u00e1rio que esses dados sejam preparados para utiliza\u00e7\u00e3o, o que ocorre atrav\u00e9s do uso de algumas tecnologias e intelig\u00eancia, como \u00e9 o caso do BI ou <a href=\"https:\/\/programathor.com.br\/blog\/saiba-mais-sobre-a-importancia-do-bi-e-analytics-no-mercado-atual\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\"><em>Business Intelligence <\/em>e do<em> Analytics<\/em><\/a>.<\/p>\n\n\n\n<p>Eles servem para analisar um grande volume de dados atrav\u00e9s de tecnologias, utilizando c\u00e1lculos e <a href=\"https:\/\/programathor.com.br\/blog\/o-que-voce-sabe-sobre-machine-learning-entenda-mais-aqui\/\"><em>Machine Learning<\/em><\/a>, se necess\u00e1rio, para prover informa\u00e7\u00f5es capazes de orientar a condu\u00e7\u00e3o dos neg\u00f3cios, ajustes em processos e at\u00e9 mesmo o aumento de produtividade.<\/p>\n\n\n\n<p>E a\u00ed entram as solu\u00e7\u00f5es de armazenamento de dados, como o Data Warehouse ou o Data Lake: esse grande volume de dados a ser analisado, precisa estar dispon\u00edvel em um ambiente que, inclusive, pode definir as caracter\u00edsticas desses dados, como por exemplo, dados estruturados (n\u00fameros, c\u00f3digos etc) ou n\u00e3o estruturados (imagens, textos, \u00e1udios etc).&nbsp;<\/p>\n\n\n\n<p>Esses s\u00e3o os tipos mais comuns atualmente de reposit\u00f3rios de dados. Vale a pena ent\u00e3o saber um pouco mais sobre cada um, seja para definir o mais adequado para o seu neg\u00f3cio, seja para aprender mais sobre dados e quem sabe, se tornar um <a href=\"https:\/\/programathor.com.br\/blog\/voce-sabe-o-que-e-cientista-de-dados-conheca-essa-profissao-do-futuro\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\">Cientista de Dados<\/a>.<\/p>\n\n\n\n<p>O Data Warehouse armazena apenas dados estruturados, enquanto o Data Lake trabalha com ambos. Mas as diferen\u00e7as n\u00e3o param por a\u00ed, portanto, \u00e9 interessante conhecer as principais caracter\u00edsticas de cada um.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\"><strong>Caracter\u00edsticas do Data Lake<\/strong><\/h2>\n\n\n\n<p>Podemos imaginar o Data Lake como um grande cont\u00eainer ou um grande espa\u00e7o de armazenamento, assim como um lago armazena \u00e1gua (por isso o nome!); no qual h\u00e1 v\u00e1rias fontes preenchendo o seu espa\u00e7o.<\/p>\n\n\n\n<p>E os dados que entram no Data Lake podem ser de diversos tipos: estruturados, n\u00e3o estruturados, logs em tempo real etc.; ou seja, todo e qualquer dado bruto coletado, de diversas fontes, ainda que sem finalidade espec\u00edfica, podem ser armazenados nele. Como se fosse um \u201ccatad\u00e3o\u201d de dados guardados para serem utilizados posteriormente, se necess\u00e1rio.<\/p>\n\n\n\n<p>Isso torna o Data Lake um banco de dados n\u00e3o relacionado e menos complexo, sendo projetado para armazenamento de baixo custo, eliminando limita\u00e7\u00f5es de armazenamento. No entanto, acabam sendo mais dif\u00edceis de implementar, sendo inclusive muito utilizado por <a href=\"https:\/\/programathor.com.br\/blog\/como_contratar_um_cientista_de_dados\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\">Cientistas de Dados<\/a>.<\/p>\n\n\n\n<figure class=\"wp-block-image size-full\"><a href=\"https:\/\/programathor.com.br\/jobs\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\"><img decoding=\"async\" width=\"700\" height=\"380\" src=\"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/vaga-desenvolvedor-1-2.jpg\" alt=\"Vagas ProgramaThor - Data Warehouse e Data Lake\" class=\"wp-image-2279\" srcset=\"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/vaga-desenvolvedor-1-2.jpg 700w, https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/vaga-desenvolvedor-1-2-300x163.jpg 300w, https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/vaga-desenvolvedor-1-2-676x367.jpg 676w\" sizes=\"(max-width: 700px) 100vw, 700px\" \/><\/a><\/figure>\n\n\n\n<h2 class=\"wp-block-heading\"><strong>Caracter\u00edsticas do Data Warehouse<\/strong><\/h2>\n\n\n\n<p>J\u00e1 o Data Warehouse trabalha somente com dados estruturados, ou seja, informa\u00e7\u00f5es \u201cprontas\u201d e muito mais f\u00e1ceis de acessar e utilizar, pois, s\u00e3o dados j\u00e1 processados.&nbsp;<\/p>\n\n\n\n<p>Por isso, ele \u00e9 utilizado para retornar informa\u00e7\u00f5es espec\u00edficas ao neg\u00f3cio (muito utilizado por analistas de neg\u00f3cios), armazenando dados em arquivos\/pastas organiz\u00e1veis e viabilizando decis\u00f5es estrat\u00e9gicas. Inclusive, o uso desse tipo de banco de dados \u00e9 muito comum em Bancos e Financeiras.<\/p>\n\n\n\n<p>Podemos listar as principais fun\u00e7\u00f5es do Data Warehouse como:<\/p>\n\n\n\n<ul>\n<li>Permite a extra\u00e7\u00e3o de dados;<\/li>\n\n\n\n<li>Com a limpeza de dados \u00e9 poss\u00edvel manter o banco atualizado somente com dados espec\u00edficos;<\/li>\n\n\n\n<li>Transforma dados em informa\u00e7\u00e3o \u00fatil, atrav\u00e9s do processo ETL (<em>Extract Transform Load<\/em>) \u2013 extrai, transforma e carrega dados, conforme demanda;<\/li>\n\n\n\n<li>Carrega e atualiza dados com frequ\u00eancia.<\/li>\n<\/ul>\n\n\n\n<p>Al\u00e9m disso, os Data Warehouse armazenam basicamente tr\u00eas tipos de dados:<\/p>\n\n\n\n<ul>\n<li>Metadados: se trata dos dados que funcionam como um guia para orientar o usu\u00e1rio sobre o pr\u00f3prio banco de dados, bem como sobre detalhes importantes para que o usu\u00e1rio entenda os dados armazenados.<\/li>\n\n\n\n<li>Dados resumidos: que s\u00e3o os dados gerados pelo usu\u00e1rio master do banco de dados, ou seja, aquele que j\u00e1 deixa os principais resultados de consulta pr\u00e9-prontos, otimizando e acelerando o desempenho das consultas.<\/li>\n\n\n\n<li>Dados brutos: dados que est\u00e3o armazenados, mas que ainda n\u00e3o foram processados.<\/li>\n<\/ul>\n\n\n\n<h2 class=\"wp-block-heading\"><strong>O que voc\u00ea achou das diferen\u00e7as entre Data Warehouse e o Data Lake?<\/strong><\/h2>\n\n\n\n<p>Qual tipo de solu\u00e7\u00e3o de dados seria a mais interessante para a sua empresa? Voc\u00ea acredita que trabalhar com os dois modelos \u00e9 f\u00e1cil? Deixe aqui os seus coment\u00e1rios, al\u00e9m de d\u00favidas sobre o tema!<\/p>\n\n\n\n<figure class=\"wp-block-image size-full\"><a href=\"https:\/\/programathor.com.br\/?utm_source=blog&amp;utm_medium=data_warehouse_e_data_lake\"><img decoding=\"async\" width=\"1024\" height=\"171\" src=\"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/LOGO-PROGRAMATHOR-1024x171-1.jpg\" alt=\"ProgramaThor - Data Warehouse e Data Lake\" class=\"wp-image-2280\" srcset=\"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/LOGO-PROGRAMATHOR-1024x171-1.jpg 1024w, https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/LOGO-PROGRAMATHOR-1024x171-1-300x50.jpg 300w, https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/LOGO-PROGRAMATHOR-1024x171-1-768x128.jpg 768w, https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2020\/12\/LOGO-PROGRAMATHOR-1024x171-1-676x113.jpg 676w\" sizes=\"(max-width: 1024px) 100vw, 1024px\" \/><\/a><\/figure>\n\n\n\n<h2 class=\"wp-block-heading\">Consiga um emprego!<\/h2>\n\n\n\n<p>Est\u00e1 procurando por uma oportunidade de trabalho como desenvolvedor? Voc\u00ea pode encontrar seu pr\u00f3ximo emprego aqui na ProgramaThor, uma plataforma focada em vagas para desenvolvedores. Basta\u00a0<a href=\"https:\/\/programathor.com.br\/users\/sign_up\/?utm_source=blog&amp;utm_medium=post&amp;utm_campaign=texto.final\">se cadastrar\u00a0<\/a>e completar seu perfil para come\u00e7ar a se candidatar \u00e0s vagas que mais combinam com voc\u00ea! Veja nossas\u00a0<a href=\"http:\/\/www.programathor.com.br\/jobs\/?utm_source=blog&amp;utm_medium=post&amp;utm_campaign=texto.final\">vagas.<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Talvez voc\u00ea j\u00e1 tenha ouvido falar nesses termos: Data Warehouse e Data Lake. Principalmente se voc\u00ea \u00e9 um profissional da \u00e1rea de TI.\u00a0 No entanto, nem todo mundo sabe do que se trata ou entende as diferen\u00e7as entre essas duas solu\u00e7\u00f5es de banco de dados. Pensando nisso, trouxemos esse conte\u00fado. Continue a leitura e saiba [&hellip;]<\/p>\n","protected":false},"author":15,"featured_media":3786,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[41],"tags":[256,257,13],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v22.1 - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>Data Warehouse e Data Lake - Blog ProgramaThor<\/title>\n<meta name=\"description\" content=\"Voc\u00ea sabe quais s\u00e3o as diferen\u00e7as entre Data Warehouse e Data Lake? Nesse artigo a ProgramaThor explicou! Vem conferir e tirar suas d\u00favidas!\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/\" \/>\n<meta property=\"og:locale\" content=\"pt_PT\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Data Warehouse e Data Lake - Blog ProgramaThor\" \/>\n<meta property=\"og:description\" content=\"Voc\u00ea sabe quais s\u00e3o as diferen\u00e7as entre Data Warehouse e Data Lake? Nesse artigo a ProgramaThor explicou! Vem conferir e tirar suas d\u00favidas!\" \/>\n<meta property=\"og:url\" content=\"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/\" \/>\n<meta property=\"og:site_name\" content=\"Blog ProgramaThor\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/ProgramaThorBr\/\" \/>\n<meta property=\"article:published_time\" content=\"2022-11-09T19:44:32+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2022-11-09T19:44:34+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2022\/11\/Capa-Artigo-Template-11-1.png\" \/>\n\t<meta property=\"og:image:width\" content=\"676\" \/>\n\t<meta property=\"og:image:height\" content=\"366\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/png\" \/>\n<meta name=\"author\" content=\"Priscila Esperandio Ferrari\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:creator\" content=\"@ProgramaThor\" \/>\n<meta name=\"twitter:site\" content=\"@ProgramaThor\" \/>\n<meta name=\"twitter:label1\" content=\"Escrito por\" \/>\n\t<meta name=\"twitter:data1\" content=\"Priscila Esperandio Ferrari\" \/>\n\t<meta name=\"twitter:label2\" content=\"Tempo estimado de leitura\" \/>\n\t<meta name=\"twitter:data2\" content=\"5 minutos\" \/>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Data Warehouse e Data Lake - Blog ProgramaThor","description":"Voc\u00ea sabe quais s\u00e3o as diferen\u00e7as entre Data Warehouse e Data Lake? Nesse artigo a ProgramaThor explicou! Vem conferir e tirar suas d\u00favidas!","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/","og_locale":"pt_PT","og_type":"article","og_title":"Data Warehouse e Data Lake - Blog ProgramaThor","og_description":"Voc\u00ea sabe quais s\u00e3o as diferen\u00e7as entre Data Warehouse e Data Lake? Nesse artigo a ProgramaThor explicou! Vem conferir e tirar suas d\u00favidas!","og_url":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/","og_site_name":"Blog ProgramaThor","article_publisher":"https:\/\/www.facebook.com\/ProgramaThorBr\/","article_published_time":"2022-11-09T19:44:32+00:00","article_modified_time":"2022-11-09T19:44:34+00:00","og_image":[{"width":676,"height":366,"url":"https:\/\/programathor.com.br\/blog\/wp-content\/uploads\/2022\/11\/Capa-Artigo-Template-11-1.png","type":"image\/png"}],"author":"Priscila Esperandio Ferrari","twitter_card":"summary_large_image","twitter_creator":"@ProgramaThor","twitter_site":"@ProgramaThor","twitter_misc":{"Escrito por":"Priscila Esperandio Ferrari","Tempo estimado de leitura":"5 minutos"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"WebPage","@id":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/","url":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/","name":"Data Warehouse e Data Lake - Blog ProgramaThor","isPartOf":{"@id":"https:\/\/programathor.com.br\/blog\/#website"},"datePublished":"2022-11-09T19:44:32+00:00","dateModified":"2022-11-09T19:44:34+00:00","author":{"@id":"https:\/\/programathor.com.br\/blog\/#\/schema\/person\/3237651d54471592184af43c29cd01de"},"description":"Voc\u00ea sabe quais s\u00e3o as diferen\u00e7as entre Data Warehouse e Data Lake? Nesse artigo a ProgramaThor explicou! Vem conferir e tirar suas d\u00favidas!","breadcrumb":{"@id":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/#breadcrumb"},"inLanguage":"pt-PT","potentialAction":[{"@type":"ReadAction","target":["https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/"]}]},{"@type":"BreadcrumbList","@id":"https:\/\/programathor.com.br\/blog\/data_warehouse_e_data_lake\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Blog","item":"https:\/\/programathor.com.br\/blog\/"},{"@type":"ListItem","position":2,"name":"Dicas","item":"https:\/\/programathor.com.br\/blog\/category\/dicas\/"},{"@type":"ListItem","position":3,"name":"Data Warehouse e Data Lake: conhe\u00e7a as diferen\u00e7as"}]},{"@type":"WebSite","@id":"https:\/\/programathor.com.br\/blog\/#website","url":"https:\/\/programathor.com.br\/blog\/","name":"Blog ProgramaThor","description":"A plataforma de recrutamento  para programadores pensada por programadores. Entenda melhor o mundo da programa\u00e7\u00e3o, a cria\u00e7\u00e3o de uma vaga eficiente, dicas de entrevista, as linguagens do momento, o mercado de desenvolvimento e muito mais!","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/programathor.com.br\/blog\/?s={search_term_string}"},"query-input":"required name=search_term_string"}],"inLanguage":"pt-PT"},{"@type":"Person","@id":"https:\/\/programathor.com.br\/blog\/#\/schema\/person\/3237651d54471592184af43c29cd01de","name":"Priscila Esperandio Ferrari","image":{"@type":"ImageObject","inLanguage":"pt-PT","@id":"https:\/\/programathor.com.br\/blog\/#\/schema\/person\/image\/","url":"https:\/\/programathor.com.br\/blog\/wp-content\/litespeed\/avatar\/9e41beffa38a8bf1b4277036434e2736.jpg?ver=1780496900","contentUrl":"https:\/\/programathor.com.br\/blog\/wp-content\/litespeed\/avatar\/9e41beffa38a8bf1b4277036434e2736.jpg?ver=1780496900","caption":"Priscila Esperandio Ferrari"},"url":"https:\/\/programathor.com.br\/blog\/author\/priscila-esperandio-ferrari\/"}]}},"_links":{"self":[{"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/posts\/3783"}],"collection":[{"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/users\/15"}],"replies":[{"embeddable":true,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/comments?post=3783"}],"version-history":[{"count":3,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/posts\/3783\/revisions"}],"predecessor-version":[{"id":3787,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/posts\/3783\/revisions\/3787"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/media\/3786"}],"wp:attachment":[{"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/media?parent=3783"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/categories?post=3783"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/programathor.com.br\/blog\/wp-json\/wp\/v2\/tags?post=3783"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}