Tema
Por anos, engenheiros de dados têm construído pipelines que conectam o Azure Data Factory (ADF) ao Databricks , uma combinação poderosa, mas que frequentemente exigia ajustes manuais e configurações complexas. Era como…
O universo Databricks está em constante expansão. Como uma galáxia viva e pulsante, a cada mês surgem novas “constelações” de recursos, integrações e aquisições que iluminam o caminho dos profissionais de dados e…
Quem trabalha com SQL sabe que, apesar de ser uma linguagem poderosa, escrever e entender queries complexas, especialmente aquelas com múltiplas subqueries aninhadas, pode ser um desafio. Muitas vezes, temos a sensação…
Quem aí é fã de Monstros S.A.? Lembram como a fábrica inteira dependia da energia dos gritos (e depois das risadas!) das crianças para manter Monstrópolis funcionando? No nosso universo de dados, podemos dizer que o…
Imagine um mundo onde compartilhar dados entre empresas seja tão simples quanto abrir um aplicativo de delivery e pedir sua refeição favorita. No lugar de processos complicados, transferências demoradas e preocupações…
Se os antigos egípcios pudessem construir uma inteligência artificial, provavelmente invocariam seus deuses para tornar o sistema mais sábio, ágil e eficiente. Assim como Rá iluminava o mundo , Tot registrava o…
Nos dias de hoje, a tomada de decisão baseada em dados é o coração das empresas. Entretanto, a eficácia dessas decisões depende diretamente da qualidade dos dados utilizados. Dados inconsistentes, incompletos ou…
O Databricks é uma plataforma robusta para processamento e análise de grandes volumes de dados, suportando cargas de trabalho que variam desde a engenharia de dados até a ciência de dados e análise de negócios. Um dos…
Nos últimos anos, a necessidade de plataformas robustas para análise de grandes volumes de dados tornou-se evidente para empresas que buscam se tornar mais orientadas por dados. Duas das soluções mais comentadas…
Depois de escrever o artigo anterior sobre migração de SAS para Databricks em formato de receita de bolo , gostei tanto da experiência que decidi repetir a ideia, mas desta vez com COBOL! Como o COBOL é uma linguagem…
Migrar uma plataforma consolidada como o SAS para o Databricks pode ser desafiador, mas quando seguimos uma receita de bolo bem estruturada, tudo fica mais simples e eficiente. Nesta receita, vamos dividir o processo em…
Que tal comparar os erros que sabotam seus pipelines de dados com vilões que vivem atrapalhando a missão dos super-heróis? Imagine que seu pipeline é o herói da história, encarregado de levar os dados até o destino…
