Engenharia de dados com Confluent e Databricks

Engenharia de dados com Confluent e Databricks

Author: Estúdios Voz April 30, 2025 Duration: 1:25:23

No episódio 174 do Podcast PPT Não Compila recebemos três especialistas de peso para um papo técnico e ao mesmo tempo acessível sobre Engenharia de Dados moderna. Juntos com o co-host Rômulo Barbosa, fundador da Techrom, contamos com a participação de Luiz Carrossoni, arquiteto de soluções na Databricks, e Lucas Melo, engenheiro de soluções na Confluent, que explicam como empresas podem simplificar fluxos de dados complexos — mesmo com legados pesados — usando tecnologias como Kafka, Flink e Delta Lake.


A conversa aprofunda como unir o mundo transacional ao analítico, os desafios de ingestão e integração, e por que o Shift Left é mais que um jargão: é uma mudança cultural necessária. Os convidados também detalham a parceria estratégica entre Databricks e Confluent, revelando como o recurso TableFlow pode transformar o modo como dados são tratados e disponibilizados para consumo em tempo real, com governança e eficiência.


Você vai entender como aplicar conceitos como arquitetura orientada a eventos, camadas de dados (bronze, silver e gold) e produtos de dados dentro da sua empresa. Além disso, o episódio é uma aula prática sobre maturidade em dados, modernização de TI e como preparar o terreno para a IA generativa com bases sólidas. 💡


🚀 Deixe sua dúvida nos comentários, compartilhe com seu time e espalhe esse conteúdo onde ele pode fazer a diferença!


#Podcast #PPTNãoCompila #EngenhariaDeDados #IngestãoDeDados #Databricks #Confluent #Techrom


[0:44] Abertura e apresentação

[6:06] Visão sobre Ingestão de dados

[12:53] Estratégias de integração de dados nas empresas

[21:07] Parceria entre Databricks e Confluent

[28:42] Shift Left e simplificação de fluxos de dados

[34:31] Dados e uso de serviços gerenciados

[36:50] Produto de dados

[38:47] Maturidade operacional de empresas

43:56 Legado das ondas tecnológicas

[48:27] Custos

[51:55] Mudanças nas empresas em relação ao uso de dados

[59:34] Uso de IA Generativa

[1:04:51] Futuro de parceria entre Databricks e Confluent

[1:08:00] Vantagens para Engenheiros De dados

[1:10:47] Vantagens estratégicas

[1:17:31] Facilidade e simplificação de processos

[1:20:43] Agradecimentos e Considerações finais


Convidados:

Lucas Melo: linkedin.com/in/lmelodepaula/

Luiz Carrossoni: linkedin.com/in/luizcarrossoni/

Rômulo Barbosa: linkedin.com/in/rômulo-barbosa/


Youtube: https://youtu.be/HqraGPgUoD0

Outras plataformas: https://linktr.ee/pptnaocompila


Acompanhe nas redes

Instagram e Twitter: @pptnaocompila

LinkedIn: https://www.linkedin.com/company/pptnaocompila


Produção: Voz e conteúdo | https://www.vozeconteudo.com.br - @estudiosvoz


Você já parou para pensar em quantas decisões técnicas são, na verdade, conversas sobre pessoas, carreiras e o futuro do nosso trabalho? É nesse espaço que PPT Não Compila | Tecnologia, IA e Programação se encontra. Produzido pelos Estúdios Voz, este podcast mergulha nas questões que realmente importam para quem vive de código, dados e infraestrutura. A cada episódio, a conversa vai além das tendências quentes para examinar o impacto prático delas no dia a dia. Ouvimos discussões aprofundadas sobre desenvolvimento de software, os desafios éticos e práticos da inteligência artificial, a complexidade da segurança cibernética e os detalhes da infraestrutura em nuvem. Mas o que dá o tom especial é a maneira como esses temas se entrelaçam com a vida profissional real. Não é raro uma análise sobre uma nova ferramenta de IA vir acompanhada de uma reflexão sincera sobre como isso muda as habilidades demandadas no mercado, ou um debate técnico sobre cibersegurança levantar questões sobre negociação salarial para especialistas. É para quem entende que a carreira em tecnologia é um projeto em constante compilação, cheio de bugs a resolver e novas versões a lançar. Se você busca um conteúdo que respeita sua inteligência e trata a profissão com a profundidade que ela merece, encontrará um lar neste podcast. A proposta é clara: oferecer um diálogo honesto que ajuda a decifrar não apenas os sistemas, mas também o caminho para construir uma trajetória mais sólida e consciente nesse universo em ritmo acelerado.
Author: Language: pt-br Episodes: 100

PPT Não Compila | Tecnologia, IA e Programação
Podcast Episodes
Alexa+ finalmente ficará inteligente? [not-audio_url] [/not-audio_url]

Duration: 1:11:51
Neste episódio do PPT Não Compila, Wellington Cruz recebe os especialistas Clauber Stipkovic e Fabinho Martinelli para discutir um dos temas mais aguardados do mercado de Inteligência Artificial: A Alexa finalmente vai f…
Inovação no Agro: Desafios e Oportunidades do Agro Tech [not-audio_url] [/not-audio_url]

Duration: 1:26:49
Neste episódio especial do Podcast PPT Não Compila, recebemos André Gildin, especialista em inovação e tecnologia aplicada ao agronegócio, para uma conversa profunda sobre como o campo está se conectando ao futuro. Ao la…
$LIBRA, Milei investigado e Hack Histórico da Bybit [not-audio_url] [/not-audio_url]

Duration: 1:03:48
🚀 O mercado de criptomoedas foi abalado por dois eventos polêmicos nas últimas semanas, e neste episódio mergulhamos fundo para entender o que aconteceu. Recebemos Bruno Campos (CTO) e João Pedro Alves Cruz Lima (CEO) da…
Banco Neon e o maior vazamento de dados do Brasil [not-audio_url] [/not-audio_url]

Duration: 1:10:55
O episódio de hoje do Podcast PPT Não Compila mergulha em um dos maiores vazamentos de dados da história do Brasil: o caso do Banco Neon 💻 Para entender como isso aconteceu e quais são as implicações para empresas e clie…
Quarkus: Java além da JVM [not-audio_url] [/not-audio_url]

Duration: 1:23:15
O Java está mudando, e você está acompanhando? No episódio de hoje do Podcast PPT Não Compila recebemos Luiz Pais, SRE do Banco BV e o nosso incrível co-host Valdir Scarin, founder da VMBears, e entram no universo do Qua…
Inovação, IA e Educação: SXSW EDU [not-audio_url] [/not-audio_url]

Duration: 1:40:50
Se você acha que a educação está estagnada, prepare-se para mudar de ideia! Neste episódio do Podcast PPT Não Compila recebemos Guilherme Rodrigues Alves, fundador da Explore Aprendizagem Criativa e idealizador da Missão…
Do Legado ao Cloud Native: O Case de Modernização da Natura [not-audio_url] [/not-audio_url]

Duration: 1:13:05
🚀 Modernizar sistemas legados sem interromper operações críticas é um desafio gigantesco – mas a Natura conseguiu! Neste episódio do PPT Não Compila Podcast recebemos Felipe Matheus,Tech Manager da Natura; Márcio Willian…
DeepSeek, Geopolítica e (Des) Regulamentação das Redes Sociais [not-audio_url] [/not-audio_url]

Duration: 1:43:58
🚀 As Big Techs estão no comando do mundo? A interseção entre tecnologia, política e sociedade nunca esteve tão acirrada. Neste episódio do podcast PPT Não Compila recebemos Anderson Galeote, Software Development Manager…
Experiência do colaborador: Transformação com dados e tecnologia [not-audio_url] [/not-audio_url]

Duration: 1:27:44
🎙️ Bem-vindos ao primeiro episódio do ano no PPT no Compila! Começamos 2025 com um tema essencial: a experiência do colaborador. Contamos com dois convidados de peso — Alex Galho, CTO da Vivest, e Bruno Cabuto, CTO e fun…