TDC FUTURE
TECHNOLOGY CREATING TOMORROW

TRILHA ENGENHARIA DE DADOS

Pessoas Engenheiras de Dados precisam ser criativas e inovadoras para encontrar as soluções adequadas e relevantes à digitalização dos negócios e interações modernas.

A Engenharia de Dados é uma área em constante evolução, com novas tecnologias e técnicas surgindo a todo momento. A criatividade e a inovação são essenciais para o mundo complexo no qual estamos com cada vez mais dados e ferramentas.

Para você que deseja ingressar na área ou manter-se atual, a Trilha de Engenharia de Dados é o lugar certo para você. As palestras, painel e networking são com pessoas atuantes no mercado brasileiro de tecnologia e a curadoria dos temas é cuidadosa para impulsionar o seu aprendizado e potencializar a conexão com as pessoas da área.

O que é uma trilha?

A trilha é um evento híbrido, presencial em Porto Alegre e remoto na sua casa, que tem a duração de um dia inteiro com sete palestras e um painel de discussão.

Date and Place

Thursday, December 7, 2023

09h às 19h

UniRitter
Rua Orfanotrófio, 555 /
Alto Teresópolis Porto Alegre - RS
IN-PERSON OR REMOTE ACCESS WITH ONLINE BROADCAST

Investment

Inscrição online
1 track: R$ 245 for R$ 150

Inscrição online
1 track: R$ 245 for R$ 195

Inscrição online
1 track: R$ 245

Inscrição híbrida (presencial + online)
1 track: R$ 395 for R$ 250

* enjoy bigger discount until APR/19, see full table

Inscrição híbrida (presencial + online)
1 track: R$ 395 for R$ 325

* price valid until MAY/05, see full table

Inscrição híbrida (presencial + online)
1 track: R$ 395

* price valid until JUN/36, see full table

Promoções

Inscrição online
2 tracks: R$ 440
3 tracks: R$ 624

Inscrição híbrida (presencial + online)
2 tracks: R$ 710
3 tracks: R$ 1.005

* price valid until JUN/36, see full table

Esta trilha pertence à área

Confira as trilhas relacionadas:

Schedule / Talks Time Zone: GMT-3

Programação Stadium:

08:00 to 08:55

Credenciamento

09:00 to 10:00

Opening of the event and mini keynotes
Programação desta Trilha:

10:10 to 10:25

Track opening by coordination

Here the coordinators introduce themselves and make an introduction to the track.

10:30 to 11:05

Orquestração de pipelines com Airflow e dbt

Carlos Eduardo Magalhães

Cansei de passar por clientes cuja orquestração consistia em meia dúzia de views, uma lambda function e gambiarra. Vou ensinar vocês a usar o dbt pra escrever suas transformações de dados, e como orquestrar a execução e monitoramento de tudo no Airflow. De bônus, vou ajudar vocês a subir essa estrutura usando Docker para que possam estudar na prática.

11:15 to 11:50

Como melhorar a eficiência das queries, nos seus sistemas analíticos?

Dirceu Semighini Filho

Venha aprender como funcionam o processamento em paralelo dos sistema de armazenamento de dados analítico, para que você consiga melhorar a performance das queries que são executadas nele. Aqui vamos ver como são as arquiteturas de dados disponíveis no mercado, como organizar e estruturar as tabelas neste tipo de sistema, onde, quando e como fazer o particionamento dos seus dados. Serão mostradas também as melhores práticas ao se construir um sistema de dados anlítico.

11:55 to 12:30

Arquiteturas de Dados: história e uma visão 360 na prática! Lakehouse, IA generativa e muito mais

Erika Nagamine

Nessa sessão vamos falar sobre o por que criamos arquiteturas de dados e suas evoluções ao longo do tempo: Data Warehouse, Data Lakes, Lakes Warehouses, Data Mesh, IA generativa e muito mais na pratica.

12:35 to 14:00

Intervalo para almoço

An excelent opportunity for all people in the event to interact and exchange ideas. Collaborators, sponsoring and supporting companies, speakers and technical committeé.

14:00 to 14:10

Track opening by coordination

Here the coordinators introduce themselves and make an introduction to the track.

14:10 to 14:45

Relational Migrator - Conheça a ferramenta que vai te auxiliar nessa jornada

Leandro Domingues

Vai migrar dados de algum banco relacional para o MongoDB? Venha comigo nessa sessão e conheça os recursos sensacionais do Relational Migrator, uma ferramenta oficial que permite ter uma visão do seu modelo, adequar collections, e até criar jobs para facilitar a migração! Sem deixar conceitos fundamentais e importantes de lado, o Relation Migrator vem para consolidar ideias e workloads.

14:50 to 15:25

Airflow no GKE: Fazendo um deploy do Airflow no GKE sem uso do Helm Chart

Amanda Bizzinotto

O Airflow é uma ferramenta de orquestração poderosa, e os Helm charts disponibilizados pela comunidade facilitam bastante um deploy com Kubernetes. Contudo, recentemente enfrentamos o desafio de fazer um deploy do Airflow no Google Kubernetes Engine sem uso do chart, e descobrimos alguns pontos de atenção e pedras ao longo do caminho.

Passamos aqui pelo passo a passo para fazer um deploy simples do Airflow no GKE, incluindo scheduler e webserver e exposição da UI do Airflow em um subdomínio próprio.

15:30 to 16:30

Histórias reais de sucesso e insucesso na Engenharia de Dados

Tamara Manzi de Azevedo / Douglas Trajano / Renata Rodrigues Gotler / Alexandre Zanelatto
Painel de Discussão desta Trilha

16:35 to 17:05

Networking and Visiting Stands

Break to network and get to know the booths of the event.

17:10 to 17:45

Vector Search e IA Generativa no Cassandra para apps rápidos e escaláveis

Samuel Matioli

Se a IA generativa começa nos dados, a infraestrutura dos apps necessitam escala, performance e confiabilidade. Por isso, o Cassandra com sua arquitetura para missão critica, velocidade, volume e agora também com Vector Search, é ideal para estes apps,. Veremos como este feature foi implementado, como utilizá-los diretamente e através de frameworks, com LangChain e Llama Index

17:50 to 18:25

BigQuery indo além do Data Warehouse

Fernando Sedrez

Todo mundo sabe que o BigQuery é capaz de armazenar e processar grandes volumes de dados, mas sabe que dá para fazer fluxo de dados completas nele? Pois bem, as novas funcionalidades dele estão facilitando a vida da engenharia de dados! Vamos ver como fluxos de dados podem ficar mais simples, com tudo rodando dentro do BigQuery sem dor de cabeça.

Programação da Stadium no final do dia:

18:30 to 18:35

Encerramento da trilha

Os coordenadores fazem um breve encerramento com agradecimentos.

Schedule subject to change

Sponsors

Diamond



Silver



Patrocínio Trilha


Instituição Parceira


Realização