TDC CONNECTIONS
BUILDING SOFTWARE IN THE CONNECTED WORLD

TRILHA ENGENHARIA DE DADOS

Engenharia de Dados: Onde a Ciência Encontra a Solução.

A Trilha de Engenharia de Dados é um espaço dedicado à exploração dos desafios, soluções e inovações que moldam o mundo dos dados modernos. No mundo digital atual, onde a quantidade de dados cresce exponencialmente, a capacidade de processar, armazenar e extrair insights valiosos desses dados é uma competência fundamental. Se você é desenvolvedor, engenheiro de dados, arquiteto, cientista de dados ou entusiasta do setor, junte-se a nós nessa jornada de aprendizado e descoberta. Independentemente de você estar dando seus primeiros passos na área ou ser um veterano experimentado, esta trilha oferecerá insights valiosos, conexões inestimáveis e inspiração para impulsionar sua carreira e projetos.

Date and Place

Friday, March 24, 2023

09h às 19h

Centro Cultural Cais do Sertão
Av. Alfredo Lisboa, s/n / armazém 10
Bairro do Recife Recife - PE
IN-PERSON OR REMOTE ACCESS WITH ONLINE BROADCAST

Investment

Valores para participação online:
1 track: R$ 245 for R$ 150
2 tracks: R$ 440 for R$ 270
3 tracks: R$ 624 for R$ 384
* enjoy bigger discount until JAN/31,
see full table

Valores para participação online:
1 track: R$ 245 for R$ 195
2 tracks: R$ 440 for R$ 350
3 tracks: R$ 624 for R$ 495
* price valid until MAR/07,
see full table

Valores para participação online:
1 track: R$ 245
2 tracks: R$ 440
3 tracks: R$ 624
* price valid until MAR/24,
see full table

Valores para participação híbrida:
1 track: R$ 395 for R$ 250
2 tracks: R$ 710 for R$ 450
3 tracks: R$ 1.005 for R$ 639

Valores para participação híbrida:
1 track: R$ 395 for R$ 325
2 tracks: R$ 710 for R$ 584
3 tracks: R$ 1.005 for R$ 828

Valores para participação híbrida:
1 track: R$ 395
2 tracks: R$ 710
3 tracks: R$ 1.005

Schedule / Talks Time Zone: GMT-3

Programação Stadium:
Time Content
07:45 to 08:55 Recepção dos Participantes
09:00 to 09:40 Opening of the event and mini keynotes
09:45 to 10:00

A MySQL HeatWave Overview for Every Developer

Herbert Menezes
In this session, you'll learn how MySQL HeatWave provides a single database service for transaction processing, analytics, machine learning, and data lake applications. It eliminates the complexity of ETL operations and existing MySQL applications run without any changes. MySQL HeatWave provides the best price-performance among competing offerings and is offered on multiple clouds.
Programação desta Trilha:
Time Content
10:00 to 10:05 Track opening by coordination

Here the coordinators introduce themselves and make an introduction to the track.

10:05 to 10:40

Como construímos uma plataforma de dados eficiente aplicando boas práticas

Diogo Falcão

Lidar com problemas de dados em uma empresa de alta tecnologia pode ser uma tarefa complexa, mas é essencial para garantir o sucesso dos negócios. À medida que a quantidade de dados aumenta, é importante ter sistemas para gerenciá-los e analisá-los com eficácia. Porém, um grande desafio consiste em como criar e expandir a plataforma de dados sem aumentar na mesma proporção, os custos e principalmente com um time enxuto. Nesta apresentação iremos ver como a VTEX conseguiu criar uma plataforma de dados do 0 e como aplicar as melhores práticas para um crescimento rápido e sustentável.

10:45 to 11:20

Ciclo de vida da Série Temporal

Vagner Pontes

Esta palestra demonstra uma solução prática implementada para endereçar as capacidades requeridas para gerenciar dados no formato de séries temporais. Esta é uma aplicação real frequentemente encontrada nas empresas líderes no segmento de energia e bebidas.

Como o volume de dados gerados a cada ano aumenta exponencialmente, o mercado de banco de dados tem uma necessidade de fornecer ferramentas e serviços que permitem aos usuários gerenciar todo o ciclo de vida de uma série temporal: coletar, armazenar, gerenciar e analisar dados de maneiras cada vez mais inovadoras

Ao final desta palestra o participante terá entendimento para implementar uma solução de dados para séries temporais.

11:25 to 11:40

Nós, robôs: uma história sobre Open Source e IA

Ricardo Martinelli de Oliveira
Para levar a tecnologia a um novo patamar, temos que levar em conta o que fizemos no passado. A evolução é natural, mas a colaboração é um motor principal para evoluir mais e melhor. Com a IA não é diferente. Preparem-se para ouvir uma breve história sobre o que podemos fazer em colaboração, através do Open Source, para atingir patamares mais elevados.
11:45 to 12:20

Mentalidade Data Driven

Marcos Freitas

Abordar de forma ampla os pilares de uma mentalidade Data Driven, tanto para as pessoas quanto para as empresas, com sugestões de caminhos para avançar neste tema.

12:25 to 13:55 Intervalo para almoço

An excelent opportunity for all people in the event to interact and exchange ideas. Collaborators, sponsoring and supporting companies, speakers and technical committeé.

14:05 to 14:40

Lakehouse a arquitetura de dados do futuro. Como o ecossistema do Databricks nos permite fazer mais com menos.

Thiago Henrique Lopes / Guilherme Felipe Simão

Os Data Warehouse vem cumprindo bem seu papel desde o final dos anos 80, mas eles não permitem armazenar dados não estruturados, os Data Lakes permitem isso, mas não tem suporte a transações ACID e não permitem trabalho em esquemas, pra solucionar esses problemas surgiu o Lakehouse, uma arquitetura open source, que permitem armazenamento em storages multi-cloud com computação distribuída, garantia de transações ACID, aplicação de segurança e governança dos esquemas, armazenamento de diferentes tipos de arquivos inclusive não estruturados, suporte a BI e Data Science, e muito mais. Junte-se a nós e entenda essa arquitetura que o levará a um outro nível

14:45 to 15:20

Detectando e mascarando dados sensíveis na AWS

Thiago da Hora / Carolina Junqueira Ferreira

Nesta sessão, vamos falar sobre o impacto da privacidade em arquiteturas de dados, como construir um pipeline de dados orientado a eventos e serverless na AWS e com a funcionalidade de identificar dados sensíveis como CPF, RG, CNPJ, CEP e Telefone (ou qualquer outro padrãom, como dados de saúde) através de serviços no-code. Também aplicaremos técnicas de mascaramento irreversível e reversível nos dados sensíveis.

15:25 to 16:00

Como produtizar um código Spark com Airflow e EMR Serverless?

Helder Guedes

Com uma abordagem prática e objetiva, essa palestra apresenta uma estratégia para produtizar um código Spark, em combinação com o Apache Airflow e EMR Serverless. Serão apresentados exemplos desde a configuração inicial, até a execução de jobs Spark, de modo a compreender como estas tecnologias podem auxiliar o dia-a-dia do Engenheiro de Dados.

16:05 to 16:40

Versatilidade no processo de ETL com Kettle e RabbitMQ

Nadja Carolina Santos De Oliveira

A presente sessão trará um exemplo real de associação de ETL e Fila, muito utilizados por ambientes institucionais que buscam apresentar informações em tempo real. Vou apresentar uma solução de ETL utilizada em um projeto de finanças que exigiu versatilidade para diminuir o tempo de resposta e automatizar o processo de atualização das informações. Serão abordados conceitos introdutórios de fila e sua utilização por algumas vertentes, além de sua composição para o processo de ETL, representada pela ferramenta Kettle. Com conceitos de extração, transformação e carga de dados, essenciais ao uso do processo de ETL, juntamente com o conceito de fila implementado no RabbitM.

16:45 to 17:15 Networking and Visiting Stands

Break to network and get to know the booths of the event.

17:20 to 18:20

A era pós Engenharia de Dados na transformação dos negócios digitais!

Helga Jinzenji / Cesar Augusto de Carvalho / Vinicius Cardoso Garcia / Filipe Avilla
Painel desta Trilha
18:20 to 18:25 Encerramento da trilha

Os coordenadores fazem um breve encerramento com agradecimentos.

Programação da Stadium no final do dia.:
Time Content
18:25 to 19:00 Closing session

After the presentation of the results of the day, on the Stadium stage, many sweepstakes will close the day.

Schedule subject to change

Technical Committee TRILHA ENGENHARIA DE DADOS

Sponsors

Diamond


Gold


Silver



Programa Mais Diversidade

Microsoft

Instituição Parceira

UniBh

Realização