Nesta palestra irei explorar as possibilidades que a estrutura do ecossistema Hadoop traz para implementação de um projeto de Big Data. Será feito um contraponto entre cenários onde o Hadoop, e as demais ferramentas do seu ecossistema, trazem benefícios e cenários onde soluções mais simples poderiam ser aplicadas. Para realizar a análise serão utilizados tanto argumentos técnicos como de negócios.

Algumas empresas ignoram as condições reais dos seus dados e alimentam seus repositórios com dados conflitantes, sem propósito e com um grau muito baixo de confiabilidade. Este tipo de abordagem prejudica qualquer iniciativa ligada ao uso dos dados. A grande verdade é que não há como ter sucesso em programas de Big Data/Analytics sem ações ligadas à Governança de Dados. Esta palestra visa transmitir para o público: 1 - Conceitos sobre Governança de Dados aplicados em iniciativas de Big Data / Analytics; 2 - Impactos que a ausência de Governança de Dados traz para estas iniciativas; 3 - Dicas de como implementar uma Governança de Dados, baseada em princípios ágeis e orientada à inovação.

Essa apresentação discute o processo de decisão realizado pela Socialbase durante a escolha do melhor framework/serviço de aprendizado de máquina. Entre as questões avaliadas estão: feature, escalabilidade, curva de aprendizado, custos e segurança.

Como um engenheiro de dados se encaixa nesse mundo aonde Machine Learning tá cada dia mais presente? Nesse momento que temos mais tecnologias estáveis em Big Data como se preparar para receber o mundo do AI/Machine Learning que tá cada dia mais presente nessa área. Vamos mostrar como isso tudo é natural e contar um pouco sobre a nossa experiência de transição nesse mundo e falar sobre os desafios de Machine Learning no mundo de Big Data :)

Nesta palestra será apresentado como podemos construir uma plataforma para geração de insights significativos usando apenas tecnologias open source e free softwares. Desafios do uso do Open Source e diferenciais competitivos e estratégicos. Serão detalhadas também questões técnicas da funções das ferramentas de integração de dados, carga de lotes, qualidade dos dados, segurança dos dados, estrutura distribuída, data warehouse, fluxo de dados em tempo real, processamento e visualização de dados todas open source para que possa se implementar uma plataforma Open Source para Data Science. Um destaque especial do uso do Pentaho nesta plataforma será abordado.

ElasticSearch em Produção: Como vencer o grande vilão Big Data

A onda do momento é Big Data! Se você trabalha com TI e ainda nem ouviu esse termo ainda, deve estar uns 5 anos atrasado. A startup de sucesso surge "para aplicar a inovação do Data Science no Big Data para a criação de Insights que agregam Valor aos Negócios do Cliente?. O que toda empresa da segunda década do milênio precisa para resolver seus problemas: usar o Big Data! Tudo isso é incrível, não é mesmo?!

Bem... antes de continuar a conversa, preciso lhe contar uma história: Como, no primeiro dia de trabalho, eu liguei um fluxo de dados 5x maior do que toda a plataforma recebia e tudo o que sucedeu a partir disso.

Todo usuário que acessa seu site tem algo que ele deseja. Nessa apresentação vamos explicar como segmentar esses usuários identificando o que querem e ofertando a melhor publicidade (ou conteúdo) para ele. Vamos mostrar o cenário utilizado na Globo.com e como podemos expandir isso para Recomendação de conteúdo e rentabilidade em cima de publicidade segmentada.

O intuito da apresentação seria demonstrar como os sistemas de Geolocalização e informações geográficas pode ser um diferencial no mercado de Big-Data.

Em um mundo onde a coleta de dados cresce de forma desenfreada, fica uma pergunta: como obter resultados úteis a partir de volumes de dados tão grandes?

E se fosse possível analisar esses dados de forma a encontrar conexões, nexos e valores? E mais: seria possível fazer isso com alta performance?

Para isso existem os grafos. Ao armazenar e disponibilizar as conexões entre dados de forma única, eles permitem que se navegue por grandes volumes de informações a uma velocidade inigualável.

Junte-se a nós para aprender como utilizar essa tecnologia para turbinar o seu projeto ainda hoje. Se não há limites para os dados coletados, então vamos explorá-los também de forma sem limites!