Você está visualizando o site de uma EDIÇÃO PASSADA do QCon.

Palestra: Automating Machine Learning and Deep Learning Workflows

Track: Armazenamento e Processamento de Big Data

Sala: 4 São Francisco

Horário: 3:05pm - 3:50pm

Dia da semana: Segunda-feira

Nível: Intermediário

Persona: Arquiteto(a), Cientista de Dados, Desenvolvedor(a) Programador(a), Desenvolvedor(a) Sênior, DevOps, Gerente de Produto, Gerente de Projetos, Gestão (VP, CTO, CIO, Diretoria), Líder Técnico(a)

Apresentação em Inglês

Share this on:

This presentation is now available to view on InfoQ.com

Assista a palestra com transcrição

Pontos Principais

  • Leveraging Kubernetes to make machine learning Ops (MLOps) scalable and portable;
  • Introducing more rigorous best practices to avoid repetition and duplication;
  • Improve data scientists and machine learning engineers productivity and knowledge distribution.

Resumo

Machine Learning services are quickly becoming a big part of the software developer’s toolbox, in any domain. Databases or web development frameworks are a standard component of almost any non-trivial application, they integrate with not much special expertise. We expect to see similar layers for Machine Learning and Deep Learning in the near future with the same maturity.

Machine learning workflows are most of the time iterative, and typically involve several steps, i.g. creation of many intermediate datasets, modeling, evaluations, predictions, and deployment. These workflows tend to be repetitive and in some cases manual. In this presentation I will cover some of these workflows and how to automate them with the help of Polyaxon, an open source platform built on Kubenernetes to make machine learning, reproducible, scalable, and portable. We will be covering different workflows, from basic ones that automate repetitive tasks (e.g., create a dataset, post-process it, do augmentation, and finally model the result and make predictions) to sophisticated algorithms that enhance our machine learning arsenal (e.g., feature selection or hyperparameter optimization techniques).

Speaker: Mourad Mourafiq

Author / Founder at Polyaxon

An engineer with more than 8 years of experience. He has been working in different roles involving quantitative trading, data analytics, software engineering, and team-leading at EIB, BNP Paribas, Seerene, Kayak, Dubsmash. He is currently working on a new open source platform for building, training, and monitoring large scale deep learning applications called Polyaxon.

Find Mourad Mourafiq at

Tracks 2020

  • Arquiteturas que você sempre quis conhecer

    Segredos arquiteturais de aplicações populares, com milhões de pessoas usuárias e que nunca saem do ar.

  • Engenharia aplicada a Machine Learning

    Conheça as principais técnicas de engenharia  e arquitetura de software de larga escala aplicadas a Machine Learning.

  • Microservices: melhores práticas e padrões

    Frameworks modernos e os desafios de implantação, gestão e pós-produção

  • Arquiteturas de vanguarda

    Conheça as técnicas e tecnologias modernas que dominarão as arquiteturas em 2020.

  • Atingindo todo o potencial de containers

    Técnicas modernas de DevOps, Containers e Continuous Delivery para explorar o potencial da conteinerização de aplicações.

  • Machine Learning e Inteligência Artificial

    Algoritmos, técnicas e ferramentas: o que está por trás de sistemas e soluções cada vez mais assertivas.

  • Data Science aplicada

    Tecnologias e as boas práticas da ciência de dados trazendo ganho e diferencial competitivo para grandes empresas.

  • Java e JVM em evolução

    Performance, escalabilidade e as mais recentes novidades da principal plataforma de desenvolvimento no Brasil e no mundo.

  • JavaScript: a plataforma da web moderna

    Explore profundamente os frameworks que tornam o JavaScript tão popular e saiba como as linguagens baseadas em JavaScript estão evoluindo o desenvolvimento de front-end (e back-end).

  • Levando sua carreira para o próximo nível

    Habilidades e estratégias para destravar sua carreira e potencializar seu desenvolvimento profissional.

  • Construindo culturas de desenvolvimento duradouras

    Criando e evoluindo a cultura de empresas: novas formas de organizar times com foco em produtividade. 

  • Ciência da Computação no mundo real

    Temas avançados em computação. Técnicas clássicas e modernas direto da academia para o seu código.

  • Linguagens do século 21

    Linguagens e plataformas emergentes, com ênfase em linguagens projetadas para alta concorrência e sistemas distribuídos.

  • AMA (Ask Me Anything)

    Discussões mais profundas com palestrantes do QCon São Paulo.

  • Solutions Track

    Conheça soluções, ferramentas e técnicas de empresas parceiras do QCon São Paulo.