#publisher FIAP - A Melhor Faculdade de Tecnologia » Machine Learning e Big Data – Passos para Criação de um Projeto de Aprendizagem de Máquina Feed de comentários Fábrica de Natal 2014 emociona a todos Já falou de empreendedorismo com seus filhos? IFRAME: //www.googletagmanager.com/ns.html?id=GTM-564S72 [logo-fiap-branco-75x25.png] Portal do Aluno & professor Acesso exclusivo O que você procura?_ [busca.jpg]-Submit [linha_topo.jpg] * Conheça a FIAP [seta_direita.png] + + Quem Somos Coworking Prêmios e Reconhecimentos Parcerias Estratégicas Corpo Docente Relacionamento com Aluno Empresa Júnior Gestão de Carreiras Responsabilidade Social Facilidades de Transporte [seta_baixo.png] Ônibus exclusivo Bicicletário Campi FIAP [seta_baixo.png] Vila Olímpia Paulista Aclimação Alphaville Autoavaliação Institucional [seta_baixo.png] Introdução CPA Histórico de Avaliações FIAP Plano de Avaliação Institucional [bt_conheca_footer_m.png] * Destaque [seta_direita.png] + + Notícias Imprensa Mercado de TI FIAP - SU Call to Innovation I Help [bt_acontece_footer.png] * FIAP X [seta_direita.png] + + FIAP X – Conteúdo Digital Gratuito Cursos Artigos FIAP Café - Podcast TEDxFIAP [bt_ideias_footer.png] * Graduação * MBAs * Pronatec * SHIFT - Curta Duração Home » FIAP - A Melhor Faculdade de Tecnologia > FIAPx > Artigos > Machine Learning e Big Data – Passos para Criação de um Projeto de Aprendizagem de Máquina IFRAME: http://www.facebook.com/plugins/like.php?app_id=262834190410348&href=ht tps://www.fiap.com.br/2014/12/22/fiapx/machine-learning-e-big-data-pass os-para-criacao-de-um-projeto-de-aprendizagem-de-maquina/&send=false&la yout=button_count&width=100&show_faces=false&action=like&colorscheme=li ght&font&height=21 Tweet [btn_compartilhar_email.gif] [seta_titulo.jpg] Machine Learning e Big Data – Passos para Criação de um Projeto de Aprendizagem de Máquina +A -A Vou fazer uma pausa nos artigos sobre Gestão de Projetos de Big Data para falar um pouco sobre Aprendizagem de Máquina e sua relação com Big Data. Com isso pretendo mesclar conteúdos mais gerenciais com algumas situações mais práticas deste assunto. Participei em setembro de 2014 de uma conferência sobre Big Data nos Estados Unidos. Tive o prazer de conhecer o prof. Sunil Sabat, especialista em Machine Learning e Big Data. Ele possui um blog cuja leitura é recomendada pelos que se interessam no assunto: http://bigdataknowhow.weebly.com/. A Aprendizagem de Máquina (Machine Learning) é uma área da computação e da estatística que lida com a construção de sistemas que são capazes de aprender com os dados e eventualmente até com suas próprias decisões. Este tipo de sistema é capaz de tomar decisões baseadas nos dados disponíveis e as decisões tomadas pelo sistema podem realimentar a base de dados. Desta forma o sistema não segue apenas a lógica imposta pelo desenvolvedor e sim se ajusta sem a intervenção humana. Você pode imaginar que este assunto é novo, mas na realidade esta definição existe desde o final da década de 1950. É natural concluir que, com o advento do Big Data as possibilidades de criar modelos deste tipo sejam bastante ampliadas. E a assertividade das previsões também. Quanto mais dados, melhores as previsões. Falando em previsão, acho importante deixar clara a diferença básica entre Machine Learning e Data Mining. Os dois conceitos se complementam, mas também se sobrepõem. O foco principal do Machine Learning é realizar previsões baseadas em dados conhecidos e utilizados para “treinar” o algoritmo. O foco principal do Data Mining é a descoberta de propriedades dos dados que antes não eram conhecidos. Por este motivo o Machine Learning se utiliza do Data Mining para aprimorar a acuracidade do treinamento e avaliação do modelo (vide abaixo). O prof. Sunil cita em seu Blog os seguintes passos para adoção e desenvolvimento do processo de Machine Learning: 1. Data Selection: a identificação dos dados que serão utilizados para atingir o objetivo é fundamental para o sucesso do projeto. Este processo envolve a limpeza, seleção e adequação dos dados que serão utilizados. Se você não tem os dados adequados, não há como tentar fazer previsões. 2. Feature Selection: selecionar as características dos dados utilizados é um passo muito importante. Deve-se escolher os dados menos sensíveis a ruídos e que sejam mais fáceis de serem manipulados. Neste momento é feita a divisão entre os dados que serão utilizados para treinamento do modelo e os dados para realização dos testes. 3. Model Selection: deve-se iniciar por modelos mais simples e aumentar a complexidade se necessário. Este modelo é uma parte de uma realidade passada que você tem total controle sobre aquilo que aconteceu. Desta forma você poderá realizar as fases seguintes de treinamento e testes identificando se o seu algoritmo será capaz de prever com o maior nível de assertividade. 4. Learning: a fase de treinamento é extremamente importante para que o processo seja concluído com êxito. Identifique os parâmetros adequados que minimize o erro do algoritmo. Entenda que seu algoritmo precisa destes parâmetros e dos resultados para saber como se comportar nas fases posteriores. 5. Evaluation: esta é a fase dos testes. Se o algoritmo apresentar um erro muito grande fatalmente será necessário rever o modelo e realizar novamente a fase 4. 6. Application: aplicar o modelo com dados que você não sabe o resultado. Nesta fase você prevê, espera acontecer e analisa se o resultado previsto bate ou não com a realidade. Se deu certo (ou próximo à realidade), passo 7. Do contrário, volte ao passo 5. 7. Production: modelo validado e aplicado com sucesso, chega a hora de colocar tudo em produção. Simples, certo? Infelizmente não. Os resultados normalmente são muito interessantes quando se chega no último passo. Porém, até lá isso pode demorar um pouco (ou muito). A vantagem é que este processo é possível de se colocar em prática. Tendo acesso aos dados, conhecimento da técnica, do negócio e um objetivo claro em mente você também será capaz de ter sucesso neste processo. Dos quatro elementos citados no parágrafo anterior, provavelmente o mais difícil seja o “objetivo claro”. Você só terá um objetivo claro se souber fazer a pergunta certa. E a pergunta certa para Big Data será o tema do meu próximo post. Até lá! Celso Poderoso é coordenador dos cursos de MBA da FIAP (Arquitetura de Redes e Cloud Computing, Big Data – Data Science -, Business Intelligence), professor dos cursos de pós-graduação da FIAP. É mestre em Tecnologia, especialista em redes sociais aplicadas à Educação e economista. Atua desde 1984 na área de TI, especialmente em desenvolvimento de sistemas e banco de dados Oracle, atualmente é gerente de serviços na MicroStrategy. Possui cinco livros publicados na área de banco de dados, como SQL Curso Prático e Oracle PL/SQL 10g. Todos editados pela Novatec Editora. Voltar IFRAME: http://www.facebook.com/plugins/like.php?app_id=262834190410348&href=ht tps://www.fiap.com.br/2014/12/22/fiapx/machine-learning-e-big-data-pass os-para-criacao-de-um-projeto-de-aprendizagem-de-maquina/&send=false&la yout=button_count&width=100&show_faces=false&action=like&colorscheme=li ght&font&height=21 Tweet Imprimir [btn_compartilhar_email.gif] Veja também: * Viva a sorte! A história da criação do chiclete, do Google, da Microsoft… * Lições do Memorial da América Latina * Gestão por truculência: uma prática em extinção? * Mercado de trabalho em TI para Analistas de Processos (ITIL) * Desvendando os mistérios dos Headhunters Ver todos os artigos » [assine.png] Outros autores Sérgio Alexandre Simões [sergio-alexandre.jpg] Mestre em Tecnologia da Informação, Engenheiro Eletrônico (FEI), pós-graduado em Administração & Finanças pela FIA (UNIFE… Marcos Crivelaro [marcos-crivelaro.jpg] Marcos Crivelaro – Doutor em Ciências na área de Tecnologia Nuclear – Materiais pelo Instituto de Pesquisa Energética e Nucl… Nathalie Trutmann [nathalie.jpg] Chief Magic Officer (CMO) da FIAP, é responsável por identificar e criar experiências encantadoras que possam oferecer, aos alunos, opor… Edison Fontes [Edison-Fontes-062012-menor.jpg] Mestre em Tecnologia, possui as certificações internacionais de CISM, CISA e CRISC. É consultor, gestor e professor de Segurança da Info… Marcelo Nakagawa [20131017_marcelo_nakagawa_mini_conteudista.jpg] Diretor de empreendedorismo da FIAP, além de atuar como professor de empreendedorismo e inovação nas principais escolas de negócio do pa… Ver todos » [icon-twitter.jpg] FIAP no Twitter Siga-nos » IFRAME: //www.facebook.com/plugins/likebox.php?href=https%3A%2F%2Fwww.facebook. com%2Ffiap&width=237&height=395&show_faces=false&colorscheme=light&stre am=true&show_border=true&header=false d VL. OLÍMPIA - Rua Olimpíadas, 186 - São Paulo, SP PAULISTA - Av. Paulista, 1106 / 7º - São Paulo, SP Trabalhe Conosco | Fale Conosco | Facebook Twitter LinkedIn Foursquare Google+ Youtube Flickr Wikipédia RSS ACLIMAÇÃO - Av. Lins de Vasconcelos, 1222/1264 - São Paulo, SP ALPHAVILLE - Al. Araguaia, 1142 / Bl. 4 - Barueri, SP © FIAP. Todos os direitos reservados. Tel.: (11) 3385 8010