IEEE Lança Curso Online de Treinamento sobre Grandes Modelos de Linguagem

O IEEE, por meio de suas Atividades Educacionais e da IEEE Computer Society, lançou um programa de cursos online intitulado 'Large Language Models Demystified' na Rede de Aprendizagem do IEEE. O programa consiste em cinco cursos que abordam a engenharia por trás da IA generativa, cobrindo a evolução dos métodos estatísticos para os transformadores, arquiteturas de transformadores com autoatenção e codificação posicional implementadas em NumPy e Python, design avançado de LLMs, pipelines de treinamento em PyTorch com técnicas eficientes de parâmetros, como adaptação de baixo rank e quantização, e otimização, alinhamento e implantação, incluindo RLHF e RAG. O programa visa atender à crescente demanda por expertise técnica, já que o mercado de LLMs deve crescer 33% ao ano até 2030. Os participantes obtêm créditos de desenvolvimento profissional e um selo digital do IEEE. O artigo também discute quatro áreas em que os LLMs estão mudando o trabalho de engenharia: ir além de prompts básicos por meio de APIs, corrigir alucinações com RAG, priorizar a segurança dos dados com instâncias privadas de modelos e permitir melhor colaboração ao automatizar tarefas repetitivas.