Estagiário(a) em LLMs e IA Generativa

Na Inmetrics, a inovação e a excelência operam lado a lado em um ambiente de trabalho colaborativo, saudável e dinâmico. Nossa cultura valoriza:📚 Aprendizado constante🗣️ Transparência na comunicação🔄 Flexibilidade para desenvolvimento contínuoNosso time é apaixonado por tecnologia e comprometido com entregas de valor real para os clientes. O diferencial da Inmetrics é a eficiência digital.💛 Pessoas são o nosso maior ativo, por isso investimos em oportunidades que vão além de salário competitivo, oferecendo benefícios diferenciados e um ambiente saudável, reconhecido por nossos colaboradores.👉 #VemPraInmetricsResponsabilidades e atribuiçõesExperimentar sistematicamente para extrair o melhor dos modelos — refinar prompts técnicos, rodar benchmarks de LLMs e construir datasets de avaliação (evals) que guiam as decisões de engenharia da Plataforma.Requisitos e qualificaçõesFormaçãoCursando Ciência da Computação, Engenharia, Linguística Computacional ou áreas correlatas (a partir do 3º semestre)TécnicosExperiência prática com LLMs via API (OpenAI, Gemini, Anthropic ou similar)Noções de prompt engineering: few-shot, chain-of-thought, system promptsPython básico/intermediário para scripts de experimentação e análise de resultadosFamiliaridade com planilhas ou ferramentas de dados para organizar experimentosDiferenciaisContato com frameworks de avaliação de LLMs (OpenAI Evals, RAGAS, LangSmith ou similar)Experiência com criação ou curadoria de datasetsConhecimento de métricas de avaliação (BLEU, ROUGE, LLM-as-judge)Interesse em benchmarks públicos (MMLU, HumanEval, etc.)Perfil comportamentalMentalidade experimental: testar hipóteses, medir resultados, iterar rápidoAtenção a detalhes e rigor na documentação de experimentosCuriosidade genuína sobre o comportamento e limitações dos modelos de linguagem