xturing - Crie e controle seu próprio LLM
(github.com/stochasticai)- Ferramenta open source para fazer fine-tuning de LLMs como LLaMA, GPT-J e GPT-2 de forma rápida e eficiente
- Importa dados de diversas fontes e faz o pré-processamento em um formato que os LLMs conseguem entender
- Usa de uma a várias GPUs para um ajuste rápido
- Reduz custos com técnicas eficientes em memória, como LoRA
- Avalia diferentes métodos de fine-tuning para encontrar o modelo ideal
- Avalia modelos ajustados com métricas bem definidas
Ainda não há comentários.