AutoRAG-Research - coleção de implementações de pipelines dos artigos mais recentes sobre RAG e ferramenta para experimentos comparativos
(github.com/NomaDamas)- Mesmo na era dos AI Agents, o RAG continua válido e é um componente central que deve ser incluído no sistema sempre que houver necessidade de conhecimento externo e documentos
- Estão surgindo inúmeras metodologias recentes em áreas como Agentic RAG, que combina Agent e RAG, Graph RAG, que usa grafos de conhecimento, e Multi-modal RAG, que utiliza modelos de embedding baseados em imagem
- Em comparação com o excesso de novas metodologias e datasets de benchmark, não existe um ambiente experimental padronizado para reimplementá-las e verificar seu desempenho
- AutoRAG-Research é um projeto open source que permite comparar facilmente o desempenho de datasets de benchmark existentes e metodologias de RAG
- Vários datasets de benchmark são gerenciados com um schema padronizado, e os pesquisadores podem simplesmente baixar bancos de dados com embeddings já prontos e usá-los imediatamente nos experimentos
- Implementações prévias dos artigos mais recentes sobre RAG já estão disponíveis para uso imediato
- Suporta uma estrutura de plugins projetada para facilitar a adição de datasets customizados e pipelines de RAG customizados
Olá, sou Kim Donggyu, que desenvolveu o AutoRAG. Desta vez, reuni os pontos que deixaram a desejar no AutoRAG e também aquilo que aprendi bastante para lançar como open source uma ferramenta de pesquisa e desenvolvimento em RAG chamada AutoRAG-Research.
Hoje em dia, AI Agent está em alta, mas o RAG já vem sendo aplicado de fato em diversos contextos industriais e tem uma relação inseparável com Agents.
Conduzi este projeto para resolver inúmeras tentativas e erros, além das inconveniências que enfrentei ao pesquisar RAG, e estou feliz em torná-lo público como open source.
Agradeço pelo interesse e ficarei grato se também puderem deixar uma estrela no GitHub!
2 comentários
Você continua se especializando em RAG, pelo visto. Também fico curioso sobre quais resultados de negócio o AutoRAG tem alcançado.
Obrigado.