Visão geral
Sai modelo de linguagem novo toda semana — OpenAI, Anthropic, Google, DeepSeek, Groq — e fica difícil comparar na prática o custo por token, a janela de contexto, a velocidade de resposta e como cada um reage a mudanças no prompt.
O SuperLLMs é um laboratório de experimentação que coloca vários provedores de IA na mesma interface. Tem módulos para testar chatbots com personas, comparar respostas lado a lado, ajustar prompts, explorar embeddings e gerar imagens. Funciona no modelo BYOK (traga sua própria chave): cada pessoa usa as próprias credenciais, com segurança.
É feito em Python com Streamlit, conversando direto com as APIs de OpenAI, Anthropic, Gemini, Groq, DeepSeek e OpenRouter. O custo em tokens é medido em tempo real com tiktoken e a semelhança entre textos sai de similaridade de cosseno com scikit-learn. A limitação principal é depender da cota e da estabilidade de cada provedor. A estrutura modular serve de base para gateways corporativos que roteiam chamadas de LLM por custo e latência e para hubs internos de avaliação de prompts.