Grepture é um gateway de IA de código aberto que fica entre sua aplicação e provedores de LLM como OpenAI, Anthropic e Google AI. Ele oferece visibilidade total em cada solicitação de IA que seu aplicativo faz e protege automaticamente dados sensíveis antes que eles cheguem a qualquer modelo.
Com uma única linha de configuração, você obtém:
- Inspeção e depuração de prompts: Veja exatamente o que sua IA recebe e retorna. Reproduza solicitações, compare diferenças e rastreie conversas de múltiplas etapas.
- Rastreamento de custos: Desagregação de tokens por solicitação com estimativa de custo por modelo em toda a sua pilha de IA.
- Redação automática de PII: Detecte e mascare nomes, e-mails, números de telefone, chaves de API e mais de 80 outros padrões de dados sensíveis antes que eles saiam de sua infraestrutura. A redação reversível significa que seu aplicativo ainda recebe respostas personalizadas.
- Rastreamento de conversas: IDs de rastreamento vinculam cada solicitação em fluxos de trabalho de agentes de múltiplas etapas e sequências de cadeia de pensamento.
- Gerenciamento de prompts: Versione e implante alterações de prompts sem reimplantar sua aplicação.
- Avaliações: Avalie continuamente a qualidade do tráfego de sua IA com avaliações de LLM como juiz.
- Integrações e relatórios: Seja notificado automaticamente no Slack ou por e-mail quando as pontuações de avaliação caírem, os limites de uso possam ser atingidos e exporte todo o tráfego de entrada como logs compatíveis com OpenTelemetry.
Grepture funciona como um substituto direto com os SDKs existentes da OpenAI e Anthropic com mudanças mínimas de código na lógica de sua aplicação. Ele suporta mais de 10 provedores de IA através de um único painel.
Toda a infraestrutura funciona na UE (Frankfurt e Nuremberg), com conformidade com o GDPR incorporada. Um modo de zero dados processa solicitações sem gravar conteúdo no disco, oferecendo às equipes proteção total sem dados armazenados.
Usado por equipes de conformidade, startups de IA e plataformas SaaS que oferecem recursos de IA. O plano gratuito inclui 1.000 solicitações por mês sem necessidade de cartão de crédito.