Grepture ist ein Open-Source-AI-Gateway, das zwischen Ihrer Anwendung und LLM-Anbietern wie OpenAI, Anthropic und Google AI sitzt. Es bietet Ihnen vollständige Transparenz über jede AI-Anfrage, die Ihre App stellt, und schützt automatisch sensible Daten, bevor sie ein Modell erreichen.
Mit einer einzigen Konfigurationszeile erhalten Sie:
- Prompt-Inspektion und Debugging: Sehen Sie genau, was Ihre AI empfängt und zurückgibt. Wiederholen Sie Anfragen, vergleichen Sie Unterschiede und verfolgen Sie mehrstufige Gespräche.
- Kostenverfolgung: Token-genaue Aufschlüsselungen pro Anfrage mit Kostenabschätzung pro Modell über Ihren gesamten AI-Stack.
- Automatische PII-Redaktion: Erkennen und maskieren Sie Namen, E-Mails, Telefonnummern, API-Schlüssel und über 80 andere sensible Datenmuster, bevor sie Ihre Infrastruktur verlassen. Reversible Redaktion bedeutet, dass Ihre App weiterhin personalisierte Antworten erhält.
- Gesprächsverfolgung: Trace-IDs verknüpfen jede Anfrage in mehrstufigen Agenten-Workflows und Gedankengang-Sequenzen.
- Prompt-Management: Versionieren und implementieren Sie Prompt-Änderungen, ohne Ihre Anwendung neu zu deployen.
- Evals: Bewerten und evaluieren Sie kontinuierlich die Qualität Ihres AI-Verkehrs mit LLM-als-Richter-Bewertungen.
- Integrationen und Berichte: Lassen Sie sich automatisch in Slack oder per E-Mail benachrichtigen, wenn die Bewertungswerte sinken, Nutzungslimits erreicht werden könnten, und exportieren Sie den gesamten eingehenden Verkehr als OpenTelemetry-kompatible Logs.
Grepture funktioniert als Drop-in-Ersatz mit bestehenden OpenAI- und Anthropic-SDKs mit minimalen Codeänderungen an Ihrer Anwendungslogik. Es unterstützt über 10 AI-Anbieter über ein einziges Dashboard.
Alle Infrastrukturen laufen in der EU (Frankfurt und Nürnberg) mit eingebauter DSGVO-Konformität. Ein Zero-Data-Modus verarbeitet Anfragen, ohne Inhalte auf die Festplatte zu schreiben, und bietet Teams vollständigen Schutz ohne gespeicherte Daten.
Wird von Compliance-Teams, AI-Startups und SaaS-Plattformen verwendet, die AI-Funktionen bereitstellen. Der kostenlose Tarif umfasst 1.000 Anfragen pro Monat ohne Kreditkarte.