WhyLabs Bewertungen & Produktdetails

Die Kernfunktionalität ist von entscheidender Bedeutung, wenn Sie KI/ML-Lösungen in der Produktion einsetzen. Anstatt Zeit mit manuellen Überprüfungen zu verbringen (die fehleranfällig sein können), können Sie Monitore einrichten, die Sie informieren, wenn etwas schief läuft. Es ist flexibel genug, um Ihre eigenen Metriken und Monitore zu erstellen, was eine vielseitige Nutzung ermöglicht.

Was mir besonders wichtig ist, ist der Kontakt mit dem WhyLabs-Team. Ihr Support ist hervorragend, was dazu führt, dass ich, selbst wenn etwas schwierig zu implementieren ist, weiß, dass ich Menschen habe, die mir helfen werden, das Beste aus der Plattform herauszuholen. Bewertung gesammelt von und auf G2.com gehostet.

Das Erstellen von benutzerdefinierten Monitoren und Metriken ist eine herausfordernde Erfahrung. Ich habe manchmal Schwierigkeiten mit Code-Problemen, daher könnten bessere FAQs oder Dokumentationen hilfreich sein, um diese zu vermeiden. Bewertung gesammelt von und auf G2.com gehostet.

Eines der herausragenden Merkmale von WhyLabs sind seine robusten Datenüberwachungsfähigkeiten. Es bietet kontinuierliche Überwachung von Datenpipelines und ML-Modellen, sodass Teams Probleme wie Datenverschiebung, Modellverschlechterung und Trainings-Serving-Skew schnell identifizieren können. Die datenschutzfreundliche Integration der Plattform stellt sicher, dass Daten analysiert werden können, ohne sie zu verschieben oder zu duplizieren, was entscheidend für die Aufrechterhaltung von Sicherheit und Datenschutz in sensiblen Branchen wie dem Gesundheitswesen und der Finanzbranche ist. Bewertung gesammelt von und auf G2.com gehostet.

Ein potenzieller Nachteil von WhyLabs ist die relativ begrenzte Anzahl an Nutzerbewertungen und Feedbacks aufgrund seiner Neuheit auf dem Markt, was es potenziellen Nutzern erschwert, seine Leistung in der Praxis im großen Maßstab einzuschätzen. Dieser Mangel an detaillierten Bewertungen kann Bedenken hinsichtlich seiner Reife und der Unterstützungsinfrastruktur aufwerfen. Da es sich zudem um eine neuere Plattform handelt, könnten einige fortgeschrittene Funktionen noch in der Entwicklung sein, und es könnte steile Lernkurven für Teams geben, die mit Beobachtungswerkzeugen im maschinellen Lernen nicht vertraut sind. Bewertung gesammelt von und auf G2.com gehostet.

* Der Kundensupport ist sehr hilfsbereit und proaktiv.

* Das Tool ermöglicht eine einfache Aufnahme einer großen Anzahl von Funktionen und das Einrichten einer anfänglichen Überwachung für diese.

* Wir können es verwenden, um sowohl die Eingabequalität als auch die Modellleistung zu überwachen.

* Die Warnungen können an eine bestimmte Benutzergruppe über bestimmte Kanäle (E-Mail/Slack) gesendet werden, was hilfreich ist. Bewertung gesammelt von und auf G2.com gehostet.

* Es kann schwierig sein, die Überwachung in Bezug auf die Empfindlichkeit korrekt einzurichten - es erfordert viel Ausprobieren.

* Einige Aktionen sind nicht über die Benutzeroberfläche möglich und erfordern spezifische API-Aufrufe.

* Die Dokumentation kann schwer zu navigieren sein. Bewertung gesammelt von und auf G2.com gehostet.

Großartig, mit ihnen zusammenzuarbeiten; sehr reaktionsschnell; schätze wirklich ihre OHs, um bei auftretenden Problemen zu helfen; viele unkonventionelle Lösungen für verschiedene Arten von ML-Modellen, die uns wirklich geholfen haben, angesichts der großen Vielfalt an ML-Modellen, die wir im Unternehmen betreiben. Bewertung gesammelt von und auf G2.com gehostet.

Nichts Großes zu erwähnen! Wir haben alles gelöst und das Team war sehr hilfsbereit. Bewertung gesammelt von und auf G2.com gehostet.

Der herausragendste Aspekt für uns war die einfache Integration. Es war ziemlich unkompliziert, fast genauso wie der Beispielcode, um LangKit in unsere LLM-Pipeline zu integrieren und es zu WhyLabs hochzuladen. Die Einstiegsdokumentation war klar und prägnant. Selbst für Unternehmen mit begrenzten Ressourcen wie unserem erweist sich das WhyLabs AI Observatory als zugängliche und leicht anpassbare Lösung. Bewertung gesammelt von und auf G2.com gehostet.

Die Datenvisualisierungswerkzeuge sind sehr leistungsfähig, obwohl es eine gewisse Lernkurve gibt, um sie zu meistern. Ihr Kundenservice- und Support-Team ist jedoch reaktionsschnell, hilfsbereit und hat konsequent mehr getan, als erwartet, um sicherzustellen, dass wir die Plattform in vollem Umfang nutzen. Bewertung gesammelt von und auf G2.com gehostet.

WhyLabs ist die zweite Observabilitätsplattform, die ich je benutzt habe, und ich kann sagen, dass die Kernfunktionen, die mir an der Plattform gefallen, darin bestehen, dass sie einfach einzurichten und die Funktionen zu implementieren sind. Die Prüfungen und Metriken waren bereits vorinstalliert, sodass ich nicht viel bei der Konfiguration der Anwendung tun musste, und das Monitoring war nicht schwer zu starten. Es integriert sich auch gut mit den Serving- und Datenbibliotheken, die wir für das Produktionstutorial-Setup verwendet haben. Bewertung gesammelt von und auf G2.com gehostet.

Bisher nichts, ich hatte nur einmal Stabilitätsprobleme (irgendwann im Jahr 2022), aber der Support konnte mir schnell helfen, es zu beheben. Bewertung gesammelt von und auf G2.com gehostet.

Ich habe WhyLabs ein paar Wochen lang genutzt und war äußerst zufrieden damit! Ich werde einige Dimensionen des Tools bewerten, die meine Erfahrung damit zusammenfassen.

Einfache Datenaufnahme:

Die Ingestions-API ist einfach zu verwenden und unterstützt mehrere Konnektoren wie BigQuery, Databricks und Spark, was den Datenimport erleichtert. Die Verwendung von Data Profiling durch Whylabs gewährleistet eine schnelle und sichere Datenverarbeitung, wodurch das Hochladen ganzer Datensätze überflüssig wird und der gesamte Prozess sehr sicher ist, da Ihre Daten Ihre Server nicht verlassen.

Zuverlässige Datenfunktionen:

Whylabs liefert alle Standard-Feature-Metriken genau. Das Verfolgen von Daten- und Modellabweichungen ist mit Monitoren sehr einfach. Außerdem unterstützt die Plattform die Erstellung benutzerdefinierter Metriken während oder nach der Ingestion. Die Gruppierung nach Variablen (Segmenten) funktioniert gut, muss jedoch während der Ingestion definiert werden. Dann können Sie Datensatzmerkmale analysieren und die Modellleistung pro Segment verfolgen.

Flexible Monitore:

Das Überwachungssystem in Whylabs ist hochgradig anpassungsfähig und benutzerfreundlich und deckt mühelos mehrere Variablen ab. Monitore sind einfach über die Benutzeroberfläche oder den JSON-Import einzurichten, mit zusammengefassten Benachrichtigungen für jeden Monitor, die Benutzer informieren, ohne sie zu überfordern. Zusätzlich sind Monitore JSON-serialisierbar, was sehr hilfreich ist, da Sie sie mit Versionskontrolle verfolgen können.

Benutzerfreundliche Bedienbarkeit:

Whylabs hat eine saubere und intuitive Benutzeroberfläche, die die Navigation für Benutzer vereinfacht. Während einige erweiterte Funktionen Programmierkenntnisse erfordern können, können die meisten Aufgaben innerhalb der Benutzeroberfläche erledigt werden. Dank des Data Profiling liefert Whylabs eine schnelle Leistung, ohne die Genauigkeit zu beeinträchtigen.

Solide Dokumentation:

Die von Whylabs bereitgestellte Dokumentation ist umfassend und leicht verständlich, sodass Benutzer das Beste aus der Plattform herausholen können.

Preisgestaltung:

Es ist einfach günstiger als die Konkurrenz, während es erstklassige Funktionen bietet.

Kundensupport:

Sie sind immer sehr hilfsbereit, beantworten alle unsere Fragen und führen mehrere Anrufe durch, um uns verschiedene Anwendungsfälle direkt auf der Plattform zu zeigen.

Insgesamt bietet Whylabs eine unkomplizierte, effiziente und erschwingliche Lösung zur Überwachung von Machine-Learning-Modellen, mit einfacher Datenaufnahme, zuverlässiger Merkmalsanalyse und flexiblen Überwachungsoptionen. Bewertung gesammelt von und auf G2.com gehostet.

Es gibt ein paar Nachteile:

- Dashboards befinden sich in der Beta-Phase und sind zwar funktional, aber es fehlt ihnen an Feinschliff in Bezug auf die Benutzeroberfläche. Sie arbeiten aktiv daran, sodass dies wahrscheinlich ein paar Monate nach dieser Überprüfung bereits behoben sein könnte.

- Die Definition von Gruppierungen nach Variablen muss zum Zeitpunkt der Erfassung erfolgen, was die Flexibilität für Analysen nach der Erfassung einschränkt.

Das gesagt, sie sind sehr offen für Feedback und sie könnten Funktionen basierend auf Ihren Bedürfnissen ändern oder hinzufügen. In unserem Fall waren Dashboards wichtig und sie arbeiten daran. Bewertung gesammelt von und auf G2.com gehostet.

Meine Erfahrung mit der WhyLabs-Plattform war erhellend und bot intuitive Einblicke in das Verhalten von KI-Modellen und verbesserte mein Verständnis für die Beobachtbarkeit von KI. Der beste Teil der Schnittstelle ist ihre benutzerfreundliche Oberfläche und die umfassende Suite von Analysen, die wertvolle Einblicke in das Verhalten von KI-Modellen bieten und auch ein Dashboard für die Datenüberwachung und Modellmerkmale ermöglichen. Sie erleichtert auch die Echtzeitüberwachung, was letztendlich die Effizienz der KI-Entwicklungsprozesse verbessert. Sie bietet auch die Möglichkeit, die Modellmerkmale entsprechend den Projektanforderungen anzupassen. Bewertung gesammelt von und auf G2.com gehostet.

Einige fortgeschrittene Anpassungsoptionen für Analysen sind derzeit nicht verfügbar, aber wie mitgeteilt wurde, werden sie bald als Update auf der Plattform verfügbar sein. Das löst also das Problem in der Zukunft. Bewertung gesammelt von und auf G2.com gehostet.

WhyLabs ist so nützlich für das Debuggen, die Wartung und die Entwicklung von produktiven ML-Systemen. Es ist portabel, hoch konfigurierbar und bietet eine einheitliche Sichtbarkeit über eine breite Palette von Systemen/Diensten in einem produktiven ML-Ökosystem. Es verbessert die ML-DevOps erheblich und ist unglaublich einfach zu starten. Es integriert sich sehr leicht mit allen Systemen, die ich verwendet habe, die Implementierung ist ein Kinderspiel, und es gibt sehr wenig Reibung beim Start. Ich habe damit viele Probleme entdeckt. Bewertung gesammelt von und auf G2.com gehostet.

Ich habe wirklich keine Beschwerden darüber, es erfüllt seine Aufgabe unglaublich gut für meine Anwendungsfälle. Bewertung gesammelt von und auf G2.com gehostet.

Die Benutzeroberfläche ist sehr benutzerfreundlich und das Support-Team ist äußerst reaktionsschnell und hilfsbereit. Bewertung gesammelt von und auf G2.com gehostet.

Einige Funktionen wie das Löschen eines Profils oder das Ändern des Datentyps einer Funktion können nur über die API durchgeführt werden. Bewertung gesammelt von und auf G2.com gehostet.