Avis et détails du produit WhyLabs

La fonctionnalité principale est explicitement importante lorsque vous avez des solutions d'IA/ML en production. Au lieu de passer du temps sur des vérifications manuelles (qui peuvent être sujettes à des erreurs), vous pouvez configurer des moniteurs pour vous informer si quelque chose ne va pas. C'est suffisamment flexible pour construire votre propre métrique et vos moniteurs, ce qui permet une utilisation polyvalente.

Ce qui est très important pour moi, c'est le contact avec l'équipe de WhyLabs. Leur support est superbe, ce qui fait que même si quelque chose est difficile à mettre en œuvre, je sais que j'ai des personnes qui m'aideront à tirer le meilleur parti de la plateforme. Avis collecté par et hébergé sur G2.com.

Construire des moniteurs et des métriques personnalisés est une expérience difficile. J'ai parfois du mal avec des problèmes de code, donc une FAQ ou une documentation plus complète pourrait être utile pour les éviter. Avis collecté par et hébergé sur G2.com.

L'une des caractéristiques remarquables de WhyLabs est ses capacités robustes d'observabilité des données. Il offre une surveillance continue des pipelines de données et des modèles ML, permettant aux équipes d'identifier rapidement des problèmes tels que la dérive des données, la dégradation des modèles et le décalage entre l'entraînement et la mise en production. L'intégration préservant la confidentialité de la plateforme garantit que les données peuvent être analysées sans être déplacées ou dupliquées, ce qui est essentiel pour maintenir la sécurité et la confidentialité dans des secteurs sensibles comme la santé et la finance. Avis collecté par et hébergé sur G2.com.

Un inconvénient potentiel de WhyLabs est le nombre relativement limité d'avis et de retours d'utilisateurs en raison de sa nouveauté sur le marché, ce qui rend plus difficile pour les utilisateurs potentiels d'évaluer ses performances réelles à grande échelle. Ce manque d'avis détaillés peut soulever des préoccupations concernant sa maturité et son infrastructure de support. De plus, étant donné qu'il s'agit d'une plateforme plus récente, certaines fonctionnalités avancées pourraient encore être en développement, et il pourrait y avoir des courbes d'apprentissage abruptes pour les équipes peu familières avec les outils d'observabilité en apprentissage automatique. Avis collecté par et hébergé sur G2.com.

* Le support client est très utile et proactif

* L'outil permet une ingestion facile d'un grand nombre de fonctionnalités et la mise en place d'une surveillance initiale sur celles-ci

* Nous pouvons l'utiliser pour surveiller à la fois la qualité des entrées et la performance du modèle

* Les alertes peuvent être envoyées à un groupe spécifique d'utilisateurs via des canaux spécifiques (email/slack), ce qui est utile Avis collecté par et hébergé sur G2.com.

* Il peut être difficile de configurer la surveillance de la bonne manière en ce qui concerne la sensibilité - cela nécessite beaucoup d'essais et d'erreurs

* Certaines actions ne sont pas possibles via l'interface utilisateur et nécessitent des appels API spécifiques

* La documentation peut être difficile à naviguer Avis collecté par et hébergé sur G2.com.

Génial de collaborer avec; très réactif; apprécie vraiment leurs OHs pour aider avec les problèmes qui surgissent; de nombreuses solutions innovantes pour différents types de modèles ML qui nous ont vraiment aidés étant donné la grande variété de modèles ML que nous utilisons dans l'entreprise. Avis collecté par et hébergé sur G2.com.

Rien de majeur à mentionner ! Nous avons tout résolu et l'équipe a été très serviable. Avis collecté par et hébergé sur G2.com.

L'aspect principal qui s'est démarqué pour nous était la facilité d'intégration. C'était assez simple, presque comme le code d'exemple pour intégrer LangKit dans notre pipeline LLM et le télécharger sur WhyLabs. Les documents de démarrage étaient clairs et concis. Même pour les entreprises avec des ressources limitées comme la nôtre, WhyLabs AI Observatory s'avère être une solution accessible et facilement adaptable. Avis collecté par et hébergé sur G2.com.

Les outils de visualisation de données sont très performants, bien qu'il y ait une courbe d'apprentissage à maîtriser. Cependant, leur équipe de réussite client et de support est réactive, serviable et a constamment dépassé les attentes pour s'assurer que nous utilisons la plateforme à son plein potentiel. Avis collecté par et hébergé sur G2.com.

WhyLabs est la deuxième plateforme d'observabilité que j'ai jamais utilisée, et je peux dire que les caractéristiques principales que j'apprécie sur cette plateforme sont qu'elle est facile à configurer et à mettre en œuvre, les vérifications et les métriques étaient déjà préchargées, donc je n'ai pas eu besoin de faire beaucoup pour configurer l'application, et la surveillance n'a pas été difficile à démarrer. Elle s'intègre également bien avec les bibliothèques de service et de données que nous avons utilisées pour la configuration du tutoriel de production. Avis collecté par et hébergé sur G2.com.

Rien jusqu'à présent, je n'ai rencontré des problèmes de stabilité qu'une seule fois (quelque part en 2022), mais le support a pu m'aider à les résoudre rapidement. Avis collecté par et hébergé sur G2.com.

J'ai utilisé WhyLabs pendant quelques semaines et j'en ai été extrêmement satisfait ! Je vais évaluer certaines dimensions de l'outil qui résument mon expérience avec lui.

Ingestion de Données Facile :

L'API d'ingestion est simple à utiliser et prend en charge plusieurs connecteurs tels que BigQuery, Databricks et Spark, facilitant l'importation de données. L'utilisation du Profilage de Données par Whylabs assure un traitement rapide et sécurisé des données, éliminant le besoin de télécharger des ensembles de données entiers, et rendant tout le processus très sécurisé, puisque vos données ne quittent pas vos serveurs.

Fonctionnalités de Données Fiables :

Whylabs fournit toutes les métriques de fonctionnalités standard avec précision. Le suivi des dérives de données et de modèles est très simple à l'aide des Moniteurs. De plus, la plateforme prend en charge la création de métriques personnalisées pendant ou après l'ingestion. Le regroupement par variables (segments) fonctionne bien mais doit être défini lors de l'ingestion. Ensuite, vous pouvez analyser les caractéristiques des ensembles de données et suivre la performance des modèles par segment.

Moniteurs Flexibles :

Le système de surveillance dans Whylabs est hautement adaptable et convivial, couvrant plusieurs variables avec facilité. Les moniteurs sont faciles à configurer via l'interface utilisateur ou l'importation JSON, avec des notifications résumées pour chaque moniteur, tenant les utilisateurs informés sans les submerger. De plus, les moniteurs sont sérialisables en JSON, ce qui est très utile car vous pouvez les suivre avec le contrôle de version.

Utilisabilité Conviviale :

Whylabs a une interface utilisateur propre et intuitive, simplifiant la navigation pour les utilisateurs. Bien que certaines fonctionnalités avancées puissent nécessiter des connaissances en programmation, la plupart des tâches peuvent être accomplies au sein de l'interface utilisateur. Grâce au profilage des données, Whylabs offre des performances rapides sans compromettre la précision.

Documentation Solide :

La documentation fournie par Whylabs est complète et facile à comprendre, permettant aux utilisateurs de tirer le meilleur parti de la plateforme.

Tarification :

C'est tout simplement moins cher que ses concurrents tout en ayant des fonctionnalités de premier ordre.

Support Client :

Ils sont toujours très utiles, répondant à toutes nos questions et organisant plusieurs appels nous montrant différents cas d'utilisation directement sur la plateforme.

Dans l'ensemble, Whylabs offre une solution simple, efficace et abordable pour la surveillance des modèles d'apprentissage automatique, avec une ingestion de données facile, une analyse de fonctionnalités fiable et des options de surveillance flexibles. Avis collecté par et hébergé sur G2.com.

Il y a quelques inconvénients :

- Les tableaux de bord sont en version bêta, et bien qu'ils soient fonctionnels, ils manquent de finition en termes d'interface utilisateur. Ils travaillent activement sur ce point, donc probablement quelques mois après cet examen, cela pourrait déjà être corrigé.

- La définition des groupements par variables doit être effectuée au moment de l'ingestion, ce qui limite la flexibilité pour l'analyse post-ingestion.

Cela dit, ils sont très ouverts aux commentaires et ils peuvent changer ou ajouter des fonctionnalités en fonction de vos besoins. Dans notre cas, les tableaux de bord étaient importants et ils travaillent dessus. Avis collecté par et hébergé sur G2.com.

Mon expérience avec la plateforme WhyLabs a été enrichissante, offrant des aperçus intuitifs du comportement des modèles d'IA et améliorant ma compréhension de l'observabilité de l'IA. La meilleure partie de l'interface est son interface conviviale et sa suite complète d'analyses qui fournissent des aperçus précieux du comportement des modèles d'IA et qui permettraient également un tableau de bord pour la surveillance des données, les caractéristiques des modèles. Elle facilite également la surveillance en temps réel, améliorant finalement l'efficacité des processus de développement de l'IA. Elle offre également la possibilité de personnaliser les caractéristiques du modèle selon les exigences du projet. Avis collecté par et hébergé sur G2.com.

Peu d'options de personnalisation avancées pour l'analyse ne sont pas disponibles pour le moment, mais comme informé, elles seraient bientôt disponibles sous forme de mise à jour sur la plateforme. Cela résout donc l'inconvénient à l'avenir. Avis collecté par et hébergé sur G2.com.

WhyLabs est très utile pour le débogage, la maintenance et le développement des systèmes ML en production. Il est portable, hautement configurable et offre une visibilité unifiée sur un large éventail de systèmes/services dans un écosystème ML en production. Il améliore considérablement les devops ML et est incroyablement facile à démarrer. Il s'intègre très facilement avec tous les systèmes que j'ai utilisés, la mise en œuvre est un jeu d'enfant, et il y a très peu de friction pour commencer. J'ai détecté de nombreux problèmes en l'utilisant. Avis collecté par et hébergé sur G2.com.

Je n'ai vraiment aucune plainte à ce sujet, il fait son travail incroyablement bien pour mes cas d'utilisation. Avis collecté par et hébergé sur G2.com.

L'interface utilisateur est très conviviale et l'équipe de support est extrêmement réactive et serviable. Avis collecté par et hébergé sur G2.com.

Certaines fonctionnalités, telles que la suppression d'un profil ou la modification du type de données d'une fonctionnalité, ne peuvent être effectuées que via l'API. Avis collecté par et hébergé sur G2.com.