Usei o WhyLabs por algumas semanas e fiquei extremamente satisfeito com ele! Vou avaliar algumas dimensões da ferramenta que resumem minha experiência com ela.
Ingestão de Dados Fácil:
A API de ingestão é simples de usar e suporta múltiplos conectores, como BigQuery, Databricks e Spark, facilitando a importação de dados. O uso de Data Profiling pelo Whylabs garante um processamento de dados rápido e seguro, eliminando a necessidade de carregar conjuntos de dados inteiros, tornando todo o processo muito seguro, já que seus dados não saem dos seus servidores.
Recursos de Dados Confiáveis:
O Whylabs entrega todas as métricas padrão de recursos com precisão. Rastrear deriva de dados e modelos é muito simples usando Monitores. Além disso, a plataforma suporta a criação de métricas personalizadas durante ou após a ingestão. Agrupar por variáveis (segmentos) funciona bem, mas deve ser definido durante a ingestão. Então, você pode analisar os recursos do conjunto de dados e rastrear o desempenho do modelo por segmento.
Monitores Flexíveis:
O sistema de monitoramento no Whylabs é altamente adaptável e fácil de usar, cobrindo múltiplas variáveis com facilidade. Monitores são fáceis de configurar via UI ou importação JSON, com notificações resumidas para cada monitor, mantendo os usuários informados sem sobrecarregá-los. Além disso, os monitores são serializáveis em JSON, o que é muito útil, pois você pode rastreá-los com controle de versão.
Usabilidade Amigável:
O Whylabs tem uma interface limpa e intuitiva, simplificando a navegação para os usuários. Embora alguns recursos avançados possam exigir conhecimento de programação, a maioria das tarefas pode ser realizada dentro da UI. Graças ao data profiling, o Whylabs oferece um desempenho rápido sem comprometer a precisão.
Documentação Sólida:
A documentação fornecida pelo Whylabs é abrangente e fácil de entender, permitindo que os usuários aproveitem ao máximo a plataforma.
Preços:
É simplesmente mais barato que a concorrência, enquanto possui recursos de primeira linha.
Suporte ao Cliente:
Eles são sempre muito prestativos, respondendo a todas as nossas perguntas e realizando várias chamadas nos mostrando diferentes casos de uso diretamente na plataforma.
No geral, o Whylabs oferece uma solução direta, eficiente e acessível para monitorar modelos de Machine Learning, com fácil ingestão de dados, análise de recursos confiável e opções de monitoramento flexíveis. Análise coletada por e hospedada no G2.com.
Há algumas desvantagens:
- Os painéis estão em beta e, embora funcionais, carecem de refinamento em termos de interface do usuário. Eles estão trabalhando ativamente nisso, então provavelmente alguns meses após esta revisão isso já pode estar corrigido.
- Definir agrupamentos por variáveis deve ser feito no momento da ingestão, limitando a flexibilidade para análise pós-ingestão.
Dito isso, eles são muito abertos a feedbacks e podem mudar ou adicionar funcionalidades com base nas suas necessidades. No nosso caso, os painéis eram importantes e eles estão trabalhando neles. Análise coletada por e hospedada no G2.com.
Validado por meio de uma conta de e-mail empresarial
Este avaliador recebeu um incentivo nominal como agradecimento por completar esta avaliação.
Convite do G2 em nome de um vendedor ou afiliado. Este avaliador recebeu um incentivo nominal como agradecimento por completar esta avaliação.
Esta avaliação foi traduzida de English usando IA.
