Já se passaram dois meses desde que este perfil recebeu uma nova avaliação

Avaliações e Detalhes do Produto Pepperdata Capacity Optimizer

Pepperdata Capacity Optimizer é a única solução de otimização de custos automatizada em tempo real para cargas de trabalho Spark que pode economizar até 47%. Ao instruir o agendador a considerar a utilização real dos recursos em vez dos recursos alocados, o Capacity Optimizer recupera desperdícios, maximiza a utilização dos recursos e otimiza a escalabilidade automática na nuvem. Ele opera de forma autônoma, contínua e em tempo real para recuperar o desperdício de aplicações.

Website do Produto

Vendedor

Pepperdata

Discussões

Comunidade Pepperdata Capacity Optimizer

Idiomas Suportados

English

Descrição do Produto

Pepperdata otimiza automaticamente os recursos do sistema enquanto fornece uma compreensão detalhada e correlacionada de cada aplicação usando centenas de métricas de aplicação e infraestrutura coletadas em tempo real. Ele destaca aplicações que precisam de atenção, identifica automaticamente gargalos e alerta sobre duração, condições de falha e uso de recursos. Na nuvem ou no local, essa abordagem automatizada oferece total observabilidade e insight em sua pilha de big data.

Visão Geral por

Tom Niermeyer

Preços

Preços fornecidos por Pepperdata Capacity Optimizer.

Pay-As-You-Go

$0.02

1 Per hour of usage vCPU fee Por Mês

Ver Mais Informações de Preços

Mídia Pepperdata Capacity Optimizer

Demo Pepperdata Capacity Optimizer - Pepperdata Capacity Optimizer

Get recommendations for optimization, automatic tuning, and alerting. Pepperdata Capacity Optimizer visualizes real-time and historical information about your clusters including system demand, abusive users, and wasteful applications.

Demo Pepperdata Capacity Optimizer - Autoscaling Before and After

First chart shows cluster growing to 100 nodes for runtime duration. Second chart shows each node running a single task, and then zero tasks, for runtime duration.

Pepperdata Capacity Optimizer for Amazon EMR operates dynamically in real time to optimize performance without the need to model your workloads ahead of time, change application code, or platform settings.

In order for Autodesk to achieve their goals for application scaling and reducing their cloud costs, they installed Pepperdata Capacity Optimizer's autonomous, continuous, intelligent real-time optimization software.

Watch Ben Smith, VP Technical Operations at Extole, discuss how he discovered that there's around 30% of application waste within every running app, and how Extole went about saving that wasted capacity.

Through either our own website or the AWS Marketplace, you have multiple options and ways you can get Pepperdata Capacity Optimizer into your big data stack without any code changes or without manual tuning.

Downloads Oficiais

(5)

editar

Pepperdata for Amazon EKS

Autodesk Reduces Amazon EMR Costs by 50% and Boosts Performance with Pepperdata

Pepperdata Reduces the Cost of Running Spark Workloads on Amazon EKS at Scale by 41.8%

As avaliações da G2 são autênticas e verificadas.

Veja como.

Chiranjeevi E.

Consultant

Empresa (> 1000 emp.)

8/26/2022

"Pepperdata nos ajuda a otimizar nossas tarefas diárias."

5/5

O que você mais gosta Pepperdata Capacity Optimizer?

É fácil percorrer a interface do usuário e obter as estatísticas das tarefas e ver os erros e otimizá-los de acordo. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

Nada ao meu conhecimento. Ajuda-nos a decodificar a causa raiz enquanto monitoramos as tarefas do aplicativo muito bem. Análise coletada por e hospedada no G2.com.

Resposta de Ashish Sahu de Pepperdata Capacity Optimizer

editar

Estamos satisfeitos em saber que a interface do usuário é fácil para você usar e que o Pepperdata tem sido útil para sua análise de causa raiz.

Trupal P.

Sr. Software Engineer , Cloud Infrastructure

Médio Porte (51-1000 emp.)

4/25/2022

"melhor para monitoramento de aplicativos Spark"

5/5

O que você mais gosta Pepperdata Capacity Optimizer?

fácil de navegar para todas as métricas relacionadas ao trabalho spark, capturar todas as métricas relacionadas ao yarn. podemos pesquisar facilmente por id de aplicação. múltiplos reinos também são úteis para EMR spark. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

enquanto configurava o autoscaling de dados do pepper pela primeira vez sem suporte de dados do pepper, o autoscaling do EMR foi feito de forma agressiva porque tivemos que encontrar uma configuração de autoscaling funcional para nossos clusters Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

nenhum Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

Pepperdata fornece sugestões de otimização em aplicações Spark e também fornece gargalos sobre por que os trabalhos não tiveram um bom desempenho. Fácil encontrar erros no nível do Yarn na aplicação. Análise coletada por e hospedada no G2.com.

Usuário Verificado em Varejo

Empresa (> 1000 emp.)

8/25/2022

"Pepperdata nos permite ver dentro de nossos clusters efêmeros mesmo depois de terem sido excluídos."

5/5

O que você mais gosta Pepperdata Capacity Optimizer?

Ser capaz de ver a memória, CPU, IO e outras métricas do cluster nos ajuda a dimensionar adequadamente os clusters e ajustar nossos trabalhos. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

A interface do usuário tem uma curva de aprendizado ao lidar com clusters efêmeros em grande escala, mas depois de um tempo, a filtragem e a exploração detalhada se tornam familiares. Análise coletada por e hospedada no G2.com.

Resposta de Ashish Sahu de Pepperdata Capacity Optimizer

editar

Obrigado pela avaliação. Adoramos que você consiga ajustar suas cargas de trabalho de cluster efêmero usando o Pepperdata. Entendemos que a interface do usuário pode exigir um pouco de tempo para se acostumar, mas estamos felizes em saber que agora ela se tornou familiar. Além disso, incluímos treinamento de usuários para todos os nossos novos clientes empresariais, caso você queira saber mais sobre as capacidades do produto.

Usuário Verificado em Serviços Financeiros

Empresa (> 1000 emp.)

5/1/2022

"Ótima solução empresarial"

5/5

O que você mais gosta Pepperdata Capacity Optimizer?

Ótima solução empresarial para otimizar cargas de trabalho de big data. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

Eu não tive experiências negativas com a Pepperdata. É uma ótima solução para atender às minhas necessidades. Análise coletada por e hospedada no G2.com.

Uddipan M.

Engineering Manager

Empresa (> 1000 emp.)

2/19/2021

"Pepperdata - Monitoramento completo de desempenho do cluster Spark"

4.5/5

O que você mais gosta Pepperdata Capacity Optimizer?

Pepperdata fornece detalhes perspicazes e métricas úteis para monitorar o desempenho do cluster. A interface amigável ajuda a navegar por vários detalhes como uso de CPU, Memória, Armazenamento, I/O etc. Pepperdata também ajuda a otimizar as configurações do cluster para garantir uma gestão de recursos aprimorada.

O recurso de destaque de aplicativos ajuda a identificar trabalhos lentos ou quaisquer cenários de desvio de dados. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

Pepperdata pode integrar alertas automatizados caso qualquer parâmetro do cluster mostre um comportamento alarmante. Ele também pode fornecer recursos como detecção baseada em IA de contenção de recursos e alertar de acordo.

Seria bom se Pepperdata pudesse integrar gerenciadores de fluxo de trabalho como Oozie nos serviços monitorados e mapear os Ids de coordenador/Job do Oozie para os Ids de Aplicação do Spark. Isso ajudará no mapeamento fácil entre interfaces e resultará em uma análise de causa raiz mais rápida dos problemas. Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

Pepperdata é uma ferramenta útil de monitoramento de cluster Spark, que fornece todas as métricas relevantes de um cluster em um portal centralizado. Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

1) Otimização automatizada de cluster Spark

2) Análise da causa raiz de quaisquer problemas com trabalhos Spark

3) Detecção de cenários de desbalanceamento de dados Análise coletada por e hospedada no G2.com.

Resposta de Andy Gremett de Pepperdata Capacity Optimizer

editar

Oi Uddipan! Obrigado pelo seu feedback. Em relação aos alertas, temos alarmes e alertas como os que você descreve, e aqui está a documentação de ajuda:

https://help.pepperdata.com/nav-pd-if/08-alarms-alerts/

Em relação aos fluxos de trabalho, temos uma maneira de atribuir IDs de fluxo de trabalho que você pode achar útil. Há uma maneira de atribuir IDs que aparecem como fluxos de trabalho na interface do Pepperdata.

https://help.pepperdata.com/v6-4/admin-guide/reports/05-assigning-workflow-ids/

Compartilhei seu feedback com nossa equipe de produto para revisão.

Pepper D.

Associate Director - Data Scientist

Empresa (> 1000 emp.)

2/16/2021

"Pepperdata Ajuda a Identificar Economias de Custos"

4/5

O que você mais gosta Pepperdata Capacity Optimizer?

Gosto que o Pepperdata me permita identificar vários trabalhos na minha arquitetura ETL para isolar cada trabalho e fornecer uma análise de: tempo computacional utilizado, memória necessária, recursos desperdiçados, custos estimados. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

Embora o Pepperdata forneça uma riqueza de informações que podem ser usadas para solucionar problemas e melhorar a eficiência das arquiteturas ETL; descobri que é difícil construir e criar um painel específico para minhas próprias necessidades. Por exemplo, os painéis padrão disponibilizados para a empresa funcionam bem em um nível empresarial do ponto de vista da pessoa que paga a conta, mas parece haver pouca ou nenhuma instrução sobre como posso criar um conjunto de painéis para focar no meu subconjunto específico dos trabalhos da empresa em execução. Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

se você está pagando os custos de computação. Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

O problema que encontrei mais relevante para resolver com o Pepperdata é especificamente na identificação de gargalos e ineficiências na arquitetura ETL que configurei. Dado que nossos ETLs, como parte da Empresa, são escritos por uma equipe de pessoas, esse monitoramento me permite não apenas identificar trabalhos e ETLs que são ineficientes e poderiam ser otimizados, mas também atua como um meio de identificar membros da equipe que poderiam se beneficiar de aprimoramento de habilidades como resultado de executar consistentemente trabalhos ineficientes e mal otimizados. Considerando que uma parte da configuração da Empresa também leva em conta a previsão da demanda de carga para planejar a capacidade; podemos também usar o Pepperdata para rastrear e planejar a quantidade de recursos que serão necessários pelo cluster no futuro. Análise coletada por e hospedada no G2.com.

Resposta de Andy Gremett de Pepperdata Capacity Optimizer

editar

Olá,

Obrigado pelo seu feedback. Nós oferecemos dashboards personalizados e, se você estiver procurando algo diferente, estaríamos curiosos para entender seu pedido/requisitos.

https://help.pepperdata.com/plat-spot/04-working-with-custom-dashboards/

Gostaríamos de conversar mais sobre o que você gostaria de ver.

Por favor, entre em contato com Info@pepperdata.com e nos informe como podemos entrar em contato com você.

Surendar M.

Empresa (> 1000 emp.)

2/16/2021

"Pepperdata - Ferramenta perfeita para monitorar os servidores de produção"

4.5/5

O que você mais gosta Pepperdata Capacity Optimizer?

O que você não gosta Pepperdata Capacity Optimizer?

Várias métricas estão disponíveis e é um pouco difícil identificar a métrica adequada. Além disso, os filtros de log não são tão eficientes quando se trata de analisar grandes logs com várias métricas envolvidas. A configuração inicial dos dados de pimenta é desafiadora devido a dificuldades técnicas, mas uma vez que as configurações são concluídas, o manuseio da ferramenta é muito mais simples. Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

A visualização dos dados coletados dos logs do servidor. Com várias opções para criar seus próprios painéis personalizados. Também pode criar alertas personalizados em caso de qualquer violação de limite. Isso nos ajudou muito a resolver problemas de desempenho e a analisar o desempenho do servidor. Também para visualizar os relatórios que podem ser apresentados aos stakeholders. Criar gráficos personalizados com métricas disponíveis para entender as tendências de dados (ou) desempenho por um período de tempo mais longo. Múltiplas métricas estão disponíveis e é um pouco difícil identificar a métrica adequada. Além disso, os filtros de log não são tão eficientes quando se trata de analisar grandes logs com várias métricas envolvidas. A configuração inicial dos dados de pimenta é desafiadora devido a dificuldades técnicas, mas uma vez que as configurações são concluídas, o manuseio da ferramenta é muito mais simples. Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

Isso nos ajudou muito a resolver problemas de desempenho e a analisar o desempenho do servidor. Também para visualizar os relatórios que podem ser apresentados aos stakeholders. Criar gráficos personalizados com métricas disponíveis para entender os dados (ou) tendências de desempenho por um período de tempo mais longo. Análise coletada por e hospedada no G2.com.

Resposta de Andy Gremett de Pepperdata Capacity Optimizer

editar

Olá Surendar,

Estamos felizes em ouvir de você. Em relação às métricas, oferecemos muitas métricas, o que pode ser desafiador, mas lhe dá muita flexibilidade e opções. Ajudaria adicionar uma descrição melhor dessas métricas?

Gostaríamos de entender melhor a que "filtros de log" você está se referindo. Por favor, entre em contato conosco em Info@pepperdata.com e nos informe a melhor maneira de entrar em contato com você, se estiver disposto a discutir mais.

Estamos trabalhando na simplificação da instalação inicial do Pepperdata, especialmente para instalações em nuvem, como clusters EMR.

Compartilhei seu feedback com nossa equipe de produto para revisão.

Pervej A.

Senior cloud administrator

Empresa (> 1000 emp.)

10/21/2021

"Grandes insights de dados usando PD"

5/5

O que você mais gosta Pepperdata Capacity Optimizer?

Quantidade de métricas fornecidas pelo PD juntamente com recomendações para ajustar o trabalho Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

A guia de recomendações também deve incluir maneiras de implementar as sugestões, por exemplo, comando spark submit. Análise coletada por e hospedada no G2.com.

Minhaj B.

Senior Technical Systems Analyst

Empresa (> 1000 emp.)

2/18/2021

"Muito bom para análise de cluster hadoop"

4.5/5

O que você mais gosta Pepperdata Capacity Optimizer?

Pepper Data fornece uma análise bastante detalhada sobre a saúde do seu cluster. Ela fornece visualização dos recursos de CPU, utilização de memória, armazenamento, RAM e outros detalhes importantes. Para cada visualização, você pode ver mais detalhes para um intervalo de tempo específico e para um usuário específico. Você pode alternar entre os modos de exibição de gráfico e tabela. Além disso, fornece informações detalhadas sobre filas e status de aplicativos. Além dos detalhes gerais do cluster, você pode ver o uso de recursos de um aplicativo Spark também usando o ID da aplicação yarn, o que é muito útil para melhorar o desempenho e escalar os processos. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

Eu desejo que eles fornecessem mais informações, quando passasse o mouse sobre os nomes das colunas, em formato/modo tabular, para que seja mais facilmente legível e compreensível. Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

Muito boa ferramenta se você está interessado em Hadoop ou Spark e vai usá-la extensivamente para monitoramento de desempenho. Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

Estamos usando-o para monitorar nossos clusters Hadoop em todos os nossos ambientes, que são Dev, UAT e Prod. Nós o usamos para visualizar e analisar nossa aplicação Spark usando o ID da aplicação Yarn, o que é muito útil para melhorar o desempenho e escalar os processos. Análise coletada por e hospedada no G2.com.

Resposta de Andy Gremett de Pepperdata Capacity Optimizer

editar

Minhaj,

Obrigado pela sua pergunta. Você pode esclarecer a quais tabelas você está se referindo que não têm títulos suficientemente descritivos? Analisamos várias de nossas principais tabelas e não vimos isso.

Por favor, entre em contato conosco em Info@pepperdata.com e nos informe a melhor forma de entrar em contato com você.

Usuário Verificado em Serviços Financeiros

Empresa (> 1000 emp.)

2/18/2021

"Peperdata é bastante útil para perfilar trabalhos de spark/hadoop em termos de uso de CPU, memória e disco."

4/5

O que você mais gosta Pepperdata Capacity Optimizer?

ele possui visualização de recursos YARN, que é bastante intuitiva. A interface do usuário parece boa. Além disso, ele tem algumas sugestões sobre o uso de recursos. Análise coletada por e hospedada no G2.com.

O que você não gosta Pepperdata Capacity Optimizer?

1. Às vezes há algum atraso na coleta de dados e eu tenho que esperar até que o trabalho seja concluído.

2. Muito caro para adquirir o serviço.

3. É necessário algum esforço para adaptar a solução do fornecedor ao sistema existente.

4. Faltam opções de segurança de dados. Análise coletada por e hospedada no G2.com.

Recomendações a outras pessoas considerando Pepperdata Capacity Optimizer:

1. Ele pode fornecer SDK, API ou métricas personalizadas que eu posso usar na minha aplicação Spark, para que eu possa obter mais insights do ponto de vista da aplicação.

2. Ele pode suportar a criação de perfis a nível de código, que podem ser usados em diferentes casos de uso.

3. Ele pode suportar configuração de alarmes para que eu possa receber notificações se o recurso estiver fora da cota. Análise coletada por e hospedada no G2.com.

Que problemas é Pepperdata Capacity Optimizer E como isso está te beneficiando?

Eu uso isso para depurar problemas de falta de memória em trabalhos do Spark e fiz algumas soluções de problemas. No geral, é ótimo. Economiza muitos recursos do YARN e acelera meu ajuste de desempenho. Ele me fornece visualizações para explicar a questão real à equipe de gestão, para obter uma melhor compreensão de quanto foi gasto em recursos de computação. Análise coletada por e hospedada no G2.com.

Resposta de Andy Gremett de Pepperdata Capacity Optimizer

editar

Olá,

Lamentamos saber que você teve problemas ao adaptar questões no Pepperdata. Quais problemas específicos você encontrou?

Vemos que você é um usuário em serviços financeiros, então entendemos a necessidade de opções de segurança. Quais opções de segurança de dados você gostaria de ver?

Sobre seu comentário positivo sobre depuração de aplicativos Spark, ficamos felizes que os detalhes ajudem você a depurar seus aplicativos. Adoraríamos ouvir qualquer feedback que você possa ter sobre como podemos continuar a melhorar nossas recomendações para Spark.

Por favor, entre em contato conosco em Info@pepperdata.com se estiver disposto a discutir mais. Sua contribuição é muito apreciada!