Avaliações e Detalhes do Produto Apache NiFi

O melhor do NiFi é que é uma ferramenta poderosa para usar como ferramenta ETL, permitindo transferir dados de acordo com nossas necessidades em diferentes formatos de dados. Além disso, é escalável e fácil de usar. Análise coletada por e hospedada no G2.com.

Alguns dos componentes, como a integração com Python e a execução de pipelines baseados em scripts de outras linguagens, requerem a reimplantação ou reinício do NiFi. Análise coletada por e hospedada no G2.com.

A entrada centrada na interface do usuário do NiFi para projetar fluxos de dados é uma obra-prima. Ela permitiu que nossa equipe compusesse fluxos de trabalho de dados complexos em uma interface simplificada e fácil de gerenciar.

Usei o NiFi tanto para projetos grandes quanto pequenos. O NiFi escalou bem em um ambiente de processamento de dados onde precisávamos baixar e executar modelos de detecção de imagem de aprendizado profundo em terabytes de dados de imagens de satélite.

Nossa plataforma de software estava enraizada em fluxos de NiFi elaborados, mas organizados. O NiFi foi essencial para simplificar pipelines de dados complexos envolvendo dezenas de produtos de imagem com várias etapas de processamento de dados para cada fonte de imagem.

O NiFi escalou excepcionalmente bem com alta taxa de transferência e grandes volumes de dados, embora sua latência não seja adequada para processamento em tempo real.

Continuo a usar o NiFi não apenas para projetos intensivos em dados, mas para casos de uso de software do dia a dia. Sua abundância de conectores facilita a extração, transferência e carregamento de dados para e de qualquer conjunto de fontes de dados.

Ele substituiu em grande parte a escrita de scripts em bash e python como uma maneira rápida e simples de conectar plataformas de dados e executar etapas simples de processamento de dados. Isso ocorre porque a escrita de scripts no NiFi e a conexão a várias fontes de dados é muito mais rápida do que a escrita de scripts em Python. Análise coletada por e hospedada no G2.com.

Minha maior reclamação é que não há desenvolvedores suficientes que conhecem o NiFi e usam o Airflow em vez disso. Airflow e outros motores de orquestração de dados semelhantes carecem da interface e da controlabilidade que o NiFi oferece.

Não há uma oferta de NiFi na nuvem que eu conheça. Embora o NiFi seja fácil de configurar, deve ser feito por você mesmo. Análise coletada por e hospedada no G2.com.

A interface do usuário é bastante boa e fácil de navegar para cada área. Análise coletada por e hospedada no G2.com.

Questões de estabilidade. Espero que melhorem em um futuro próximo. Análise coletada por e hospedada no G2.com.

É de código aberto e com suporte da comunidade, você pode construir qualquer coisa que desejar, desde a ingestão simples de arquivos até Kafka, S3, etc...

A capacidade de criar grupos de processos e isolar suas cargas de trabalho. O número de processadores pré-construídos.

A programação baseada em fluxo vem com uma interface web projetada para fornecer uma maneira fácil (arrastar e soltar) de lidar com o fluxo de dados em tempo real. Também suporta meios poderosos e escaláveis de roteamento e transformação de dados, que podem ser executados em um único servidor ou em modo cluster em vários servidores.

É uma das melhores ferramentas ETL de código aberto por causa de sua arquitetura bem equilibrada. É uma solução poderosa e fácil de usar. FlowFile inclui metainformações, então as capacidades da ferramenta não se limitam a CSV. Você pode trabalhar com fotos, vídeos, arquivos de áudio ou dados binários.

A política de que permanecerá gratuito, a comunidade de prática é impressionante. Análise coletada por e hospedada no G2.com.

Problemas de escalabilidade, às vezes para fluxos maiores pode ficar lento e consumir muita memória Heap. Alguns drivers Oracle têm problemas. O tratamento de erros poderia ser melhor. A criação de custom.NAR pode ser complicada às vezes.

O tempo para ver o recurso em ação NÃO é o tempo de lançamento no mercado. Tornar o fluxo NiFi pronto para produção geralmente leva mais tempo do que para outras tecnologias de processamento de dados. É bom deixar isso claro com antecedência.

Ao trabalhar com lógica de negócios da vida real, preferimos usar Apache Spark para volumes maiores de dados ou serviços REST com quantidades menores de dados. Em outras palavras, para lógica personalizada, preferimos evitar o NiFi.

A tecnologia ainda é imatura e requer muito trabalho adicional para tornar o processo de migração real automatizado e confiável. Análise coletada por e hospedada no G2.com.

Os processadores mais poderosos suportam todos os tipos de fontes de dados, incluindo a nuvem. A próxima coisa é a categorização de fluxos usando grupos de processadores e uma lista de controle de acesso robusta. Análise coletada por e hospedada no G2.com.

O monitoramento dos nós do nifi é complexo. Precisamos de um gerenciador centralizado que lide com o cluster nifi para obter o status do cluster em tempo real. Além disso, às vezes precisamos reiniciar todo o cluster se um fluxo ficar preso com alta utilização de memória. Análise coletada por e hospedada no G2.com.

A melhor coisa sobre o Nifi é que a barra de ferramentas está localizada em um lugar conveniente para o usuário acessar as ferramentas. O recurso de arrastar e soltar é útil. A grade oferece uma medida perfeita dos componentes. O DAG é representado adequadamente por setas de conexão. Análise coletada por e hospedada no G2.com.

A cascata de ferramentas às vezes dificulta para o usuário escolher as ferramentas que deseja usar. O usuário iniciante pode não conseguir acessar as ferramentas que estão colocadas em profundidade. Coloque um menu suspenso para listar os recursos menos usados para destacar esses recursos. Adicione detalhes ou informações quando passar o mouse sobre esses recursos. Análise coletada por e hospedada no G2.com.

O uso é extremamente simplificado, pois não necessita de código. Análise coletada por e hospedada no G2.com.

Algumas ações simples precisam de vários processos para serem realizados. Análise coletada por e hospedada no G2.com.

Interface de usuário baseada na web

Experiência contínua entre design, controle, feedback e monitoramento Análise coletada por e hospedada no G2.com.

Priorização dinâmica

Desenvolvimento e teste rápidos sem tempo de espera Análise coletada por e hospedada no G2.com.

A interface do Apache NiFi é uma das melhores para criar fluxos básicos e visualizar o fluxo completo de ponta a ponta em qualquer ambiente, seja de desenvolvimento, teste ou produção. Análise coletada por e hospedada no G2.com.

É difícil gerenciar usuários neste aplicativo, é realmente difícil entender e gerenciar os controles de variáveis globais e locais na interface, o que é altamente necessário para controlar o fluxo completo. Análise coletada por e hospedada no G2.com.

A melhor coisa sobre o Apache NiFi é que é uma das ferramentas de código aberto que fornece um grande número de fontes para se conectar e também oferece opções flexíveis para agendar os trabalhos de ETL facilmente. Análise coletada por e hospedada no G2.com.

O que eu não gosto no Apache NiFi é a sua interface gráfica. É elementar e poderia ser melhor. Eu me sinto complicado. Análise coletada por e hospedada no G2.com.