Avaliações e Detalhes do Produto Apache Airflow

It is easiy to deploy with docker. Provide secure authentication. A better UI in airlfow3.x. There. is many method, operator, hooks are added. easily to add dependecy. A better workflow monitoring tool. Easily schedule , activate and deactivate jobs. Good performance when used in any cloud platform like aws in serverless mode. easily scaleable. Easy to integrate third part library. Apache airflow is free of cost but you need to pay compute cost if you are using any cloud. A wide support community Análise coletada por e hospedada no G2.com.

When I create a task in expansion mode, it doesn’t display the graphical flow properly. I also noticed there’s too much logging. And when setting it up on AWS MWAA in a private VPC, it requires additional configuration. Análise coletada por e hospedada no G2.com.

O que eu mais gosto no Airflow é sua flexibilidade e o número de funcionalidades para construir fluxos de trabalho usando DAGs. É muito útil para gerenciar pipelines complexos com dependências. A integração com diferentes sistemas também é forte. Uma vez configurado, funciona de forma confiável e é usado frequentemente nas operações diárias. Análise coletada por e hospedada no G2.com.

A facilidade de uso é uma área onde pode melhorar, especialmente para novos usuários. A configuração inicial e a implementação exigem esforço se você estiver gerenciando por conta própria. A interface do usuário não é muito amigável e às vezes é lenta. Além disso, depurar fluxos de trabalho com falhas pode levar tempo. Análise coletada por e hospedada no G2.com.

I use Apache Airflow to schedule and manage data pipelines, and I appreciate how it automates ETL pipelines easily and enables monitoring of tasks. I love its flexibility to build and manage complex workflows effortlessly using code, along with features like Operators and sensors. The UI is very helpful for tracking pipelines and quickly debugging failures. It helps me create, automate, and schedule complex workflows by reducing manual efforts, making pipeline monitoring and error handling much easier. I love most of the features that Airflow provides, and I rate it 9/10 as I love this platform. Análise coletada por e hospedada no G2.com.

For beginners, Apache Airflow can be complex to setup, especially with Docker. At times when a DAG is updated, the UI can feel slow. Análise coletada por e hospedada no G2.com.

O que eu mais gosto no Apache Airflow é como ele faz com que o gerenciamento de fluxos de trabalho pareça organizado e previsível. Você pode definir claramente as tarefas, estabelecer dependências e ver tudo disposto em um só lugar, o que torna pipelines complexos muito mais fáceis de entender.

Também gosto de como ele é flexível. Você pode construir e personalizar fluxos de trabalho para se adequar a praticamente qualquer pipeline de dados, e o agendamento simplesmente funciona uma vez configurado. A interface do usuário é outro grande ponto positivo, pois facilita o monitoramento das execuções, a depuração de problemas e a visualização rápida de onde algo falhou sem precisar vasculhar logs por muito tempo. Análise coletada por e hospedada no G2.com.

Uma coisa que eu não gosto no Apache Airflow é que ele pode parecer bastante pesado e complexo, especialmente no início. Configurá-lo corretamente leva tempo, e há várias partes móveis para entender antes que tudo funcione sem problemas.

Depurar também pode ser frustrante às vezes. Quando algo falha, os logs nem sempre são os mais fáceis de seguir, então pode demorar mais do que o esperado para descobrir o que deu errado. Também pode ser um pouco intensivo em recursos, o que não é ideal se você estiver executando projetos menores ou apenas precisar de algo mais leve. Análise coletada por e hospedada no G2.com.

Para mim, a característica de destaque é definitivamente a interface web. Como engenheiro de dados, frequentemente me vejo solucionando problemas, e a visualização em grade no Airflow torna extremamente simples identificar exatamente onde um pipeline falhou. Posso acessar rapidamente os logs de qualquer tarefa específica e determinar o que deu errado em segundos. Este nível de transparência é algo que trabalhos cron tradicionais ou scripts básicos simplesmente não oferecem. Ter um painel central para todos os seus fluxos de trabalho realmente proporciona tranquilidade. Análise coletada por e hospedada no G2.com.

O principal desafio é a facilidade de implementação para iniciantes. Configurar a infraestrutura (como o servidor web, o agendador e o banco de dados) requer um bom conhecimento de DevOps, o que pode ser um obstáculo para uma equipe pequena.

Como é de código aberto, você não tem suporte ao cliente tradicional, então depende muito da comunidade. Embora a comunidade seja ativa, a documentação às vezes pode ser um pouco avassaladora quando você está tentando resolver um problema de configuração muito específico. É uma ferramenta poderosa, mas a facilidade de uso do ponto de vista da configuração definitivamente poderia ser melhorada. Análise coletada por e hospedada no G2.com.

Adoro usar o Apache Airflow para criar pipelines ETL, especialmente com sua visualização de DAG orientada por UI que facilita muito o entendimento do fluxo de trabalho e das dependências. A visualização de gráfico e de estágio é incrível, e identificar erros é direto. O recurso de monitoramento de tarefas é realmente útil, permitindo-me ver quais trabalhos estão em execução, e o manuseio de tentativas e falhas é essencial para operações suaves. A configuração foi direta, particularmente na AWS, e é incrivelmente útil quando integrado com o Acceldata para observabilidade de pipelines. Análise coletada por e hospedada no G2.com.

A única coisa que notei, quando há mais DAGs, é que a interface do usuário pode às vezes parecer lenta ao lidar com muitas tarefas. Análise coletada por e hospedada no G2.com.

todo o processo é muito extensível, já que há muitos usuários, temos muitos operadores/plugins embutidos. a interface do usuário é muito limpa e intuitiva. Análise coletada por e hospedada no G2.com.

Eu não acho que haja um recurso onde possamos ver os logs de todos os trabalhos em um só lugar. Digamos que temos 20-30 etapas, então temos que ir a cada etapa e verificar os logs. Eu gostaria que todos os logs fossem consolidados. Análise coletada por e hospedada no G2.com.

Gosto dos DAGs claros do Apache Airflow, pois eles tornam os fluxos de trabalho fáceis de entender e manter. O recurso de agendamento garante que os pipelines sejam executados automaticamente sem esforço manual, o que é realmente útil. Também aprecio as tentativas de repetição e o monitoramento, pois ajudam a detectar e recuperar rapidamente de falhas. Além disso, sua escalabilidade é uma vantagem significativa, permitindo-me lidar com cargas de trabalho de dados crescentes de forma confiável, tornando o Airflow confiável para pipelines de produção. No geral, esses recursos realmente melhoram minha experiência com o Apache Airflow. Análise coletada por e hospedada no G2.com.

Algumas coisas no Apache Airflow não funcionam muito bem para mim. A configuração e a configuração inicial são um pouco complexas e demoram. A interface do usuário às vezes parece lenta quando muitos DAGs estão em execução. Depurar tarefas com falha nem sempre é claro, os logs estão espalhados. Além disso, as atualizações de versão podem quebrar DAGs existentes, a compatibilidade retroativa deveria ser melhor. Análise coletada por e hospedada no G2.com.

O Apache Airflow torna incrivelmente fácil projetar, agendar e monitorar fluxos de trabalho complexos usando Python. Eu gosto de como ele permite construir DAGs de uma maneira muito legível e modular, o que ajuda a gerenciar pipelines de dados em grande escala. A interface é intuitiva e oferece total visibilidade sobre a execução de tarefas, tentativas de repetição e logs. Sua capacidade de integrar-se perfeitamente com bancos de dados, provedores de nuvem e serviços externos o torna muito flexível para casos de uso do mundo real. O suporte da comunidade e os plugins disponíveis também facilitam a extensão da funcionalidade conforme necessário. O suporte ao cliente também é bom. Análise coletada por e hospedada no G2.com.

O Airflow pode ser um pouco desafiador para configurar e ajustar inicialmente, especialmente ao implantar em produção com múltiplos trabalhadores e agendadores. O gerenciamento de recursos e o dimensionamento às vezes exigem ajustes adicionais, e a depuração pode ser complicada para novos usuários. A curva de aprendizado é mais acentuada em comparação com algumas outras ferramentas de orquestração, e a interface, embora útil, poderia ser mais moderna e responsiva. No entanto, uma vez configurado, torna-se estável e muito confiável. Análise coletada por e hospedada no G2.com.

Eu uso o Apache Airflow para gerenciamento e monitoramento de fluxo de projetos. Acho sua interface web e os recursos de script em Python valiosos, tornando fácil desenvolver e projetar fluxos de processos. O Python como linguagem de script é mais amigável do que outras linguagens complexas, o que ajuda a escrever fluxogramas complexos melhor do que com linguagens tradicionais. Análise coletada por e hospedada no G2.com.

O processo de instalação do Apache Airflow é bastante complexo e altamente dependente do PIP, tornando-o muito difícil de lidar em servidores bloqueados por segurança cibernética. A configuração inicial é desafiadora, especialmente em um ambiente baseado em proxy, pois requer muitas permissões e instalações manuais. Análise coletada por e hospedada no G2.com.