Avaliações e Detalhes do Produto Meltano

A melhor coisa sobre o Meltano é que é simples e fácil de usar. É portátil, então posso executá-lo na linha de comando, ou em um contêiner Docker, ou em qualquer número de ferramentas de orquestração. Há uma comunidade de código aberto muito ativa e existem centenas de plugins para conectar a fontes e destinos de dados, e se um plugin não existir, há boas ferramentas fornecidas para criar um. Análise coletada por e hospedada no G2.com.

Eu não acho que isso seja um "desgosto", por assim dizer, mas o Meltano é um projeto jovem e em rápido crescimento. Às vezes, isso significa que a documentação não está atualizada. Tive boa sorte em me conectar com a equipe do Meltano na comunidade do Slack deles, como uma solução alternativa. Análise coletada por e hospedada no G2.com.

Meltano remove a complexidade de criar, manter e executar pipelines de dados. Com tantos taps e targets pré-construídos, parece Plug’n’Play. Criar taps e targets personalizados é super fácil com o Meltano SDK. Todas as tarefas gerenciais são tratadas nos bastidores, deixando você focar em obter ou consumir os dados de que precisa. Estimamos uma economia de $50k ao mover um único tap de um conhecido concorrente em nuvem para o Meltano. Análise coletada por e hospedada no G2.com.

Com tantos recursos incorporados no Meltano, navegar pela documentação pode ser desafiador. No entanto, eu contornei isso usando a pesquisa do Bing AI, que me traz a resposta imediatamente. Análise coletada por e hospedada no G2.com.

Incrivelmente fácil de começar. "Simplesmente funciona" e é confiável a longo prazo. A comunidade (principalmente no Slack) é facilmente uma das mais amigáveis, responsivas, ativas e conhecedoras que já encontrei entre as ferramentas de código aberto.

O número de taps e alvos é impressionante e está crescendo rapidamente. Configurar um novo tap/alvo que já existe geralmente leva apenas alguns minutos. Você passa mais tempo obtendo suas credenciais do que configurando seu plugin pela primeira vez. Isso também é uma declaração de quão incrivelmente fácil o Meltano torna a criação de um novo tap do zero. Construí inúmeros taps com seu SDK e alguns deles consegui construir em menos de um dia.

Como é uma ferramenta baseada em código, a colaboração entre vários engenheiros é muito mais eficaz do que com concorrentes baseados em GUI. No entanto, mesmo sendo baseada em código, você realmente não precisa de habilidades de codificação "reais" a menos que vá criar um novo tap/alvo. É principalmente modelagem em yaml e comandos cli, com algum conhecimento de docker/nuvem sendo útil se você for implementar sua própria implantação personalizada.

Adoro código aberto e penso no Meltano como uma empresa/comunidade que está fazendo o código aberto da maneira certa. Eles se integram bem com muitas outras ferramentas de código aberto (Dagster, Airflow, dbt, Great Expectations, Superset, etc.). Análise coletada por e hospedada no G2.com.

Ele não faz streaming em tempo real, pelo menos não que eu saiba; embora, em teoria, eu me pergunte se poderia ...?

Suas capacidades de "orquestração" são limitadas porque não é destinado a ser um orquestrador completo. Por exemplo, eu tenho alguns pipelines que precisam executar centenas de taps com pequenas variações em suas configurações. Da mesma forma, se você precisar executar qualquer tipo de código personalizado antes ou depois da sua replicação, o Meltano não pode fazer isso. Para fazer esse tipo de coisa de forma eficiente, você precisa de um orquestrador externo (como Dagster ou Airflow). Então eu uso o Dagster para fazer chamadas CLI do Meltano. Dito isso, a grande maioria das situações pode ser tratada pelas capacidades de orquestração integradas do Meltano (agendamento, E, L e T).

Cada tap/target tem suas peculiaridades com as quais você tem que conviver ou estar disposto a corrigir; embora, a prevalência desses plugins que precisam de algum tipo de "intervenção" seja muito baixa. A grande maioria dos casos de uso está coberta, com certeza, mas você não sabe até tentar. Análise coletada por e hospedada no G2.com.

Tenho movido mais de 1TB/dia com Meltano há mais de um ano a um custo insignificante; a próxima melhor alternativa teria custado mais de um milhão ou pelo menos um engenheiro de dados em tempo integral. Isso nos economiza pelo menos $1M/ano e facilita meu trabalho. Análise coletada por e hospedada no G2.com.

É uma ferramenta jovem, ainda mudando rapidamente; mantenha-se atento às melhores práticas à medida que evolui. Mas a equipe é responsiva e a comunidade é super amigável. Análise coletada por e hospedada no G2.com.

Meltano é uma obra-prima lindamente elaborada que é intuitiva de usar e tão fácil de gerenciar quanto meu corte de cabelo. Se você ficar preso, os membros amigáveis e talentosos da Comunidade Meltano estão sempre lá para ajudá-lo a avançar em direção aos seus objetivos de dados novamente, e Melty é o mascote de dragão mais fofo que fica incrível em todas as suas coisas. Análise coletada por e hospedada no G2.com.

Sinto falta da interface gráfica integrada que foi removida recentemente. Análise coletada por e hospedada no G2.com.

Adoro que tudo esteja em uma única base de código, o que também leva a que as coisas continuem a funcionar. Análise coletada por e hospedada no G2.com.

leva algum tempo para entender toda a funcionalidade Análise coletada por e hospedada no G2.com.

O SDK e o suporte da comunidade do Meltano nos devolveram horas na criação e manutenção de conectores personalizados para várias plataformas. Enquanto isso, a abordagem baseada em CLI permitiu que nossos engenheiros de análise escalassem rapidamente nossos pipelines de dados, mantendo a segurança e a robustez. Análise coletada por e hospedada no G2.com.

Não muito? A velocidade com que o SDK recebe novos recursos pode ser difícil de acompanhar?! Análise coletada por e hospedada no G2.com.