Recensioni e Dettagli del Prodotto AWS Data Pipeline

Facile eseguire un lavoro Spark come un passaggio nella pipeline. La console AWS ha un'interfaccia utente drag and drop per costruire lo schema della pipeline, e funziona molto bene. Recensione raccolta e ospitata su G2.com.

Ci sono alcune funzionalità mancanti. Non sono riuscito a eseguire un lavoro su richiesta, piuttosto che un programma. Non supporta più versioni dello stesso pipeline. Recensione raccolta e ospitata su G2.com.

Un modo piuttosto semplice per eseguire lavori batch, che si tratti di ETL o di qualche altro tipo di lavoro basato su CRON. Lo strumento è abbastanza personalizzabile con ciò che può essere fatto (script shell arbitrari) e si integra bene con S3 ed EC2. Recensione raccolta e ospitata su G2.com.

Ci sono momenti in cui qualcosa che dovrebbe semplicemente funzionare è molto difficile. Ad esempio, l'AMI predefinito dell'istanza EC2 era molto molto vecchio e quindi, gli strumenti installati su di esso devono essere tutti aggiornati prima di essere utilizzati (come l'AWS CLI). Tuttavia, tutto può essere personalizzato, inclusa l'immagine, ma questo richiede un po' di tempo per funzionare e può essere confuso quando si è appena iniziato. Questo particolare esempio è stato risolto, ma ce ne sono altri simili. Recensione raccolta e ospitata su G2.com.

servizio gestito da Amazon per spostare dati da una fonte all'altra in modo molto veloce e automatizzato con alta disponibilità in modo affidabile. Possiamo modificare o impostare l'orario in cui abbiamo bisogno di eseguire questo e siamo addebitati solo quando lo utilizziamo, un servizio molto buono e gestito da Amazon, molto affidabile, flessibile e a basso costo da usare. Recensione raccolta e ospitata su G2.com.

a volte la pipeline si blocca in attesa delle dipendenze, altrimenti tutto è molto buono in questo servizio fornito da AWS. Recensione raccolta e ospitata su G2.com.

Mi piace il modo in cui AWS crea facilmente carichi di lavoro complessi per l'elaborazione dei dati che sono tolleranti ai guasti, ripetibili e altamente disponibili. Non devi preoccuparti di garantire la disponibilità delle risorse, gestire le dipendenze tra i compiti, riprovare i fallimenti transitori o i timeout nei singoli compiti, o creare un sistema di notifica dei fallimenti. AWS Data Pipeline ti consente anche di spostare ed elaborare dati che erano precedentemente bloccati in silos di dati on-premises. Recensione raccolta e ospitata su G2.com.

Il Data Pipeline è a volte difficile da utilizzare. La parte più difficile dell'uso di AWS Data Pipeline sono i messaggi di errore che si verificano molto facilmente. Non mi piace il fatto che non ci siano notifiche temporali, il che rende difficile sfruttare appieno alcune delle funzionalità. A volte è impossibile capire esattamente quali siano i problemi in questo programma, ed è difficile capire cosa esattamente sia fallito poiché è un servizio di Amazon. Recensione raccolta e ospitata su G2.com.

È un servizio molto buono e gestito fornito da Amazon per spostare i dati da una fonte all'altra con alta disponibilità e processo affidabile. Possiamo impostarlo sulle fonti di dati e può essere modificato in base all'intervallo di tempo in cui abbiamo bisogno di eseguirlo, funziona automaticamente e invia i dati. È un servizio molto semplice, facile da usare, flessibile, affidabile e a basso costo. Recensione raccolta e ospitata su G2.com.

ha tutti i vantaggi ma a volte la pipeline si blocca in attesa del componente di dipendenza. Altrimenti è un servizio molto utile e molto buono. Recensione raccolta e ospitata su G2.com.

facilità d'uso con l'interfaccia utente e il drag and drop Recensione raccolta e ospitata su G2.com.

ETL personalizzato difficile da gestire e comportava molti trascinamenti e rilasci Recensione raccolta e ospitata su G2.com.

Data Pipeline si integra molto bene con EMR, ed è facile distribuire pipeline tramite cloudformation rendendo possibile l'automazione. Lo usiamo per gestire flussi di lavoro complessi di map-reduce e di solito funziona abbastanza bene. Recensione raccolta e ospitata su G2.com.

Il fatto che sia in modalità di manutenzione significa che i bug e le richieste di funzionalità non vengono affrontati in modo tempestivo. Recensione raccolta e ospitata su G2.com.

AWS Data Pipeline è un servizio gestito e affidabile che ci aiuta a trasferire i dati da una fonte all'altra e a risolvere i problemi di filtraggio dei dati. Stiamo utilizzando i problemi delle fonti di dati ed è un servizio molto utile. Recensione raccolta e ospitata su G2.com.

Il suo principale svantaggio è il costo e a volte i dati si bloccano nella pipeline. Recensione raccolta e ospitata su G2.com.

Amazon Web Service Data Pipeline è una caratteristica straordinaria di AWS. È una grande comodità da avere per un data scientist. Recensione raccolta e ospitata su G2.com.

Direi che non c'è nulla riguardo al data pipeline di Amazon Web Services che non mi piaccia. È uno strumento straordinario da utilizzare. Recensione raccolta e ospitata su G2.com.

AWS Data Pipeline ha uno strumento di progettazione basato su GUI che rende molto facile comprendere il flusso di lavoro e configurare facilmente alcuni dei flussi di lavoro complessi. Recensione raccolta e ospitata su G2.com.

La risorsa richiede un po' più di tempo per essere configurata rispetto a una pipeline di dati diretta. Nel mio caso, utilizzo un cluster Amazon EMR insieme a una funzione Lambda. Lambda si esegue rapidamente, ma EMR richiede molto tempo per essere configurato; anche dopo che le risorse sono state fornite e il cluster è pronto ad accettare lavori, il primo lavoro arriva al cluster molto tardi, quasi 9-10 minuti di ritardo. Recensione raccolta e ospitata su G2.com.