AWS Data Pipeline Reseñas y Detalles del Producto

Fácil ejecutar un trabajo de Spark como un paso en la tubería. La consola de AWS tiene una interfaz de arrastrar y soltar para construir el esquema de la tubería, y funciona muy bien. Reseña recopilada por y alojada en G2.com.

Faltan algunas características. No pude ejecutar un trabajo bajo demanda, sino que en un horario. No admite múltiples versiones de la misma canalización. Reseña recopilada por y alojada en G2.com.

Una forma bastante sencilla de ejecutar trabajos por lotes, ya sea ETL u otro tipo de trabajo basado en CRON. La herramienta es bastante personalizable con lo que se puede hacer (scripts de shell arbitrarios) e integra bien con S3 y EC2. Reseña recopilada por y alojada en G2.com.

Hay momentos en los que algo que debería funcionar simplemente es muy difícil. Por ejemplo, la AMI predeterminada de la instancia EC2 era muy, muy antigua y, por lo tanto, las herramientas instaladas en ella deben ser actualizadas antes de ser utilizadas (como el AWS CLI). Sin embargo, todo se puede personalizar, incluida la imagen, pero esto lleva un poco de tiempo para que funcione y puede ser confuso cuando uno recién comienza. Este ejemplo en particular se ha resuelto, pero hay otros que son similares. Reseña recopilada por y alojada en G2.com.

servicio gestionado por Amazon para mover datos de una fuente a otra muy rápidamente y de manera automatizada con alta disponibilidad de manera confiable. podemos modificar o establecer a qué hora necesitamos ejecutar esto y solo se nos cobra cuando lo usamos, muy buen servicio gestionado por Amazon, muy confiable, flexible y de bajo costo para usar. Reseña recopilada por y alojada en G2.com.

A veces, el pipeline se queda atascado esperando dependencias, por lo demás, todo está muy bien en este servicio proporcionado por AWS. Reseña recopilada por y alojada en G2.com.

Me gusta cómo AWS crea fácilmente cargas de trabajo de procesamiento de datos complejas que son tolerantes a fallos, repetibles y altamente disponibles. No tienes que preocuparte por asegurar la disponibilidad de recursos, gestionar las dependencias entre tareas, reintentar fallos transitorios o tiempos de espera en tareas individuales, o crear un sistema de notificación de fallos. AWS Data Pipeline también te permite mover y procesar datos que anteriormente estaban bloqueados en silos de datos locales. Reseña recopilada por y alojada en G2.com.

El Data Pipeline a veces es difícil de utilizar. La parte más difícil del uso de AWS Data Pipeline son los mensajes de error que ocurren con mucha facilidad. No me gusta el hecho de que no haya notificaciones de tiempo, lo que hace difícil aprovechar al máximo algunas de las funciones. A veces, es imposible entender exactamente cuáles son los problemas en este programa, y es difícil entender qué falló exactamente ya que es un servicio de Amazon. Reseña recopilada por y alojada en G2.com.

Es un servicio muy bueno y gestionado proporcionado por Amazon para mover los datos de una fuente a otra con alta disponibilidad y un proceso confiable. Podemos configurarlo en fuentes de datos y se puede modificar el intervalo de tiempo en el que necesitamos ejecutarlo, funciona automáticamente y envía los datos. Es un servicio muy simple, fácil de usar, flexible, confiable y de bajo costo. Reseña recopilada por y alojada en G2.com.

tiene todas las ventajas, pero a veces la tubería se queda atascada esperando un componente de dependencia. De lo contrario, es un servicio muy útil y muy bueno. Reseña recopilada por y alojada en G2.com.

facilidad de uso con la interfaz de usuario y el arrastrar y soltar Reseña recopilada por y alojada en G2.com.

ETL personalizado difícil de gestionar e implicaba mucho arrastrar y soltar. Reseña recopilada por y alojada en G2.com.

Data Pipeline se integra muy bien con EMR, y es fácil desplegar pipelines a través de CloudFormation, lo que hace posible la automatización. Lo usamos para gestionar flujos de trabajo complejos de map-reduce y generalmente funciona bastante bien. Reseña recopilada por y alojada en G2.com.

El hecho de que esté en modo de mantenimiento significa que los errores y las solicitudes de funciones no se abordan de manera oportuna. Reseña recopilada por y alojada en G2.com.

AWS Data Pipeline es un servicio muy bien gestionado y confiable que nos ayuda a resolver el servicio de datos de una fuente a otra y a resolver problemas de filtrado de datos, estamos utilizando problemas de fuente de datos y es un servicio muy útil. Reseña recopilada por y alojada en G2.com.

Su principal desagrado es el costo y, a veces, los datos se atascan en la tubería. Reseña recopilada por y alojada en G2.com.

Amazon Web Service Data Pipeline es una característica increíble de AWS. Es una gran comodidad para un científico de datos. Reseña recopilada por y alojada en G2.com.

Diría que no hay nada sobre el servicio de datos de Amazon Web Service que no me guste. Es una herramienta increíble para usar. Reseña recopilada por y alojada en G2.com.

AWS Data Pipeline tiene una herramienta de diseño basada en GUI que facilita mucho la comprensión del flujo de trabajo y la configuración de algunos de los flujos de trabajo complejos fácilmente. Reseña recopilada por y alojada en G2.com.

El recurso tarda un poco más en configurarse desde el pipeline de datos directamente. En mi caso, uso un clúster de Amazon EMR junto con una función Lambda. Lambda se ejecuta rápidamente, pero EMR tarda mucho tiempo en configurarse; incluso después de que los recursos están aprovisionados y el clúster está listo para aceptar trabajos, el primer trabajo llega al clúster muy tarde, casi 9-10 minutos tarde. Reseña recopilada por y alojada en G2.com.