BugBug Reseñas y Detalles del Producto

Hemos estado probando BugBug durante varias semanas y ya hemos creado una gran cantidad de casos de prueba para nuestra aplicación Jira Forge. Una de las cosas que nos gusta particularmente de BugBug es que puedes crear la mayoría de los casos de prueba sin tener que sumergirte en la codificación. Mientras grabas un caso de prueba, la extensión del navegador captura todo lo que necesitas. Graba automáticamente los pasos de prueba y también te permite agregar activos y validaciones que son importantes para una verificación adecuada de las pruebas.

Antes de BugBug, evaluamos y utilizamos varias otras herramientas de prueba. BugBug ofrece una excelente relación costo-beneficio, y la hoja de ruta parece muy prometedora con muchas características útiles planificadas. Dicho esto, el conjunto de características actual ya funciona muy bien para nosotros.

En este momento, estamos en el proceso de construir alrededor de 180 casos de prueba automatizados para nuestra aplicación Jira, y están funcionando de manera muy confiable. Para lograr este nivel de estabilidad, hicimos algunos ajustes a nuestra aplicación para que genere identificadores de prueba estables a los que podamos referirnos consistentemente durante las pruebas.

Lo que también apreciamos es que BugBug es fácil de usar para diferentes tipos de usuarios. Tanto nuestros ingenieros como los miembros del equipo sin un trasfondo técnico pueden trabajar con él y crear casos de prueba. Realmente no necesitas habilidades técnicas avanzadas para comenzar.

En el pasado, ejecutar manualmente un conjunto completo de pruebas podía llevarnos de tres a cuatro días. Con BugBug, hemos reducido ese esfuerzo a alrededor del 10% del tiempo original, y la mayor parte del trabajo se ejecuta automáticamente en segundo plano sin requerir intervención manual.

Otra gran ventaja para nosotros es la funcionalidad de webhook. Nos permitió integrar BugBug sin problemas con nuestro repositorio de casos de prueba basado en Jira. Implementamos la integración usando n8n, y todo funciona sin problemas.

En general, BugBug ha mejorado significativamente nuestro flujo de trabajo de pruebas y eficiencia. Reseña recopilada por y alojada en G2.com.

También encontramos que el precio base de BugBug es bastante razonable. Al usar los ejecutores en la nube, notamos que pueden ser un poco más lentos en comparación con ejecutar pruebas localmente. Sin embargo, las ejecuciones en la nube son actualmente la opción más práctica al integrar pruebas en un flujo de trabajo CI/CD.

Es posible ejecutar pruebas adicionales en la nube en paralelo, pero el precio para múltiples ejecuciones paralelas puede volverse relativamente alto. Por esta razón, decidimos ejecutar la mayoría de nuestras pruebas en paralelo en varios entornos de prueba locales. Este enfoque nos permite mantener los tiempos de ejecución cortos mientras mantenemos un buen equilibrio entre rendimiento y costo. Reseña recopilada por y alojada en G2.com.

He estado usando BugBug durante aproximadamente 2.5 años en el plan gratuito, y ha sido una experiencia realmente sólida.

La configuración es sencilla: grabas tu flujo de prueba directamente en el navegador, marcas pasos importantes (como "cambio exitoso"), y básicamente eso es todo. A partir de ahí, puedes volver a ejecutar pruebas individuales o todas ellas con solo unos pocos clics. Si falta una confirmación u otro elemento marcado, la prueba falla, simple y efectivo. Las capturas de pantalla automáticas también son muy útiles al depurar.

El mayor esfuerzo es al principio y cada vez que cambias algo significativo (por ejemplo, un botón de envío modificado). Fuera de eso, el esfuerzo de mantenimiento es mínimo.

Lo que también aprecio es que la herramienta sigue mejorando con el tiempo. Se han añadido características útiles gradualmente, como filtros o la capacidad de continuar la ejecución incluso después de un paso fallido. Eso muestra un desarrollo activo y un buen entendimiento del uso en el mundo real.

Para una herramienta gratuita, el valor es excepcional. Ya ha detectado varios problemas antes del lanzamiento mientras requiere muy poco tiempo continuo.

En general: bajo esfuerzo, alto impacto. Estoy genuinamente impresionado, especialmente considerando que es gratis. Reseña recopilada por y alojada en G2.com.

Al principio, el rendimiento era bastante lento en hardware antiguo (en mi caso, una máquina con Windows desactualizada). En hardware moderno con almacenamiento rápido, esto ya no es un problema.

Ocasionalmente, las pruebas fallan sin una razón obvia. La captura de pantalla parece correcta, y cuando vuelvo a ejecutar la prueba, pasa. Esto puede hacer que la depuración sea un poco confusa a veces. Reseña recopilada por y alojada en G2.com.

Fácil de usar y aprender, ejecución rápida, adecuado para ejecución local que no requiere la nube. Reseña recopilada por y alojada en G2.com.

Soporte: tarda 24 horas en obtener respuesta; si no tienes una suscripción de pago pero te gustaría obtener una mientras intentas resolver problemas bloqueantes, el soporte no está dispuesto a hacer una llamada y tener una sesión de trabajo para resolver el obstáculo.

Características: comparación de imágenes, comparación de archivos, exploración de ventanas abiertas y selección de archivo para importar, pruebas de lienzo, tiempos de espera extendidos para permitir ejecuciones de análisis más largas. Reseña recopilada por y alojada en G2.com.

Facilidad de uso. Muy sencillo de añadir a Chrome y listo para usar.

Gratis para uso local (v pruebas en la nube). SI haces sugerencias, 'personas reales' comentan y dan retroalimentación en lugar de algunas respuestas insípidas de 'gracias por su aporte'. Todos los beneficios de una empresa más pequeña, joven y receptiva. Reseña recopilada por y alojada en G2.com.

Me gustaría poder verificar las <titles> de la página y tal vez otros atributos clave que no se muestran. Ahora he aprendido que mi queja sobre querer ejecutar el mismo conjunto de pruebas contra el mismo sistema pero en diferentes entornos está cubierta por los 'perfiles' de BugBug, así que parece que simplemente necesito aprender más para sacar aún más provecho de BugBug 🙂 Reseña recopilada por y alojada en G2.com.

BugBug es una herramienta altamente intuitiva que nos ha ayudado a ahorrar una cantidad significativa de tiempo en las pruebas de regresión. Gracias a BugBug, hemos podido pasar de lanzar trimestralmente a adoptar un enfoque de CI/CD. Reseña recopilada por y alojada en G2.com.

Hasta ahora, no he encontrado ningún inconveniente. Quizás el único problema menor es que cada ejecución está limitada a 30 minutos. Sin embargo, esto se puede gestionar dividiendo la ejecución en segmentos separados. Reseña recopilada por y alojada en G2.com.

Fácil de crear pruebas.. Su fiabilidad Reseña recopilada por y alojada en G2.com.

Más información en los registros sobre los errores del sitio web Reseña recopilada por y alojada en G2.com.

Es muy fácil de usar, incluso para personas que no estaban previamente involucradas en actividades de automatización de pruebas. La interfaz de usuario, en comparación con los competidores, es muy clara y te permite concentrarte en construir pruebas, en lugar de aprender las complejidades de la interfaz, desde el principio.

Además, poder hacer afirmaciones/pasos basados en JS permite a los usuarios más expertos en tecnología superar cualquier limitación del software.

La implementación de la prueba de concepto nos llevó como una semana, para estar seguros de que esta es la herramienta adecuada para nosotros.

El soporte también es muy receptivo y servicial. Reseña recopilada por y alojada en G2.com.

En este momento faltan algunas características importantes, como bucles o bifurcaciones condicionales en escenarios de prueba, por lo que no se pueden construir y mantener escenarios complejos fácilmente. Una vez que esas características estén presentes, este producto será de primera categoría. Reseña recopilada por y alojada en G2.com.

Facilidad de uso: Es muy sencillo de usar. La interfaz es clara, por lo que un principiante encontrará rápidamente todo lo que necesita. Existen múltiples funciones para crear pruebas rápidamente (grabar pasos, detener el escenario en medio de una prueba para editar pasos y lanzarlo de nuevo). Usar componentes facilita la adición de modificaciones a múltiples pruebas cambiando un parámetro/un paso en un solo lugar. También puedes usar variables predefinidas o crear las tuyas propias y crear pasos usando Javascript.

Facilidad de implementación: Súper simple, tenías las credenciales/información de la aplicación/página web que quieres probar y estás listo para grabar pruebas.

Atención al cliente: Son muy reactivos. Tuve que contactarlos por correo 2 veces, recibí una respuesta de ellos en menos de 2 horas. ¡Y la respuesta fue útil!

Facilidad de integración: nuestros desarrolladores configuraron una integración de Bugbug en nuestra acción de Github para lanzar una suite de pruebas en ramas y nuestro entorno de pruebas. Reseña recopilada por y alojada en G2.com.

Diría que el hecho de que no haya posibilidad de usar componentes múltiples veces en una prueba (pero está en su hoja de ruta). A veces las pruebas se detienen en un paso sin razón, tengo que eliminar el paso y crearlo exactamente como el original para que la prueba funcione de nuevo (aunque es muy raro). Uso el producto desde hace 1 mes, todavía tengo curiosidad por saber qué tan rápido lanzan nuevas funciones. Reseña recopilada por y alojada en G2.com.

- La herramienta de automatización de QA sin código más completa, viene como un "kit" listo para usar "directamente de la caja": no es necesario preocuparse por configurar máquinas virtuales propias, puedes ejecutar pruebas localmente en tu máquina o en la nube en la infraestructura de BugBug.

- Facilidad de uso tanto para QA como para gerentes.

- Fácil de aprender y entender para los testers manuales que buscan iniciarse en la automatización.

- Un número decente de características implementadas y más en camino.

- Lo usamos sin parar para pruebas de humo y pruebas E2E para nuestro producto basado en la web.

- Documentación completa y fácil de seguir.

- Bastante rápido y fácil de configurar.

- Lista útil de integraciones (Slack, Zapier, GitHub).

- Soporte al cliente activo y servicial.

- Transparencia suficiente sobre las características próximas.

- Lugar dedicado para recopilar comentarios de los usuarios, mejoras o ideas de características.

- Solución rápida para reducir el tiempo de ejecución a medida que el proyecto crece: opción de comprar infraestructura extendida para ejecutar múltiples pruebas en "paralelo" (lo cual es tentador especialmente para los testers de QA sin experiencia en automatización, dedicar más recursos es una opción, pero también lo es optimizar la estrategia de automatización de pruebas y la mentalidad de grabar pasos). Reseña recopilada por y alojada en G2.com.

- Ojalá pudiera tener más control durante la grabación de una prueba, como dónde grabar un paso

- La pausa/reanudación durante la grabación es un poco irregular y no muy fluida

- Un poco engorroso verificar si una corrección para una prueba larga está funcionando, porque no hay forma de especificar la ubicación desde donde la prueba puede comenzar la ejecución (si una prueba toma 7 minutos, y algo falla alrededor del minuto 6, después de corregir tienes que ejecutar la prueba desde el principio, en lugar de hacer clic en "ejecutar desde aquí" desde una cierta sección de la prueba, por ejemplo)

- Falta de pasos condicionales (si, cuando, mientras)

- Veo que la dificultad de hacer un seguimiento de las variables de prueba (y no de las variables del proyecto) aumenta cuanto más pruebas implementas: y esto es una desventaja en comparación con las herramientas de automatización basadas en código (como Cypress o Playwright)

- La herramienta no tiene un equivalente a una "función" en programación: lo más cercano es el concepto de un "componente" de prueba, también conocido como un bloque de pruebas, pero solo se puede usar una vez por prueba (por el momento)

- Falta de un lugar para reportar errores con la herramienta (manejados enviando un correo electrónico al soporte de bugbug)

- Más control sobre las ejecuciones en paralelo: tal como está, es un ajuste que puede ser verdadero o falso a nivel de suite de pruebas Reseña recopilada por y alojada en G2.com.

1. La interfaz de BugBug es intuitiva y fácil de navegar, lo que la hace accesible incluso para aquellos nuevos en las pruebas automatizadas.

2. No se requiere codificación para BugBug, permite a los no desarrolladores crear y ejecutar pruebas sin necesidad de escribir ningún código.

3. Configuración rápida, las pruebas se pueden configurar rápidamente, lo cual es ideal para proyectos más pequeños o equipos con tiempo limitado.

4. BugBug tiene la función de grabación y reproducción que simplifica el proceso de creación de pruebas al permitir a los usuarios grabar sus acciones y reproducirlas.

5. Es una herramienta basada en la nube, BugBug no requiere ninguna configuración o instalación local, lo que puede ahorrar tiempo y recursos.

6. Integración con CI/CD, BugBug se puede integrar en las canalizaciones de CI/CD, automatizando pruebas como parte del proceso de implementación.

7. Ejecución rápida, las pruebas se ejecutan rápidamente, permitiendo una retroalimentación rápida durante el proceso de desarrollo.

8. Extensión del navegador, la extensión del navegador BugBug mejora la usabilidad al permitir la grabación de pruebas directamente dentro del navegador. Reseña recopilada por y alojada en G2.com.

1. Soporte limitado para escenarios de prueba complejos.

2. No tiene capacidades de prueba entre navegadores.

3. El manejo de contenido dinámico es poco fiable.

4. Carece de opciones avanzadas de personalización.

5. Integraciones limitadas con otras herramientas.

6. Las afirmaciones no son lo suficientemente flexibles.

7. La reutilización de datos de prueba es un desafío.

8. Soporte comunitario limitado para la resolución de problemas. Reseña recopilada por y alojada en G2.com.