Escenarios:

1. Eres nuevo en el desarrollo de productos basados en LLM: Compra Vellum (sin duda - construye tus propias herramientas más tarde si es que las necesitas).

2. Has comenzado a desarrollar productos basados en LLM pero aún no están en producción: Compra Vellum (llega a producción más rápido).

3. Tienes productos basados en LLM existentes en producción, pero tus herramientas son limitadas: Compra Vellum (probablemente necesites mejorar la tasa de desarrollo para el futuro - Vellum te lleva allí más rápido).

4. Tienes productos LLM en producción y herramientas extensivas: Probablemente aún así compra Vellum (enfócate en construir y mejorar tus productos o experimentar con nuevos. Vellum tiene las herramientas que necesitas en la mayoría de los casos y seguirá mejorando mientras trabajas en lo que importa para tu negocio).

Razón para comprar:

Vellum es tu socio. Trabajan contigo para entender tus necesidades y construir tus productos. Eso los hace excelentes en construir el producto/herramienta que te permite enfocarte en construir tu producto y no en las herramientas necesarias para hacerlo. Reseña recopilada por y alojada en G2.com.

El desarrollo/gestión basado en Git era una gran desventaja. Con el nuevo SDK, eso se ha resuelto en su mayor parte. Puede haber algunos requisitos muy avanzados que no sean compatibles con las herramientas de Vellum, pero es probable que haya algunas soluciones provisionales para 'hoy' y soluciones completamente desarrolladas para 'mañana'. Reseña recopilada por y alojada en G2.com.

Vellum tiene muchas cosas que hace bien

- excelente constructor de flujos de trabajo de bajo código (con interfaz de código 1:1)

- despliegue con un solo clic

- trazabilidad y observabilidad

- almacenamiento de documentos

Colectivamente, estas herramientas permiten una rápida iteración de la tubería de IA y una promoción sin problemas del desarrollo a la producción. Reseña recopilada por y alojada en G2.com.

De todas las cosas que ofrece Vellum, las evaluaciones probablemente podrían ser mejores. Es solo un intercambio de herramientas. Hay algunos productos de evaluación dedicados en el mercado que se optimizan únicamente para la parte de evaluación. La suite de evaluación de Vellum está un poco por detrás de las ofertas del mercado, pero la fortaleza de Vellum es la integración de las evaluaciones y su acoplamiento con los flujos de trabajo. Para otros productos, necesitas enviar sus datos. Reseña recopilada por y alojada en G2.com.

Vellum ha sido un cambio radical para nosotros en Odyseek. No solo optimizó nuestro flujo de trabajo, sino que transformó cómo nuestro equipo colabora y construye con IA.

Antes de Vellum, la ingeniería de prompts nos ralentizaba y causaba desalineación. Ahora, desarrollo y gestión pueden trabajar en paralelo, ahorrándonos semanas de tiempo de desarrollo. La gestión incluso puede probar y ajustar los prompts por sí misma, haciendo que todo sea más fluido.

Facilidad de Implementación e Integración: Comenzar con Vellum fue sorprendentemente sencillo. Pudimos integrarlo en nuestra aplicación sin grandes esfuerzos, y la plataforma se adapta bien a nuestra pila existente.

Ahorro de Tiempo y Frecuencia de Uso: La ingeniería de prompts solía ser un gran cuello de botella. Ahora, tanto desarrollo como gestión pueden trabajar en paralelo, lo que nos ha ahorrado semanas de tiempo de desarrollo. Usamos Vellum a diario; se ha convertido en una parte esencial de nuestro flujo de trabajo.

Atención al Cliente: Todo el equipo de Vellum ha sido increíble, muy receptivo, servicial y claramente comprometido en mejorar el producto.

Vellum no solo mejoró nuestro proceso, sino que elevó a todo nuestro equipo. Reseña recopilada por y alojada en G2.com.

¡Honestamente, no mucho! Sé que Vellum todavía está en una etapa temprana, y está claro que el equipo se está moviendo rápido y escuchando a los usuarios. Dicho esto, la experiencia de usuario en torno a los flujos de trabajo podría ser definitivamente más intuitiva. Estoy seguro de que lo lograrán pronto, y cuando lo hagan, llevará el producto a un nivel completamente nuevo. Reseña recopilada por y alojada en G2.com.

Vellum apoya la construcción de aplicaciones de IA en cada paso del camino, ya sea para prototipar, evaluar, desplegar u observar.

Se mantienen actualizados, siempre añadiendo nuevas características que apoyan las últimas tendencias y cualquier nuevo modelo. También ofrecen servicios personalizados y pueden alojar implementaciones de modelos personalizados. Reseña recopilada por y alojada en G2.com.

Las características más nuevas pueden requerir solicitudes de soporte adicionales. Sin embargo, son muy rápidos con las iteraciones. Reseña recopilada por y alojada en G2.com.

La capacidad de bajo código y el diseño de arrastrar y soltar son increíbles para construir rápidamente flujos de trabajo de IA personalizados que están listos para producción. Además, la capacidad de usar PDFs como una variable de entrada sin verse obligado a usar un cargador de documentos es excelente para aquellos que buscan utilizar las capacidades de visión por computadora de los modelos multimodales. Reseña recopilada por y alojada en G2.com.

La interfaz de evaluación deja un poco que desear, pero el equipo está comunicándose activamente y trabajando en actualizaciones. Además, me gustaría ver una cola de anotaciones y una mejor interfaz en los conjuntos de datos y la recopilación de comentarios de los usuarios. Reseña recopilada por y alojada en G2.com.

Nos hemos beneficiado enormemente del constructor de flujos de trabajo de la interfaz de usuario al enfocarnos en nuestros flujos de trabajo de IA. Nos proporciona una forma centralizada de probar rápidamente diferentes indicaciones y modelos y ver qué impacto tendrían y con qué nos sentimos cómodos implementando para nuestros clientes. Las alternativas requerían demasiado código, en cambio, esto acorta el ciclo donde cualquiera con una idea puede probar y luego pasar rápidamente a producción. Reseña recopilada por y alojada en G2.com.

No hemos podido aprovechar completamente su solución de evaluación. Reseña recopilada por y alojada en G2.com.

El mundo de los modelos de IA es _tan_ vasto. Comparar diferentes indicaciones y modelos era increíblemente tedioso antes de que encontráramos Vellum, que nos permite hacerlo lado a lado, seguir los cambios, automatizar nuestras evaluaciones (para detectar proactivamente regresiones)... Y la función de flujos de trabajo es increíble. Cosas que habrían tomado días o semanas ahora toman minutos u horas e incluso las personas no técnicas de nuestro equipo pueden hacer fácilmente trabajos que de otro modo habrían consumido el tiempo de nuestros ingenieros. Producto realmente fantástico y está evolucionando rápidamente. Reseña recopilada por y alojada en G2.com.

La única desventaja es también un aspecto positivo... algunos flujos avanzados son difíciles de implementar. Por otro lado, las peculiaridades del producto no son tan difíciles de sortear, especialmente una vez que te acostumbras a ellas. Su equipo también es muy rápido para responder preguntas y guiarnos a través de la implementación. Son igualmente rápidos en abordar e implementar la mayoría de las sugerencias de UI/UX/características.

En general, después de evaluar varias plataformas similares, prefiero que algunos flujos sean complicados pero aún posibles de construir, en lugar de imposibles por completo. Vellum es el producto a utilizar si quieres mantenerte por delante de la competencia. Reseña recopilada por y alojada en G2.com.

La capacidad de formatear y luego reformatear tus propios libros, sin tener que acudir a otro servicio, es absolutamente un cambio de juego para los autores independientes. A menudo encuentras que cualquier error menor en tu novela requerirá que acudas a un formateador y vuelvas a pagar para que tu libro sea corregido. Tener libros hermosos por dentro y por fuera sin tener que pagar constantemente tarifas de 'edición', Vellum es esencial. Reseña recopilada por y alojada en G2.com.

Realmente desearía que hubiera una versión para PC ya que encuentras que es imposible usar el mac en la nube sin un estrés extremo. Afortunadamente, tengo la interfaz de usuario necesaria, pero para algunos autores que desearían poder usar vellum, simplemente no pueden. Reseña recopilada por y alojada en G2.com.

La interfaz es clara e intuitiva, ¡muy fácil de navegar! Reseña recopilada por y alojada en G2.com.

Todavía en proceso de desarrollo, se están añadiendo más funciones, pero el equipo es muy receptivo. Reseña recopilada por y alojada en G2.com.

Usar Vellum es como ver por primera vez cuando se trata de LLM Ops.

La plataforma permite experimentar con diferentes modelos y explorar el impacto en el rendimiento.

El soporte es increíble: el equipo es increíblemente centrado en el cliente y está comprometido con tu éxito.

Mi equipo pasó de usar indicaciones básicas a ejecutar flujos de trabajo increíblemente complejos y robustos en cuestión de días.

Configurar toma menos de un día y ves el valor de inmediato: ahora es la herramienta más utilizada en nuestro conjunto y personalmente inicio sesión todos los días. Reseña recopilada por y alojada en G2.com.

Desearía tener algo que añadir aquí. Todo lo que no nos ha gustado hasta ahora ha sido corregido o añadido a su hoja de ruta del producto. El CTO y el CPO a menudo despliegan código el mismo día para mejorar la experiencia del cliente. Reseña recopilada por y alojada en G2.com.