Ich hatte geplant, Decodable auszuprobieren, um vielleicht an einem späteren Tag eine zuvor gebündelte Pipeline zu migrieren. Es funktionierte gut und war günstig, aber ich hatte nie Echtzeitdaten zum Testen.

Nach etwa 3 Stunden Herumprobieren an einem langsamen Dienstagnachmittag hatte ich nicht nur meine Tests abgeschlossen, sondern tatsächlich die gesamte Pipeline migriert. Und dabei die technische Schuld reduziert, da es jetzt weniger Systeme zu warten gibt.

Ich habe ein paar Mal bei meinem Stream nachgesehen, musste aber bisher nichts anpassen. Es funktioniert einfach. Bewertung gesammelt von und auf G2.com gehostet.

Mein Stream verarbeitet nur etwa 1 bis 2 Datensätze pro Sekunde - selbst die kleinen Aufgaben sind dafür überdimensioniert. Um Energie und Ressourcen zu sparen, wären noch kleinere Aufgabengrößen (vielleicht durch das Teilen von Aufgabenressourcen?) cool :) Bewertung gesammelt von und auf G2.com gehostet.

Decodable ist ein Werkzeug, das viele Anwendungsfälle für uns erschließt, die zuvor für unser Team nicht erreichbar waren. Mit unseren KI-Pipelines benötigen wir, dass Kundenaktualisierungen sofort wirksam werden. Wenn sie beispielsweise ein Dokument (PDF, DOCX) ändern, muss es aktualisiert und in unseren Vektordatenbanken neu indexiert werden, damit die neuen Informationen in den KI-Pipelines verfügbar sind. Es wäre unmöglich, diese Aktualisierungen rechtzeitig durchzuführen, wenn wir uns auf Batch-Jobs verlassen würden.

Decodable ist sehr effektiv bei der Vereinfachung der Überwachung dieser Aktualisierungen (durch Change Data Capture) und führt die Aktualisierungen durch eine benutzerdefinierte Pipeline für uns aus. Für Anwendungsfälle, die buchstäblich nur Daten von Punkt A nach Punkt B verschieben müssen, ist Decodable viel einfacher und erfordert nicht viel Code-Wartung.

Echtzeit-Streaming wird immer Aufwand erfordern und ein anderes Denken erfordern. Das Decodable-Team hat sehr gute Arbeit geleistet, indem es eine enorme Menge an Komplexität abstrahiert hat, sodass wir uns auf unsere Geschäftslogik konzentrieren können. Der Support war die ganze Zeit über großartig, was für ein Team wie unseres wichtig ist, das nicht an Flink gewöhnt war.

Wenn es darum geht, die Infrastruktur für Streaming-Anforderungen zu vereinfachen, glänzt Decodable wirklich. Wir werden nicht durch die Aufrechterhaltung der Betriebszeit der Kafka- und Flink-Infrastruktur gestört, was viel Arbeit sein kann. Bewertung gesammelt von und auf G2.com gehostet.

Das Decodable-Team bewegt sich schnell, aber als einer der früheren Anwender mussten wir uns sicherlich an einige der Einschränkungen anpassen. Zum Beispiel verwendeten wir Java Flink, obwohl unser Team sich in Python wohler fühlte. Einen Monat nach dieser Entscheidung wurde PyFlink Beta eingeführt. Wir mussten auch einige zusätzliche Arbeiten rund um CI/CD erledigen. Bei dem Tempo von Decodable bin ich jedoch zuversichtlich, dass sie in den nächsten Monaten ein deutlich verfeinertes Produkt haben werden. Das Support-Team war für uns sehr reaktionsschnell. Wenn unser Zeitplan nur ein bis zwei Monate später gewesen wäre, hätten wir es viel einfacher gehabt.

Ähnlich wie oben ist der Prozess rund um die Aktualisierung von Pipelines noch nicht ganz ausgereift. Es erfordert ein wenig zusätzliche Arbeit unsererseits, um einige Skripte zu schreiben, die helfen.

Batch vs. Streaming kann auch einen Denkweisenwechsel erfordern, an den man sich gewöhnen muss. Zum Beispiel sind Joins erheblich komplizierter. Dies ist jedoch nicht die Schuld des Decodable-Teams, es ist einfach eine Tatsache des Lebens, dass Streaming etwas komplizierter sein wird. Bewertung gesammelt von und auf G2.com gehostet.

Decodable macht das Erstellen von Streaming-Datenpipelines einfach. Sie stellen die gesamte Debezium-, Kafka- und Flink-Infrastruktur bereit, ohne die Komplexität. Ihre API und CLI machen es einfach, Ihre Infrastruktur auf konsistente Weise zu verwalten. Das Team von Decodable ist sehr reaktionsschnell und immer bereit, einzuspringen und zu helfen, wenn es nötig ist. Ich konnte sehr schnell loslegen, im Vergleich dazu, meine eigene Debezium/Kafka-Infrastruktur aufzubauen. Bewertung gesammelt von und auf G2.com gehostet.

Einige der erweiterten Funktionen, die von Debezium bereitgestellt werden, sind in Decodable nicht verfügbar. Das Einrichten von Zielstreams und Datenbanktabellen könnte automatisierter oder effizienter gestaltet werden. Bewertung gesammelt von und auf G2.com gehostet.

Unser Team konnte mit Decodable eine intensive Vereinigung von über 5000 Schemata abstrahieren. Wir setzen jetzt benutzerdefinierte Flink-Pipelines ein - die ETL-Fähigkeiten sind sehr umfangreich und können so komplex oder einfach sein, wie wir es benötigen. Bewertung gesammelt von und auf G2.com gehostet.

Einige kleine Verbesserungen der Benutzeroberfläche/Dokumentation würden den Einstieg erleichtern. Bewertung gesammelt von und auf G2.com gehostet.

Sehr einfach zu bedienende Echtzeit-SaaS-Plattform, die die Prototypenmontage schnell und einfach macht und den Datenfluss mit einfachen Dashboards anzeigt. Bewertung gesammelt von und auf G2.com gehostet.

Das FAQ ist nicht sehr gut strukturiert, was uns dazu veranlasst, den Support zu kontaktieren, aber sie antworten dennoch sehr schnell. Bewertung gesammelt von und auf G2.com gehostet.

- Benutzerfreundlichkeit und sehr intuitive Benutzeroberfläche

- Großartiges Team, sie haben uns während unserer gesamten Reise vom POC bis zur tatsächlichen Implementierung in der Produktion unterstützt

- Besonderer Dank an Andrew, Gunnar und Nico für die Unterstützung bei unserem Anwendungsfall der Migration der Volltextsuche von MySQL zu ElasticSearch

- Der Kundensupport ist sehr schnell und es gibt regelmäßige wöchentliche Verbindungen. Bewertung gesammelt von und auf G2.com gehostet.

- Nichts dergleichen, Andrew und das Team haben immer dafür gesorgt, dass wir nie auf Probleme stoßen. Bewertung gesammelt von und auf G2.com gehostet.

Decodable hat die beste Benutzeroberfläche, und Echtzeitmetriken und die Vorschau-Datenfunktion sind die besten. Bewertung gesammelt von und auf G2.com gehostet.

Mehrere in einer einzigen Pipeline ausführen und Abstammung definieren Bewertung gesammelt von und auf G2.com gehostet.

Lieferung von verarbeiteten Daten ohne Duplikate und ohne Datenverlust. Bewertung gesammelt von und auf G2.com gehostet.

Die Dokumentation benötigt etwas mehr Klarheit, da ich Schwierigkeiten hatte, einige Dinge zu finden. Bewertung gesammelt von und auf G2.com gehostet.

Das Beste, was ich an dem Decodable mag, sind die Vorschau-Daten und die Fähigkeit, ohne manuelle Eingriffe automatisch zu skalieren. Ein weiteres Merkmal, das ich mag, sind die Echtzeit-Dashboards für Quell-, Senk-Durchsatz, Speicher- und Festplattennutzung. Bewertung gesammelt von und auf G2.com gehostet.

Es gibt so viele Konfigurationen, die wir beim Erstellen von Streams in Decodable durchführen müssen. Zum Beispiel könnte ein Benutzer die Wasserzeichen-Spalte nicht kennen, aber sie sollte vorab ausgefüllt werden, und das Schema und Format von Kafka kann ebenfalls vorab ausgefüllt werden, sobald der Benutzer ein Thema auswählt. Auch treten manchmal SQL-Fehler direkt vom Flink-SQL-Parser auf, wir können sie umschließen und der Benutzer könnte eine gute Vorstellung davon bekommen, wo der Fehler liegt. Es gibt auch keine Möglichkeit, mehrere SQL-Abfragen nacheinander zu verbinden, das könnte eine gute Funktion sein. Bewertung gesammelt von und auf G2.com gehostet.

Es gibt zwei Dinge, die ich am meisten mag: 1) Decodable macht es super einfach, Prototyping, Sandboxing usw. durchzuführen. 2) Decodable abstrahiert die schwierigen Teile des Betriebs von Flink. Decodable als Unternehmen macht so viele Dinge gut: Es hat eine großartige Architektur, die auf solider Theorie und bewährten Open-Source-Technologien basiert. Es ist vollständig cloud-native, und sie haben ein Team von Branchenexperten mit tiefem Wissen in den zugrunde liegenden Technologien aufgebaut. Bewertung gesammelt von und auf G2.com gehostet.

Der einzige Nachteil ist, dass es sich noch in einem relativ neuen Bereich entwickelt. Es gibt noch viel Boden zu gewinnen, aber das Team bringt neue Funktionalitäten in einem sehr beeindruckenden Tempo. Bewertung gesammelt von und auf G2.com gehostet.