Recommandations à d’autres personnes envisageant Apache Flink:
Sinon, vous finissez par exercer une pression excessive ou sous-utiliser les ressources. Beaucoup de réglages concernant le nombre de threads et l'allocation de mémoire sont nécessaires. Cela entraînera beaucoup de parallélisme et simplement un transfert de données entre les nœuds et peut entraîner un ralentissement. Avis collecté par et hébergé sur G2.com.
Quels sont les problèmes que Apache Flink résout, et en quoi cela vous est-il bénéfique?
Nous utilisons Flink à la fois pour le streaming en ligne et le traitement par lots hors ligne, principalement pour enrichir les données entrantes, intégré avec Elastic Search pour les stocker. Nous faisons également de l'agrégation en utilisant des fenêtres glissantes. Nous utilisons des vues Flink. Pour le traitement par lots, nous apprenons certains seuils, comme les seuils de CPU, de mémoire, etc. Déployé avec des centaines de nœuds, hautement évolutif, déployé sur AWS en utilisant des conteneurs Kubernetes. Nous utilisons également l'interface utilisateur de Flink pour déboguer des problèmes de haut niveau. Nous ne faisons pas de SQL sur le streaming. Avis collecté par et hébergé sur G2.com.