Apache Flink est une plate-forme open source pour le traitement évolutif des données par lots et flux. Flink prend en charge l'analyse par lots et par flux, dans un seul système. Les programmes analytiques peuvent être écrits dans des API concises et élégantes en Java et Scala.
J'ai un travail Flink qui a un grand état dans un opérateur Map. Nous prenons savepoint qui a environ 80 Go de stockage sur AWS S3. Nous avons environ 100 parallélismes pour c ...