Apache Flink

Apache Flink
Basisdaten
Entwickler	Apache Software Foundation
Erscheinungsjahr	6. Januar 2015[1]
Aktuelle Version	1.20.1[2] (12. Februar 2025)
Betriebssystem	Windows, macOS, Linux
Programmier­sprache	Scala, Java, Python
Kategorie	Entwicklungsframework, Big-Data-Analysen
Lizenz	Apache-Lizenz, Version 2.0
flink.apache.org

Apache Flink ist ein freies Streamprozessor-Framework, entwickelt von der Apache Software Foundation. Der Kern von Apache Flink bildet eine verteilte Datenfluss-Engine, die es erlaubt sowohl kontinuierliche Datenströme als auch Stapeldaten zu verarbeiten und in Java und Scala geschrieben wurde.^[3] Flink führt willkürliche Datenflussprogramme daten-parallel und pipelined aus.

Flink bietet eine Streaming-Engine mit hohem Durchsatz und niedriger Latenz, sowie ereignisgetriebene Verarbeitung und das Management von Datenzuständen. Flink-Anwendungen sind fehlertolerant im Falle eines Ausfalls und unterstützen idempotente Semantik. Programme können in Java, Scala, Python und SQL geschrieben werden und werden automatisch zu Datenflussprogrammen kompiliert und optimiert, die in einem Cluster oder in einer Cloud ausgeführt werden können.

Flink hat kein eigenes Datenspeichersystem, unterstützt aber Datenquell- und Datenziel-Verbinder zu Apache Doris, Amazon Kinesis, Apache Kafka, HDFS, Apache Cassandra und ElasticSearch (Apache Lucene).

Das Framework der Apache Software Foundation ist als Open-Source-Software verfügbar. Apache Flink hat sich aus einem Apache-Incubator-Projekt entwickelt und wurde zu einem Top-Level-Projekt.

Apache Flink Version 1.0.0 wurde im Jahr 2016 veröffentlicht. Typische Anwendungsbereiche für Apache Flink sind:

• die Echtzeitkontrolle von Finanztransaktionen
• die Echtzeitauswertung des Kunden- oder Userverhaltens auf Internetseiten
• die Echtzeitverarbeitung großer Mengen von Sensordaten der automatisierten Prozesse der Industrie 4.0

Bekannte Unternehmen, die Apache Flink einsetzen, sind beispielsweise Uber und Netflix.

1. ↑ projects.apache.org. (abgerufen am 8. April 2020).
2. ↑ Release 1.20.1. 12. Februar 2025 (abgerufen am 20. Februar 2025).
3. ↑ Alexander Alexandrov, Rico Bergmann, Stephan Ewen, Johann-Christoph Freytag, Fabian Hueske, Arvid Heise, Odej Kao, Marcus Leich, Ulf Leser, Volker Markl, Felix Naumann, Mathias Peters, Astrid Rheinländer, Matthias J. Sax, Sebastian Schelter, Mareike Höger, Kostas Tzoumas, and Daniel Warneke. 2014. The Stratosphere platform for big data analytics. The VLDB Journal 23, 6 (Dezember 2014), 939–964. doi:10.1007/s00778-014-0357-y