Оглавление:
Потоковая обработка данных является новой областью. Это означает обработку данных практически мгновенно (с очень низкой задержкой), когда они генерируются. До сих пор большая часть обработки данных основывалась на пакетных системах, где обработка, анализ и принятие решений были отложенным процессом. Сейчас, по мере развития новых технологий и платформ, организации постепенно переходят на потоковый подход, а не на старые пакетные системы. Apache Flink - это проект с открытым исходным кодом для потоковой обработки данных. Это помогает организациям проводить анализ в реальном времени и принимать своевременные решения.
| Вебинар: Стоя на краю: потоковая аналитика в действии Зарегистрируйтесь здесь |
Что такое Apache Flink?
Apache Flink можно определить как платформу с открытым исходным кодом, способную выполнять распределенную потоковую и пакетную обработку данных. Ядром Apache Flink является механизм потоковых данных, который поддерживает связь, распределение и отказоустойчивость для обработки данных распределенного потока. Apache Flink - единственная гибридная платформа для поддержки как пакетной, так и потоковой обработки. Он поддерживает различные варианты использования на основе обработки в реальном времени, проектов машинного обучения, пакетной обработки, анализа графиков и других.
Flink состоит из следующих компонентов для создания реальных приложений, а также поддерживает возможности машинного обучения и обработки графиков:
