Apache Flink

Apache Flink — это распределенная система и вычислительный механизм для потоковой передачи больших данных с отслеживанием состояния. Говоря простым языком, Flink — это библиотека, которая позволяет обрабатывать большие данные в масштабе по мере их поступления почти в реальном времени. Flink предоставляет вам множество API-интерфейсов, которые позволяют выполнять простое функциональное программирование потоковых данных, а также низкоуровневые API-интерфейсы, обеспечивающие полный контроль. Плюс коннекторы ко всему популярному, включая Kafka, JDBC, Cassandra, Pulsar, S3 и всевозможные процессоры данных и системы хранения. В этом курсе вы узнаете, как продуктивно работать с Flink, и вы станете специалистом по данным.

Прежде всего, этот курс даст вам все необходимое для продуктивной работы с Flink:

• Вы глубоко поймете механизм потоковой передачи Flink и то, как он работает.
• Вы будете использовать функциональное программирование для потоков данных
• Вы будете обрабатывать любые данные в режиме реального времени в любом масштабе
• Вы освоите сложные преобразования, такие как оконные функции
• Вы сможете выполнять вычисления с отслеживанием состояния, что является главной силой Flink.
• Вы узнаете, как подключить Flink к самым популярным шинам сообщений, системам потоковой передачи и хранения данных.
• Вы сможете создавать свои собственные разъемы
• Вы сможете развертывать приложения Flink в кластере.
• Вы сможете устранять неполадки и находить соответствующую информацию в пользовательском интерфейсе Flink.

После этого курса вы сможете обрабатывать данные любым способом, используя Flink.

Но самое главное, вы разовьете вневременные навыки, которые вы будете носить с собой на протяжении всей своей карьеры, независимо от того, какой инструмент потоковой передачи данных вы в конечном итоге будете использовать:

• Вы глубоко поймете практические преимущества потоковой передачи данных в целом.
• Вы сможете работать со временем события и временем обработки
• Вы усвоите последствия и компромиссы выбора между задержкой и пропускной способностью.
• Вы поймете необходимость согласованности и постоянства данных