udemy
Udemy - одна из самых больших площадок в мире по доставке обучающего контента от разных авторов всего мира. Присутсвуют курсы практически на любую тему.
Серия Apache Kafka - Мониторинг и Операции Kafka
Apache Kafka Series - Kafka Monitoring & Operations
★5 (всего оценок - 1)
Продолжительность
5 ч 8 мин
Категория
ДругоеКоличество уроков
52 Видео
Дата добавления
15 июн. 2022 г., 23:38
Язык
Английский
Дата выхода
2 июн. 2022 г., 01:00
Дата обновления
29 апр. 2026 г., 15:14
Этот продвинутый курс создан для специалистов, которые хотят углубить навыки в администрировании, мониторинге и эксплуатации Apache Kafka и уверенно работать с кластером в продакшене. Материал помогает перейти от базового понимания Kafka к экспертному уровню, необходимому для поддержки стабильных и отказоустойчивых систем.
Что включает курс
Вы получите практические навыки работы с кластером Kafka, научитесь выявлять проблемы до их появления и выполнять сложные операционные задачи без простоев.
Работа с инструментами управления
Курс подробно раскрывает настройку и использование UI-инструментов, которые существенно упрощают контроль над кластером.
- Установка и конфигурация Kafka Manager, ZooNavigator и Kafka Monitor
- Получение визуального представления состояния брокеров, топиков и Zookeeper
- Применение основных операций управления через интерфейсы
Эффективный мониторинг кластера
Грамотно настроенный мониторинг позволяет избежать критических сбоев и понимать, как ведёт себя система под нагрузкой.
- Настройка наблюдения за Kafka и Zookeeper
- Сбор метрик в Prometheus
- Создание удобных дашбордов в Grafana для визуализации производительности
Операционные задачи в Kafka
Вы освоите ключевые операции, необходимые для поддержки и масштабирования кластера.
- Автоматизированный перезапуск брокеров
- Безопасное обновление конфигураций без остановки сервиса
- Перебалансировка разделов и изменение коэффициента репликации
- Добавление, удаление и замена брокеров в работающем кластере
Обновления и миграции Kafka
Правильное проведение обновлений гарантирует стабильность кластера и отсутствие простоя.
- Понимание подходов и стратегий обновления
- Пошаговый процесс миграции без остановки кластера
Требования для успешного обучения
Курс ориентирован на специалистов с уверенной технической базой. Он не объясняет основы, а развивает продвинутые навыки.
- Чёткое понимание архитектуры и работы Kafka
- Умение настраивать и запускать Kafka-кластеры
- Базовый опыт работы с AWS
- Навыки подключения по SSH
- Знание Linux и уверенное использование командной строки
Кому полезен этот курс
Материал подходит инженерам, которые стремятся взять на себя роли уровня Senior или Lead в направлениях SRE, DevOps, Data Engineering и Platform Engineering.
После прохождения курса вы сможете
- Поддерживать и оптимизировать продакшн-кластеры Kafka
- Быстро диагностировать проблемы и предотвращать сбои
- Выполнять масштабирование и обновления без риска простоя
- Стать экспертом по Kafka внутри своей команды или компании
Это пробный урок. Оформите подписку, чтобы получить доступ ко всем материалам курса. Премиум
- Урок 1. 00:07:10Course Overview
- Урок 2. 00:01:53Important Message
- Урок 3. 00:02:46About your instructor
- Урок 4. 00:01:33What is AWS CloudFormation
- Урок 5. 00:04:19Target Architecture and Setup
- Урок 6. 00:08:16[Hands-On] Deploy Zookeeper Using CloudFormation
- Урок 7. 00:07:39[Hands-On] Deploy Kafka Using CloudFormation
- Урок 8. 00:09:27[Hands-On] Overview of our Zookeeper Cluster
- Урок 9. 00:05:04[Hands-On] Overview of our Kafka Cluster
- Урок 10. 00:02:51[Hands-On] Stopping the Kafka Cluster
- Урок 11. 00:08:11[Hands-On] Overview and Setup of Monitoring Machine
- Урок 12. 00:07:53[Hands-On] Setup Zoonavigator
- Урок 13. 00:08:09[Hands-On] Setup Kafka Manager
- Урок 14. 00:09:29[Hands-On] Setup Kafka Monitor
- Урок 15. 00:05:07Overview of Monitoring
- Урок 16. 00:17:32[Hands-On] Setting up Prometheus + Kafka Broker 1
- Урок 17. 00:05:21[Solution] Broker 2 & 3 Prometheus Setup
- Урок 18. 00:09:41[Solution] Zookeeper & Prometheus Setup
- Урок 19. 00:06:50[Hands-On] Setup Grafana on Administration Server
- Урок 20. 00:05:44[Hands-On] Setup Kafka Dashboard on Grafana
- Урок 21. 00:06:05Important Metrics to monitor
- Урок 22. 00:10:16[Hands-On] Adding Graphs to Grafana
- Урок 23. 00:03:02[Solution] Adding more graphs to Grafana
- Урок 24. 00:05:06[Hands-On] Observing Grafana when we kill a broker
- Урок 25. 00:02:00Considerations to make the setup production-ready
- Урок 26. 00:07:55[Hands-On] Install Jolokia Agent on Broker 1
- Урок 27. 00:03:39[Solution] Install Jolokia on Broker 2 & 3
- Урок 28. 00:14:04[Hands-On] Install Rolling Restart Script
- Урок 29. 00:07:22[Hands-On] Run Roll Restart Script
- Урок 30. 00:03:46[Hands-On] Updating Configurations 1st method (rolling restart)
- Урок 31. 00:11:19[Hands-On] Updating Configurations 2nd method (kafka-configs command)
- Урок 32. 00:12:11[Hands-On] Rebalancing Partitions using plain commands and JSON
- Урок 33. 00:02:41[Hands-On] Rebalancing Partitions using Kafka Manager
- Урок 34. 00:08:11[Hands-On] Rebalancing Partitions using LinkedIn tools
- Урок 35. 00:06:39[Hands-On] Increasing Replication Factor using plain commands and JSON
- Урок 36. 00:04:48[Hands-On] Increasing Replication Factor using LinkedIn tools
- Урок 37. 00:09:56[Hands-On] Adding Broker 4 using CloudFormation
- Урок 38. 00:04:31[Solution] Moving partitions over to Broker 4 using the CLI tools
- Урок 39. 00:07:04[Hands-On] Replacing a Broker keeping EBS Volume
- Урок 40. 00:03:42[Hands-On] Replacing a Broker losing an EBS Volume
- Урок 41. 00:01:01Removing a Broker Overview
- Урок 42. 00:08:02[Solution] Remove Broker 4
- Урок 43. 00:02:20Upgrading a Kafka Cluster Overview
- Урок 44. 00:08:07[Advanced] Zero Copy, Up and Down Conversions
- Урок 45. 00:04:03[Hands-On] Kafka Broker Upgrade Step 1
- Урок 46. 00:02:59[Hands-On] Kafka Broker Upgrade Step 2
- Урок 47. 00:03:04[Hands-On] Kafka Broker Upgrade Step 3
- Урок 48. 00:01:41[Hands-On] Kafka Broker Upgrade Step 4
- Урок 49. 00:03:15[Hands-On] Kafka Broker Upgrade Step 5
- Урок 50. 00:01:18Cleaning up AWS
- Урок 51. 00:02:03Next Steps & Congratulations!
- Урок 52. 00:01:33THANK YOU!
Автор - udemy
Комментарии