Всеволод Севостьянов «Apache Kafka для разработчиков» — Slurm слив скачать
- Добавлено: 2022-06-02
- Автор курса: Всеволод Севостьянов
- Сайт автора: Перейти
- Доступ: Облако Mail / Yandex / Google
- Скачать: PC / Smartphone / Tablet
Нельзя просто так взять... и не использовать Кафку!!!
Как проходит интенсив:
Щепотка теории
Встречаемся в течение 3х дней, смотрим живые трансляции и задаем вопросы гуру-спикерам по Kafka
Щедрая заправка
Обсуждаем Kafka с другими участниками интенсива в чате, поднимаем настроение шутками и соревнуемся в создании лучших мемов по теме интенсива
Много практики
После каждой темы выполняем практические задания на стендах в личном кабинете и закрепляем материал
Можно долго читать книги или статьи по Kafka, смотреть обучающие видео или изучать документацию. Потратить на это много времени и все равно не найти всей информации, чтобы стать мастером.
А мы подготовили интенсив, где ты за 3 дня начнешь разбираться в Kafka, как будто создал её сам.
Спойлер: в интенсиве будет про архитектуру, этого нигде нет.
Кому подойдет курс?
В 2022 году навыки работы с Apache Kafka требуются более чем для 3000 вакансий (*по данным hh.ru)
Системным администраторам
Для сисадминов у нас есть отдельный курс: Apache Kafka База (складчина на него)
Архитекторам
Kafka — решение многих архитектурных проблем. Подписка на события и надежная передача запросов между приложениями еще никогда не были такими простыми. После интенсива ты организуешь правильную event-driven архитектуру с помощью Kafka!
Разработчикам
Kafka даст понимание, каким образом мы можем организовать работу микросервисов и повысить общую надежность системы. Также мы поможем узнать, чем же Kafka отличается от других подобных систем и в чем ее преимущества.
Бизнес-кейсы, которые будем решать:
Проблема #1. Периодически отваливается логистический шлюз, и пользователь получает ошибку при создании заказа в онлайн-магазине одежды. Расскажем, как отвязать логистический шлюз от создания заказа, чтобы они не были связаны напрямую.
Проблема #2. Сервисы обмениваются сообщениями о событиях напрямую, и иногда по вине сети они не доставляются и пропадают. Объясним, что сделать, чтобы ничего не терять.
Проблема #3. Пользователь создал заказ, а магазин отправил его в доставку, упаковал и отгрузил водителю. И только после этого онлайн-магазин узнал, что оплата не прошла. Научим, как совершать все действия в правильном порядке, чтобы заказ не высылался до подтверждения оплаты.
Рекомендованные программы и навыки:
Для прохождения интенсива тебе понадобится компьютер, на котором установлена и настроена среда разработки, git и docker. Желательно установить make.
Знание Java и/или Go стэка.
День 1 -
• 1. Введение
• 2. Определение терминов. Теория
Начнете безошибочно разбираться в терминологии
2.1. Нода, Датацентр, Кластер
2.2. ZooKeeper
2.3. Консумер, продусер, топик
2.4. Сообщение, ключ, значение
2.5. Партиции
• 3. Архитектура Кафка. Теория + практика
Научитесь писать простейшие клиенты, будете понимать внутреннюю архитектуру Кафки
3.1. Шардинг (партиционирование)
3.2. Репликация лидер-ведомый
3.3. Концепция указателей (смещений)
3.4. Буферная передача и задержки
• 4. Основы использования Кафка. Теория + практика
Научитесь работать со сложными протоколами и настроить приложение так, чтобы оно не развалилось в проде
4.1. Создание топиков
4.2. Сериализация сообщений
4.3. Настройки продюсера
4.4. Настройка консумера
4.5. Partition key: упорядочивание и чтение на клиенте
День 2 -
• 5. Алгоритмы на Kafka. Теория + практика
Научитесь строить архитектуру между микросервисами
5.1. Асинхронные сообщения
5.2. Подписка на события
5.3. Репликация в микросервисах
• 6. Транзакции с использованием Kafka. Теория + практика
Научитесь избегать распространенных проблем с данными при построении архитектуры
6.1. Only once и идемпотентность при записи в базу
6.2. Only once при копировании из топика в топик
6.3. Distributed transactions / Sagas
День 3 -
• 7. Событийно-ориентированная архитектура. Теория + практика
Начнете использовать все преимущества Kafka
7.1. Однонаправленная обработка событий
7.2. Вариант применения: event sourсing. Акторы
7.3. Работаем с индексом времени вставки
7.4. Расчет агрегатов на Kafka
• 8. Изнасилование Кафка (Kafka как база данных). Теория + практика
Поймете, как использовать Кафку в качестве СУБД и стоит ли это делать
8.1. Объединение старых значений ключа
8.2. Доступ к сообщениям в случайном порядке
8.3. Делаем fifo очередь
8.4. Очередь, отсортированная по времени получения aka шедуллер
Рекомендуемые курсы
Преимущества курса: ✓ Методология Слёрм Мы расскажем об Apache Kafka в простой и последовательной форме, вам не придется изучать сложную документацию. ✓ Работа на результат Техподдержка поможет каждому студенту справиться с практическими заданиями и добиться поставленных целей. ✓ Курс на русском
Кому будет полезен курс: - Начинающим разработчикам Вы сделаете шаг к переходу на новый профессиональный уровень, изучите основы Kubernetes. - Опытным разработчикам Вы поймете, как приложения работают в кластере, узнаете, какие моменты нужно учесть при разработке. - Техническим руководителям
Полный курс: часть 1, 2, 3 и 4 Стать крутым инженером будет проще разработчику, который знаком со структурами данных и алгоритмами. Крупнейшие IT-компании мира и многие стартапы проверяют на собеседованиях алгоритмическую подготовку соискателей. Это лучший способ убедиться, что человек умеет быстро
Apache Airflow для аналитиков данных Какие темы затронем Разберем что такое пайплайн и зачем нам DAG Изучим основы Airflow и напишем первый скрипт Разберемся с архитектурой и интерфейсом Установим свой Airflow в Docker Погрузимся в best practices по разработке Что после? После курса полученных
Разберитесь в Excel, финансах и бизнес-презентациях. Впервые даем возможность освоить самые востребованные навыки со скидкой больше 50%. Участвуйте в акции! Эти курсы для тех, кто хочет: Получить топ-3 навыка, востребованных у работодателей Делать задачи на работе быстрее и качественнее Управлять
Курс разработан для опытных разработчиков, которые хотят повысить свой профессиональный уровень. Он подойдёт для работающих людей, у которых мало времени. Анимация для фронтендеров — новый курс HTML Academy. В программе: линейная и покадровая анимация, анимация CSS и SVG, Canvas, WebGL и шейдеры,
Больше курсов по этой теме
Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science Продолжительность - 16 месяцев (16 частей) Часть 1. - Ведение в профессию - Базовый Python Часть 2. - Предобработка данных Часть 3. - Исследовательский анализ данных - Сборный
Инженер маршрутизации MikroTik с LABS Разберитесь в темах трека MikroTik MTCRE и будьте готовы к экзамену MTCRE Чему вы научитесь Понимание статических маршрутов и маршрутов по умолчанию Понимать более конкретные маршруты на статических маршрутах Понимание и настройка ECMP Понять расстояние
Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science Продолжительность - 16 месяцев (16 частей) Часть 1. - Ведение в профессию - Базовый Python Часть 2. - Предобработка данных Часть 3. - Исследовательский анализ данных - Сборный
Это не курс. Это симулятор работы аналитика данных в реальной компании с элементами обучения. Вы будете считать retention и LTV, писать многоэтажные CTE и делать другие полезные для бизнеса штуки с помощью SQL. Цели симулятора Обучить не элементарным «SQL-запросам», а полезным фишкам, экосистеме и
Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science Цена: 16 000р. / мес. Продолжительность - 16 месяцев (16 частей) Содержание: Начало анализа данных Основы машинного обучения Вспомогательные инструменты Data Science
Часть 8 из 8: 9. Документирование (2 недели): Вы узнаете типы документации, научитесь выбирать оптимальный тип, разрабатывать программу и методику испытаний и руководство пользователя. 10. Выпускной проект (3 недели): Итоговый проект, с помощью которого вы подтвердите приобретенные знания и умения.
Отзывы о курсе «Apache Kafka для разработчиков» от Всеволода Севостьянова