Про Kafka (основы)

Рет қаралды 339,098

3 жыл бұрын

Apache Kafka - популярный распределенный отказоустойчивый брокер сообщений, используемый в высоконагруженных системах и BigData проектах.
На видео мой рассказ про основы Kafka: что, зачем, как и где.

Пікірлер: 277

@user-qo5dr9sg5k 2 жыл бұрын

Спасибо за видео. Таймкоды. 1. Что такое кафка? Свойства кафки. История. 0:40 - 3:26 2. Какую задачу решает кафка. 3:27 - 6:13 3. Основные сущности кафки. Перечисление 6:14 - 6:34 4. Broker 6:35 - 7:19 5. Zookeeper 7:20 - 8:38 6. Message (Record) 8:39 - 9:48 7. Topic и Partition 9:49 - 26:50 8. Producer 26:51 - 36:28 9. Consumer, offset 36:29 - 46:05 10. Выводы 46:06

@vitalyparhomenko7817 2 жыл бұрын

Пожалуй лучшее объяснение которое нашел на Ютубе, супер

@vitalyparhomenko7817 2 жыл бұрын

жаль что единственное видео на канале по айтишной тематике

@labourtimesupport3302 2 жыл бұрын

нефига. там он запутался конкретно. например, на 12ой минуте говорит что с разных партишнов одновременно считываются данные. а потом где-то начиная с 21ой минуты говорит, что данные можно считать только с лидер партишна

@vovabog 2 жыл бұрын

@@labourtimesupport3302 , путаницы нет. Все верно. Одновременно читаем со всех партиций, но только с лидер-реплик этих партиций. Каждая партиция имеет одну leader-реплику и несколько follower-реплик (то есть каждая партиция представлена в нескольких экземплярах для отказоустойчивости, но работаем для согласованности только с одним экземпляром каждой партиции, остальные экземпляры синхронизируется с основным).

@MrRomanvideo 2 жыл бұрын

@@labourtimesupport3302 хаха, джун попытался покритиковать синьора в его рабочей сфере. П.с. сам как раз на этом моменте запутался.

@adoloro 2 жыл бұрын

@@MrRomanvideo Я тут на работе одному пытался объяснить, почему я топик на 16 разделов сделал. Чудак фактор репликации с количеством разделов перепутал и меня еще обвинял, что я мол не по книге сделал. Типа зачем в 16 раз "нагрузку" увеличивать %) И никак не смог убедить.

@iugaialeksei2108 2 жыл бұрын

Владимир, огромное спасибо за столь лаконичный и четкий доклад про Кафку! Словил себя на мысли, что ни разу не перематывал ваш доклад, потому что он так структурирован и подан, что помнишь все термины и благодаря картинкам четко понимаешь все процессы. Присоединяюсь к комментариям выше, было бы просто прекрасно, если бы вы постили побольше видео на темы связанные с IT технологиями.

@artemlisitsyn9846 2 жыл бұрын

Присоединяюсь к мнению выше - все четко и по полкам, ранее уже изучал Кафку, писал что-то, но полноценное понимание того,как внутри устроено, пришло только сейчас. Автору большой респект за видео и подачу материала.

@user-lh8md5pv6q Жыл бұрын

А я перематывал назад каждый раз, когда дети орали рядом, но и этот комментарий про позитив - видео подано так, что не хотелось пропустить ни слова

@MultiKilimangaro 6 ай бұрын

А я нашел данный доклад настолько качественным, что смотрю третий раз подряд его. Нет, не потому что я туповат. Просто тут исключительно полезная информация воды 0. А мозг может мой, а может всех людей, устроен так, что если несколько раз прокрутить одну и ту же информацию, он её запомнит на всю жизнь. Потому что посчитает важной. Теперь меня хоть ночью разбуди, я перескажу доклад.

@raman465 2 жыл бұрын

Кратко, без воды, информативно. Ждем еще лекций.

@annasakharova511 2 жыл бұрын

Замечательное видео! Огромное спасибо вам за труд) Будет приятно увидеть от вас похожие по содержанию ролики) Не останавливайтесь! У вас талант объяснять)

@mqtt2real540 2 жыл бұрын

Владимир, очень ждем еще видео по Kafka и другим областям IT. Великолепная подача материала, грамотная речь и глубокое понимание вопроса! Спасибо!

@evgeniylepikov6185 6 ай бұрын

Отличная подача. Без воды, видно что на основе практического опыта лекция. Спасибо!

@nnutipa 2 жыл бұрын

Автору огромный респект! Было бы отлично вторую часть, где прям на практике показать, как та или иная настройка отрабатывает.

@user-hv2vy3kd9f Жыл бұрын

Огромное спасибо за столько подробное, понятное и доступное изложение материала!

@user-zc4iq3ig5u 2 жыл бұрын

Даёшь больше видео от автора по IT тематике! Самая полезная информация по Kafka которую встречал.

@elf8641 Жыл бұрын

Спасибо огромное! Вы такой талапнтливый преподаватель, и презентация, и объяснение на высшем уровне!

@andreykuskov8807 Жыл бұрын

Благодарю за столь плотный и структурированный поток сжатой информации.

@alibekkz7600 2 жыл бұрын

Спасибо за то, что, объяснили все человеческим языком!

@kz_Ali 2 жыл бұрын

Владимир у Вас редкий талант объяснить сложное простыми словами. Спасибо Вам!

@Zikit53 2 жыл бұрын

Очень насыщенная лекция, но очень доступно и понятно. Автору большое спасибо!

@hornermotorbiker4360 5 ай бұрын

Идеально. Чётко, без воды, по существу, вся визуализация по существу. Такие объяснения -- очень редкий зверь. Спасибо!

@Rostik_13 Жыл бұрын

Ваша лекция просто огонь!🔥Спасибо😃

@DenisBezrukov-jr1tp 4 ай бұрын

Спасибо за видео! Много полезной информации. Пока все в голову не укладывается. Но буду пересматривать те моменты, которые не запомнил. Сама структура и подача очень хорошо получилось!

@user-bv1rk8zg3v 2 жыл бұрын

Хорошее начало, хочется продолжения. Хорошо применён принцип просто о сложно.

@arisu2718 2 жыл бұрын

Владимир, спасибо! Наверное, одно из лучших изложений материала, которое я когда-либо встречала)) Лаконично, без воды, при этом максимально подробно и чётко. Очень интересно и приятно было слушать. Офигенно, 10/10!

@romann1295 2 жыл бұрын

Большое вам спасибо за видео! Думал смотреть сначала видосы на английском, но понял, что многое не очень усваивается, а благодаря вам всё разложилось по полочкам.

@s0faRy Жыл бұрын

Владимир, спасибо за абсолютно сухую выжимку без всякой воды, настолько понятно, что дальше некуда просто!

@veroniquekovalenko4575 2 жыл бұрын

офигенно, спасибо! долго искала кусочками информацию, а тут все в одном месте и понятно.

@cybermindable 2 жыл бұрын

Четко и по делу без воды. Спасибо!

@_garik__ Жыл бұрын

Большое спасибо! Отличная лекция! Доступное объяснение сложной темы.

@michaelcovalciuc2240 2 жыл бұрын

правда очень круто.. вы смогли объяснить так, что совсем новичок понял очень много и было действительно интересно. Спасибо большое) лайк))

@MrRomanvideo 2 жыл бұрын

Поддерживаю комментаторов - четко, полно и с практическими примерами и возможными ошибками\подводными камнями! Чувствуется практический опыт за спиной у автора.

@avpmk 6 ай бұрын

Очень круто! Хочу ещё 50 лекций по кафке от этого автора. Приятно слушать, все быстро чётко логичнои понятно. Просто молодец, дай бог здоровья.

@katawasiya 4 ай бұрын

Большое спасибо за столь подробное и понятное «что под капотом» за 50 минут. Многие "курсы" за 4 часа либо вводят просто базовые термины и их объяснение без погружения в детали, либо погружают в детали так, что ощущение, что я уже должен был все знать про кафку до просмотра.

@user-ee9ym1sn6w 2 жыл бұрын

Очень редкий случай, когда автор доступным языком может объяснить сложные вещи! Потрясающе!

@user-vn2nx1yq9e 7 ай бұрын

жаль что это не относится к данному автору

@user-sd2ed8ni3h Ай бұрын

@@user-vn2nx1yq9eотносится

@user-cm6pr6su7k 11 ай бұрын

Лучшее, что я нашла по кафке, спасибо огромное автору! отличная подача инфы, с картинками лучше все в голове упорядочивается.

@57skies 2 жыл бұрын

The only reason I am somehow a good developer, is because I forced myself to learn russian, years ago. You guys have a way to explain things that are simply impossible in other languages. This talk was amazing!

@AdIstinam Жыл бұрын

Where are you from?

@rustamkadimov5193 Жыл бұрын

Странно, а мы учим английский чтобы получать больше информаций из первоисточников. Парадокс прям какой-то.

@57skies Жыл бұрын

@@rustamkadimov5193 imho, knowing both, in a native way was the best thing that happened to me as a developer.

@vlera4198 4 ай бұрын

на самом деле в рускоязычном интернете в десятки раз меньше информации для девелоперов. Как дополнительная возможность русский может пригодится, но в основном инфу люди ищут в англоязычном интернете.

@tonymaccardio2404 Жыл бұрын

Это действительно лучшее поэтапное схематичное объяснение кафки, огромное вам спасибо

@vladymyrtereshchenko8919 2 жыл бұрын

Отличная подача материала, все логично, доступно, четко продемонстрировано информативными слайдами и без разного пафоса !!!

@oeaoo Жыл бұрын

Хороший доклад, спасибо. Записывайте еще!

@romantiukh6753 2 жыл бұрын

Топ! Лучшее видео по кафке. Автору большое спасибо!

@VitaliBazhko 2 жыл бұрын

Спасибо большое, продолжайте, пожалуйста

@VladisLove-tg5is Жыл бұрын

Великолепное видео, все наглядно, просто и понятно! Спасибо)

@AlexS-lr8wb Жыл бұрын

Огромное спасибо, очень полезная лекция!

@Yornero 2 жыл бұрын

Супер. Все доходчиво и понятно, при этом рассказаны как общие принципы, так и различные нюансы

@woodscrock 2 жыл бұрын

Очень качественно разложено по полочкам! Спасибо!

@user-ey3mv8mj8q 2 жыл бұрын

Послушала с удовольствием, спасибо автору за материал! Давно хотела узнать основную информацию о Kafka.

@artemnovikov9429 Жыл бұрын

Низкий поклон Автору! Сложные вещи простыми словами. Всех благ вам :)

@arthurkitskan2359 2 жыл бұрын

Спасибо! Замечательная подача, очень доступно. Было бы здорово увидеть продолжение, возможно с практикой.

@igor-policee 2 жыл бұрын

Огромное спасибо за ваш доклад! Благодаря этому немного разобрался в инструменте.

@ivanvolkov8486 2 жыл бұрын

Огромное спасибо за интересную лекцию!

@alwor 2 жыл бұрын

Понравилось. Наглядная презентация и объяснение на высоком техническом уровне.

@DmitryGupolovich Жыл бұрын

Владимир, Вы голова! Благодарю за материал. И да, остальные Ваши видео тоже познавательные!)

@BadSanta514 5 ай бұрын

Отличный доклад! Спасибо❤

@bilenjka1 Жыл бұрын

Спасибо! Просто отличный разбор. Так доходчиво объяснить - браво!!

@FurbiFurbi 2 жыл бұрын

Владимир спасибо ! Информация подана без воды - отлично, но очень быстро говоришь и без пауз - немного тяжело новичку воспринимать поток данных. Жду ещё видео.

@Boyarsskiy 2 жыл бұрын

Все по делу и без воды. Супер! Спасибо.

@chuckchuck1749 Ай бұрын

Какое же чудесное видео, рисунки очень помогли в понимании. Спасибо большое !

@user-ve3lr8jn7m Ай бұрын

Огромное спасибо и большущее уважение! Отличный материал и подача, все четко по делу без воды, структурировано!!!

@user-tw7lm5nw1g Жыл бұрын

эпохальное видео, безмерная благодарность

@user-sf9ye9tm3u 4 ай бұрын

Владимир, это просто огонь. Очень классно для концептуального базового понимания. Спасибо за материал!

@ivankartsev4695 Жыл бұрын

Отличный доклад! Жалко что больше нет видео по теме

@JustEnergyFlow 2 жыл бұрын

Всё понятно, схемы огонь, спасибо большое

@user-xd1su3sk3i Жыл бұрын

Грамотно, последовательно, что большая редкость в наше время. Кафку я знаю, освежил знания. Все верно рассказано, ничего не пропущено.

@Toni9801 Жыл бұрын

Спасибо большое! Очень полезный материал.

@user-um9ms3gw5o 2 жыл бұрын

Отлично! Еще бы ссылку на саму презентацию.

@user-se4gg9sk4b Жыл бұрын

Спасибо большое за объяснение. Кажется, тут я услышал максимум деталей за менее чем час

@MrZnakos 20 күн бұрын

Вероятно это самое лучшее объяснение основ про Kafka! Больше спасибо за материал!

@Valerikvv80 2 жыл бұрын

отличное FAQ по Kafka. спасибо автору

@nikolaysheregeda7856 2 жыл бұрын

Отличная лекция. Спасибо.

@MrOldschoolrocknroll 2 жыл бұрын

Замечательный материал! Спасибо)

@dimankan Жыл бұрын

Огромное спасибо) Давай ещё!!!

@unicoxr5tj417 3 ай бұрын

Вова, это офигенно) База по Кафка наглядно представлена и обьяснена, спасибо. Продолжай, пожалуйста)

@Teranii 2 жыл бұрын

Очень круто и понятно! Спасибо!

@Vladimir-zj1hc Жыл бұрын

Спасибо большое, очень понятно рассказал, респект!

@alexeykorkin2550 2 жыл бұрын

спасибо. прекрасная подача материала.

@petrovandrey9735 Жыл бұрын

Очень крутое объяснение основ! Спасибо за работу!

@user-tv4mn2fu6x 2 жыл бұрын

Лучшее видео на эту тематику для новичков!

@xewuss3750 5 ай бұрын

Отдельная благодарность за пояснения на уровне файловой системы.

@user-ez8tb3qx2r 2 жыл бұрын

Очень доступно и хорошо рассказал! Жирный лайк)

@dzadzen0 2 жыл бұрын

Очень классно изложен материал!

@user-ew2pd6fq8j Жыл бұрын

Друг, ты просто лучший, материал топ))), спасибо за видео, колокольчик на "Все"!

@mercurial-flower Жыл бұрын

Коротко и по делу, спасибо вам большое!

@shteker06 10 ай бұрын

Каждый раз пересматриваю , что бы освежить знания перед собесом. Спасибо за ваш труд ))

@Daniel-mo1iy 10 ай бұрын

Здравствуйте. А на какую позицию устраиваетесь?

@arver1 6 ай бұрын

Потрясающе, отличная подача, огромное спасибо. Надеюсь выложите еще что-то по данной теме, например rabbitmq

@onizuka1387 2 жыл бұрын

Отличное введение в кафку, большое спасибо!

@mallyness9835 10 ай бұрын

Спасибо! Очень хорошее объяснение и наглядная презентация.

@vvs369 2 жыл бұрын

Отличное объяснение, спасибо! Интересно будет ли продолжение ?

@ivanstrelka3448 2 жыл бұрын

От души спасибо!

@romalvekasi5307 Жыл бұрын

Очень классный доклад! Спасибо

@rainbowVax 2 жыл бұрын

Спасибо, отличная лекция

@mrDataStream777 Жыл бұрын

Супер лучшее видео по Кафка Спасибо!

@raff199978 6 ай бұрын

Лучший ролик по основам кафки что я видел. Это было невероятно полезно, и самое главное - Понятно! Качественная подготовка материала, хороший навык объяснения, ну просто чудо. Я готов вас слушать часами, пожалуйста запишите ещё ролики по обучению чему-либо связанному с IT

@user-sy5jw7us9k Жыл бұрын

Балдеж! У Вас талант докладчика

@Valder1989 2 жыл бұрын

Отличная лекция! 👍

@SegeyK Жыл бұрын

Доступно и полезно, спасибо :)

@user-fg6gg5vb2v Жыл бұрын

Чувак спасибо большое, единственное и нормальное объяснение этой технологии 👍👍

@d_m9159 2 жыл бұрын

Аплодисменты, спасибо за видео!

@LeoRcCars 2 жыл бұрын

очень круто - все очень быстро и по сути. автору можно делать успешные онлайн курсы.

@naysav Жыл бұрын

очень лаконично и понятно! КРУТО!

@slavailchenko8020 2 жыл бұрын

Спасибо за обзор! Интересно. Только как по мне не соглашусь по поводу коммита. Автоматический коммит отлично справляется. Там же еще есть heartbeat - который посылает импульс консюмеру, чтоб балансировка кафки не произошла в ненужный момент. это первый поинт. А второй поинт - что нам мешает создать еще консюмера со своим топиком для сообщения, при обработке которых мы получили ошибку. Затем заранить обработку этих сообщений через какое то время, допустим через час. Это будет уже другой поток, где какой нибудь failureConsumer будет принимать сообщения из failureTopic. Как по мне, любая кастомизация коммита с записью их в БД может только усложнить и увеличить тайм-аут - что противоречит самой философии Кафки.