Hadoop. Введение в Big Data и MapReduce

Рет қаралды 121,915

9 жыл бұрын

«Техносфера Mail.ru Group» при МГУ им. М. В. Ломоносова.
Курс «Методы распределённой обработки больших объёмов данных в Hadoop».
Лекция № 1: «Введение в Big Data и MapReduce».
Лектор - Алексей Романенко.
Что такое «большие данные». История возникновения этого явления. Необходимые знания и навыки для работы с большими данными. Что такое Hadoop, и где он применяется. Что такое «облачные вычисления», история возникновения и развития технологии. Web 2.0. Вычисление как услуга (utility computing). Виртуализация. Инфраструктура как сервис (IaaS). Вопросы параллелизма. Управление множеством воркеров. Дата-центры и масштабируемость. Типичные задачи Big Data. MapReduce: что это такое, примеры. Распределённая файловая система. Google File System. HDFS как клон GFS, его архитектура.
Слайды лекции: www.slideshare.net/Technopark/...
Другие лекции курса: • Курс · Hadoop (осень 2...
VK Team - это миллион возможностей проявить себя. Мы делаем современные и быстрые интернет-сервисы, доступные каждому. На этом канале делимся опытом компании VK, рассказываем о технологиях, наших образовательных проектах и жизни команды.
😎 Сообщество ВКонтакте: vkteam
👨‍🎓 VK Education: education.vk.company
🏆 Чемпионаты: cups.online/
👨‍💻 Карьера в VK: team.vk.company/

Пікірлер: 81

@Ievgen.A 5 жыл бұрын

1:08:18 Ближе к делу, не благодарите

@Serge-KS 4 жыл бұрын

Я тебе не поверил и зря. Надеюсь мой комментарий поможет другим избежать этой ошибки

@Demiurh 4 жыл бұрын

Таки да

@user-fo1bc2br7t 4 жыл бұрын

Спасибо

@kirieshka888 4 жыл бұрын

Спасибо

@nikitamaslovx 3 жыл бұрын

@@Serge-KS а я поздно прочитал😬

@oleggrechko118 3 жыл бұрын

Какя-то, более-менее полезная информация появляется с 50-й минуты!!! Если этот чувак так же работает как мямлит эту лекцию, то его компании наступит кирдык. Если нет выхода и надо смотреть эту лекцию - сразу ставьте на скорость 2, есть шанс, что не заснете!

@elenafridman7294 7 жыл бұрын

Смотреть на x2 - самое то

@mirshakhidmirshakhid5190 3 жыл бұрын

не 2 быстро 1.5 самое то

@MrEgorlo 8 жыл бұрын

Классно! Все предельно понятно изложено. Спасибо большое за учебный материал!

@techissimply 9 жыл бұрын

Такая ценная и бесплатная информация! Спасибо большое!

@vkteamchannel 9 жыл бұрын

спасибо

@alekseylanbin5217 9 жыл бұрын

Спасибо! Очень просто объяснили суть темы.

@namalnikmisartenko8785 7 жыл бұрын

Благодарю за информацию. Вы молодцы)

@stephanyjoy5699 2 жыл бұрын

Спасибо за рекомендацию книг и за лекцию!

@screamo9428 4 жыл бұрын

Вся лекция: нуу, это самое, пук-пук, такое дело...

@TheFuckel 3 жыл бұрын

Есть такой плагин KZfaq Playback Speed Control - позволяет выкручивать скорость видосов за 2х+

@stepanpetei2405 Жыл бұрын

Эта фича не требует плагинов, она есть в плеере ютуба по дефолту

@romrom45 2 жыл бұрын

Дружище, спасибо конечно за лекцию. Ну реально думаешь, что 20% лекции норм рассказывать о том о чем ты будешь рассказывать??? Как ты работаешь в мейл мне интересно?

@Diadema566 Жыл бұрын

90% времени - обсуждение, как они будут работать, 5% - кофе-брейки и 5% - сама работа.

@RustamMagomedov-rm9ju 10 ай бұрын

Как понимаю это вводная к ряду лекций

@guzel_jazz 6 жыл бұрын

Спасибо большое за лекцию. А можете скинуть ссылку на книгу на русском языке ?

@ArturTcyganov 8 жыл бұрын

Спасибо ! А где эта лекция читалась? Это какой то университет ?

@vkteamchannel 8 жыл бұрын

+Artur Tcyganov Это лекция из программы образовательного проекта "Техносфера" при МГУ им. Ломоносова. Подробнее почитать можно здесь www.sphere.mail.ru

@AlekseyKzn 4 жыл бұрын

хорошо им там в 2014м...

@mepopoff7149 Жыл бұрын

Хорошо вам там в 2020м...

@AlekseyKzn Жыл бұрын

@@mepopoff7149 согласен

@someguy9607 7 жыл бұрын

Спасибо! Все довольно понятно, последовательно объяснил, несмотря на разной глубины абстракции, а тем кому не нравится -- сделайте лучше и выложите в сеть, будем вас хвалить.

@antonellyb 4 жыл бұрын

Какого года эта лекция?

@aisultanshoiynbek6873 2 жыл бұрын

Часности… кокой-то… эээээ…. Каким то образом…. Вот… ээээ…. Таким образом… это пытки для студента

@romrom45 2 жыл бұрын

Но все равно спасибо!

@user-ts3mi6ze4j 7 жыл бұрын

Поставил на скорость воспроизведения 1,5 и норм!)

@user-dg1fz7uc3k 4 жыл бұрын

Ай лайк ту мув ит мув ит, ю лайк ту мув ит

@user-dh3wx8bh5u 2 жыл бұрын

Спасибо

@user-iv7yx8ug7n Жыл бұрын

Добрый день, начал изучать hadoop, как вы думаете, лекция и сам курс устарел? 8 лет прошло...

@alexeystaroverov4804 4 жыл бұрын

на 1.41.00 - Iterable а не Iterator в параметрах

@devdeving9069 7 жыл бұрын

вода!

@mikhailkin 8 жыл бұрын

Очень, ну очень растянуто говорит. Много лишних слов.

@user-bo8ps7be3u 7 жыл бұрын

не только слов, но и пауз очень много )

@mikhailkin 7 жыл бұрын

{Rabynovych} Конечно, классно, но зачем такое в ютуб выкладывать и подписывать, что это mail.ru? Это явно антиреклама.

@ivankuverkin4001 6 жыл бұрын

Ставьте время 1.25 или 1.5 - норм

@antonchernov9743 11 ай бұрын

Довольно неплохо для слушателя нулевого уровня, в меру высокоуровнево

@devdeving9069 7 жыл бұрын

какой нудный тип. это жесть. как он вообще что-то может сделать. ему талоны продавать

@LeonidNikulin 3 жыл бұрын

То что лектор показывает руками на живом экране не отражается в видео презе... Что должен понять человек? Вопрос скорее риторический

@Kolkiy 5 ай бұрын

1,25 скорость можно ставить

@kromanrus 7 жыл бұрын

Скорость установить 1.25.

@mefodymo7456 4 жыл бұрын

Да?а я на 1.75 смотрю)

@dmytrodemydenko6732 6 жыл бұрын

смотреть на 2х

@stepanpetei2405 Жыл бұрын

Смотреть на 1,5х

@eredjepkadyrov7070 5 жыл бұрын

я заснул под это видео, рекомендую)))

@alexeyserdtse1407 11 ай бұрын

1.25 X

@eugnsp 4 жыл бұрын

Скорость 1.75 и кнопка L вам помогут. :)

@chukkykatz1007 6 жыл бұрын

Акает, бекает, переминается, будто в туалет хочет, но дело говорит! Кто ищет материал по теме советую посмортеть (на скорости 1.5)

@user-cy3yi3cw4f 5 жыл бұрын

Хоть бы презентацию на грамматические ошибки проверил .

@JackTabaqui 7 жыл бұрын

Мычания и блеяния больше чем слов

@oookramer 7 жыл бұрын

Пофиг как он ходит, главная инфа. На русском вообще нихрена толкового нет, так что радуйтесь что хоть кто-то делится как может.

@vani-or 6 жыл бұрын

"Начнем с постигания"... уже во второй раз, дальше не могу. Мэил.ру, подарите своему ведущему программисту словарь русского языка!

@user-ke3uc1ge4e 6 жыл бұрын

ставьте скорость 1.5

@rugeneus 6 жыл бұрын

Море воды. Надоело. Поищу другие ролики.

@fast9381 7 жыл бұрын

ходит туда сюда. уже с первых минут раздражает.

@Poeboter 5 жыл бұрын

Первые 40мин ни о чём

@DK-ng3br 6 жыл бұрын

Много воды, слабый докладчик.

@vasilisasokolova6481 5 жыл бұрын

Два часа моей жизни и головная боль :) все ждала, что вот сейчас суть начнется.. не дождалась :) школа очень сильная, и материал нужный, но его для публикации следует сократить..

@elstup1do 7 жыл бұрын

Как же, ээээ, тяжело, ээээ... ц, ээээ, слушать его эээ

@6yHTapb78Rus 4 жыл бұрын

сраное mail.ru из всего этого и состоит изначально - "эээ", "нууу", "ну там", "как бы", "очевидно, да?", "а потом получается какой-то", "эээ, аааа, ну это, как его, эээээ", "результат".

@alex.1803 Жыл бұрын

Информация минут на 15 всё остальное задумки предлоги междометия,

@Diadema566 Жыл бұрын

Нудятина с кучей воды. Невозможно слушать на скорости меньше 1,5

@user-zt6wk8fu7l 3 жыл бұрын

Очень тяжело смотреть. Лектор мямлит что то непонятное

@Shafronov 3 жыл бұрын

Попробовал посмотреть на 2x скорости. Все равно - нудятина.

@alexanderkozlikhin 7 жыл бұрын

Непонятно, зачем слушать таких лекторов? У него мозг не справляется с тем, чтобы просто сязно говорить, глядя на слайды, где уже все написано - изобилие канцеляризмов и наукообразных оборотов, на фоне постоянного тягучего "а-а-а", и засовывания "как бы" через слово. Это правда специалист по Big Data, с такими речевыми способностями?