Что такое Apache Spark

  Рет қаралды 16,679

Школа Больших Данных

Школа Больших Данных

4 жыл бұрын

В данном видео мы знакомимся с фреймворком для параллельной обработки данных Apache Spark. На конкретном примере разбираем возможности Apache Spark по работе с источниками данных (файлами и RDBMS), трансформации данных (как с помощью Structured API, так на Spark SQL).
Курс проводится только в специализированном учебном центре «Школа Больших Данных»
По вопросам обучения на курсах машинного обучения приглашаем в нашу «Школа Больших Данных»
Обращаться по телефону:
+7 (495) 41-41-121
+7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал: t.me/BigDataSchool_ru
Facebook: / bigdataschoolru
Вконтакте: bdschool_mck
LinkedIn: / bigdataschoolru
Twitter: / bigdataschoolr
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - www.bigdataschool.ru

Пікірлер: 19
@2LazySnake
@2LazySnake 4 жыл бұрын
Это одно из лучших введений в тему, которое я когда-либо видел.
@BigDataSchool
@BigDataSchool 3 жыл бұрын
Спасибо за комментарий, приходите к нам на курсы или просто подписывайтесь :-)
@uhi2106
@uhi2106 2 жыл бұрын
пощупать руками это реально бесценно. с примером!
@user-th4tb3mf5s
@user-th4tb3mf5s 4 жыл бұрын
Супер пример!
@user-mx8pn1ky5s
@user-mx8pn1ky5s 3 жыл бұрын
Жаль в плейлистах нет нумерации уроков. Иногда затруднительно найти первое видео и дальше смотреть по очереди.
@UraGagarin1961
@UraGagarin1961 2 жыл бұрын
Класс
@PizdaRusni2023
@PizdaRusni2023 3 жыл бұрын
Про спарк ни слова... плохо очень.
@powerhead
@powerhead 3 жыл бұрын
Круто
@user-kw6sb1rt5b
@user-kw6sb1rt5b 11 ай бұрын
Звук ❤
@user-ko4me4zz6z
@user-ko4me4zz6z 3 жыл бұрын
Добрый день! Скажи, пожалуйста, где можно скачать код с исходные данные для изучения в живую? Заранее благодарен!
@igrinito
@igrinito 3 жыл бұрын
Добрый день. очень полезное виедо спасибо. Подскжите пожалуйста, а почему дата сайнтист не может сам преобразовать эти данные как ему надо, через тот же пандас скажем ?
@michaelkorolev9055
@michaelkorolev9055 3 жыл бұрын
Пандас - одномашинный вариант обработки, по определению "большие данные" так не обработать. Spark работает на кластере, ему любые данные "по плечу". Понятно, что в видео была "игрушечная" задачка, в жизни задачи куда-как больше и сложнее.
@ViTa-ol8kt
@ViTa-ol8kt Жыл бұрын
иииии... датасеты разные)
@user-bg2xf2lv7o
@user-bg2xf2lv7o Жыл бұрын
ужасное объяснение
@eleberet
@eleberet Жыл бұрын
че так
@rattlik1
@rattlik1 Жыл бұрын
Из этого видео я понял, что Apache Spark - это питоновская библиотека, которая дублирует pandas. Спасибо.
@ChannelCheesecake
@ChannelCheesecake 7 ай бұрын
К сожалению есть питоновская, лучше под Spark писать на Scala
@abdul-aziz6826
@abdul-aziz6826 5 ай бұрын
@@ChannelCheesecakeпочему к сожалению ?
@emfior
@emfior Ай бұрын
Качество звучания, как будто в прямом эфире ток-шоу позвонили внезапно человеку))
Профессии в Data Science
13:57
Школа Больших Данных
Рет қаралды 1,5 М.
МИТАП "Apache Spark за 2 часа - для нетерпеливых"_20 апреля 2022г
2:36:23
Школа Больших Данных
Рет қаралды 18 М.
Inside Out Babies (Inside Out Animation)
00:21
FASH
Рет қаралды 22 МЛН
Why Is He Unhappy…?
00:26
Alan Chikin Chow
Рет қаралды 62 МЛН
ЧУТЬ НЕ УТОНУЛ #shorts
00:27
Паша Осадчий
Рет қаралды 10 МЛН
Airflow на простом примере
9:53
NOdata Миша
Рет қаралды 2,6 М.
015. Apache Spark - Егор Пахомов
31:51
Yandex for Developers
Рет қаралды 9 М.
What exactly is Apache Spark? | Big Data Tools
4:37
nullQueries
Рет қаралды 123 М.
Inside Out Babies (Inside Out Animation)
00:21
FASH
Рет қаралды 22 МЛН