Блог

Объектное хранилище для больших данных: зачем сохранять файлы отдельно
26

Объектное хранилище для больших данных: зачем сохранять файлы отдельно

Как устроено объектное хранение, почему оно подходит для крупных архивов данных и чем отличается от таблицы для готового отчёта.
Контракт данных между командами: о чём договориться до обмена
22

Контракт данных между командами: о чём договориться до обмена

Зачем поставщику и потребителю данных заранее согласовать смысл полей, сроки обновления, качество и порядок изменений.
Фильтр до и после группировки: почему итог отчёта различается
31

Фильтр до и после группировки: почему итог отчёта различается

На простом примере продаж объясняем, чем отбор отдельных записей отличается от отбора готовых групп и как это влияет на итог.
Почему вчерашний отчёт меняется: опоздавшие данные простыми словами
22

Почему вчерашний отчёт меняется: опоздавшие данные простыми словами

Как событие попадает в отчёт позже своего времени, почему пересчитывается прошлый период и о каких правилах ожидания стоит договориться.
Микропакеты в Spark Structured Streaming: как обновляется потоковый результат
26

Микропакеты в Spark Structured Streaming: как обновляется потоковый результат

Почему потоковые данные в Spark обрабатываются небольшими порциями, откуда берётся задержка отчёта и когда микропакеты подходят задаче.
Инструкция на случай сбоя данных: что должно быть под рукой у дежурного
60

Инструкция на случай сбоя данных: что должно быть под рукой у дежурного

Зачем команде данных короткая инструкция на время сбоя, что в неё включить и почему она не заменяет разбор причин после восстановления.
Представление и таблица в базе данных: что хранится, а что вычисляется
50

Представление и таблица в базе данных: что хранится, а что вычисляется

Чем обычное представление отличается от таблицы, почему оно выглядит как таблица и когда удобен каждый вариант.
Полная и инкрементальная загрузка данных: в чём разница
58

Полная и инкрементальная загрузка данных: в чём разница

Когда данные переносят целиком, когда — только изменения, какие ошибки возможны и что проверить перед выбором способа загрузки.
Зоны озера данных: зачем разделять исходные и подготовленные наборы
36

Зоны озера данных: зачем разделять исходные и подготовленные наборы

Что происходит с данными между поступлением в озеро и использованием в отчёте, зачем нужны зоны и почему они сами не гарантируют качество.

Занятия проходят
в Нова Дата СДО

Вебинары, практика и общение с преподавателем — в одном окне браузера.

Посмотреть интерфейс платформы
Календарь обучения в Нова Дата СДО
Курсы студента в Нова Дата СДО
Редактор кода для практики в Нова Дата СДО
Вебинары и расписание Ваши курсы Код в браузере
Нова Дата СДО — в реестре российского ПОРеестровая запись № 34931
Заявка отправлена
Отправим вам подборку курсов в течение 5 минут. С вами также свяжется наш специалист и даст карьерную консультацию.
Персональный промокод
На курс «Инженер по парсингу данных»
Введите код при оплате, чтобы применить скидку к программе.