Блог

Теневой расчёт: как сравнить новую обработку со старой до переключения

Новый отчёт можно считать параллельно с рабочим, сохраняя его результат отдельно. Объясняем, что сравнивать, как разбирать расхождения и почему копирование входных данных само по себе не проверка.

Почему одинаковые слова сортируются по-разному в разных базах

Буквы, регистр и цифры в названии требуют правил сравнения. Объясняем collation на примере каталога и разбираем, что проверить при переносе списка между системами.

Формула и сохранённое значение Excel: что переносится в выгрузку

В книге Excel может храниться и правило расчёта, и прежний результат. Объясняем, почему чтение файла не всегда пересчитывает ячейки и что согласовать перед переносом данных.

Как Spark продолжает обработку потока после перезапуска

После остановки нужно знать, какие события уже обработаны и какой итог накоплен. Объясняем роль потоковой контрольной точки, источника и получателя результата без кода.

Когда учебный кейс стоит разбирать вместе с командой

Если у задачи несколько обоснованных решений, важно обсудить причины выбора. Предлагаем порядок группового разбора кейса и объясняем, как увидеть вклад каждого участника.

Формат таблицы поверх файлов: зачем нужны Iceberg, Delta Lake и Hudi

После исправления данных в папке могут остаться и старые, и новые файлы. Объясняем, как табличные форматы определяют принятый состав таблицы и почему читать все файлы подряд опасно.

Канареечный выпуск: как проверить изменение до массового включения

Новое правило готово, но включать его сразу для всех рискованно. Объясняем ограниченный пробный выпуск, выбор наблюдений и особенности изменений в системах данных.

Полнотекстовый поиск: как искать документы по словам, а не подстроке

Почему точная фраза может не найти нужную инструкцию? На примере базы знаний объясняем обработку слов, роль словарей и границы полнотекстового поиска PostgreSQL.

Почему ZIP-архив с выгрузкой — ещё не готовая таблица

В одном архиве могут лежать части таблицы, разные справочники и описание полей. Объясняем, как определить состав выгрузки и избежать неверного объединения файлов.