Колоночные типы: struct.field, explode массивов, higher-order functions (transform, filter на array). Избегайте взрыва explode без нужды — размножает строки.
Разбор
- explode + join легко взрывает объём.
- posexplode сохраняет индекс.
- Схема JSON → struct через from_json.
- Nested parquet хорошо жмётся.
Итог
Сложные типы мощны; explode контролируйте, чтобы не взорвать cardinality.