Action порождает Job; Job делится на Stages границами shuffle; Stage — набор Task по партициям, выполняемых параллельно.
Разбор
- UI: Jobs → Stages → Tasks.
- Failed task → retry; stage fail при исчерпании.
- Skew: одна task дольше всех.
- Pipeline узких трансформаций внутри stage.
Итог
Job→Stage→Task — иерархия исполнения Spark UI.