Чтобы писать и читать параллельно: разные продюсеры/консьюмеры работают с разными партициями без блокировки всего топика.
Разбор
- Throughput растёт с числом партиций (до предела брокеров/дисков).
- Порядок глобально по топику не сохраняется.
- Слишком много партиций увеличивает метаданные и файлы.
- Планируйте число исходя из пикового параллелизма группы.
Итог
Партиции дают параллелизм ценой более слабого глобального порядка.