6. 性能优化

6.1 流水线设计优化

  • 批量处理与流水线优化

6.2 主路由设计优化

  • 并行逻辑优化

  • 主路由多实例:主路由并行执行

  • 粗粒度的任务,减少任务数量

6.3 核心算法优化

  • I/O性能优化策略

  • 节点本地计算

6.4 计算倾斜(还是数据倾斜?)

  • 本地计算 + 组计算节点