Spark API

SQL

• Hive

• 执行流程

+ SparkSqlParser

  + AST 语法树

    + 优化理论

+ Analyzer

  + 数据源绑定 & 字段类型确定

+ Optimizer

  + RBO 优化

+ SparkPlanner

  + 执行计划 Join 选择策略

Spark Streaming

MLlib

GraphX