spark1.6
- 作者: 我被你的智商震惊的久久说不出话666
- 来源: 51数据库
- 2020-09-21
spark2.0版本主要更新APIs,支持SQL 2003,支持R UDF ,增强其性能。300个开发者贡献了2500补丁程序
shark为了实现hive兼容,在hql方面重用了hive中hql的解析、逻辑执行计划翻译、执行计划优化等逻辑,可以近似认为仅将物理执行计划从mr作业替换成了spark作业(辅以内存列式存储等各种和hive关系不大的优化)
shark为了实现hive兼容,在hql方面重用了hive中hql的解析、逻辑执行计划翻译、执行计划优化等逻辑,可以近似认为仅将物理执行计划从mr作业替换成了spark作业(辅以内存列式存储等各种和hive关系不大的优化)
推荐阅读
