开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 视频 > 正文

EMR Spark-SQL性能极致优化揭秘 Native Codegen Framework

发布者:Dev-Talk 2020-07-30 13:37:12 1798
视频介绍

EMR团队探索并开发了SparkSQL Native Codegen框架,为SparkSQL换了引擎,新引擎带来最高4倍性能提升,为EMR再次获取世界第一立下汗马功劳,本次直播将详细介绍Native Codegen框架。

讲师简介:

周克勇,花名一锤,阿里巴巴计算平台事业部EMR团队技术专家,大数据领域技术爱好者,对Spark有浓厚兴趣和一定的了解,目前主要专注于EMR产品中开源计算引擎的优化工作。

参考文章:EMR Spark-SQL性能极致优化揭秘 Native Codegen Framework
https://developer.aliyun.com/article/765156?spm=a2c6h.12873581.0.dArticle765156.5f6f47b4Mj7VpM&groupCode=aliyunemr


阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

+关注
Dev-Talk
文章
问答
视频
来源圈子
更多
+ 订阅

相关产品

  • 开源大数据平台 E-MapReduce
  • 相关文章
    更多


    http://www.vxiaotou.com