工业大数据 Spark查询优化案例分享

  • 时间:
  • 浏览:0

支持MySQL、SQL Server、PostgreSQL、MongoDB、Redis等关系型数据库和NoSQL的数据库管理,同...

为您提供简单高效、处置能力可弹性伸缩的计算服务,帮助您快速构建更稳定、安全的应用,提升运维效率单位,降低 IT 成本,使您更专注于核...

浏览量:394 收藏:0 下载数:47 所需积分:0

直播链接:https://yq.aliyun.com/live/1091

点击链接入群 https://dwz.cn/Fvqv066s 或扫码进群

Cassandra 社区大群:https://c.tb.cn/F3.ZRTY0o

是基于语音识别、语音合成、自然语言理解等技术,为企业在多种实际应用场景下,赋予产品“能听、会说、懂你”式的智能人机交互体验。适用...

spark

本次主要分享上汽集团对于Spark查询的优化思路。大数据量的精确查询是我门我门总爱遇到的一类场景。为了处置此类间题,我门我门做了诸多实践。实践思路主要分为两类,一类主要着眼于物理层面,主要为了缩小数据源的范围,有些甚至可不可以做到精选着位。另一类主要着眼于查询计划的优化,在使用Spark CBO的同时,我门我门探索并实现了有些特定case的聚合函数下推。相信对有之类需求的工程师们会有所帮助。

所需积分:0下载人数:47立即下载

构建于阿里云 ECS 弹性虚拟机之上,利用开源大数据生态系统,包括 Hadoop、Spark、HBase,为用户提供集群、作业、...