4回复
2年前
【赏金15元】用sparkSQL去做SQL分析，一张50万的表要花费半个小时
我们现在生产用sparkSQL去做SQL分析，一张4千万数据左右的表去left join 一张50万的表和几张几万数据的表，要花费半个小时，这个正常吗？然后把得到的近800万的数据写入TIDB又花费半个小时，这个是不是正常的时效啊？，但是用MPP数据库如impala,hive等几分钟就全搞定了
1355 阅读
性能问答>【赏金15元】用sparkSQL去做SQL分析，一张50万的表要花费半个小时>
请先登录，查看4条精彩评论吧
快去登录吧，你将获得
- 浏览更多精彩评论
- 和开发者讨论交流，共同进步
相关问题
PG sql 查询不到数据【已结算】hikari 连接池线如何自定义线程【赏金15元】【赏金10元】存储引擎具体判断使用什么索引的原则是什么？【已结算】两台centos shell 远程执行mysql 耗时差别大【赏金25元】【赏金15元】oracle数据库磁盘使用率100%，io等待时间很高应该怎么排查？【已结算】mysql可以修改单表的自增初始值为什么不能修改单表的自增步长呢？【赏金15元】【已结算】关于缓存使用选择【赏金10元】【已结算】MYSQL 分库分表以后，不适用ES等三方工具，怎么进行条件查询？【赏金20元】【赏金10元】spark里面nested loop join和cartesian product jion有什么区别？【赏金15元】将python的udf改写成scala性能提升会大吗？
