分布式 Join 对比（DBScale vs SparkSQL）
·
环境
- DBScale 后端两分片（50.103， 50.104）
- Spark 后端三节点 （50.101，50.102，50.103）
- 数据量 10G
执行的测试是 TPCH 测试
安装
- 需要有python
- pip install pyspark
- 需要安装 spark 集群
| TPCH | DBSCALE CROSS | DBSCALE SPARK |
|---|---|---|
| 2 | 16 min 3.89 sec | 1 min 16.95 sec |
| 3 | 1 min 30.29 sec | 5 min 22.21 sec |
| 13 | N/A | 1 min 35.10 sec |
| 16 | 2 min 7.07 sec | 35.69 sec |
CSDN联合极客时间，共同打造面向开发者的精品内容学习社区，助力成长！
更多推荐
0
0- 0
已为社区贡献2条内容
所有评论(0)