sql client 并行度问题

classic Classic list List threaded Threaded
2 messages Options
Reply | Threaded
Open this post in threaded view
|

sql client 并行度问题

丁浩浩
sql client 读取hive表,hive表中一共有21个文件需要读取,sql client提示需要21个并行度,但是我slot并没有这么多。有什么办法可以把并行度改小?



[hidden email]
Reply | Threaded
Open this post in threaded view
|

Re: sql client 并行度问题

godfrey he
通过设置 table.exec.hive.infer-source-parallelism=false, 把hive source自动并发推导关闭,
然后设置table.exec.resource.default-parallelism修改并发度

[hidden email] <[hidden email]> 于2020年8月17日周一 下午5:51写道:

> sql client 读取hive表,hive表中一共有21个文件需要读取,sql
> client提示需要21个并行度,但是我slot并没有这么多。有什么办法可以把并行度改小?
>
>
>
> [hidden email]
>