最近在用spark做一些数据处理,在通过jdbc写入结果到Oracle时会报上述错误,意为连接数过多.
根据当时Oracle设置的空闲连接数来判断,估计实际的连接会有50个以上.
但是每次实际上插入Oracle的数据只有150条,为什么会申请了这么多oracle连接呢?
spark连接Oracle的连接数是跟什么有关的?
parallelism?
executor?
executor-core数量?
还是partition数量?
最近在用spark做一些数据处理,在通过jdbc写入结果到Oracle时会报上述错误,意为连接数过多.
根据当时Oracle设置的空闲连接数来判断,估计实际的连接会有50个以上.
但是每次实际上插入Oracle的数据只有150条,为什么会申请了这么多oracle连接呢?
spark连接Oracle的连接数是跟什么有关的?
parallelism?
executor?
executor-core数量?
还是partition数量?