分區策略與數據傾斜處理策略的區別
生活随笔
收集整理的這篇文章主要介紹了
分區策略與數據傾斜處理策略的區別
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
| 策略 | 目的 |
| 數(shù)據(jù)傾斜處理策略 | taskmanager減緩/避免數(shù)據(jù)傾斜, 發(fā)揮集羣並行性能. |
| 分區(qū)策略策略 | sink的partition中的數(shù)據(jù)存放均衡 |
?
所以,兩者的主要區(qū)別是在於數(shù)據(jù)所處的階段不同,其實都有數(shù)據(jù)傾斜的味道在裏面.
?
總結(jié)
以上是生活随笔為你收集整理的分區策略與數據傾斜處理策略的區別的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 通过注解进行Date类型和String类
- 下一篇: 电纸书kindle相关产品调研(没搞完)