1. 首页
  2. 大数据
  3. Hive

请说明 hive 中 Sort By,Order By,Cluster By,Distrbute By 各代表什么意思?



order by:会对输入做全局排序,因此只有一个 reducer(多个 reducer 无法保证全局有序)。只有一个 reducer,会导致当输入规模较大时,需要较长的计算时间。
sort by:不是全局排序,其在数据进入 reducer 前完成排序。
distribute by:按照指定的字段对数据进行划分输出到不同的 reduce 中。
cluster by:除了具有 distribute by 的功能外还兼具 sort by 的功能。

发布者:admin,如若转载,请注明出处:https://ai1024.vip/38848.html

QR code
//