与RuntimeFilter相关精彩内容

  • 时间:
  • 浏览:1

Join是有一个 多非常耗费资源耗费时间的操作,有点是数据量很大的情況下。一般流程上会涉及底层表的扫描/shuffle/Join等过程, 肯能我们不能尽肯能的在靠近源肩上减少参与计算的数据,一方面还可不还里能提高查询性能,另一方面也还可不还里能减少资源的消耗(网络/IO/CPU等),在同样的资源的情況下还可不还里能支撑更多的查询。

性能 spark e-mapreduce EMR sparksql RuntimeFilter

作者: 寒沙牧 42100人浏览