Impala

HueからHiveやImpalaの実行時にリソースプールを変更したい問題

分析用のクラスタでの運用の話。 クラスタへのデータ投入やETLなどのジョブと分析用のジョブを共存共栄したいという要望がある。 基本的に分析系のジョブは重たくなりやすいので、他に影響与えないように隔離したい。 beelineを使う場合は、以下のようにする…

HiveとImpalaのネストしたカラムのpushdown(行や列方向のフィルタ)に関するまとめ

結論 きっかけ Pushdownについて HiveでのネストしたカラムのPushdwonについて ~Complex型(Struct型)の要素のPushdown~ ImpalaでのネストしたカラムのPushdwonについて ~Complex型(Struct型)の要素のPushdown~ まとめ 結論 2019/01/07時点で Hive ま…