impala
impala
impala 
impala Impala 4.0 とPresto 350によるSQLレシピ本の検証（１）
Distributed computing (Apache Spark, Hadoop, Kafka, ...) Advent Calendar 2021 23日目です。今年も Hue について書こうかと考えていましたが、最近 SQL(Pr...
impala Apache Impala ４.0 リリース！
Impala ４.0 releasedImpalaはMPPのクエリエンジンです。およそ3年振りとなるApache Impala のメジャーバージョンアップデートが行われました。リリースノートをざっと眺めてみて、気になる変更点をピックアップし...
impala Impala 4 でサポートされる予定のROLLUP、CUBE、GROUPING SETS
ついに（というかようやくというか）、Impala でも SQL2003 のCUBE, ROLLUP, GROUPING SETS 関数が利用できるようになるようです。Hive、Presto、Spark SQL等のSQL on Hadoopで...
hive Impala, Hive, Presto, Spark のJOINに関するメモ
SQL on Hadoop でのJOIN時のテーブルの指定順序と挙動結合の種類にもよりますが、複数のテーブルを結合する際、一つのテーブルを全てのワーカーノードに転送して行う場合があります。(Broadcast JOIN)もちろん、統計情報を...
Docker HueからImpala+Kuduへの接続を全てDockerで行う
Kudu-ImpalaのDockerイメージを使うと、KuduやImpalaのインストールは不要で、ImpalaからSQLを用いてKuduにクエリを行うことができます。ImpalaもKuduも、本来は数十〜数百ノードに分散してスケールアウト...
impala Apache Impala 3.4 リリース！
前回のリリースからだいぶ時間がかかった気がしますが、Impala 3.4 がリリースされました。"To Impala 4 and beyond!" とあるので今後は Impala 4 に向けての開発が進んで行きそうですが、ver 3.4で個...
impala Apache ImpalaからKuduのQuickstart環境を使う（10分で試すシリーズ）
Apache Impala via Kudu Quickstart Environment以前、Kudu の Quickstart 環境のブログを書きましたが、その時は a) Apache NiFi でデータをKuduに書き込み、b) Ap...
impala HuluでImpala
MPPのクエリエンジンであるApache Impalaは、CSVなどのテキストフォーマットも扱えますが、高速な処理を行う場合はParquetを使用することが多いです。（あるいはApache Kuduを利用することも可能）Hulu の分析業務...
impala Impala 3.2 がリリースされました
本日 Apache Impala 3.2 がリリースされました。
新機能
今回は大きな機能追加はないようですが、テクニカルプレビューの Automatic Metadata Sync using Hive Metastore N...
CDH5 Apache SparkでApache Kuduを利用する
Apache Kudu 1.3最近Apache Kuduのリードとライトの流れについてのブログが公開され、昨日は日本語でもウェビナーが開催されたりと盛り上がってきた「分散ストレージエンジン」のApache Kuduですが、SQLでのアクセス...