やりたいこと EMR メジャーバージョン 4 から 5 へ移行する際、Hue データ(保存クエリ/履歴/共有設定など)をそのまま移動させて使いたい 課題背景 EMR のリリースバージョン emr-4 から emr-5 へアップグレードする場合、Hue はバージョン 3.7 から 3.10 へ変わります Amazon EMR emr 5.2.1 release components Hue 3.10 は、ドキュメント管理方法や クエリエディタが刷新されたバージョン Hue 3.10.0 Hue は Web上で Hiveクエリ等を生成/実行し、クエリや結果をチームで共有したりできるツールで、アドホック集計で便利なツールですが、Hue 3.10 はエディタが刷新されているため、デフォルト設定では 旧バージョンのエディタ(beeswaxなど)で生成したデータが参照できない 状態になります 発生する
概要 EMR で構築したクラスタ上の WebUI をブラウザ表示するには SSH トンネリングを利用した接続が推奨されていますが、この方法は不便が多いため、より気軽な方法を模索しました 最終的に リバースプロキシ をおいて接続する方法 が良かったので共有します Amazon EMR とは http://docs.aws.amazon.com/ja_jp/emr/latest/ManagementGuide/emr-what-is-emr.html Amazon EMR クラスターでホストされているウェブサイトの表示 http://docs.aws.amazon.com/ja_jp/emr/latest/ManagementGuide/emr-web-interfaces.html 構成 検証環境 : EMR-Release 5.2.1 SSH トンネリングによる構成 この図では maste
Query. Explore. Share. Hueは、データベースおよびデータウェアハウス向けのオープンソースSQLアシスタントです Hueを試してみる プロのように SQL を記述する Hue は、最もインテリジェントな自動補完、クエリの共有、結果のチャート作成、およびあらゆるデータベースのダウンロードにより、最高の クエリ体験 を実現します。より多くの従業員をレベルアップさせ、 Customer 360 のような分析を自身で実行できるようにします。 詳しくみる » データを見つけ、接続する テーブルブラウザとストレージブラウザは、既に持っているデータカタログの知識をそのまま活用します。ユーザーが数千のデータベースから正しいデータを見つけ、自己文書化できるようにします。 詳しくみる »
Write SQL like a pro Hue brings the best Querying Experience with the most intelligent Autocompletes and Query Editor components. Learn More » Connect to all the databases Pick one of the multiple interpreters for Apache Hive, Apache Impala , Presto Apache Flink SQL, SparkSQL, Apache Phoenix, ksqlDB, Elastic Search, Apache Druid, PostgreSQL, Redshift, BigQuery... Learn More » Find and connect your
本イベントは好評のうちに無事終了させていただきました。 当日は多くの方のご来場を賜り、誠にありがとうございました。 講演資料の公開は、12月14日(金)18時をもって終了いたしました。 Welcome to the Data Age ~データ駆動型企業への第一歩~ 今やデータはかつての石油と同じように利益の源泉と考えられています。 「データの時代」である今日において、ビジネスを成長させる上で重要な鍵となるのは、誰もが素早くデータへアクセスし、仮説検証を繰り返して得たインサイトに基づいた意思決定を行える「データ駆動型企業」になることです。そして次世代のデータ基盤の構築がその第一歩となります。 クラウド環境に最適化された機械学習と分析向けの最先端プラットフォームを提供するCloudera が主催するCloudera World Tokyo 2018。データを最大限に活用するためのソリューション
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く