4. 4 © Hortonworks Inc. 2011 – 2016. All Rights Reserved Spark is certified as YARN Ready and is a part of HDP. Hortonworks Data Platform 2.4 GOVERNANCE OPERATIONS BATCH, INTERACTIVE & REAL-TIME DATA ACCESS YARN: Data OperaAng System (Cluster Resource Management) Map Reduce Apache Falcon Apache Sqoop Apache Flume Apache KaTa Apache Hive Apache Pig Apache HBase Apache Accumulo Apache Solr Apache Sp
はじめに Flow-Based Programming (FBP) は、1970年代に、J. Paul Rodker Morrisonによって新しいアプリケーションの開発手法として発明され、当初はカナダの銀行のソフトウェアの為に利用されていました。昨今、IoT、ビッグデータ、AIを利用した、データ駆動型アプリケーション、サービスの開発用途に、改めて注目されています。このミートアップでは、FBPの代表格である Node-RED と Apache NiFi についての情報交換をしたいと思います。 資料 https://futureofdata.connpass.com/event/54535/presentation/ 動画 後日公開予定 日時 2017/4/28(金)19:00 - 21:30 受付: 18:30 場所 NHN テコラス株式会社 東京都新宿区新宿6-27-30 新宿イーストサ
2. Copyright © Acroquest Technology Co., Ltd. All rights reserved. 2 自己紹介 所属 • Acroquest Technology Co., Ltd. • 「働きがいのある会社」(GPTW) 従業員25~99人部門 2年連続1位 主な業務分野 • テクニカルアーキテクト • SEPG • IoTサービス開発 • ビッグデータ処理プラットフォーム 最近の興味 • サーバーレス • DevOps • Elasticsearch 鈴木 貴典 Twitter : @takanorig Qiita : http://qiita.com/takanorig 3. Copyright © Acroquest Technology Co., Ltd. All rights reserved. 3 本日お話する内容 #1 ビッグ
データの流れを制御するためのツール『Apache Nifi』というものがあって、前々から興味を持っていたのでインストールをしてみることにした。 データフローを制御するってなんじゃいと最初思ったのだが、データ(ログとかセンサーのデータ)をApacheNifiに投げてやることで、Nifi側でこのログはこっちのシステム、あのログはあっち、このセンサーデータはそっちというようにデータの連携先を定義してやることができるらしい。ろ過装置のように流れているデータを少し加工して連携先に投げることもできるようで、まさにデータフローを制御することができるシステムのようだ。 その他『Apache Nifi』についての情報は、いろいろなとこに情報が記載されているので、そちらを参考にしてもらいたい。 データフローオーケストレーションツールApache NiFiとは? - Qiita Apache NiFiのそもそも
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? はじめに 皆さん、こんにちは。 この記事はドワンゴ Advent Calendar 2015の13日目の記事です。 注目される可能性も高い機会ですので、Apache NiFiを紹介させていただきます。 日本だと扱っている方が(おそらく)少ない関係上、日本語情報も乏しく、ほぼ全て英語情報というのは寂しい状況ですので。 ですので、もし見て興味がある方が増えればいいなぁと。そんなわけで、お付き合いください。 Apache NiFiとは? Apache NiFiとは、一言で言うとGUIからフローが定義可能なデータフロー構築ツールです。 下記のよ
新機能 バウチャーによるイベント管理機能をリリースしました。協賛企業の社員や関係者のイベント参加を円滑にすることに活用いただけます。詳しくはヘルプページをご覧ください。 新機能 connpass APIに新しく、所属グループを取得できるAPIやユーザーの参加イベントAPIを追加しました。各APIの詳細な仕様や利用方法につきましては、 APIリファレンス をご確認ください。またAPI利用希望の方は connpassのAPI利用について をご覧ください。 お知らせ 2024年9月1日より、connpassではスクレイピングを禁止し、利用規約に明記しました。以降の情報取得にはconnpass APIをご利用ください。APIご利用についてはヘルプページをご確認ください。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く