自分で設定したカスタムのAMIを作っておけば、hadoop-ec2スクリプトで簡単に計算ノードを追加できます。 まずはClouderaのAMIをベースにしてHadoop環境を構築してカスタムのAMIとして保存しようと思います。 Clouderaが提供しているAMIの一覧からfedoraの64bitを選びました。 cloudera-ec2-hadoop-images/cloudera-hadoop-fedora-20090623-x86_64 ami-2359bf4a 以下はインスタンスを１台起動してrootでログインしての作業です。 ________ __ /\ _____\ /\ /\ \ \ \ \____/ /\ \ ____ __ __ _\_\ \ ____ __ ____ _____ \ \ \ \ \ \ / __ \ /\ \/\ \ / ___ \ / __ \ /\
HBaseのテーブルは、qualifierの中はデータ追加で自動的に増やせるが、family（列）はテーブルを一旦使用不可にして項目追加を行わないと増やせない。 したがって変化の無いものを列（family）にする方がいいんじゃないかと思う。 （試験名の方を可変にしておけば、模試とか補習(苦笑)とかにも対応できるし） 準備：テーブルの作成 今回のサンプル用に、HBase Shellからcreateコマンドを実行するか、HBaseのテーブル作成APIを使ってテーブルを作成しておく。 HBase Shellの場合 hbase(main):001:0> create 'student','personal','suugaku','kokugo','rika','shakai','eigo','total5' HBase APIの場合 package jp.hishidama.hadoop.hbas
今日行なわれたインターン4日目の講義「JavaScript で学ぶ イベントドリブン」by id:cho45の資料と録画を公開します。今回は、JavaScriptの概要からDOM、イベントドリブンまでを2時間で網羅した密度の高い講義となっています。今回の放送は安定していましたので、音質・画質とも良好にできました。 明日もAM10:30より、JavaScript界の貴公子id:nanto_viによる「ユーザーインターフェース, HTML5」を放送しますので、是非ご覧ください。 自己紹介 id:cho45 - vimmer うごメモチームのエンジニア (7月後半〜) 少し前までブックマークチーム Perl, JS (Scala, Ruby, etc...) サーバサイド・クライアントサイドUI・スマートフォンなど Java や AS も場合によっては書いています 特技 1行コードを書くごとにハ
2005年3月 691万円（31.9歳） 2010年3月 591万円（33.1歳） 有価証券報告書によると、ヤフー社員の平均年収は、過去5年間で、ちょうど100万円も下げられた。平均年齢は逆に上がっているので、待遇の悪化は一目瞭然だ。一方、このほど公表された井上雅博社長の役員報酬は、1億5900万円。役員平均は7975万円で、役員が従業員の何倍の報酬を得ているかを示す役員／従業員倍率では１３．５倍となり、「ＴＯＰＩＸ（東証株価指数）１００」に採用されている代表的な上場企業のうち、第４位にランキングされている。 Digest 役員／従業員倍率で１３．５倍、第４位 労組を作ろうとした社員が退職に追い込まれた 「新卒も中途もみんな上がらない」が共通認識 ネットの世界のＮＨＫに 「この会社入ったの失敗だったんじゃないか」 コンプライアンス徹底による監視社会 モバイルはモバゲーに負け、コマースは楽天
堀江 よろしくお願いします。 田原 どうぞよろしくお願いします。 堀江 (上着を脱いだ田原氏を見て)あ、Tシャツになっちゃった。 田原 部屋が熱いからね。 堀江 ハハハハ。 田原 堀江さんね、僕もツイッターとかね、あるいはブログとかやっているんです。でもね、ネットに書いてもそれ自体は商売にならないですね。これはほかの人に聞いてもそうですね。でもボランティアじゃプロは育ちません。そんな中、堀江さんは商売になっている。なんでなるんですか。 堀江 それは工夫しているからじゃないですかね。 田原 あんまり聞くと、商売の手の内を明かすのはよくないかもしれないけれど。 堀江 いや全然。どんどん、僕は市場がむしろ広がっていったほうが興味を持つ人たちが増えて･･･。 田原 メールマガジンは有料の会員が何人ぐらい? 堀江 まあ今数千人です。まだ一万人いかないぐらいですけど、まあでも数千人は集まりましたね。
Facebookの勢いがとまらない。 全世界会員3.5億人の50%は毎日訪問し，日平均で1億枚もの写真が投稿されている。 昨年のクリスマスには，米国内のアクセス数でFacebookがGoogleを押さえてトップになったことが話題になったが，実はページビューでは遥か前からFacebookがGoogleを圧倒している。 そしてそのパワーはついにマネタイズにもあらわれてきた。 複数のベンチャー投資筋からの情報 （2009/7, 記事：Solicon Alley Insider) として明らかにされたFacebookの2009年収益予想は次のようものだ。（1ドル90円換算） セルフ広告売上 200百万ドル （180億円） ブランド広告売上 125百万ドル （112.5億円） マイクロソフト提携広告売上 150百万ドル （135億円） バーチャルグッズ売上 75百万ドル （67.5億円） ■
hadoopのイメージを掴むためにサンプルを動かしてみます。 $ sudo su hadoop $ cd ~/tmp inputsディレクトリにtest1.txtを作成。 $ mkdir inputs $ echo hoge hoge fuga fuga あいうえお > inputs/test1.txt hdfsにput。 $ hadoop dfs -put inputs/ inputs/ $ hadoop dfs -ls inputs Found 1 items -rw-r--r-- 1 hadoop supergroup 36 2010-03-01 05:57 /user/hadoop/inputs/test1.txt 次に実際に動かしてみます。 hadoopのディレクトリ直下にサンプルプログラムがあります。これで文字数をカウントします。 $ hadoop jar hadoop-0.2
2010年07月12日20:12 CentOS に Hadoop, Pig, Hive, HBase をインストール CentOS5.4 に Hadoop, Pig, Hive, HBase をインストールする備忘録です。まずは JDK をインストールします。JDK6 以上が必要です。 # http://java.sun.com/javase/ja/6/download.html から JDK6 をダウンロード sudo sh jdk-6u21-linux-i586-rpm.bin java -version # 1.6.0_21 次に、yum で簡単にインストールするために、リポジトリを追加します。これでインストールが格段に楽になりますね。 wget http://archive.cloudera.com/redhat/cdh/cloudera-cdh3.repo sudo mv clo
MySQLの高度な管理とチューニングテクニック：快速MySQLでデータベースアプリ！（11）（1/2 ページ） 本連載もついに最終回。今回はMySQLサーバの運用・管理に必要な状態監視、チューニング、バックアップ、セキュリティについて解説する。以下のテクニックを駆使すれば、MySQLをさらに安定稼働させられるだろう。 前回までは、さまざまな言語やアプリケーション、とりわけWebアプリケーションからMySQLを利用することを主眼に説明してきました。皆さんの中には、それらを応用した実用的なプログラムを考えている方もいるかと思います。そこで、今回は運用上必要となるテクニックをいくつかのトピックに分けてご紹介します。「まだまだ実用は先だ」と思われている方も、いつかくる日のためにこんなこともできるということだけでも知っておいてください。 ロギング機能と動作ステータスの取得 障害発生を防ぐための一番の
1 ：以下、名無しにかわりましてVIPがお送りします ：2010/07/28(水) 23:18:10.96 ID:uMXccWTH0 オーキド「……見ているんじゃろ、ワシの事を」 ・・・・・・・・・・・。 オーキド「……やはり、許してはくれないんじゃな」 ・・・・・・・・・・・。 オーキド「……当然か、あれだけの事をしたんじゃから」 ・・・・・・・・・・・。 オーキド「……コラッタ、ピッピ、ポッポ。いるんじゃろ？」 ・・・・・・・・・・・。 オーキド「……お前達は、ゴーストタイプではないんじゃぞ……！」
「仕事が欲しいなら、せめてGmailにしましょう」にGmailユーザーはリテラシーが高いと書きましたが、そうじゃない人ってやっぱり中にはいるのですね。出会ってしまいました。 私はとある勉強会を主宰しているのですが、こんな署名のメールで勉強会への参加と、取材対象を紹介してほしい旨の連絡をもらいました。 ********************************************* ■■■■■ ＊＊＊＊ ■■■■ ○○新聞○○局 ■■■ 携帯電話 ***-****-**** ■■卓上電話 ***-***-****（不在がちです） ■E-mail *******@gmail.com ********************************************* 「取材」ということは会社の仕事ですよね。なぜ、Gmailで？と思いつつも、勉強会にはプライベートで参
研究者や研究に関わる大学生や大学院生は、一年を通じて研究室ゼミや学会などで研究成果の発表を行なわなければなりません。また、近年、科学者でない人たちに対する一般向けのプレゼンや講演（アウトリーチ活動）の機会も増えてきています。他にも、研究論文や報告書を書いたり、研究費調達のために予算申請書やプロジェクトの提案書を作成したりすることも、研究者にとって欠かせない仕事です。これらはいずれも情報を他者（研究仲間や審査員、一般市民）へ伝えようとする行為であり、正確かつ効果的な情報の発信が望まれます。しかし、自己流で資料を作成して、闇雲に情報を発信していても、スムーズに情報は伝わりません。ときには誤った情報が伝わってしまい、研究の価値を正当に評価してもらえないことさえ起こりえるのです。 情報を正確にかつスムーズに他者に伝えるためには、情報をデザインすること、つまり文章を読みやすく整えたり、図表を見やすく
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く