#garagekidztweetz

id:garage-kid@76whizkidz のライフログ・ブログ!

#hcj2014 Hadoop Conference Japan 2014 で主に SQL on Hadoop の話を中心に聞いてきました(超個人的総括エントリ)

スポンサーリンク

f:id:garage-kid:20140707214527p:plain

http://pixabay.com/en/elephants-family-baby-grass-341981/

昨日(になってしまった、、、)は日本 Hadoop ユーザ会とリクルートテクノロジーズさんが主催するHadoop Confence Japan 2014 にいってきました。

最初に、この場を借りて、日本 Hadoop ユーザ会とリクルートテクノロジーズさんに感謝の意を書かせていただきます。
素晴らしい会場運営をありがとうございました!
(会場が前回のビックサイトから前々回のベルサール汐留に戻ったとはいえ、会場運営にかかる費用がかなり大きかったであろうことは火を見るより明らかで、感謝以外の言葉がありません。)

ちなみに特に意図したわけじゃあなかったんですが、今回のカンファレンスでわたしは SQL on Hadoop に関連するものばかりきいてきました。
以降にわたしがとってきた各セッションのメモへのリンクがありますので、よかったら参照してみてください。
(A-C の3つあった会場の A 会場に入り浸ると自然とそうなるとも言います、、、が、いい選択肢だったと思います、ホントに。)

では以降より、超個人的な #hcj2014 をまとめておきます。

超個人的 #hcj2014 雑感

  • 参加者に関して
    • 今回の Hadoop Conference Japan の参加者の 65% が同 Conference に初参加ということでした、、、前回 1,178名で、今回が朝時点で 1,296 名ってことなんで、ずいぶんリピート率悪いのね、と。*1
    • それでも新たに聞いてみようという人たちが 500 人超いるっていうこと自体はすごいな、と。
    • リピートしなかった人の理由とかちょと気になったりはします(拾いようがない話ですが)。
    • ちなみにファシリーテーションは前回の東京ビックサイトよりも今回のベルサール汐留のほうがよかったように思いました。
      • ビッグサイトはむしろ大きすぎて、複数同時セッションとかやるのには不向きだったのですかね。
  • Distributer に関して
    • 以前、御三家といわれていた Cloudera, Horton Works, MapR だけど、 Horton Works だけはこういう場に最近出てきてないな、と。
    • 日本に営業をかけてないことはないみたいなので、なんでだろ、と。日本のコミュニティーとつながりが薄い?
  • SQL on Hadoop に関して
    • 個人的に SQL 大好きなのもあるけど SQL on Hadoop の流れは当然というか、そうきてくれないと裾野がひろがらない*2よね、という。
    • Transaction も Hadoop に、という Doug Cutting 氏の Keynote での話も含めると、そんなに遠くない未来で現状の NoSQL と SQL の全部いいとこどりしたような、それこそ銀の弾丸みたいなプロダクトもでてくるのかもしれない。 同 Doug 氏が言っていたように OSS が勝ち残るというなら、、、、期待が膨らむ!*3
    • そんな SQL on Hadoop の話ばかりを個人的には聞いてきた #hcj2014 になりましたよ、と。

今回わたしがとってきた同カンファレンスのメモへのリンク

全部のセッションをベルサール汐留の B1 A会場に居座って SQL on Hadoop の話ばかりきいてきた各メモへのリンクがこちら。

各発表資料(スライド)へのリンク

同カンファレンスの資料に関してはHadoop Conference Japan 2014 Tickets - Eventbriteにコミュニティな方々が最終的には資料等まとめてくださるというアナウンスがありました。
が、わたし個人が本カンファレンスのスライドのリンクを集めたいので、各資料へのリンクをこのエントリ中にも書いておく予定です。
※資料がみつかったらリンクをはっていく、ということで。

A会場 B会場 C会場
マルチテナント化に向けたHadoopの最新セキュリティ事情
リクルート式Hadoopの使い方 3rd Edition Hadoop用の標準GUI、Hueの最新情報 Google BigQueryの大規模JOIN・UDF・Hadoop対応で何が変わるか
SQLによるバッチ処理とストリーム処理 Hivemall: Apache Hiveを用いたスケーラブルな機械学習基盤 Twitterデータ提供サービスにおけるHadoopの活用事例
A Deeper Understanding of Spark Internals Taming YARN: how can we tune it? Mahoutによるアルツハイマー診断支援へ向けた取り組み
Apache Drill: Building Highly Flexible, High Performance Query Engines Spark1.0での動作検証 - Hadoopユーザ・デベロッパから見たSparkへの期待
ゲストスピーカー資料
LT
Evolution of Impala - Hadoop 上の高速SQLエンジン、最新情報 Treasure Data on The YARN HBaseを用いたグラフDB「Hornet」の設計と運用
並列SQLエンジンPresto - 大規模データセットを高速にグラフ化する方法 実践機械学習 —MahoutとSolrを活用したレコメンデーションにおけるイノベーション HadoopとRDBMSをシームレスに連携させるSmart SQL Processing
LT のスライドへのリンク

#hcj2014 の記事、ほかの方のブログエントリへのリンク

他の参加者の方がどんなことを考えていたのか、知見を得たのかはとてもいつも勉強になります。


とまあ、今回は、こんなところです、、、 では、またカンファレンスや勉強会があったら、こういったエントリを書こうとおもいますので、、、

それでは、ごきげんよう、さようなら(花とアン風)

おまけ的な Instagram.

#hcj2014 にいた #ゆるキャラ 。 #hadoop ?あんた #はどぅーぷ っていうのね?

#hcj2014 で #ステッカー いただきましてん。

#hcj2014 例によって #扇子 もろてん。あれ?かなりノーマル?!

あわせて読まれたい

  • 2009 年からはじまったという Hadoop Conference Japan 、自分は第二回目の 2011 年から参加してたみたいですね。
    • 振り返りも兼ねてリンクをはってみました。
Hadoop Conference Japan 2013 Winter のメモ

  • #hcj13w Hadoop Conference Japan 2013 Winter 個人的まとめはてなブックマーク - #hcj13w Hadoop Conference Japan 2013 Winter 個人的まとめFacebookいいね! - #hcj13w Hadoop Conference Japan 2013 Winter 個人的まとめ
  • #hcj13w A会場 午後 (1) "Hadoop's Power to Transform Business Ted Dunning(MapR Technologies)" のメモはてなブックマーク - #hcj13w A会場 午後 (1) "HadoopFacebookいいね! - #hcj13w A会場 午後 (1) "Hadoop
  • #hcj13w A会場 午後 (2) "Introduction to Impala 〜Hadoop用のSQLエンジン〜" のメモはてなブックマーク - #hcj13w A会場 午後 (2) "Introduction to Impala 〜Hadoop用のSQLエンジン〜" のメモFacebookいいね! - #hcj13w A会場 午後 (2) "Introduction to Impala 〜Hadoop用のSQLエンジン〜" のメモ
  • #hcj13w A会場 午後 (3) "Hadoop上の多種多様な処理でPigの活きる道" のメモはてなブックマーク - #hcj13w A会場 午後 (3) "Hadoop上の多種多様な処理でPigの活きる道" のメモFacebookいいね! - #hcj13w A会場 午後 (3) "Hadoop上の多種多様な処理でPigの活きる道" のメモ
  • #hcj13w A会場 午後 (4) "スケーラブルなシステムのためのHBaseスキーマ設計" のメモはてなブックマーク - #hcj13w A会場 午後 (4) "スケーラブルなシステムのためのHBaseスキーマ設計" のメモFacebookいいね! - #hcj13w A会場 午後 (4) "スケーラブルなシステムのためのHBaseスキーマ設計" のメモ
  • #hcj13w A会場 午後 (5) "いかにしてHadoopにデータを集めるか" のメモはてなブックマーク - #hcj13w A会場 午後 (5) "いかにしてHadoopにデータを集めるか" のメモFacebookいいね! - #hcj13w A会場 午後 (5) "いかにしてHadoopにデータを集めるか" のメモ
  • #hcj13w A会場 午後 (6) "トラブルシューティングのために欲しかった、Hadoopがまるっと分かる可視化ツール" のメモはてなブックマーク - #hcj13w A会場 午後 (6) "トラブルシューティングのために欲しかった、Hadoopがまるっと分かる可視化ツール" のメモFacebookいいね! - #hcj13w A会場 午後 (6) "トラブルシューティングのために欲しかった、Hadoopがまるっと分かる可視化ツール" のメモ
  • #hcj13w Hadoop Conference Japan 2013 Winter 午前中 Keynote のメモはてなブックマーク - #hcj13w Hadoop Conference Japan 2013 Winter 午前中 Keynote のメモFacebookいいね! - #hcj13w Hadoop Conference Japan 2013 Winter 午前中 Keynote のメモ
  • Hadoop Conference Japan 2011 Fall のメモ

  • Attending Hadoop Conference Japan 2011 Fall in Shinbashi, Bellesalle Shiodome! #hcj11fはてなブックマーク - Attending Hadoop Conference Japan 2011 Fall in Shinbashi, Bellesalle Shiodome! #hcj11fFacebookいいね! - Attending Hadoop Conference Japan 2011 Fall in Shinbashi, Bellesalle Shiodome! #hcj11f
  • Hadoop Conference Japan 2011 のメモ

  • Hadoop Conference Japan 2011 のメモ #hcj2011はてなブックマーク - Hadoop Conference Japan 2011 のメモ #hcj2011Facebookいいね! - Hadoop Conference Japan 2011 のメモ #hcj2011
  • *1:人数に関してはどちらも自分のメモより

    *2:英語がわからなくても SQL は分かりやすいと思ってる

    *3:他力本願ですいません