#garagekidztweetz

id:garage-kid@76whizkidz のライフログ・ブログ!

2016-02-08から1日間の記事一覧

#hcj2016 個人的超まとめ(雑感とリンク集)

先日、参加してきた Hadoop/Spark Conference Japan 2016 の個人的超まとめ(というかリンク集)をまとめておきたい。 (ポストしたのは 2016-02-13 だが、ポストの日時としてはカンファレンスのあった当日 2016-02-08 としておこうと思う)。 自分でとって…

#hcj2016 Hive on Sparkを活用した高速データ分析のメモ

そして、 Hadoop/Spark Conference Japan 2016 午後5コマ目、この日の通常セッション最後の一コマのメモを公開。 (本日中の公開は難しいと思いますが、次に最後の個人的超まとめという名前のリンク集をポストする予定)。 Hive on Sparkを活用した高速デー…

#hcj2016 Hiveを高速化するLLAPのメモ

さらにさらに引き続いて Hadoop/Spark Conference Japan 2016 午後の4コマ目のメモの公開。 Hiveを高速化するLLAP / 小澤 祐也氏(ヤフー) Hive の復習 実行エンジン MR Tez YARN 上でしか動かないが Hive や Pig の実行エンジンとして欠かせない Spark Hiv…

#hcj2016 今あらためて考えるHiveのメモ

続いて Hadoop/Spark Conference Japan 2016 の午後3コマ目のメモを公開。 今あらためて考えるHive ~ユースケースの広がりにより顕在化した課題と対応~ / 吉田 耕陽氏(NTTデータ) Hive の泥臭い話 HiveQL の構文、 ORCFile, パラメタチューニング はじめ…

#hcj2016 KuduによるHadoopのトランザクションアクセスと分析パフォーマンスのトレードオフ解消のメモ

前のコマで参加したセッションが押した関係で、途中からの参加になりましたが、 Hadoop/Spark Conference Japan 2016 の午後二コマ目は Kudu のセッションに参加してきました。 では、今回も以降にメモ。 KuduによるHadoopのトランザクションアクセスと分析…

#hcj2016 次世代アーキテクチャから見たHadoop/Sparkの位置づけのメモ

Hadoop/Spark Conference Japan 2016 、午後最初のセッションはノーチラス・テクノロジーズの神林さんのセッションに参加。 最初から、メモを取るのは相当しんどいだろうと覚悟のセッションでしたが、濃厚濃密な内容で最後まで楽しむことができました。 自分…

#hcj2016 Hadoop/Spark Conference Japan 2016 午前キーノートのメモ

今日は大井町きゅりあんで開催された Hadoop/Spark Conference Japan 2016 に参加してきました。 参加してきたセッションだけでも午前に7つ、午後に 5 つと多かったので、午前で1エントリ、午後は個別セッションで5エントリに分けてポストしていきます。 で…