Tech & Science 2015.04.17 09:15 文字コードや文字化けを理解しよう(その2)|いまさら訊けないビッグデータ分析 第2回は「文字化けあるある」です。 前回は文字コード関する基本的な知識をまとめてみました。第2回の今回は「じゃあ文字化けはどういった場合に起こるの?」という場面についてパターン分けして説明していきたいと思います。皆さんも心当たりがあったら...
Tech & Science 2015.04.03 09:08 カラムナー、キューブ、インメモリ…ビックデータ分析におけるデータベースのまとめ|いまさら訊けないビッグデータ分析 データベースの「タイプ」を知ってますか? こんにちは、ギックス技術チームの岩谷です。 先日とある方より「ビッグデータ分析処理で、Tableauはキューブを作成しないからシステムの運用がしやすいって聞いたんだけど、どういう事なのかな?...
Tech & Science 2015.03.31 08:52 「データマート」と「キューブ」の違いとは?|いまさら訊けないビッグデータ分析 データマートとキューブの違いって? こんにちは、ギックス技術チームの岩谷です。 先日とある方より「データマートとキューブの違いって?」という質問をいただきました。この手の質問を時折耳にしますので、この場を借りて、ちょっと解説させてく...
Tech & Science 2015.06.13 09:50 データレイクはビッグデータのストレージ:データウェアハウス(DWH)やデータマートへの取込口です データレイク(Data Lake)はファイル置き場 こんにちは、技術チームの岩谷です。先日とある方より「このごろデータレイクって言葉をよく聞くけど、"Data Lake→データの湖"ってどういう事?」という質問をいただきました。この場を借...
Tech & Science 2015.06.17 14:58 「データレイク」のコンセプトを理解しよう|Treasure Data(トレジャーデータ)は、まさにデータレイクだ データレイクは登場したばかり。既存のサービスと比べて理解を深めよう! こんにちは、技術チームの岩谷です。前回、データレイクについての記事を執筆させていただきましたところ、何人かの方々から「それならデータレイクはトレジャーデータのソリューシ...
Tech & Science 2015.01.09 09:06 第1回 進化するフォーマット|CSV、XML、JSON…データフォーマットの変遷について考える CSV、XML、JSON…、データフォーマットも進化している 我々Gixoではいろいろなデータの分析や加工処理を行っています。私も日々データと格闘しているわけですが、私が学生のころと比べるとITをとりまくいろいろな事が進化していると感じま...
Tech & Science 2015.01.20 09:10 第2回・テキストデータ処理における取り決め|CSV、XML、JSON…データフォーマットの変遷について考える データ処理には共通的な取り決めがある 前回はデータフォーマットの変遷を振り返っていく上で、取り上げるデータの概要を説明しました。今回はそれらの変遷や特徴を考える上で前提として知っておいたほうがよい「データを処理する際の共通的な取り決め」に...
Tech & Science 2015.01.28 08:59 第3回・フラットファイル(固定長フォーマット)|CSV、XML、JSON…データフォーマットの変遷について考える まずはじめはフラットフォーマットから 本連載の第1回はデータフォーマットの変遷を考える上で取り上げるデータの概要を説明しました。また第2回(前回)は、テキストデータ処理を考える上で必要となる「データを処理する際の共通的な取り決め」について...
Tech & Science 2015.02.20 09:05 第6回・JSONファイル|CSV、XML、JSON…データフォーマットの変遷について考える フォーマット解説の第四弾(最後)はJSONフォーマットです 前回(第5回)は、各フォーマットを説明していく第三弾としてXMLフォーマットについて説明しました。今回は第四弾としてJSONフォーマットについて説明します。JSONは第4回(フォ...
Tech & Science 2015.05.29 09:06 「クラウドを知らない」ことの危うさ|問題解決手段の”選択の幅”を狭めるな ITエンジニアは今すぐクラウドの利用IDをとるべし! IT部門責任者はIDをとらせるべし! こんにちは、技術チームの岩谷です。いきなり強い調子で書き出してしまいましたが、今回は申し上げたいことを先に書きます。下の3点です。 IT...