Tech & Science 2017.05.26 13:19 データレイクとは? ~貯めこんだ様々なデータファイルを参照する技術~|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) クラウドサービスによってデータレイクは手軽なものになった ビッグデータ分析技術が進んでいく中で「データレイク」という単語...
Tech & Science 2017.07.03 10:41 ELT処理とは? ~データベースの特性を活かしてデータ変換・加工する処理~ 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) ELT処理はデータクレンジング処理の手間を軽減してくれる新たな手法 最近、ETL処理に変わるELT処理というものが広まっ...
Tech & Science 2015.07.12 09:01 名寄せとは?(3)~代表的なパターン~|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) 名寄せにおける代表的なパターンです 今回は「名寄せ(なよせ)」という言葉に関する説明の第三回です。前回は名寄せ処理を行う...
Tech & Science 2015.08.09 10:10 AWSサービスのデータの転送速度や耐久性を向上するオプション|プロビジョンドIOPS、マルチAZ・・・クラウドサービスとはナニモノか? 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) 「プロビジョンドIOPS」と「マルチAZ」。これらはストレージ(データ格納場所)に関する付加機能です。機能をONにするこ...
Tech & Science 2015.08.21 08:43 Hadoop(ハドゥープ)とは?:ビッグデータ処理を支える「基盤」|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) 問題!1日分のデータを処理するためのプログラムが1日で終わらない 本日は「Hadoop(ハドゥープ)」という言葉を解説し...
Tech & Science 2015.09.21 10:05 Hiveとは?:Hadoop上で稼動するデータベースマネージメントシステム(DBMS)|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) 使い慣れたSQLによるデータ操作環境をHadoopプラットフォーム上で手に入れる 本日は「Hive(ハイブ)・HiveQ...
Tech & Science 2015.09.22 09:45 Pigとは?:Hadoop上で稼動するスクリプト環境|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) Hadoopプラットフォーム上でのデータ操作をJavaより簡単にプログラムしたい 本日は「Pig」という言葉を解説します...
Tech & Science 2015.09.18 09:07 文字コードとは?~UTF-8はパソコンの世界共通語~|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) Unicode、ASCIIコード、Shift-JIS、UTF-8、UTF-16の関係を理解する データ分析を行っていると...
Tech & Science 2015.10.19 08:43 MapReduceとHadoopの違い(1)|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) MapReduceは「処理方法の名前」・Hadoopは「ソフトウェアの名前」 本日は「MapReduce・Hadoop」...
Tech & Science 2016.04.14 08:24 バージョン管理システムとは? ~開発資産を履歴管理するファイルシステム~|データ分析用語を解説 本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました(2019/7/1) バージョン管理システムを使用することで「もしも」の場合に対応する データ分析では、データベースを操作するためSQL命令や...