Tech & Science 2013.12.30 13:05 もう一歩踏み込みたい方は「モデリング」を学ぼう|ギックスのビッグデータ分析体系 ⑥ 分析の花形のモデリング 前回の第5回までで、「ビジネスの理解」「データの準備・理解」「2次属性の作成」「セグメントの特徴把握」というビックデータ分析を試みる際に、まず実施すべき一連の流れをご紹介しました。ここまでのプロセスは数学的にみると...
Tech & Science 2014.05.08 12:08 エンジニアの感じる「Microsoft Power BI」のインパクト|第2回:お手軽導入(PowerPivot)のインパクト 表計算ソフトからの”脱皮” BIシーンに大きなインパクトをもたらす可能性を秘めた「Power BI」。ギックスでも、これまで何度も取り上げてきました。(関連記事リスト:Microsoft Power BIはデータアーティストの武器となる ...
Tech & Science 2014.07.30 09:08 ”R”で実践する統計分析|回帰分析編:①単回帰分析【外部寄稿】 Rによる回帰分析の実施手順を紹介 本日からRの使い方の実践として、「回帰分析」について紹介していきます。なお、回帰分析の理論については、こちらの特集内の【寄稿】回帰分析とその応用を参照ください。 『”R”で実践する統計分析|回帰分析...
Tech & Science 2015.05.22 09:02 「フルマネージド」クラウドサービス~第四回・実例2「Microsoft Power BI」~ フルマネージドのアプリケーションサービス。今回は「Microsoft Power BI」を紹介します 本連載は全五回で「フルマネージド(Fully Managed)のクラウドサービス」について書かせていただいています。前々回(第二回)でフ...
Tech & Science 2015.06.15 14:53 Amazon MLで何ができるのか?|Amazon Machine Learningを使ってみた(第1回) 注目を集めるAmazon Machine Learning 2015年6月2日~3日に開催されたAWS Summit Tokyo 2015のAmazon Machine Learning(Amazon ML)のセッションに参加しました。セ...
Tech & Science 2015.09.19 10:18 Talendがバッチ処理の開発方法を変える ~スマートな開発を行おう~|Talend Open Studio によるビッグデータ分析(第8回) Talendを使えば、バッチ開発者は"プログラム"ではなく"処理手順"に注力すればよい 今まで7回に渡って、Talendの使い方について解説を行ってきました。その中でTalendは、ETLツールとして、非常に簡単に、かつ、柔軟にETLジョ...
Tech & Science 2015.11.17 08:36 PolyBaseを使ったAzure SQL DWへの高速インポート ~Azure Storageにデータをアップロードする~:Microsoft Azure SQL Data Warehouse を使ってみた(4) PolyBaseの説明に入る前にインポートファイルを保存するAzure Storageを理解しよう 前回、Microsoft Azure SQL Data Warehouse(以下、SQL DW)に対して、BCPコマンドによるインポート操...
Tech & Science 2016.11.16 08:12 データベースを”倉庫”ではなく”道具”として使う発想 ~データベース上で分析データを下ごしらえする~ データベースの特性を活かすことで "誰でも"、"確実に" データ分析が行える データ分析 = データベース。こんな公式を書いて何の違和感もないほど、データベースは、データ分析のために「なくてはならない存在」です。まさに、両者は切っても切れ...
Tech & Science 2017.05.18 17:31 クラウドサーバーが、常にオンプレミスより優れているとは限らない ~スモールローカルサーバーという新たな選択肢~ クラウドサービスの空白地帯を考えたオンプレミスの導入 Amazon社がクラウドサービスの Amazon Web Services (通称、AWS)を公開して10年。新規システムならクラウドサービス内で作るのが当たり前となり、既存のオンプレ...
Tech & Science 2017.10.27 07:17 AWS Glue を使ってみた ~ETLツールではなくETL支援サービスとしての役割~ AWS Glue がフルマージドしているのはETLのプロセスではなく動作環境 データ分析ではデータベースを使うことが多く、そのデータベースにデータを入れるためにはETL処理は必要不可欠な処理です。ETL処理をフルスクラッチでプログラミング...