Tech & Science 2016.04.06 09:17 AWS DMS を使ってみた(2) ~データ同期を徹底検証。同期には”ログ”の設定が必須!~|AWSを使い倒せ AWS DMSはテーブルのデータ追加/削除/変更、そしてテーブル作成までデータ同期できる 以前は、AWS DMS(Database Migration Service)のタスクを作成して、移行元データベース(DB)のMy SQLから移行先...
Tech & Science 2015.01.26 09:06 第2回 分析ツール群(AktblitzII / AWS Redshift / Tableau / R / Power BI)|POSデータで事業構造分析 with Power BI Power BIで実践するPOSデータの事業構造分析を公開 この連載では、2013年11月に弊社CEOの網野が出版した「会社を強くするビッグデータ分析」「Part2 分析の実践」の部分を「Power BIでPOSデータを使って事業構造分析...
Tech & Science 2015.04.03 09:08 カラムナー、キューブ、インメモリ…ビックデータ分析におけるデータベースのまとめ|いまさら訊けないビッグデータ分析 データベースの「タイプ」を知ってますか? こんにちは、ギックス技術チームの岩谷です。 先日とある方より「ビッグデータ分析処理で、Tableauはキューブを作成しないからシステムの運用がしやすいって聞いたんだけど、どういう事なのかな?...
Tech & Science 2015.05.22 09:02 「フルマネージド」クラウドサービス~第四回・実例2「Microsoft Power BI」~ フルマネージドのアプリケーションサービス。今回は「Microsoft Power BI」を紹介します 本連載は全五回で「フルマネージド(Fully Managed)のクラウドサービス」について書かせていただいています。前々回(第二回)でフ...
Tech & Science 2015.06.18 14:50 Amazon Redshiftを利用料金そのままでds1.xlarge(旧:dw1.xlarge)からds2.xlargeにアップグレードしてみた|AWSを使い倒せ ds2.xlargeは、従来のCPU性能、メモリ容量が2倍、I/Oが1.5倍!なのにお値段そのまま!! 先日(2015/6/9)、AmazonよりRedshiftの新しいインスタンスタイプ「DS2」が発表されました。DS2インスタンスは、...
Tech & Science 2015.10.07 14:58 AWSの新サービス「AWS WAF」がリリース~re:Invent 2015 速報~ Webアプリケーションのセキュリティがより強固に AWS WAFは既存サービスであるCloudFrontを「中継サーバ」として、その中で稼働するWAFサービス こんにちは。技術チームの岩谷です。2015年10月6日~9日アメリカのラスベガスでクラウド大手Amazon Web Servic...
Tech & Science 2017.02.08 09:02 Amazon Athena の分析サービスとしての位置付けについて考えてみる Amazon Athena は Google BigQuery と MS PolyBase を足して2で割ったようなサービス 昨年末、Amazon Web Services(以下、AWS)が主催したAWS re:Invent 2016から...
Tech & Science 2017.04.24 15:26 Amazon Redshift Spectrum を使ってみた ~Redshift Spectrum は Redshift のデータレイクの入り口になる~ Amazon Redshift Spectrum によってデータ分析の業務フローが変わる 先日、サンフランシスコで開催された AWS Summit 2017(2017.4.18 - 19)で Amazon Redshift(以下、Reds...
Tech & Science 2017.10.27 07:17 AWS Glue を使ってみた ~ETLツールではなくETL支援サービスとしての役割~ AWS Glue がフルマージドしているのはETLのプロセスではなく動作環境 データ分析ではデータベースを使うことが多く、そのデータベースにデータを入れるためにはETL処理は必要不可欠な処理です。ETL処理をフルスクラッチでプログラミング...
Tech & Science 2021.12.08 09:10 Google Cloud と AWS の印象の違いについて雑感 この記事は GiXo アドベントカレンダー の 8 日目の記事です。昨日は、 データ受領で気を付けるポイント でした。 Data-Informed 事業本部 Technology Div. の川田です。私は今年 GiXo に中途入社...