この記事は GiXo アドベントカレンダー の 15 日目の記事です。昨日は、トチカチを支える技術でした。 Design & Science Div.の松田です。本記事では、弊チームが利用しているBIツールの一つ「Table...
ビッグデータを活用しよう 「ビッグデータ・IoT総覧2015-2016」、「ビッグデータ・IoT・AI総覧2016-2017」、「AI・IoT・ビッグデータ総覧2017-2018」に続き、本年も「AI・IoT・ビッグデータ総覧2018-20...
RDB以外はNoSQL。だから種類も機能も多種多様 システム開発やデータ分析の仕事をしていると一度は目にする「NoSQL」と言うバズワード。直訳するとSQLを使わないデータベースのような感じもします。NoSQLのシステム事例や製品紹介では「...
HeteroServerはオンプレ分析データベースの導入のハードルを下げる新たな選択肢 ビッグデータの分析データベースと言えば、Amazon Redshift や Google BigQuery などのクラウドデータベースが一般的になりつつ...
PythonプログラミングだけでParquet形式にファイル変換 AWS（Amazon Web Services）にはクラウドストレージの Amazon S3 に溜まったデータファイルをSQL命令で参照できるデータレイクサービスとして、Am...
分析の試行錯誤フェーズではRedshift。分析の”型”が決まったらBigQuery。 ビッグデータ分析においてデータベースは必要不可欠であることは言うまでもありません。これらのビックデータ向けデータベースの代表格としてオンプレミスではO...
RDSの機能を使えばRedshiftのデータを使用したGIS環境も構築できる クラウド上のデータベース（クラウドデータベース）は、非常に高性能、かつ安定していながら、費用的や技術的にも容易に環境構築することが可能です。しかし、これらの利点...
「AI・IoT・ビッグデータ総覧」の執筆に弊社網野・宍戸・山田が参画しました。 一昨年の「ビッグデータ・IoT総覧2015-2016」、昨年の「ビッグデータ・IoT・AI総覧2016-2017」に続き、「AI・IoT・ビッグデータ総覧20...
データレイクサービスを賢く安く使うポイント 前回の連載ではクラウドサービス上のデータレイクサービスについてご説明しました。その中でデータレイクサービスはデータベースサービスのように起動時間による課金が発生しない分、データ参照時の参照先のデ...
ELT処理はクラウドデータベースだから可能になった荒業 皆さんは「ELT処理」をご存知でしょうか？ 決して「Every Little Thing」ではありません。 ELT処理は、ETL(Extract/Transform/Load)...
