2020.04.13 08:07
機械学習基盤における Cloud Dataflow の活用
Cloud Dataflow の使い所 Cloud Dataflow は GCP で提供されているサービスの一つで、フルマネージドな環境で ETL 処理を実行することができます。バッチ処理とストリーミング処理を統一的に扱うことのでき...
2020.12.07 08:19
機械学習基盤 “Refeed” のアーキテクチャ
この記事は GiXo アドベントカレンダー の 7日目の記事です。昨日は、Business Optimization Div. 紹介でした。 MLOps Div. の廣津です。本記事では、弊社の機械学習基盤である Refeed につ...
2020.12.02 08:36
MLOps Div. の紹介
この記事は GiXo アドベントカレンダー の 2日目の記事です。昨日は、GiXo Advent Calenar 2020 でした。 MLOps Div. の廣津です。本記事では、私が所属する MLOps Div. の紹介ということ...
2020.12.22 08:35
少人数の開発で Kubernetes を活用するための設計戦略
この記事は GiXo アドベントカレンダー の 22 日目の記事です。昨日は、 ギックスの考えるデータサイエンスとは でした。 MLOps Div. の廣津です。最初に断っておきますが、タイトルは半分釣りのポエム記事です。 本...
2017.07.14 12:00
Google Compute Engine クラウドサーバー最速説 ～NVMe接続のローカルSSDのベンチマーク結果～
Google Compute Engine にNVMe接続のローカルSSDをRAIDで接続すると爆速になる Google Compute Engine(以下、GCE)をご存知でしょうか？ GCEは、Amazon EC2 や Azure仮想...
2017.12.07 15:20
3大クラウドサービスの無料利用枠を比較 ～試用上の注意をよく読み、使用量・時間を守って正しくお使い下さい～
スマホの料金体系並みの分かりにくいクラウドサービスの無料利用枠 クラウドサービスはインターネットの繋がる環境から直ぐに開始できます。そして、クラウドサービスの試用するために無料利用枠が決まっているのですが、専門用語が多く、ちょっと初心者には...
2017.12.25 12:07
Apache Airflow でタスクスケジューリングしてみた ～Airflowによって開発負荷が変わる～
Airflowを導入することでエンジニアは処理本体の開発に集中できる 分析業務に限らず定常的な処理はバッチ処理として纏めることは多いと思います。そして、バッチ処理も実行するタイミングが決まったら、自動化システムとしてバッチ処理をスケジュー...
2018.02.24 13:36
Apache Airflow でタスクスケジューリングしてみた ～ログを退避させる～
外部データベースに切り替えて負荷分散とリスク回避を行う 前回までは実際に開発した経験からAirflowのジョブ作成について説明しました。暫くしてから運用関係のご報告を...っと考えていたのですが、本番稼働してまだ1ヵ月ちょっとですが早くも...
2020.12.14 08:04
トチカチを支える技術
この記事は GiXo アドベントカレンダー の 14 日目の記事です。昨日は、すごいぞ Dataform でした。 MLOps Div. の廣津です。本記事では、弊社が提供しているサービスであるトチカチについて、裏側でどのような技術...
2020.12.16 08:22
Firestore のデータを TypeScript と Security Rules で安全に扱う話
この記事は GiXo アドベントカレンダー の 16 日目の記事です。昨日は、TableauのLOD表現で注意すべきことでした。 MLOps Div. の堀越です。突然ですがみなさん Firestore は好きですか？私は好きです。...
RECOMMEND
SERVICE
