DataWareHouse,DataMartを整備して分析がやりやすくなった話 - ANDPAD Tech Blog

DataWareHouse,DataMartを整備して分析がやりやすくなった話 - ANDPAD Tech Blog

こんにちは、データ基盤チームの大洞です。 2021年4月にANDPADにジョインしてから、データ基盤やデータ分析にかかわってきました。 今回は、データ分析を効率的にするために、DataWareHouse、DataMartを整備した話を紹介したいと思います。 データ基盤の全体像 まずは、簡単にデータ基盤の全体像を紹介します。 左から順に説明していきます。 ① SaaS Data 実際に稼働しているANDPADのDBやSalesforceなどの業務で利用しているサービスです。ここからデータを出力し、S3に保存します。 ②ETL Stack 分析はBigQueryで行っているので、ここからGCSに移…

9 mentions: @andpad_dev
Date: 2021/10/15 08:00

Referring Tweets

@andpad_dev テックブログ更新しました! ANDPADにおけるデータ分析の課題とその整備、全体像を紹介します! 課題へのアプローチ、効果など参考にしていただければと思います。 DataWareHouse,DataMartを整備して分析がやりやすくなった話 - ANDPAD Tech Blog t.co/UEuRrxPQpH

Related Entries

Read more データエンジニアリングにおけるSnowparkとJava UDFの使用事例 - Snowflake Blog
0 users, 1 mentions 2021/10/11 22:30
Read more 全社統合ログ基盤を構築して得た知見 - Sansan Builders Blog
8 users, 7 mentions 2021/10/21 02:00
Read more 新卒データアナリストがデータ分析基盤を構築した話|Daisuke Shiga|note
0 users, 11 mentions 2021/11/17 01:37
Read more ABEJA Data Scienceチームと取り組みのご紹介 - ABEJA Tech Blog
9 users, 10 mentions 2021/11/19 03:24
Read more 学振特別研究員が2021年に特別研究員奨励費で購入した物品のオススメを晒してみる - May the Neural Networks be with you
0 users, 2 mentions 2021/12/08 01:00

ML-Newsについて

ML-Newsは機械学習に関するニュースサイトです。機械学習に関する論文ブログライブラリコンペティション発表資料勉強会などの最新の情報にアクセスできます。

機械学習を応用した自然言語処理、画像認識、情報検索などの分野の情報や機械学習で必要になるデータ基盤やMLOpsの話題もカバーしています。
安定したサイト運営のためにGitHub sponsorを募集しています。

お知らせ