リバースETLはデータパイプラインの何を変えるのか - satoshihirose.log

リバースETLはデータパイプラインの何を変えるのか - satoshihirose.log

はじめに リバース ETL という概念が提起されて、そのための SaaS も生まれており、面白いと思うので所感をまとめる。 Reverse ETL ? 自分が最初に Reverse ETL という言葉に触れたのは、Redpoint Ventures の Astasia Myers が 2021-02-23 に書いたこの記事だった。 Reverse ETL — A Primer. Data infrastructure has gone through an… | by Astasia Myers | Memory Leak | Medium 彼女はどんなものをリバース ETL と呼んでいるかと…

24 mentions: @jumpei_ikegami@shimpeiws@kazuya_araki_jp@roshian@sugimomoto
Date: 2021/06/16 07:26

Referring Tweets

@jumpei_ikegami データエンジニアの仕事が減りそう。 まさに、SaaSがエンジニアリングの民主化を加速させる事例だ。 "つまり、データエンジニアは、データウェアハウス内にテーブルを用意するだけで済むようになる。あとはデータ利用者が良しなに活用してくれる。" t.co/ZsXpBjzgwz
@shimpeiws 集約したデータをさらにサードパーティのツールに入れ込むことをいうのか たしかに特性の異なるサービスを複数使うことになると必要だよな リバースETLはデータパイプラインの何を変えるのか - satoshihirose.log t.co/ZUD9hzQKqU
@kazuya_araki_jp ETL(ないし、ELT)も多様化の時期でして、サイクルが生まれているということは知らなかった。学び👀 t.co/y1ep1mtXlN
@roshian DWH側のデータを正として一方的に送るのか、SaaS側のデータを見ながら差分同期するかなどノウハウがありそう。 / “リバースETLはデータパイプラインの何を変えるのか - satoshihirose.log” t.co/XXvHno8ZKR
@sugimomoto これ結構大事になるのは、どうやって送り先のSaaSのデータ、例えば顧客データとかに紐づけるか?というところだと思う。Emailとかあるだろうけど、別途一意のキーとか持っていたりすると結構ハンドリングが大変なはず / “リバースETLはデータパイプラインの何を変えるのか …” t.co/lMGBx57g4L

Bookmark Comments

Related Entries

Read more Kaggle Days Tokyo Report #2 | Wantedly Engineer Blog
5 users, 3 mentions 2021/01/26 03:51
Read more 事業立ち上げにデータサイエンティストは必要なのか? / How Data Scientists Can Help Startups - Speaker Deck
0 users, 6 mentions 2021/05/30 03:20
Read more ヤフーのデータサイエンティストが語る、データ分析をサービス改善と会社の成長につなげる醍醐味とは - linotice
3 users, 9 mentions 2021/06/23 15:18
Read more なぜ多くのデータサイエンティストが優良企業の良い仕事を辞めるのか | AI専門ニュースメディア AINOW
42 users, 48 mentions 2021/06/23 03:00
Read more 業務でどれだけSQL力がつくのか ~SQLアンチパターンを用いて確認~ 後編 | GMOアドパートナーズグループ TECH BLOG byGMO業務でどれだけSQL力がつくのか ~SQLアンチパターン...
85 users, 15 mentions 2021/06/24 04:48

ML-Newsについて

ML-Newsは機械学習に関するニュースサイトです。機械学習に関する論文ブログライブラリコンペティション発表資料勉強会などの最新の情報にアクセスできます。

機械学習を応用した自然言語処理、画像認識、情報検索などの分野の情報や機械学習で必要になるデータ基盤やMLOpsの話題もカバーしています。
安定したサイト運営のためにGitHub sponsorを募集しています。

お知らせ