#39 GCPでのETLいろいろ - Dataflow編

Abstract

小杉が時事ネタ + GCP Dataflowなどについて話したよ。

Date
2021-02-11 10:20

Show Notes

Email from Jeff Bezos to employees

  • AWSのCEO Andy JassyがAmazonのCEOに
  • じゃあAWSのCEOは誰になるの?は未定。
    TechCrunchの記事「 What Andy Jassy’s promotion to Amazon CEO could mean for AWS」によると、噂は
    • Peter DeSantis
      • グローバルインフラストラクチャ担当Vice President
      • re:Intent 2020でInfrastructure Keynoteやってた
    • Matt Garman
      • セールス・マーケティングVice President

本ネタ

自ブログの投稿「 GCP上でのETLいろいろ」からGCP Dataflow, Data Fusion。

Dataform が Google Cloud の傘下に: BigQuery で SQL を使用してデータ変換をデプロイする

いわゆるELTをBigQueryなどDWHで実施できるようになるDataformがGoogle Cloudによって買収。
Dataform自体はRedshiftやSnowflakeでも使えるっぽい。

本ネタにちょっと関連するリリース(と言っても昨年の12月だけど)だったのでリンクのみ貼っておく。

mukiudo
mukiudo
Software Engineer