2021-01-01から1年間の記事一覧
Prefectとは AirflowやDigDagと同じワークフローエンジンです。 このブログでも紹介していますが、 Sensyさんの2020年のアドベントカレンダー ［増補改訂］ビッグデータを支える技術 JX通信社さんのブログ などがわかりやすいと思います。 英語でもよければ…
learning.oreilly.com 内容 Airflowの概要 ワークフローエンジンのご利益 提供する機能の概要（スケジュール、DAG） Airflowを選ぶ理由、選ばない理由 Airflowの入門 DAGの例 Task・Operator Airflow UI スケジュール テンプレート Task間の依存定義 トリガ…
この本は 原著は2018年、翻訳は2019年 著者のBurnsさんは、Google・MicrosoftでKubernetesの開発をしていた・している人 書名の通り、複数のノードで処理を行う場合の色々なパターンを解説している本 また、副題（コンテナを使ったスケーラブルなサービスの…
Podcast Software Engineering Daily エピソード (#1273)AWS with Pete Cheslock | # 1273~1277 | 公開 2021/06/7 トピック クラウド ホスト Corey Quinn（代理ホスト） | ゲスト Pete Cheslock(#1273, AWS回)、Allmaの人 コンテキスト 「a Tour of Cloud 」…
![はてなブックマーク - 「Software Engineering Daily:(1273)AWS with Pete Cheslock] 」聞いた](https://b.hatena.ne.jp/entry/image/https://not-rogue.hatenablog.com/entry/2021/06/17/231034)
Podcast Software Engineering Daily エピソード (#1277)Oracle Cloud with Salman Paracha # 1273~1277 公開 2021/06/11 トピック クラウド ホスト Corey Quinn（代理ホスト） ゲスト Salman Paracha（Oracle回）、OracleのGroup Vice Presidentの人 コンテ…
Podcast The Cloudcast エピソード Technology never has an off-season # 515 公開 2021/05/16 トピック キャリア ゲスト なし（ホストだけ？） ゲストの肩書 聞き取ったこと 概要 テクノロジー業界は「off-season」ないから大変だよね （技術の変化が止ま…
Podcast Data Engineering Podcast エピソード Making Spark Cloud Native At Data Mechanics - Episode 184 公開 2021/05/07 トピック Spark ゲスト Jean-Yves Stephan さん ゲストの肩書 DataMechanicsのCEO・創業者 聞き取ったこと 概要 Data Mechanicsは…
