Workflow Engines Night
digdag開発者の古橋さんのお話
やっぱりdigdagを選ぶ大きなメリットの1つはHA構成できるということがよぉーくわかったのでやっぱ複数台構築にチャレンジしてみようと思う
その前にまずはH2から卒業してPostgreSQLに切り替えないとなあ
各ノードのタスクログはS3に集約出力するってのはみんなやってるようなので安心して試そう
セッション管理のTIPSで同じタスクを別パラメータで動かしても同一セッションになってしまうのどうにかならないかっていう相談でcallオペレータ使えば別セッションになるよって回答は目から鱗だった
#digdag #treasuredata #workflow #oss #dataengineering
[この場所を Googleマップ for iPhone で開く]
[filter: Normal]
【レポート】Workflow Engines Night #workflowenginesnight ｜ Developers.IO今日はDMM.comラボさんが開催された、ワークフローエンジンをテーマにした勉強会「Workflow Engines Night」に参加する機会がありましたので、Digdagの開発者古橋さんのセッションを中心に、参加レポートをお届けします。