DMM.com Workflow Engines Night digdag開発者 古橋 タスク

Workflow Engines Night

digdag開発者の古橋さんのお話

やっぱりdigdagを選ぶ大きなメリットの1つはHA構成できるということがよぉーくわかったのでやっぱ複数台構築にチャレンジしてみようと思う

その前にまずはH2から卒業してPostgreSQLに切り替えないとなあ

各ノードのタスクログはS3に集約出力するってのはみんなやってるようなので安心して試そう

セッション管理のTIPSで同じタスクを別パラメータで動かしても同一セッションになってしまうのどうにかならないかっていう相談でcallオペレータ使えば別セッションになるよって回答は目から鱗だった

#digdag #treasuredata #workflow #oss #dataengineering

DMM.com Workflow Engines Night digdag開発者 古橋 タスク

[この場所を Googleマップ for iPhone で開く]

[この写真を Instagramアプリ で開く]

[この写真を Instagramサイト で開く]

[DMM.comを Instagramアプリ で開く]

[DMM.comを Instagramサイト で開く]

[filter:Normal]

【レポート】Workflow Engines Night #workflowenginesnight | Developers.IO

今日はDMM.comラボさんが開催された、ワークフローエンジンをテーマにした勉強会「Workflow Engines Night」に参加する機会がありましたので、Digdagの開発者古橋さんのセッションを中心に、参加レポートをお届けします。