kakehashi_dev https://blog.hatena.ne.jp/kakehashi_dev/ KAKEHASHI Tech Blog https://kakehashi-dev.hatenablog.com/ バックエンド こんにちは。AI 在庫管理チーム ソフトウェアエンジニアの坂本です。 今回は AI 在庫管理のバッチ処理で利用しているワークフローツール Airflow (MWAA) の Zombie Task に苦労したケースとその対処法について紹介しようと思います。 概要 Airflow で動かしているバッチ処理が Zombie Task という事象によってエラーになってしまうことが高頻度で発生しました。 Airflow のタスクを適切に分離することで Zombie Task が発生してもバッチ処理が失敗することがないように変更を加えることができました。 Airflow の Zombie Task とは … 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fkakehashi-dev.hatenablog.com%2Fentry%2F2023%2F12%2F18%2F090000" title="Airflow Zombie Task への対処法 - KAKEHASHI Tech Blog" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/k/kakehashi_dev/20231215/20231215162728.jpg Hatena Blog https://hatena.blog 2023-12-18 09:00:00 rich https://kakehashi-dev.hatenablog.com/entry/2023/12/18/090000 1.0 100%