依存関係のあるタスクのPythonマルチスレッド/処理モジュール

Question

私は、潜在的に相互に依存する処理タスクを同時に処理できるスレッド（またはプロセス）プールを提供するPythonモジュールを実装中です。たとえば、受注管理システムの場合は、受注を行い、別の受注を行い、2番目の受注をキャンセルし、3番目の受注を行い、1次受注を取り消すことができます - すべての受注プレースメントは同時に処理できますが、キャンセルはそれぞれの注文と同時に行うことはできず、注文のプレースメントが完了した後に行う必要があります。私はこのような問題に対する良い汎用ソリューションを考え出し、オープンソースの最初の貢献として使ってみたかったのです。

これに多大な時間を費やす前に、私はこのようなものが既に存在するかどうかを知りたがっていました。誰でもこれを行う既存のPythonパッケージを知っていますか？これは誰にも役立つでしょうか？

Answer 1

はい、daskをご覧ください。スレッドとプロセスを再利用するマルチスレッド、マルチプロセッシング、および分散コンピューティングのスケジューラがそれぞれTaskPoolとPoolであります。任意のタスクの依存関係（直接非周期グラフ - DAG）を構築することができます。ただし、取り消しのサポートについてはわかりませんが、タスクで手動で実装することはできます。