独立して動作するコードの一部を切り離すPerlの技術とは何ですか？

Question

私はOSに近いプログラミング手法に関与していませんが、私が知っているように、Perlで何かを並行して実行する場合、選択武器はforkであり、おそらくそれに基づいて構築された有用なモジュールです。 forkのdocページは言う：結果として

Does a fork(2) system call to create a new process running the same program at the same point. 

を、大量のメモリを消費し、小さなタスクのためforkを呼び出すと、そこに2つの大きなperlのプロセスとなり、第二は、資源を無駄にすることを意味し、大きなアプリケーションを持ちますちょうど簡単な仕事をするだけです。

だから、質問は：（またはどのようにforkを使用することが唯一の方法だ場合、）それはを必要とするだけのリソースを消費独立して実行されているコードの取り外した部分を持つために何をすべきか？ただ非常にsimpel例

：

use strict; 
    use warnings; 

    my @big_array = (1 .. 2000000); # at least 80 MB memory 
    sleep 10; # to have time to inspect easely the memory usage 

    fork(); 
    sleep 10; # to have time to inspect easely the memory usage 

と子プロセスが消費80+ MBを過ぎます。

明確にする：このデタッチコードと通信することが重要ではないですかねえ、バックグラウンドでこの単純なタスク私のために実行」と言うと、私は私を継続させるためにだけ可能であることを、何とかその結果を使用します一方、重い作業...と重いperlアプリケーションを実行しているときに私のリソース！ "を無駄にしないでください。

Answer 1

fork()〜exec()はあなたのバニーです。新しいプロセスを作成するにはfork()（これはかなり安価な操作です、下記を参照してください）、次にexec()を使用して、実行している大きなperlをより小さなものに置き換えてください。これは、次のようになります。

use strict; 
use warnings; 
use 5.010; 

my @ary = (1 .. 10_000_000); 

if (my $pid = fork()) { 
    # parent 
    say "Forked $pid from $$; sleeping"; 
    sleep 1_000; 
} else { 
    # child 
    exec('perl -e sleep 1_000'); 
} 

（@aryは少しだけ、元のプロセスのメモリを埋めるために使用されました。）

fork()は、元のプロセス全体をコピーしても、比較的安いと言いました。これらの声明は矛盾していません。 forkをデザインした人たちもこの同じ問題に気づいた。コピーは遅延です。つまり、実際に変更されたビットだけがコピーされます。

プロセスが互いに話をしたいと思えば、より複雑なIPCのドメインに入ることになります。これについては、いくつかの書籍が書かれています。

Answer 2

あり、あなたのプロセスのフットプリントのサブセットだけをフォークする方法はありませんので、通常の回避策はに降りてくる：あなたが親プロセスでメモリを大量にコードを実行する前に、

1. fork
は別のプロセスを開始
2. systemまたはopen HANDLE,'|-',...である。もちろん、この新しいプロセスは親からのデータを継承しないため、この子に何らかの形でデータを渡す必要があります。

Answer 3

フォークされたプロセスでは、実際には80MBの常駐メモリが使用されていません。そのメモリの大部分は、共有となります。親プロセスまたは子プロセスが書き込みを行うまでは、コピーオンライトのセマンティクスによってメモリが実際にコピーされます。

荷物を完全に落としたい場合は、execをフォークで実行してください。これは、子供のPerlプロセスを別の実行可能ファイルに置き換え、メモリを解放します。親に何かを伝える必要がなければ、完璧です。

Answer 4

fork()ほとんどのオペレーティングシステムで実装されているように効率的です。一般的には、コピーオンライトと呼ばれる手法を使用します。これは、ページが最初に共有されることを意味します。また、あなたのプロセスメモリの多くは、とにかくマップされたファイルを読み込み専用にする予定です。

fork()の前に1つのプロセスが80MBを使用しているからといって、後で2つが160を使用するわけではありません。各プロセスがより多くのページをダーティーするまで、80MBを超えるわずかな割合になります。