distributed-system

    2

    2答えて

    私には興味深い質問があります。 分散型でスケーラブルなものは何ですか?の代わりにhadoopのどれかです。 HDFSのようないくつかの分散ファイルシステムを探していますが、安価で効率的なストレージとして使用でき、データ処理エンジン(バッチ/リアルタイム)が必要です。私はスパークが良い選択肢かもしれないことを知っています。しかし、私はこのシステムを、分散したフォールトトレラントでスケーラブルなファイ

    0

    1答えて

    python-rqのワーカータスク内にzmqソケットを設定しようとしています。私は仕事関数内contextを作成する場合 : def push(user, task_id, data): """Push message to `user` over websocket. """ ctx = zmq.Context() pub = ctx.socket(z

    0

    1答えて

    私はシーケンシャルな整合性モデルを理解する方法は、間違っているとマークされた出力が有効である必要があります、何が欠けていますか?

    0

    1答えて

    リポジトリパターンに関する質問があります。私はデータがメモリに保存されているが、データの耐久性のためのデータベースがある分散プロジェクトに取り組んでいます。システムの規模を拡大するために、データはアプリの複数のインスタンスにわたって分割されます。このため、いずれかのノードに問題が発生するたびに、データはデータベースから再ロードされ、分散キューを使用して再構築されます。 私たちはリポジトリインターフ

    1

    1答えて

    私はapache zookeeperを使用できるかどうかを知りたいユースケースがあります。 複数のサーバーに分散された単純なバッチ処理アプリケーションが必要なので、各プロセスはdbからデータのサブセットを読み取り、処理し、最後にデータを別のデータベースに集約します。プロセスは完全に独立しているわけではなく、障壁を同期させて設定する必要があります。 この場合、クライアントは関係なく、サーバー間で調整

    0

    1答えて

    distributedlog AsynchronousLogReaderを使用して、分散ログストリームからレコードを読み取りました。ストリームの各ログレコードについて、関連する2つのシーケンス番号があることがわかりました.1つはトランザクションIDで、もう1つはシーケンスIDです。読み取り位置を追跡するためにどちらを使用すればよいですか?メールリストでdistributedlog著者の1からの回答

    0

    1答えて

    Zipkinで分散トレースに使用する独自の基本的な最小限のライブラリを作成したいと思います。私はHTTP経由で痕跡を送ってくれるだろう。私の質問は、ZipkinのドキュメントやZipkinとBraveのソースコードよりも、このトピックに関する情報があるかどうかです。私はSpring Frameworkに頼ることはしません。 Spring Cloud Sleuthはうまく動作しますが、私のサービスは

    2

    1答えて

    すべてのノードでデータが分割される分散システムを作成したいと考えています。私はあなたのために仕事をするHazelcastやApache Igniteのような図書館があることを知っています。私の場合、シャーディングキーごとに、別のシステムへのソケットサブスクリプションを作成する必要があります。そのため、データの分散方法だけでなく、実際にこれらのサブスクリプションを分散して作成する方法もあります。 シ

    0

    1答えて

    キュー(pub-sub)分散システムに置かれたジョブがあって、それらの間に依存関係がある場合に問題に近づく方法。 キューの現在の状態: j3 -> j2 -> j1 rear front j3は、j1の完了によって異なります。 キュープロセッサはこれらのジョブを消費しており、分散環境で処理を開始しました。 いくつかの依存性解決メカニズムに基づいて、j1とj3の間の依存関係が見つかりました。