Rジョブジョブキュー/ワークロード管理
-
15-11-2019 - |
質問
R. のための待ち行列/ロードバランサパッケージを探しているGoogleで時間を過ごしています。
私が達成しようとしていること:
- お互いに独立している複数のRemote Front Endsからの複数の機能
- 2つのデュアルコアサーバをRバックエンドとして利用する
それを知っている:
- 各関数は通常10~30秒で処理されます。
- 平均5分ごとに(しかし同時に可能)実行する8~15の関数のセットがバックエンドに送信されています(最初に最初にキューに入れられます)。 5分は平均で、いくつかのセットは同時にと同時に送ることができます
- 2x2 Rインスタンスは、必要なパッケージがロードされているため、すでに実行されている場合があります。それらは常に同じです。
- 転送中のデータの入力量は非常に低い:50k max
ここではコード並列化の課題(雪、降雪、コンドル、その他の伝統的なクラスターソリューション)
あなたは助けることができるRのために設計された良いパッケージ/ツールを知っていますか?
たくさんありがとう!
解決
This sounds like a reasonable context for using RApache
, which can instantiate several R instances and necessary packages.
所属していません StackOverflow