大規模なデータセットにRの機械学習パッケージを適用する

Question

私はRにLMを適用するとメモリを消費する他の変数も作成するため、約1GBのデータセットがメモリに適合しません）。この状況で分析を行うために、Rでこれらの素晴らしい機械学習パッケージ（例：glm、ランダムフォレスト、ニューラルネットなど）を使用する方法があるのだろうか？何か提案と参考に感謝します。

Answer 1

high-performance task view on CRANを参照してください。特に、大きなメモリとメモリ不足のデータに関するセクションを参照してください。

また、お支払いになる場合がありますが、Microsoft R Serverをご利用ください。以前はRevolution R Enterpriseとして知られていたMRSは、大きなデータセットを扱う際にメモリの壁を壊すように設計されています。 WindowsとLinuxの両方で使用でき、SQL Server、Teradata、Hadoop（Cloudera、Hortonworks、HDInsight）とSparkを使用したデータベース内の分析も可能です。

開示：私はMicrosoftの従業員です。

Answer 2

スパークを使用できる場合は、sparklyr（無料）と考えてください。