2016-07-09 4 views
1

私は、アップデートするたびにFirebaseから重みの配列を取るマシン学習アプリケーションを持っています。これまではうまくいきましたが、ニューラルネットワークの実装を開始して以来、その配列サイズは8,000から200,000に急増しました。このため、私はJSONオブジェクトとして配列を引っ張ったときに、私はこのエラーを取得:Firebaseから大規模なjsonをロードすると、Androidアプリからjava.lang.OutOfMemoryErrorが返されます

java.lang.OutOfMemoryError 
                    at java.util.HashMap.makeTable(HashMap.java:569) 
                    at java.util.HashMap.doubleCapacity(HashMap.java:589) 
                    at java.util.HashMap.put(HashMap.java:419) 
                    at com.google.android.gms.internal.zzahj.getValue(Unknown Source) 
                    at com.google.android.gms.internal.zzahj.getValue(Unknown Source) 
                    at com.google.android.gms.internal.zzahj.getValue(Unknown Source) 
                    at com.google.firebase.database.DataSnapshot.getValue(Unknown Source) 
                    at myapp.DataSend$5.onDataChange(DataSend.java:223) 
                    at com.google.android.gms.internal.zzafp.zza(Unknown Source) 
                    at com.google.android.gms.internal.zzagp.zzSu(Unknown Source) 
                    at com.google.android.gms.internal.zzags$1.run(Unknown Source) 
                    at android.os.Handler.handleCallback(Handler.java:733) 
                    at android.os.Handler.dispatchMessage(Handler.java:95) 
                    at android.os.Looper.loop(Looper.java:136) 
                    at android.app.ActivityThread.main(ActivityThread.java:5001) 
                    at java.lang.reflect.Method.invokeNative(Native Method) 
                    at java.lang.reflect.Method.invoke(Method.java:515) 
                    at com.android.internal.os.ZygoteInit$MethodAndArgsCaller.run(ZygoteInit.java:785) 
                    at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:601) 
                    at dalvik.system.NativeStart.main(Native Method) 

そして、問題のコード(のdatasend 223)はこれです:

public void checkoutListener(){ 
     final TextView message = (TextView) findViewById(R.id.messageDisplay); 
     userValues.addValueEventListener(new ValueEventListener() { 
      @Override 
      public void onDataChange(DataSnapshot dataSnapshot) { 
       userCheck = dataSnapshot.getValue(UserData.class); 
      } 

      @Override 
      public void onCancelled(DatabaseError firebaseError) { 

      } 
     } 

     ); 

    } 

は、どのような方法私はありますこれを防ぐことができますか、またはアンドロイドヒープの処理にはあまりにも多くの倍の200,000倍の配列ですか?

+1

は「アンドロイド用あまりにも多くの20万doubleの配列です?」はい。 – Ozgur

+0

私はiOS上で同じシステムを実装しているプロジェクトのパートナーを抱えていますが、同じ問題はないようです。 iOS上のCベースのコードは、単により多くのデータを扱うことができますか? – user6462035

+0

デバイスがメモリを増やしているか、アプリで使用可能なメモリが増えている可能性があります。しかし、たとえデバイスが200Kのエントリを扱うことができたとしても、あなたのユーザーは自分の携帯電話に200Kの値をダウンロードすることで本当に最も効果的ですか?ユーザーに表示するデータのみをダウンロードします。データを集約する必要がある場合は、項目を書き込む際に(サーバー側のプロセスを使用して)行うこともできます。 –

答えて

2

ここにフライウェイデザインパターンを使用してみてください。最善の方法は、外部メモリに重みを格納し、ネットワークノードに同じ重みを適用しながらバッチで読み取ることです。ウェイトがニューラルネットワークの隠れ層のノードに設定される方法を変更する必要があります。

Flyweight design pattern

関連する問題