これは素朴な質問のように聞こえるかもしれませんが、私はこれについて非常に新しいです。 Googleで事前にトレーニングした単語2ベクトルモデル(https://github.com/dav/word2vec)を使用して分類モデルを学習させてみましょう。私は私の分類モデルを保存する。今度は、新しいインスタンスをテストするために分類モデルをメモリにロードし直します。 Google word2vectorモデルを再度読み込む必要はありますか?それとも、私のモデルを訓練するためだけに使用されていますか?モデルテストでword2vecモデルをロードする必要がありますか?
0
A
答えて
0
これは、コーパスとテストの例がどのように構造化され、事前処理されているかによって異なります。
おそらく、訓練された単語ベクトルを使用してテキストを数値フィーチャに変換しています。まず、テキストの例をベクトル化して分類器を訓練する。後で、他の(テスト/制作)テキストの例は同じものでベクトル化され、分類子にその判断を得るために提示されます。
したがって、トレーニング中に使用されたテスト/プロダクションテキストの例と同じテキスト/ベクタープロセスを使用する必要があります。おそらく以前のバルクステップを別のステップで実行したことがあります。その場合は、クラシファイアが使用するベクタ形式のフィーチャが既に用意されています。しかし、あなたのクラシファイアパイプラインは、生のテキストを取り込んでベクトル化することがよくあります。その場合、トレーニング中に利用可能なように、テスト時に利用可能な同じ事前トレーニング(ワード) - >(ベクトル)マッピングが必要です。
関連する問題
- 1. SparkでWord2Vecモデルをロード
- 2. ライブラリでモデルを使用する必要がありますか?
- 3. MVVMモデルでモデルがINotifyPropertyChangedインターフェイスを実装する必要がありますか?
- 4. ビューはモデルを追跡する必要がありますか?
- 5. データセグメントに何をロードする必要がありますか?
- 6. ビューポートでdivをロードする必要があります
- 7. 必要性Word2Vec
- 8. GeoCoderをモデルまたはコントローラで使用する必要がありますか?
- 9. モデル内のパラメータを更新する必要があります
- 10. jqueryデタッチとロードがフェードイン/アウトする必要があります
- 11. このシナリオでMVCモデルを作成する必要がありますか?
- 12. MVVMのモデルでObservableCollectionsを使用する必要がありますか?
- 13. DisplayFor/EditorForでデータアクセスにモデルを使用する必要がありますか?
- 14. laravelでEAVモデルを使用する必要がありますか?
- 15. PHP MVC - モデルが別のモデルのデータにアクセスする必要があります
- 16. Sparkで訓練されたWord2Vecモデルをロードする
- 17. Javascript:スクリプトがロードする要素を待つ必要があります
- 18. Rails.envとConfig.rootは 'rails console'モデルで動作する必要がありますか?
- 19. フォームオブジェクトまたはモデルで検証を行う必要がありますか?
- 20. ジャンゴ:LookupErrorが:アプリケーションはモデルの必要はありません 『』モデル
- 21. スコープはコントローラーまたはモデルにする必要がありますか?
- 22. MVCとプログラムの状態 - モデルをダムにする必要がありますか?
- 23. モデルの日時フィールドを検証する必要がありますか?
- 24. ジョイン・テーブル・モデル用のファブリックを作成する必要がありますか?
- 25. 大型モデルのファイルをgitリポジトリにチェックインする必要がありますか?
- 26. CanopyでPythonでライブラリを再ロードする必要があります
- 27. jQueryのロードはターゲットスクリプトを待つ必要があります
- 28. ビューコントローラは、ロード/アサート自体を中止する必要がありますか?
- 29. 変数のアドレスをメモリにロードする必要がありますか?
- 30. 参照アセンブリを強制的にロードする必要がありますか?