0
私はPhrasesクラスを使用しており、ベクトルを2D空間で視覚化したいと考えています。 Word2Vecでこれを行うために、私はT-SNEを使いました。それは完全に機能しました。私がフレーズで同じことをしようとしているとき、意味をなさない(無関係な単語の隣に単語が現れる)。Gensimのフレーズのベクトルを2Dで視覚化
フレーズの出力を視覚化する方法についてのご意見はありますか?
私はPhrasesクラスを使用しており、ベクトルを2D空間で視覚化したいと考えています。 Word2Vecでこれを行うために、私はT-SNEを使いました。それは完全に機能しました。私がフレーズで同じことをしようとしているとき、意味をなさない(無関係な単語の隣に単語が現れる)。Gensimのフレーズのベクトルを2Dで視覚化
フレーズの出力を視覚化する方法についてのご意見はありますか?
gensim mailing listで提案/報告されているように、重要な問題は、Phrases
のコーパスを単にラッピングすると、データを1回だけ通過するイテレータになります。 Word2Vec
モデルでは、ボキャブラリーディスカバリと複数回のトレーニングを行うために複数のパスを作成できるコーパスが必要です。 (INFOレベルのロギングを注意深く見れば、このような状況では「トレーニング」がほぼ即座に終了したという兆候があるはずです)