Ähnliche Begriffe finden mit Glove

Question

Ich bin neu in GloVe. Ich lief erfolgreich ihre demo.sh wie auf ihrer Website angegeben. Nach dem Ausführen der Demo habe ich mehrere Dateien erstellt wie vocab, vectors usw. Aber sie haben keine Dokumentation oder irgendetwas, das beschreibt, welche Dateien wir verwenden müssen und wie man am meisten ähnliche Wörter findet.

Also, helfen Sie mir bitte die ähnlichsten Wörter mit einem Wort in GloVe (mit Kosinusähnlichkeit) zu finden? (z.B. wie most.similar in Gensim word2vec)

Bitte helfen Sie mir!

Answer 1

Es spielt keine Rolle, wie Wortvektoren generiert werden, Sie können immer die Kosinusähnlichkeit zwischen den Wörtern berechnen. Der einfachste Weg, um zu erreichen, was Sie gebeten wird (unter Berücksichtigung Sie GENSIM haben):

python -m gensim.scripts.glove2word2vec –input <GloVe vector file> –output <Word2vec vector file> 

Dies wird Handschuh Vektor-Datei-Format konvertieren W2V. Sie können es auch manuell tun - fügen Sie einfach eine zusätzliche Zeile zu Ihrer GloVe-Datei hinzu, die die Gesamtzahl der Vektoren und deren Dimensionalität am Anfang der Datei enthält. Es sieht etwas ein kin von:

180000 300 
<The rest of your file> 

Danach kann man einfach die Datei in GENSIM laden und alles funktioniert, als ob es ein regelmäßiges W2V Modell.