Wie wird der von elasticsearch erstellte invertierte Index ausgedruckt?

Question

Wenn ich alle Token des Indexes, den elasticsearch erzeugt, erhalten möchte (ich verwende die rails elasticsearch gem), wie würde ich das machen? Etwas zu tun, wie diese bekommt nur einen bestimmten Satz von Token für einen Suchbegriff:

curl -XGET 'http://localhost:9200/development_test/_analyze?text=John Smith' 

Answer 1

Sie die Scroll API mit den Term Vectors API kombinieren können Begriffe im invertierten Index aufzählen:

require "elastomer/client" 
require "set" 

client = Elastomer::Client.new({ :url => "http://localhost:9200" }) 
index = "someindex" 
type = "sometype" 
field = "somefield" 

terms = Set.new 

client.scan(nil, :index => index, :type => type).each_document do |document| 
    term_vectors = client.index(index).docs(type).termvector({ :fields => field, :id => document["_id"] })["term_vectors"] 
    if term_vectors.key?(field) 
    term_vectors[field]["terms"].keys.each do |term| 
     unless terms.include?(term) 
     terms << term 
     puts(term) 
     end 
    end 
    end 
end 

Dies ist ziemlich langsam und verschwenderisch, da es eine HTTP-Anforderung _termvectors für jedes einzelne Dokument im Index ausführt, alle Begriffe im RAM enthält und einen Bildlaufkontext für die Dauer der Aufzählung geöffnet hält. Dies erfordert jedoch kein anderes Tool wie Luke und die Begriffe können aus dem Index gestreamt werden.