Wie spacy Lemmatizer zu verwenden, um ein Wort in die Grundform zu bekommen

Question

Ich bin neu zu wissen spacy und ich möchte seine Lemmatizer-founction verwenden, aber ich weiß nicht, wie ich es benutze, wie ich in Strings of Word, die werden gebe die Zeichenfolge zurück, die die Grundform der Wörter hat. wie 'Wörter' => Wort, 'tat' => 'tun', danke.

Answer 1

Code:

import os 
from spacy.en import English, LOCAL_DATA_DIR 

data_dir = os.environ.get('SPACY_DATA', LOCAL_DATA_DIR) 

nlp = English(data_dir=data_dir) 

doc3 = nlp(u"this is spacy lemmatize testing. programming books are more better than others") 

for token in doc3: 
    print token, token.lemma, token.lemma_ 

Ausgang:

this 496 this 
is 488 be 
spacy 173779 spacy 
lemmatize 1510965 lemmatize 
testing 2900 testing 
. 419 . 
programming 3408 programming 
books 1011 book 
are 488 be 
more 529 more 
better 615 better 
than 555 than 
others 871 others 

Beispiel Ref: here

Answer 2

vorherige Antwort ist verworren und nicht bearbeitet werden kann, so ist hier eine konventionellere ein.

# make sure your downloaded the english model with "python -m spacy download en" 

import spacy 
nlp = spacy.load('en') 

doc = nlp(u"Apples and oranges are similar. Boots and hippos aren't.") 

for token in doc: 
    print(token, token.lemma, token.lemma_) 

Ausgang:

Apples 6617 apples 
and 512 and 
oranges 7024 orange 
are 536 be 
similar 1447 similar 
. 453 . 
Boots 4622 boot 
and 512 and 
hippos 98365 hippo 
are 536 be 
n't 538 not 
. 453 . 

Vom official Lighting tour

Answer 3

Wenn Sie nur die Lemmatizer verwenden möchten. Sie können das auf folgende Weise tun.

from spacy.lemmatizer import Lemmatizer 
from spacy.lang.en import LEMMA_INDEX, LEMMA_EXC, LEMMA_RULES 

lemmatizer = Lemmatizer(LEMMA_INDEX, LEMMA_EXC, LEMMA_RULES) 
lemmas = lemmatizer(u'ducks', u'NOUN') 
print(lemmas) 

Ausgabe

['duck']