Hat das Entfernen von Stoppwörtern aus Text Auswirkungen auf die Leistung von stanford core nlp NER?

Question

wir versuchen, Name Entity Anerkennung auf Millionen von Kommentaren/Feedback zu implementieren und der Prozess scheint langsam zu sein. Wir denken daran, Stoppwörter/häufige Wörter aus den Texten zu entfernen und auf sie anzuwenden. Beeinflusst das Entfernen von Stoppwörtern die Genauigkeit von ner?

Answer 1

Ich denke, es ist plausibel, dass Sie respektable F1-Punkte erhalten, wenn Sie auf einen Satz mit den Stoppwörtern laufen, die entfernt werden. Letztendlich müssen Sie damit experimentieren und schauen, ob die Qualität für Ihre Bedürfnisse akzeptabel ist.