Verwenden von Python NLTK (2.0b5) auf der Google App Engine

Question

Ich habe versucht, das NLTK (Natural Language Toolkit) auf der Google App Engine arbeiten zu lassen. Die folgenden Schritte sind:

1. Laden Sie das Installationsprogramm herunter und führen Sie es aus (eine .dmg-Datei, da ich einen Mac verwende).
2. kopieren Sie den Nltk-Ordner aus dem Verzeichnis python site-packages und platzieren Sie ihn als Unterordner in meinem Projektordner.
3. ein Python-Modul in dem Ordner erstellen, der die nltk Unterordner enthält und fügen Sie die Zeile: from nltk.tokenize import *

Leider, nachdem es gestartet ich diesen Fehler (beachten Sie, dass dieser Fehler tief in NLTK und ich angehoben ist es für mein System Installation von python zu sehen, wie auf den einen gegenüber, die im Unterverzeichnis des GAE Projektes ist):

<type 'exceptions.ImportError'>: No module named nltk 
Traceback (most recent call last): 
    File "/base/data/home/apps/xxxx/1.335654715894946084/main.py", line 13, in <module> 
    from lingua import reducer 
    File "/base/data/home/apps/xxxx/1.335654715894946084/lingua/reducer.py", line 11, in <module> 
    from nltk.tokenizer import * 
    File "/base/data/home/apps/xxxx/1.335654715894946084/lingua/nltk/__init__.py", line 73, in <module> 
    from internals import config_java 
    File "/base/data/home/apps/xxxx/1.335654715894946084/lingua/nltk/internals.py", line 19, in <module> 
    from nltk import __file__ 

Hinweis: dies ist, wie der Fehler in den Protokollen aussieht, wenn auf GAE hochgeladen . Wenn ich es lokal ausführe, bekomme ich den gleichen Fehler (außer es scheint in meiner Site-Packages-Instanz von NLTK zu entstehen ... also kein Unterschied dort). Und "xxxx" bezeichnet den Projektnamen.

Also zusammenfassend:

• Ist das, was ich überhaupt möglich machen möchte? Wird NLTK sogar auf der App Engine laufen?
• Gibt es etwas, das ich vermisst habe? Das heißt: Kopieren von "nltk" in das GAE-Projekt ist nicht genug?

EDIT: Festtippfehler und entfernt unnötige Schritt

Answer 1

Das Problem hierbei ist, dass nltk rekursiven Importen zu tun versucht: Wenn nltk/__init__.py importiert wird, importiert es nltk/internals.py, die dann nltk wieder zu importieren versucht. Da nltk gerade importiert wird, scheitert es mit einem (eher nicht hilfreichen) Fehler.Was auch immer sie tun, ist sowieso ziemlich seltsam - es ist nicht überraschend, dass etwas wie from nltk import __file__ bricht.

Das sieht wie ein Problem mit Nltk selbst aus - funktioniert es, wenn es direkt von einer Python-Konsole importiert wird? Wenn ja, müssen sie in der installierten Version eine Art Trickserei machen. Ich würde vorschlagen, in den Nltk-Gruppen zu fragen, was sie vorhaben und wie man damit umgehen kann.

Answer 2

NLTK, glaube ich, seine besten nicht versuchen rein Python als Ausweich (Graceful Degradation) zu sein, wenn es nicht die C- haben kann codierte Beschleuniger-Erweiterungen, die es gerne hätte. Man muss jedoch immer mit äußerster Sorgfalt vorgehen, um ein fettes Paket zu erstellen (rekursiv alle .py-Dateien zu komprimieren und zipimport zu verwenden, ist möglicherweise weniger flockig).

Meine installierte NLTK, 0,95 Ich glaube, hat keine ntlk.tokenizer - es hat eine ntk.tokenize, keine nachlaufende R, aber offensichtlich ist auch der kleinste solche Tippfehler 100% unerträglich, wenn Sie versuchen zu erzählen ein Computer genau das, was Sie wollen, also nehme ich an, das ist kein Tippfehler Ihrerseits, sondern Ihre Verwendung einer völlig anderen und inkompatiblen Version von NLTK, also WAS ist die Freigabe, die ein Unterpaket mit dem Namen Tokenizer statt Tokenize hat?

Wenn Sie eine Null-Toleranz-Politik für ein Zeichen Fehler schwer zu ertragen finden, Computer und deren Programmierung unwahrscheinlich sind Sie erträglich sein ... ;-)

Answer 3

oakmad hat es geschafft, erfolgreich durch zu arbeiten Bereitstellung mehrere NLTK-Module zu GAE. Hoffe das hilft. Aber, aber ehrlich gesagt, ich glaube immer noch nicht, dass es auch nach dem Lesen der Post wahr ist.

Answer 4

Ich habe gegabelt NLTK 2.0.3 on github to run it on app engine; Tokenizing und einfaches POS-Tagging mit dem MaxEnt-Treebank-Tagger.