Я очень новичок в Python и стараюсь учиться в сочетании с использованием nltk.ошибки tokenizer с nltk
Я слежу за некоторыми примерами и проверял все, но кажется, что я очень ограничен в том, что я могу сделать из-за ошибок, возвращаемых python.
Я знаю, установлена и импорт тонкой NLTK, потому что этот код работает
from nltk.sem import chat80 print chat80.items
Однако «от nltk.tokenizer импорта *» возвращает
'File "stdin", line1.я получаю подобные ошибки при использовании любого рода «TOKEN =» или я угадываю токенизацию чего-либо.
Я установил python много раз за последние несколько дней, надеясь, что другая версия или лучше установить может помочь.
Я получаю эту ошибку на windows7 с помощью activePython2.6, хотя у меня есть аналогичные ошибки ors с python 3.1 activePython3.1 и Python 2.6. , а также на Mac OSx 10.5 с Python 2.5.
Маке дает немного больше данных с «Import Error: Нет. Модуль с именем Tokenizer
Я просто пытаюсь некоторые из вводного демоса в NLTK онлайн, даже не пытаясь писать свой собственный код еще, и я получаю больше ошибок, чем успехов.
Спасибо Адаму. Я использовал «токенизатор», как я видел это во многих примерах, например «Начало работы с nltk» http://www.ibm.com/developerworks/linux/library/l-cpnltk.html - использование tokenize вместо tokenizer не работает при попытке определить токен. Поэтому я думаю, может быть, есть что-то вроде tokenizer, а не tokenize. – pedalpete