Как настроить каталог данных nltk из кода?
Как настроить каталог данных nltk из кода?
Ответ 1
Просто измените элементы nltk.data.path
, это простой список.
Ответ 2
Из кода http://www.nltk.org/_modules/nltk/data.html:
``nltk:path``: Specifies the file stored in the NLTK data package at *path*. NLTK will search for these files in the directories specified by ``nltk.data.path``.
Затем в коде:
######################################################################
# Search Path
######################################################################
path = []
"""A list of directories where the NLTK data package might reside.
These directories will be checked in order when looking for a
resource in the data package. Note that this allows users to
substitute in their own versions of resources, if they have them
(e.g., in their home directory under ~/nltk_data)."""
# User-specified locations:
path += [d for d in os.environ.get('NLTK_DATA', str('')).split(os.pathsep) if d]
if os.path.expanduser('~/') != '~/':
path.append(os.path.expanduser(str('~/nltk_data')))
if sys.platform.startswith('win'):
# Common locations on Windows:
path += [
str(r'C:\nltk_data'), str(r'D:\nltk_data'), str(r'E:\nltk_data'),
os.path.join(sys.prefix, str('nltk_data')),
os.path.join(sys.prefix, str('lib'), str('nltk_data')),
os.path.join(os.environ.get(str('APPDATA'), str('C:\\')), str('nltk_data'))
]
else:
# Common locations on UNIX & OS X:
path += [
str('/usr/share/nltk_data'),
str('/usr/local/share/nltk_data'),
str('/usr/lib/nltk_data'),
str('/usr/local/lib/nltk_data')
]
Чтобы изменить путь, просто добавьте список возможных путей:
import nltk
nltk.data.path.append("/home/yourusername/whateverpath/")
Или в окнах:
import nltk
nltk.data.path.append("C:\somewhere\farfar\away\path")
Ответ 3
Я использую append, example
nltk.data.path.append('/libs/nltk_data/')
Ответ 4
Вместо добавления nltk.data.path.append('your/path/to/nltk_data')
к каждому сценарию NLTK принимает переменную среды NLTK_DATA. (ссылка на код)
Откройте ~/.bashrc
(или ~/.profile
) с помощью текстового редактора (например, nano
, vim
, gedit
) и добавьте следующую строку:
export NLTK_DATA="your/path/to/nltk_data"
Выполнить source
для загрузки переменной окружения
source ~/.bashrc
Контрольная работа
Откройте python и выполните следующие строки
import nltk
nltk.data.path
Вы можете увидеть свой путь данных nltk уже там.
Ссылка: @alvations ответ на nltk/nltk # 1997
Ответ 5
Для пользователей, использующих uwsgi:
У меня были проблемы, потому что я хотел, чтобы приложение uwsgi (работало как другой пользователь, кроме меня), имело доступ к данным nltk, которые я ранее загружал. Для меня работала следующая строка myapp_uwsgi.ini
:
env = NLTK_DATA=/home/myuser/nltk_data/
Здесь задается переменная окружения NLTK_DATA
, как предложено @schemacs.
Возможно, вам придется перезапустить ваш процесс uwsgi после внесения этого изменения.
Ответ 6
Другое решение - опередить его.
попробуй импортировать nltk nltk.download()
Когда появится окно с вопросом, хотите ли вы загрузить корпус, вы можете указать, в какой каталог он должен быть загружен.