安装spacy以及在torchtext中使用它

下载源码：https://github.com/explosion/spaCy

安装：

pip install spaCy-master.zip

下载模型：

python -m spacy download en_core_web_sm

注意，在torchtext中使用spacy时，由于field的默认属性是tokenizer_language='en'

当使用en_core_web_sm时要改创建的field属性为tokenizer_language='en_core_web_sm'

self.TEXT = data.Field(init_token='', eos_token='', lower=True, tokenize='spacy', tokenizer_language='en_core_web_sm', fix_length=16)