【疑难杂症】allennlp安装报错：Installingbuilddependencies...error

背景&＃xff1a;
配置PURE的算法环境&＃xff0c;安装allennlp 0.9.0 &＃xff08;pip install allennlp&＃61;&＃61;0.9.0&＃xff09;报错&＃xff0c;如图所示&＃xff1a;

探索&＃xff1a;

• 发现allennlp的依赖中有spacy&＃xff0c;是在安装spacy 2.1.9的依赖时报错了。
  此时我尝试单独安装spacy 2.1.9也会报相同错误。所以是spacy这里出问题了。而我直接安装spacy最新版本&＃xff08;3.5.0&＃xff09;&＃xff0c;却是可以安装成功的。
• 当我尝试不制定版本安装allennlp时&＃xff0c;发现它会下载最新的pytorch版本&＃xff0c;我不希望我的pytorch版本被改变&＃xff0c;因为会破坏了pytorch与cuda、cudnn的版本配套。

原因&＃xff1a;
pytorch、transformers、allennlp、spacy版本不匹配
而transformer通常不会导致问题

解决办法&＃xff1a;
综上&＃xff0c;考虑选择合适的allenlp版本&＃xff0c;能够兼顾到spacy版本和pytorch版本
因为allennlp是基于pytorch的NLP库&＃xff0c;所以allennlp的版本会受pytorch的版本影响&＃xff0c;若是直接pip install allennlp&＃xff0c;则可能会安装新的pytorch版本。
因此&＃xff0c;allennlp版本选取的前提是&＃xff0c;不要破坏pytorch的版本。
而官方没有给出一个配套的建议&＃xff0c;我的方法是实验&＃xff0c;首先从一个稍微低一点并接近0.9.0的版本开始&＃xff0c;
如&＃xff1a;pip install allennlp1.1.0

此时发现它要求pytorch的版本低于1.7&＃xff0c;此时则考虑增加版本&＃xff0c;因为一般越近的版本使用的pytorch版本就越高。
pip install allennlp1.2.0&＃xff0c; 顺利安装

此时&＃xff0c;allenlp会自动安装配套的spacy和transformers及其它依赖。

Successfully installed allennlp-1.2.0 catalogue-1.0.2 jsonpickle-3.0.1 plac-1.1.3 spacy-2.3.9 srsly-1.0.6 thinc-7.4.6 tokenizers-0.9.2 transformers-3.4.0 wasabi-0.10.1

最后&＃xff0c;给一个基于pytorch1.7.1的配套方案&＃xff0c;若你也是这个版本&＃xff0c;则可以直接按这个配套方案安装&＃xff0c;若是不&＃xff0c;则参考上面的实验找到合适的allennlp版本。

pytorch&＃xff1a;1.7.1
allennlp&＃xff1a;1.2.0
transformers&＃xff1a;3.4.0
spacy&＃xff1a;2.3.9