热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

您的环境缺少SentencePiece库,导致XLNetTokenizer无法正常运行

我正在尝试在 Google Collaboratory 上实施 XL​​NET。但我得到以下问题。ImportError: XLNetTokenizer requires the SentencePi

我正在尝试在 Google Collaboratory 上实施 XL​​NET。但我得到以下问题。

ImportError:
XLNetTokenizer requires the SentencePiece library but it was not found in your environment. Checkout the instructions on the
installation page of its repo: https://github.com/google/sentencepiece#installation and follow the ones
that match your environment.

我还尝试了以下步骤:

!pip install -U transformers
!pip install sentencepiece
from transformers import XLNetTokenizer
tokenizer = XLNetTokenizer.from_pretrained('xlnet-base-cased-spiece.model')

提前谢谢你的帮助。

回答




!pip install tr​​ansformers 和 !pip install sentencepiece 之后,

请重新启动您的运行时,然后执行所有其他代码。






推荐阅读
author-avatar
Kong倪
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有