torchtext相关内容

数据帧作为TorchText中的数据源

我有一个数据框,它有两列(评论和观点)。我正在使用pytorch和torchtext库来对数据进行预处理。 是否可以使用DataFrame作为源来读取TorchText中的数据? 我正在寻找类似于的东西,但不是 data.TabularDataset.splits(path='./data') 我已对数据执行了一些操作(清除、更改为所需格式),最终数据在数据帧中。 如果不是torchT ..
发布时间:2022-07-24 10:08:41 其他开发

溢出错误:Python int 太大,无法转换为 C long torchtext.datasets.text_classification.DATASETS['AG_NEWS']()

我有 64 位 Windows 10 操作系统我已经安装了 python 3.6.8我已经使用 pip 安装了 torch 和 torchtext.火炬版本是 1.2.0 我正在尝试使用以下代码加载 AG_NEWS 数据集: 导入火炬导入火炬文本从 torchtext.datasets 导入 text_classificationNGRAMS = 2导入操作系统如果不是 os.path.i ..
发布时间:2021-09-26 19:08:41 Python

使用 TorchText (PyTorch) 进行语言翻译

我最近开始使用 PyTorch 进行 ML/DL.以下 pytorch 示例说明了我们如何训练一个简单的模型来将德语翻译成英语. https://pytorch.org/tutorials/beginner/torchtext_translation_tutorial.html 但是,我对如何使用模型对自定义输入进行推理感到困惑.到目前为止,我的理解是: 1) 我们需要保存德语( ..

溢出错误:Python int 太大,无法转换为 C long torchtext.datasets.text_classification.DATASETS['AG_NEWS']()

我有 64 位 Windows 10 操作系统我已经安装了 python 3.6.8我已经使用 pip 安装了 torch 和 torchtext.火炬版本为 1.2.0 我正在尝试使用以下代码加载 AG_NEWS 数据集: 导入火炬导入火炬文本从 torchtext.datasets 导入 text_classificationNGRAMS = 2导入操作系统如果不是 os.path.i ..
发布时间:2021-06-13 20:42:36 Python

“没有这样的文件"使用torchtext.data.TabularDataset将存储在G驱动器中的csv数据加载为torchtext格式时,

我已将一个csv文件存储在G驱动器中,并尝试将其加载到torchtext data.TabularDataset中.错误消息是"FileNotFoundError:[Errno 2]没有这样的文件或目录:'https://.....'" 是否无法将g驱动器中的csv文件直接加载到torchtext TabularDataset中? 这是代码.我还制作了一个公开的可乐笔记本,其中包含可公 ..
发布时间:2020-07-26 01:33:11 Python

BucketIterator抛出“字段"对象没有属性"vocab"

这不是一个新问题,我在没有任何解决方案的情况下找到的参考文献首先和第二. 我是PyTorch的新手,在使用torchtext在PyTorch中创建文本数据批处理时,面对AttributeError: 'Field' object has no attribute 'vocab'. 紧随本书Deep Learning with PyTorch我写了与本书中解释的示例相同的例子. 以下是代 ..
发布时间:2020-05-18 01:00:28 Python