torchtext

原文： https://pytorch.org/text

torchtext 程序包包含数据处理实用程序和流行的自然语言数据集。

包装参考

• torchtext
• torchtext.data
  • 数据集，批处理和示例
  • 字段
  • 迭代器
  • 管道
  • 功能
• torchtext.data.utils
  • get_tokenizer
  • ngrams_iterator
• torchtext.data.functional
  • generate_sp_model
  • load_sp_model
  • 句子数字编辑器
  • 句子 _ 令牌
  • custom_replace
  • simple_space_split
  • numericize_tokens_from_iterator
• torchtext.data.metrics
  • bleu_score
• torchtext.datasets
  • 语言建模
  • 情绪分析
  • 文本分类
  • 问题分类
  • 需求
  • 语言建模
  • 机器翻译
  • 序列标记
  • 问答
  • 无监督学习
• torchtext.vocab
  • 词汇
  • SubwordVocab
  • 矢量
  • GloVe
  • FastText
  • CharNGram
  • build_vocab_from_iterator
• torchtext.utils
  • 报告钩子
  • download_from_url
  • unicode_csv_reader
  • extract_archive
• torchtext.experimental.datasets
  • 情绪分析
  • 语言建模
• 示例

指数和表格

• 索引

• 模块索引

• 搜索页