翻译为：标记化
科技|查看相关文献(pubmed)|免费全文文献 详细解释: Tokenization(分词处理) 含义:指将文本拆分为较小的单位(tokens),这些单位可以是单词、字符或子词,用于语言模型的输入。 例子:GPT 模型使用 tokenization 将句子拆分成单独的 token。 以下为句子列表: 分享到:...
将要拆分的文本分为tokens，tokens包括words，numbers，dates，punctuation。
您现在的位置:生物医药大词典 >> 通用词典 >> 词汇解释: Tokenization Tokenization分享到: 标记化分类: 科技 | 查看相关文献(pubmed) | 免费全文文献 详细解释:以下为句子列表:分享到: 赞助商链接 你知道它的英文吗? ·同义词集 ·T - 分布随机近邻嵌入 ·张量 ·张量处理单元 ·最小二乘法 ·...
首页 翻译 英文校对 背单词 词霸下载 用户反馈 专栏平台 登录 翻译 Card tokenization 翻译 卡片令牌化 以上结果来自机器翻译。 释义
您现在的位置:生物医药大词典 >> 通用词典 >> 词汇解释: tokenization tokenization分享到: 标记化分类: 科技 | 查看相关文献(pubmed) | 免费全文文献 详细解释:以下为句子列表:分享到: 赞助商链接 你知道它的英文吗? ·粒子群优化算法 ·即插即用生成网络 ·量子化神经网络 ·径向基函数 ·受限...