Token 正式被译名为「词元」，怎样看待这一翻译？「词元」到底是什 …
更新: 我认为token应该翻译为“原神” 原回答: 我觉得词元是一个很牛逼的翻译 token可以理解为是模型能识别的最小语言单位，那么“词”是主体 “元”通常用来表示最小单位，有“最基本、最基础”的含义。比如 …
我国日均 Token 消耗量已突破 30 万亿，这是一个什么量级的概念？
不同的AI任务消耗的Token数量相差挺大的，从200Token左右的Micro任务到60万左右的Agent工作。 最少的Micro级别，可能就是做最基础的情感sentiment分析，就比如下面这个例子，判断一句话中透露 …
在计算机领域token有多少种意思? - 知乎
int（关键字token） a（标识符token） =（操作符token） 1（数字token） ;（分隔符token） 就像把一句话拆分成一个个词语那样简单 AI/NLP领域的token 这是最近特别被人熟知，即使是不学计算机的也 …
腾讯、阿里都开始给员工发Token，鼓励使用 AI 工具工作，Token 以后 …
千万不要太天真，把大厂给员工发Token这件事看成是福利，这是今年我听到职场上最大的笑话。 人均一年22万的Token额度，确实很大方，甚至有人开始与当年的免费三餐、下午茶相提并论。 其实， 你 …
本地模型部署划算还是付费买 Token 划算？ - 知乎
当然是买token。 token贵是因为国外的贵。 国内提供商的又不贵。尤其是 coding plan 基本就国外二十分之一的价格，哪怕养个龙虾，成本也没多少。 你都 本地部署 了，本地部署的哪个能打得过 国内模 …
清华专家杨斌认为「token」译名迫在眉睫，该词为何如此难翻译，又 …
最近总听到有人讲，给“Token”这个词确定一个中文名，已经“迫在眉睫”了。一个技术词汇而已，真有这么…
用transformer做视觉，具体是怎么把图片转成token的？ - 知乎
这些图像的token意义上等价于文本的token，都是原来信息的序列表示。 不同的是，文本的token是通过分词算法分到的subword，这些subword会被映射到字典的index；也就是说，文本的token是一个数 …
阿里成立 Token Hub 事业群，由吴泳铭直接负责，此次架构调整对阿里 …
Token Hub最大的价值，就是 模型团队 和 业务团队 之间建立了一个明确的接口层。以前：通义实验室做出一个新版本的Qwen模型，阿里云拿去上API，千问APP拿去做产品，各取所需但各干各的。模型 …
在 AI 语境中，如何翻译 token 这个词更恰当？ - 知乎
所以，中文切分的复杂性，是 token 长期没有统一翻译的原因之一。 更棘手的是：token 这个词不专属于大模型，它在不同领域有不同含义。 你用什么词称呼一件事，就是在声明它属于哪个世界，所 …
【5分钟背八股】什么是 Token?什么是 JWT?如何基于Token进行身份验 …
Token是指一串代表某个用户身份信息的字符串。Token通常包含了用户的身份认证信息以及访问权限等相关信息，可以用于在不同的系统和服务之间进行身份验证和授权控制。 JWT（JSON Web …