kayleh

我去,原来词元(Token)还有“身份凭证”的意思

  •  
  •   kayleh · Apr 7 · 2986 views
    This topic created in 210 days ago, the information mentioned may be changed or developed.

    1111

    2222

    20 replies  •  2026-04-09 17:21:16 +08:00
    Microi
    Microi
    Apr 7❤️2
    1
    我去,不早说。
    giter
    giter
    Apr 7
    2
    俺一直将 accessToken 和 refreshToken 念为访问凭证和刷新凭证
    nc
    nc
    Apr 7
    3
    老哥之前是不是没听过 oauth token 这个东西或 bearer token ?
    cairnechen
    4
    token=衍生物 万智牌玩家笑而不语
    skankhunt42
    skankhunt42
    Apr 7 via iPhone
    5
    楼上是真傻还是装傻,这明显是完全没有技术背景的人写稿把把 token 的意思搞错了
    nc
    nc
    Apr 7
    6
    话说新华社这篇文章真是误导大众
    JoeJoeJoe
    JoeJoeJoe
    Apr 7 via iPhone
    7
    好 下次和前端说 你没传词元 你的词元过期了
    madtwilight
    madtwilight
    Apr 7 via Android
    8
    Session Token 、Crypto Token 、LLM Token
    但凡用 AI 审稿也不会这样吧
    levelworm
    9
    最早的意思我记得好像是令牌,token ring 。
    CEBBCAT
    CEBBCAT
    Apr 8❤️5
    10
    少看这种用 Token 写 Token 的二流媒体
    94
    94
    Apr 8
    11
    出现 “简单来说”/“总的来说” 的文章不值得看。
    fredweili
    12
    oauth token ,一个词
    catazshadow
    13
    token 是任何用来表示任何特定意义的符号的意思,中文没有这种泛指的词,只能针对具体场景具体翻译

    叠个甲,中文里存在但是英文没法翻译的词也有,爱国党离我远点
    BeautifulSoup
    14
    token 最原始的意思是“代币”,有些城市的地铁票是个圆形塑料片,那个就是代币。令牌等含义都是后来延申出来的。
    rebbie
    rebbie
    Apr 8
    15
    token=地铁票 =火车路牌 =(游戏机/加密货币等)代币 =令牌 =词元 😂😂😂😂
    bao3
    bao3
    Apr 9❤️1
    16
    token 就是凭据,无论它是作为票据还是作为数字身份。
    把它翻译成词元,就挺傻逼的。
    如果感受不到它的傻逼性,就感受一下“鲁棒性”。
    b309f3337
    17
    前两年大模型开始流行起来的时候,一开始看到 token 这个说法还纳闷呢,怎么做身份验证的东西出现了这里
    hewitt29
    18
    之前一直是令牌
    jiliguluDa
    19
    @giter 没毛病
    Blake2Wang
    20
    token 本意就是令牌和凭证的意思,开发中的加密 accessToken 就是这个意思

    AI 场景下的 token 可以理解为引申出来的新的词义,就像中文多音字,虽然两个都是 token ,但是是两个完全不搭噶的东西,之所以叫 token 是因为,AI 训练和推理中有一个分词阶段( Tokenization )会把文本分割成一段一段的语义词,每个分割单元就叫 token 。

    英文一词多义很常见,arm 可以翻译成手臂也可以翻译成武装,这两个也是不搭噶的东西啊,所以 token 该翻译成词元就知道是 AI 场景下,翻译成令牌就是身份凭证,作为程序员我觉得词元很准确啊
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5072 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 88ms · UTC 07:46 · PVG 15:46 · LAX 23:46 · JFK 02:46
    ♥ Do have faith in what you're doing.