V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  zhengqiang64  ›  全部回复第 1 页 / 共 3 页
回复总数  55
1  2  3  
4 天前
回复了 Erona 创建的主题 程序员 有人把「词元」一词塞进了 opencode
@Anarchy 但实际上就是因为 token 这一词已经被滥用了,在很多非技术人的眼里变成单指 LLM 的 token 了。所以 token 这次本身用的就不适合。那么作为一个需要普适化,需要进行教育,未来写到书本上的东西,继续用 token 这词适合吗?
另外为啥叫词元不叫字元,我觉得也很关键,因为英语的语境里没有字。再小就是字母了,但字母并不是构成 LLM 的最小单位。
为了考虑到英语语境,把 token 翻译成词,本身就是被国外主导了话语权的结果。词元,我认为反而是对西方主导的话语权做出了让步。
如果为了争夺话语权,我觉得的确应该叫算元或字元。
我觉得未来 mac 和 Windows 都会自带 agent
4 天前
回复了 zhengqiang64 创建的主题 问与答 你们都是从哪里关注 AI 资讯的?
@googlefans 搞过,之前养龙虾,让他从各大官网和论坛,主动获取消息整理给我。但这玩意毕竟耗 token ,后来龙虾不玩了,也就关了
4 天前
回复了 revival83 创建的主题 问与答 有什么不抽卡的手游还上头的么?
二游在原神之后就没碰过了,上班摸鱼我现在选择玩 SLG
4 天前
回复了 zhengqiang64 创建的主题 问与答 你们都是从哪里关注 AI 资讯的?
@kuhung 我也是那么想的,所以之前也没多关注,现在只是好奇其他人是怎么看的
4 天前
回复了 jerry933900 创建的主题 生活 底层人为什么完不成原始资本积累?
因为这 1 万买手机和 5 万买车,足够让对方产生幸福感。要他们去买房,他们没这能力,憋半天也憋不出个首付。为啥还要委屈自己?
再看看如今的房价,又有多少人后悔当时自己的努力呢?薪资是比这些人高,但省吃节用下来活的也没别人舒服。辛辛苦苦赞的那些钱,还被银行给套住。买了房后,就算月薪三四万,跟人家月薪五六千比,实际生活水平并没区别。
4 天前
回复了 Erona 创建的主题 程序员 有人把「词元」一词塞进了 opencode
@Anarchy 你是真没见过非技术人沟通 AI 的东西吗?我们技术在跟商务和运营沟通时,早就用词元来代替 token 了。token 这词,他们之前压根不理解。有一次后台系统要重新登录,说 token 过期了,别人还一脸莫名其妙问登录跟模型有啥关系
5 天前
回复了 Ayanokouji 创建的主题 程序员 大模型领域 token 这个词, apple 的翻译
目前看,算元这次,最为贴切,其次我觉得词元也符合,符元我觉得就抽象了,符代表啥?符号?那不应该叫字元更适合?
5 天前
回复了 Erona 创建的主题 程序员 有人把「词元」一词塞进了 opencode
@catazshadow 不是吧,玩梗你当真了?
5 天前
回复了 Erona 创建的主题 程序员 有人把「词元」一词塞进了 opencode
@catazshadow 哦对对对,全感谢马斯克开源,要不是马斯克就没国产 AI 是啊?
1  2  3  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5876 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 23ms · UTC 02:56 · PVG 10:56 · LAX 19:56 · JFK 22:56
♥ Do have faith in what you're doing.