V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  sillydaddy  ›  全部回复第 8 页 / 共 157 页
回复总数  3137
1 ... 4  5  6  7  8  9  10  11  12  13 ... 157  
换句话说,如果你自己平时用的时候,问的问题的难度分布(比如 1 个超级简单的,10 个中等难度的,3 个架构设计的),与 Arena 用户在对答案投票时,问的问题难度分布(比如 2 个超级简单的,18 个中等难度的,5 个架构设计的)类似,那这个分数就很适用,分差完美反映了 2 者的实力差距。
Elo 评分还是比较可靠的:Elo 基本是所有赛事都常用的评分机制:围棋、游戏、赛车等等。
这个分数,表明了 2 个对手比赛时的胜率。

Elo 胜率公式:胜率 = 1 / (1 + 10^(分差/400))

Elo 相差 10 分 胜率 51.4% vs 胜率 48.6%,优势比较均衡,运气因素更大
Elo 相差 50 分 57.1% 42.9% 有不小的优势,五六次对局就能看出来
Elo 相差 100 分 64.0% 36.0% 明显优势,约 2:1 的胜率
Elo 相差 200 分 76.0% 24.0% 显著优势,约 3:1 的胜率
Elo 相差 400 分 90.9% 9.1% 碾压性优势,约 10:1 的胜率
Elo 相差 1000 分 99.0% 1.0% 几乎不可能输,约 100:1 的胜率


领先 50 分是什么概念呢?有 10 个问题,都给到 2 个模型,你会采用 A 模型的答案 6 次,B 模型 4 次。如果 2 个模型都很优异,这种采用率的差距比较明显了。但反过来想,如果与 Opus 4.7 thinking 比赛时,GLM 5.1 能在 10 次里面让用户采纳它的答案 4 次,那它的实力也不容小觑。

一个关键点就是,在比赛时,用户向 2 个模型提出的问题是什么,如果是写斐波那契数列程序,那甚至 qwen 都能战胜 opus ,毕竟这么简单的问题,所有的模型都能答的很好,用户只有选择「同样好」,这就会拉近 2 者的分数,如果都是用这样的问题 PK ,那么 Elo 分差就是 0 。

所以,要看 Arena 里面的 13 万次 votes ,用户都是问的什么问题,这是最关键的。如果 13 万次 votes 问的都是中等难度的问题,在中等问题难度 PK 中,都能让分差拉开 50 分,那么在高难度问题中,分差只会更大。
5 月 1 日
回复了 coreJK 创建的主题 程序员 领到小米 MIMO 的额度了,大家领了多少?
@iorilu 其实就是 1 个页面。参考 README.md ,配置好小米的 api_key 。

https://wormhole.app/KBloE0#PxVWasE4rRXo1UUK0YsM9w
5 月 1 日
回复了 coreJK 创建的主题 程序员 领到小米 MIMO 的额度了,大家领了多少?
汇报一下我的情况:
等了 24 小时吧,拿到了 7 亿 token 。感觉是因为我上传了 Cursor 里面消耗的 6 亿 token 的截图。

然后简单配了下 API key 。

然后开始用。

1. 为了问清楚给 Cursor 配 API key 的一些疑问(比如 Cursor 自身只开了一个 API key 的槽),调用了 6 次 mimo-v2.5-pro 。花了 0.25 刀,总计 token 73 万。其中 read cached 64 万,read 8 万,output 1 万。

2. 后来发现,上面配的 API key 是按 token 计价的那种,不是用的赠送的 7 亿 credits 额度。所以,又赶紧改回来。然后看到 mimo-v2-tts 模型是免费的,就让 mimo-v2.5 和 mimo-v2.5-pro 生成了一个网页工具(前、后端共 800 行代码),可以调用 mimo-v2-tts API 来实现文字转语音。问了 5 次,花了大概 500 万~600 万 credits 吧,平均一次 100 万 credits 。

效果还可以,还没有深度测试,像上面的工具之类的还可以:
https://i.v2ex.co/CsW8YVXDl.png
https://i.v2ex.co/46FcW7A1l.png

3. 后来发现 mimo-v2.5-pro 算 2 倍费率。用 mino-v2.5 算 1 倍(=2credit?)。

4. credits 消耗太快了,一个编码任务至少 100 万 credits 起步。


谁来用我的邀请码?你我都可以获得$2 的 API key 额度,可以用在 token 计费模式中,与 coding plan 是独立计价的。(第 1 条的 0.25 刀就是用的这个额度)

邀请码:A2ZFD2 。注册: https://platform.xiaomimimo.com?ref=A2ZFD2 (注册后点控制台左下方入口填入,体验金 40 天有效)
本来就没有自定义功能。。
YouTube 明显风控严格了。yt-dlp 下载都必须要登录用 cookie 了。
4 月 28 日
回复了 jedeft 创建的主题 Cursor cursor 变烂了
这话怎么说?
万有引力:为什么这么小的空间里聚集了这么多的飞船?
魔戒:海干了鱼就要聚集在水洼里,水洼也在干涸,鱼都将消失。

万有引力:所有的鱼都在这里吗?
魔戒:把海弄干的鱼都不在了。

万有引力:对不起,这话很费解。
魔戒:把海弄干的鱼……已经上岸,它们有无限的 token 可以用!
因为「划算」本身就没有明确的定义。「剩余的记忆币尽可能多」也是一个没有任何意义的提示,因为记忆币本身就可以看作是钱,那要达到「最低花费」必然要最大限度消耗已有的记忆币。
一样,上个十几分钟甚至几分钟,就直接断外网的感觉。我有 4 张手机卡(移动+联通)弄热点,还是破不了墙。麻痹的。
4 月 23 日
回复了 kasusa 创建的主题 分享创造 做了一个内网/本机用的 todo 系统(rbtodo)
#1 楼说的有道理: 「 todo 都是自己开发的,用别人的不符合自己的需求」 ,再补一条,「即使是自己开发的,也不符合自己的需求」。
这创意!请接受我卑微的打赏。
4 月 21 日
回复了 Bologna 创建的主题 职场话题 自媒体这碗饭真不是谁都吃的下的
可以在 v 站先练练。多发帖,多被批、驳、喷、怼,习惯就好了,有些伤害度低的基本免疫,那些不免疫的恢复起来也很快。
感谢分享。
「按会话+周度双维度按 Token 限制,与高级请求额度独立计算」,没看懂这里的限额是什么意思,Pro 不是一直是 10 美元 300 次吗?
4 月 20 日
回复了 malagebidi 创建的主题 V2EX ip 被封了,望解封
@Livid 明白了,我还以为我举报错了账号。我确实注意到有些帖子(似乎是)会被错误的自动的归类到「水深火热」这类节点。如果我发现了会 cc 一下。
4 月 20 日
回复了 malagebidi 创建的主题 V2EX ip 被封了,望解封
@Livid 请求 cc 背景。是被举报的那批股票拉群的账号吗?「社区维护透明度记录」中没搜到相关线索。
1 ... 4  5  6  7  8  9  10  11  12  13 ... 157  
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2805 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 47ms · UTC 14:31 · PVG 22:31 · LAX 07:31 · JFK 10:31
♥ Do have faith in what you're doing.