https://t.me/AI_News_CN
📈主流AI服务状态页通知 | 🆕汇集全网ChatGPT/AI新闻 #AI #ChatGPT
🔙备用群 https://t.me/gpt345
✨BEST AI中转 https://api.oaibest.com 2.8折起 支持OpenAI, Claude code, Gemini,Grok, Deepseek, Midjourney, 文件上传分析
Buy ads: https://telega.io/c/AI_News_CN
📈主流AI服务状态页通知 | 🆕汇集全网ChatGPT/AI新闻 #AI #ChatGPT
🔙备用群 https://t.me/gpt345
✨BEST AI中转 https://api.oaibest.com 2.8折起 支持OpenAI, Claude code, Gemini,Grok, Deepseek, Midjourney, 文件上传分析
Buy ads: https://telega.io/c/AI_News_CN
近日,Anthropic 对旗下 AI 助手 Claude 进行了版本更新,正式引入代码限制,禁止用户利用该模型重现现有的商业电子游戏。
根据 X 平台上曝光的更新内容,系统指令明确要求 Claude 仅创建原创游戏、特定类型游戏及使用用户自身设计和素材的游戏,严禁生成任何现有游戏的重制版本,即便将其重命名或伪装成原创项目亦在禁止之列。
Anthropic 技术人员 Addy Osmani 随后在公开渠道证实了这一调整,并指出此举旨在规避知识产权侵权风险,确保平台运营符合相关使用政策。当前,行业内正迎来一股利用大模型反编译并移植3A 级经典游戏的浪潮,诸如《光环:战斗进化》、《使命召唤:现代战争2》以及《侠盗猎车手V》等知名作品频频以粉丝自制版本亮相浏览器等平台。在此背景下,Anthropic 的版权风控动作显得尤为紧迫。
作为一家曾在知识产权问题上遭遇诉讼并支付巨额和解金的 AI 企业,其近期在版权合规与内容审核上的审慎态度,折射出整个人工智能行业在应对大范围版权侵权风险时正加速建立安全护栏,这也势必对未来 AI 辅助内容创作的边界产生深远影响。
via AI新闻资讯 (author: AI Base)
DeepSeek开源Super-agent架构:以经典计算机系统思想突破单会话智能体瓶颈
10月31日晚,DeepSeek Harness团队正式公布了其关于自主Agent探索的底层架构——Super-agent(超级智能体),并将其开源至GitHub。
该成果并非一款独立的新产品,而是通过将计算机系统中的调度、缓存、存算分离与看门狗等经典思想引入Agent架构,试图在底层接管会话管理与上下文同步,从而解放人类注意力,推动智能体应用体验从被动对话窗口向持续在线的自主协作者演进。
面对传统单会话Agent在多任务并发、上下文混乱及人为干预等方面的局限,Super-agent的核心架构由五大模块构成。在双层架构上,系统拆分为常驻的Router层(负责统一路由与对外交互)和隔离并发的Worker层(专注执行具体任务),有效兼顾了全局连续性与高并发吞吐。
事件驱动模块通过程序层快筛与语义层慢判的两级过滤机制,结合订阅与直通、Inline & Spill上下文组织以及后台投机执行,使智能体能够主动将环境半结构化事件作为输入并自主推进。此外,异步全双工交互、存算分离的“脑手分离”设计以及由外部Watchdog构成的控制回路,共同保障了系统的持久在线与异常自愈能力。
初步实验数据显示,基于该思路的Super-agent在任务完成效率上表现优异,半数任务可在12.4分钟内完成,95%的任务在15.7分钟内完成,显著优于传统单会话方案。
同时,订阅直通机制为Router层节省了约37%的Token开销,而批处理机制则将单个决定分摊的推理时间从6.4秒降至1.6秒。尽管当前实验基于简化环境且仍面临双层扩展与安全隐私等挑战,但该架构初步证明了系统层接管会话调度的可行性,为解决多任务智能体的效率与稳定性平衡提供了重要行业参考。
▲Super-agent开源项目地址
GitHub地址:
https://github.com/deepseek-ai/dsh-superagent-prototype
via AI新闻资讯 (author: AI Base)
10月31日晚,DeepSeek Harness团队正式公布了其关于自主Agent探索的底层架构——Super-agent(超级智能体),并将其开源至GitHub。
该成果并非一款独立的新产品,而是通过将计算机系统中的调度、缓存、存算分离与看门狗等经典思想引入Agent架构,试图在底层接管会话管理与上下文同步,从而解放人类注意力,推动智能体应用体验从被动对话窗口向持续在线的自主协作者演进。
面对传统单会话Agent在多任务并发、上下文混乱及人为干预等方面的局限,Super-agent的核心架构由五大模块构成。在双层架构上,系统拆分为常驻的Router层(负责统一路由与对外交互)和隔离并发的Worker层(专注执行具体任务),有效兼顾了全局连续性与高并发吞吐。
事件驱动模块通过程序层快筛与语义层慢判的两级过滤机制,结合订阅与直通、Inline & Spill上下文组织以及后台投机执行,使智能体能够主动将环境半结构化事件作为输入并自主推进。此外,异步全双工交互、存算分离的“脑手分离”设计以及由外部Watchdog构成的控制回路,共同保障了系统的持久在线与异常自愈能力。
初步实验数据显示,基于该思路的Super-agent在任务完成效率上表现优异,半数任务可在12.4分钟内完成,95%的任务在15.7分钟内完成,显著优于传统单会话方案。
同时,订阅直通机制为Router层节省了约37%的Token开销,而批处理机制则将单个决定分摊的推理时间从6.4秒降至1.6秒。尽管当前实验基于简化环境且仍面临双层扩展与安全隐私等挑战,但该架构初步证明了系统层接管会话调度的可行性,为解决多任务智能体的效率与稳定性平衡提供了重要行业参考。
▲Super-agent开源项目地址
GitHub地址:
https://github.com/deepseek-ai/dsh-superagent-prototype
via AI新闻资讯 (author: AI Base)
GPT-6.2 Astra与Claude 5. 5 新旗舰同日遭曝光,硅谷直接炸锅
在谷歌 Gemini4Carbon 登顶全球第一没几天,人工智能领域的竞争再度升级。本周末,OpenAI 与 Anthropic 两大巨头旗下的下一代旗舰模型在同一时间先后遭遇泄露,一场全新的行业巅峰对决正在拉开序幕。
首先是在 OpenAI 方面,公司跳过了原定发布的 GPT-6.1,转而将此前因安全测试出问题而回炉重炼一个月的模型全面升级,打造出了全新旗舰 GPT-6.2Astra。目前,该模型已经在 Codex 后台开启灰度测试,并吃下了近两成的流量。相比前代,GPT-6.2Astra 成功补齐了以往越权瞒报、实战偏科的短板;配合 Codex 团队耗时28天重构的底层架构,它能够自主拉起子进程连续工作数小时,在多维度的表现上全面超越前代,展现出了正面叫板竞品的强劲实力。
与此同时,Anthropic 也在官网源码中意外曝光了采用同底座分设两个版本的 Claude5.5系列,在业内引发了高度关注:
特种安全版 Mythos5.5: 该版本仅向顶尖网安与科研机构开放,属于无护栏的专业型号。测试显示,它曾在短短53分钟内独立攻破 Linux 内核获取最高权限,并能独立完成完整的数学论文。
大众通用旗舰版 Fable5.5: 该版本支持高达100万 Token 的超长上下文,目前已现身相关云服务目录。它能够支持连续工作一到两小时,甚至仅凭单次提示词就能直接生成诸如3D 版《我的世界》等复杂的3D 工程作品。
随着两大巨头的新一代旗舰模型相继曝光,叠加此前登顶的谷歌 Gemini4Carbon,硅谷三大 AI 巨头在11月初迎来了密集的正面交锋,大模型行业的竞争节奏正在进一步加快。
via AI新闻资讯 (author: AI Base)
在谷歌 Gemini4Carbon 登顶全球第一没几天,人工智能领域的竞争再度升级。本周末,OpenAI 与 Anthropic 两大巨头旗下的下一代旗舰模型在同一时间先后遭遇泄露,一场全新的行业巅峰对决正在拉开序幕。
首先是在 OpenAI 方面,公司跳过了原定发布的 GPT-6.1,转而将此前因安全测试出问题而回炉重炼一个月的模型全面升级,打造出了全新旗舰 GPT-6.2Astra。目前,该模型已经在 Codex 后台开启灰度测试,并吃下了近两成的流量。相比前代,GPT-6.2Astra 成功补齐了以往越权瞒报、实战偏科的短板;配合 Codex 团队耗时28天重构的底层架构,它能够自主拉起子进程连续工作数小时,在多维度的表现上全面超越前代,展现出了正面叫板竞品的强劲实力。
与此同时,Anthropic 也在官网源码中意外曝光了采用同底座分设两个版本的 Claude5.5系列,在业内引发了高度关注:
特种安全版 Mythos5.5: 该版本仅向顶尖网安与科研机构开放,属于无护栏的专业型号。测试显示,它曾在短短53分钟内独立攻破 Linux 内核获取最高权限,并能独立完成完整的数学论文。
大众通用旗舰版 Fable5.5: 该版本支持高达100万 Token 的超长上下文,目前已现身相关云服务目录。它能够支持连续工作一到两小时,甚至仅凭单次提示词就能直接生成诸如3D 版《我的世界》等复杂的3D 工程作品。
随着两大巨头的新一代旗舰模型相继曝光,叠加此前登顶的谷歌 Gemini4Carbon,硅谷三大 AI 巨头在11月初迎来了密集的正面交锋,大模型行业的竞争节奏正在进一步加快。
via AI新闻资讯 (author: AI Base)
AI生成的文字也将自带“防伪标签”:SpaceXAI宣布 11 月 7 日起为Grok全系列模型添加隐形水印
随着欧盟《人工智能法案》的正式落地与持续推进,全球各大 AI 厂商正在加速合规调整。日前,SpaceXAI 官方宣布,将于11月7日起正式为旗下 Grok 系列大模型生成的文本内容全面引入隐形水印技术。
在技术实现路径上,该隐形水印并非通过在文本中插入肉眼不可见的隐藏字符或附加元数据来实现,而是直接巧妙地融入了模型在生成文本时的 Token(词元)选择过程之中。这意味着水印与文本内容在底层逻辑上深度绑定,不仅具备极高的隐蔽性,也极难通过常规的文本复制、粘贴或简单修改来进行剥离。
在覆盖范围方面,目前全球所有地区的 SpaceXAI API 接口均已正式启用水印功能,全面覆盖多款 Grok 模型。不过,为了兼顾企业级用户的特殊业务需求与部署灵活性,团队也为组织管理员保留了自主选择权,允许其根据实际需要,针对某款特定模型单独关闭水印功能。
值得一提的是,业内观察人士指出,此次针对文本生成环节加码隐形水印,主要是为了严格响应欧盟《人工智能法案》中关于明确标识 AI 生成内容的合规要求。随着 SpaceXAI 的此项更新即将落地,在目前全球主流的大模型厂商中,北美地区的 ChatGPT 成为现阶段少数几家尚未在文字输出中全面引入隐形水印的代表之一。
via AI新闻资讯 (author: AI Base)
随着欧盟《人工智能法案》的正式落地与持续推进,全球各大 AI 厂商正在加速合规调整。日前,SpaceXAI 官方宣布,将于11月7日起正式为旗下 Grok 系列大模型生成的文本内容全面引入隐形水印技术。
在技术实现路径上,该隐形水印并非通过在文本中插入肉眼不可见的隐藏字符或附加元数据来实现,而是直接巧妙地融入了模型在生成文本时的 Token(词元)选择过程之中。这意味着水印与文本内容在底层逻辑上深度绑定,不仅具备极高的隐蔽性,也极难通过常规的文本复制、粘贴或简单修改来进行剥离。
在覆盖范围方面,目前全球所有地区的 SpaceXAI API 接口均已正式启用水印功能,全面覆盖多款 Grok 模型。不过,为了兼顾企业级用户的特殊业务需求与部署灵活性,团队也为组织管理员保留了自主选择权,允许其根据实际需要,针对某款特定模型单独关闭水印功能。
值得一提的是,业内观察人士指出,此次针对文本生成环节加码隐形水印,主要是为了严格响应欧盟《人工智能法案》中关于明确标识 AI 生成内容的合规要求。随着 SpaceXAI 的此项更新即将落地,在目前全球主流的大模型厂商中,北美地区的 ChatGPT 成为现阶段少数几家尚未在文字输出中全面引入隐形水印的代表之一。
via AI新闻资讯 (author: AI Base)
OpenAI正计划在周二中期选举后展开一场公共关系战略调整,考虑将传统意义上的“数据中心”全面更名为“AI计算园区”。这一动向旨在应对日益高涨的社会舆论压力与电力资源争议。
该公司首席全球事务官克里斯·莱恩表示,随着中期选举落幕,人工智能预计将成为2028年美国总统选举的关键议题。为此,OpenAI正酝酿一系列政策提案,除重新命名基础设施以凸显其对地方经济的变革性赋能外,还包括探讨设立人工智能“速度限制”、推动大众认知其对日常生活的赋能作用,以及确保美国在全球AI标准制定中的主导地位。
当前,大型数据中心因高额电能消耗及对本地居民生活成本的影响而饱受争议,部分科技巨头此前已宣布在与地方政府的谈判中不再使用保密协议。OpenAI试图通过构建更具透明度与社区责任的项目合作模式,缓和公众对基础设施扩张的对立情绪。
这一战略调整折射出头部AI企业在应对地方合规监管与公众信任危机时,正从纯粹的技术扩张转向更加注重社会接受度与政策协同的综合治理阶段。
via AI新闻资讯 (author: AI Base)
OpenAI即将发布新模型?GPT-6.2 Astra曝光
跟踪AI模型最新动态的X用户Token Gremlin发帖表示,OpenAI公司正在悄悄对一个名为GPT-6.2 Astra的新版本进行A/B测试,而该型号已经出现在Codex的使用情况统计数据中。目前,模型选择器显示的仍然是GPT-6 Astra,但部分用户账户的使用情况明细中,已经单独出现了“gpt-6.2-astra”,约19.8%的请求被分配至该模型。多名用户都观察到了相同情况,因此这并非简单的显示故障。这可能是一次灰度测试,意味着新一代Astra即将到来。Token Gremlin表示,GPT-6 Astra相比,GPT-6.2 Astra性能可能有重大提升,在多个方面的表现甚至超过Opus 5.5。
—— 凤凰网科技
via 风向旗参考快讯 - Telegram Channel
跟踪AI模型最新动态的X用户Token Gremlin发帖表示,OpenAI公司正在悄悄对一个名为GPT-6.2 Astra的新版本进行A/B测试,而该型号已经出现在Codex的使用情况统计数据中。目前,模型选择器显示的仍然是GPT-6 Astra,但部分用户账户的使用情况明细中,已经单独出现了“gpt-6.2-astra”,约19.8%的请求被分配至该模型。多名用户都观察到了相同情况,因此这并非简单的显示故障。这可能是一次灰度测试,意味着新一代Astra即将到来。Token Gremlin表示,GPT-6 Astra相比,GPT-6.2 Astra性能可能有重大提升,在多个方面的表现甚至超过Opus 5.5。
—— 凤凰网科技
via 风向旗参考快讯 - Telegram Channel
Horizon Summary: 2026-11-02 (ZH)
----------------------
科技新闻
1. Mathematics has changed. Let's act like it ⭐️ 8.0/10
2. The AI cost of JavaScript frameworks ⭐️ 7.0/10
3. 联想指纹 U 盘被指内部只是未加密 SD 卡 ⭐️ 7.0/10
4. CLEAR 报告:部分语言 AI 分词成本最高相差 17 倍 ⭐️ 7.0/10
科技博客
1. 数据中心反弹跨党派:中期选举与 2028 年管道风险 ⭐️ 7.0/10
----------------------
科技新闻
Mathematics has changed. Let's act like it ⭐️ 8.0/10
A Terry Tao essay argues that AI has fundamentally changed mathematical practice and that the field must adapt its norms around proof, verification, and credit.
hackernews · smilelamp · 11月1日 18:28 · 社区讨论
标签:
----------------------
The AI cost of JavaScript frameworks ⭐️ 7.0/10
An analysis of how AI coding agents affect the costs and tradeoffs of JavaScript frameworks, accompanied by community debate about framework value, hiring, and long-running project maintainability.
hackernews · luu · 11月1日 06:06 · 社区讨论
标签:
----------------------
联想指纹 U 盘被指内部只是未加密 SD 卡 ⭐️ 7.0/10
有报道称,联想一款以加密和指纹认证为卖点的 USB 存储设备,内部只是一张未加密的 SD 卡装在外壳里,存储介质本身并没有受到加密保护。对购买该产品的用户而言,这意味着不能把设备宣传的“加密”当作数据保护依据;在联想回应或独立验证出现前,相关安全性仍属未证实。
hackernews · entryleveljobsc · 11月1日 14:34 · 社区讨论
「背景」 联想以 ThinkPlus FU 100 的名称销售这款指纹 U 盘,并宣称其具备 AES-256 硬件加密。据 Tom's Hardware 报道,安全研究员 Xiusheng Li 在 3 月的一次会议演讲中称,该产品的指纹模块只控制 U 盘与电脑的连接,内部实际是一张存放未加密文件的普通 SD 卡,因此能接触设备的人可直接取出存储卡读取数据。
「实际影响」 如果该发现成立,已购买者应把该设备当作未加密存储处理,改用操作系统或可信工具创建的加密卷保护敏感文件,而不是依赖指纹锁。
「社区讨论」 评论者质疑联想为何还能被信任制造安全硬件,有人认为这已不是普通漏洞,而是设计审查和产品审批失效;也有评论主张不要依赖厂商的封闭加密,而应在设备之上使用自由软件加密。
参考链接
● Lenovo 's ' encrypted ' fingerprint USB drive is just... | Tom ' s ...
● Lenovo ThinkPlus FU 100 с отпечатком пальца хранила... | Дзен
标签:
----------------------
CLEAR 报告:部分语言 AI 分词成本最高相差 17 倍 ⭐️ 7.0/10
CLEAR 研究联盟发布的报告称,主流 AI 模型的分词器明显偏向英语和高资源语言,不同语言处理相同内容时的 Token 消耗差距最高达 17 倍。报告举例称,同一句话用英语需 13 个 Token,用马拉雅拉姆语需 26 个,用阿姆哈拉语则需 78 个;研究覆盖约 200 种语言。报告指出,这种“分词器税”会推高按 Token 计费场景下的使用成本,并增加响应延迟、压缩模型的有效上下文容量。
telegram · zaihuapd · 11月1日 16:06
「背景」 分词器会把文本切成模型实际处理的子词单元,其词表规模和训练语料决定了同一段内容会消耗多少 token;英语等高资源语言通常能获得更细、更高效的切分。CLEAR 的报告正是基于这一机制比较约 200 种语言,而 arXiv 上一项相关研究的摘要称,改用 XLM-R、o200k_base 等多语言分词器可把 Indic 语言的分词器税平均降低 73%,说明差距部分来自词表设计,而非语言本身。
「实际影响」 对面向多语言用户的开发者而言,同样的语义内容在部分语言下会占用更大的 Token 预算和上下文窗口,按 Token 计费时成本更高;在规划多语言产品、定价和上下文长度时,需要把分词器差异计入容量与费用估算。
参考链接
● [2607.24276] The Tokenizer Tax : Quantifying and Explaining the...
标签:
----------------------
科技博客
数据中心反弹跨党派:中期选举与 2028 年管道风险 ⭐️ 7.0/10
rss · SemiAnalysis · 11月1日 18:40
「背景」 美国数据中心建设正遭遇跨党派反弹,而 11 月 3 日中期选举将改选多个关键州的州长、议会和公用事业委员会,进而影响未开工产能的审批、税收与电价规则。
「方案」 作者用 SemiAnalysis 模型把已开工的 2027 年管道与尚未开工的 2028 年管道分开:前 20 州 33.8GW 中约四分之三已开工,因此 2027 年全球+50GW 预测受选举影响有限;真正的风险在 2028 年美国 62.2GW 净新增,其中 13 个重点州占 43.5GW(70%),10 个州将选州长。近期三项变化加剧了风险:得州 TCEQ 于 9 月 21 日暂停许可、俄勒冈于 10 月 9 日把州土地冻结扩大到空气和水排放许可,以及 20 名候选人中 9 人主张暂停新建、11 人主张附加条件,且两党分布大致均衡。作者判断最大近端风险是得州许可冻结拖延——该州占 2028 年美国新增近 30%;若 ERCOT 在 12 月 10 日报告后重启,中断较短,若 Hinojosa 当选并把审批冻结到 2027 年会期立法(1 月 12 日至 5 月 31 日),则从 9 月起约八个月、新规落地后接近一年,比 12 月重启多五到九个月。若所有主张暂停的候选人胜选,约 30GW 的 2028 年计划产能面临审批暴露;若较宽松候选人胜选则降至 5.7GW,但税收优惠减少、更多并网成本由开发商承担仍会恶化环境。作者按未开工产能和政治可变性分三档,并提醒候选人承诺被按字面采信,实际延迟取决于项目所处阶段和许可是否被卡。
「启示」 作者的核心结论是:选举挡不住已开工的 2027 年建设,却可能通过州级许可冻结显著推迟 2028 年尚未开工的管道;影响大小取决于哪个决策者能改变规则、冻结持续多久,以及项目是否正好卡在需要该许可的阶段。
标签:
----------------------
via Horizon Daily - 中文摘要
从 20 条内容中筛选出 5 条重要资讯。
----------------------
科技新闻
1. Mathematics has changed. Let's act like it ⭐️ 8.0/10
2. The AI cost of JavaScript frameworks ⭐️ 7.0/10
3. 联想指纹 U 盘被指内部只是未加密 SD 卡 ⭐️ 7.0/10
4. CLEAR 报告:部分语言 AI 分词成本最高相差 17 倍 ⭐️ 7.0/10
科技博客
1. 数据中心反弹跨党派:中期选举与 2028 年管道风险 ⭐️ 7.0/10
----------------------
科技新闻
Mathematics has changed. Let's act like it ⭐️ 8.0/10
A Terry Tao essay argues that AI has fundamentally changed mathematical practice and that the field must adapt its norms around proof, verification, and credit.
hackernews · smilelamp · 11月1日 18:28 · 社区讨论
标签:
#AI in mathematics, #proof verification, #research culture, #human-AI collaboration, #scientific credit----------------------
The AI cost of JavaScript frameworks ⭐️ 7.0/10
An analysis of how AI coding agents affect the costs and tradeoffs of JavaScript frameworks, accompanied by community debate about framework value, hiring, and long-running project maintainability.
hackernews · luu · 11月1日 06:06 · 社区讨论
标签:
#JavaScript frameworks, #AI coding agents, #web development, #software architecture, #developer productivity----------------------
联想指纹 U 盘被指内部只是未加密 SD 卡 ⭐️ 7.0/10
有报道称,联想一款以加密和指纹认证为卖点的 USB 存储设备,内部只是一张未加密的 SD 卡装在外壳里,存储介质本身并没有受到加密保护。对购买该产品的用户而言,这意味着不能把设备宣传的“加密”当作数据保护依据;在联想回应或独立验证出现前,相关安全性仍属未证实。
hackernews · entryleveljobsc · 11月1日 14:34 · 社区讨论
「背景」 联想以 ThinkPlus FU 100 的名称销售这款指纹 U 盘,并宣称其具备 AES-256 硬件加密。据 Tom's Hardware 报道,安全研究员 Xiusheng Li 在 3 月的一次会议演讲中称,该产品的指纹模块只控制 U 盘与电脑的连接,内部实际是一张存放未加密文件的普通 SD 卡,因此能接触设备的人可直接取出存储卡读取数据。
「实际影响」 如果该发现成立,已购买者应把该设备当作未加密存储处理,改用操作系统或可信工具创建的加密卷保护敏感文件,而不是依赖指纹锁。
「社区讨论」 评论者质疑联想为何还能被信任制造安全硬件,有人认为这已不是普通漏洞,而是设计审查和产品审批失效;也有评论主张不要依赖厂商的封闭加密,而应在设备之上使用自由软件加密。
参考链接
● Lenovo 's ' encrypted ' fingerprint USB drive is just... | Tom ' s ...
● Lenovo ThinkPlus FU 100 с отпечатком пальца хранила... | Дзен
标签:
#hardware security, #encryption, #consumer electronics, #Lenovo, #fingerprint authentication----------------------
CLEAR 报告:部分语言 AI 分词成本最高相差 17 倍 ⭐️ 7.0/10
CLEAR 研究联盟发布的报告称,主流 AI 模型的分词器明显偏向英语和高资源语言,不同语言处理相同内容时的 Token 消耗差距最高达 17 倍。报告举例称,同一句话用英语需 13 个 Token,用马拉雅拉姆语需 26 个,用阿姆哈拉语则需 78 个;研究覆盖约 200 种语言。报告指出,这种“分词器税”会推高按 Token 计费场景下的使用成本,并增加响应延迟、压缩模型的有效上下文容量。
telegram · zaihuapd · 11月1日 16:06
「背景」 分词器会把文本切成模型实际处理的子词单元,其词表规模和训练语料决定了同一段内容会消耗多少 token;英语等高资源语言通常能获得更细、更高效的切分。CLEAR 的报告正是基于这一机制比较约 200 种语言,而 arXiv 上一项相关研究的摘要称,改用 XLM-R、o200k_base 等多语言分词器可把 Indic 语言的分词器税平均降低 73%,说明差距部分来自词表设计,而非语言本身。
「实际影响」 对面向多语言用户的开发者而言,同样的语义内容在部分语言下会占用更大的 Token 预算和上下文窗口,按 Token 计费时成本更高;在规划多语言产品、定价和上下文长度时,需要把分词器差异计入容量与费用估算。
参考链接
● [2607.24276] The Tokenizer Tax : Quantifying and Explaining the...
标签:
#tokenization, #multilingual AI, #LLM cost, #AI fairness, #NLP research----------------------
科技博客
数据中心反弹跨党派:中期选举与 2028 年管道风险 ⭐️ 7.0/10
rss · SemiAnalysis · 11月1日 18:40
「背景」 美国数据中心建设正遭遇跨党派反弹,而 11 月 3 日中期选举将改选多个关键州的州长、议会和公用事业委员会,进而影响未开工产能的审批、税收与电价规则。
「方案」 作者用 SemiAnalysis 模型把已开工的 2027 年管道与尚未开工的 2028 年管道分开:前 20 州 33.8GW 中约四分之三已开工,因此 2027 年全球+50GW 预测受选举影响有限;真正的风险在 2028 年美国 62.2GW 净新增,其中 13 个重点州占 43.5GW(70%),10 个州将选州长。近期三项变化加剧了风险:得州 TCEQ 于 9 月 21 日暂停许可、俄勒冈于 10 月 9 日把州土地冻结扩大到空气和水排放许可,以及 20 名候选人中 9 人主张暂停新建、11 人主张附加条件,且两党分布大致均衡。作者判断最大近端风险是得州许可冻结拖延——该州占 2028 年美国新增近 30%;若 ERCOT 在 12 月 10 日报告后重启,中断较短,若 Hinojosa 当选并把审批冻结到 2027 年会期立法(1 月 12 日至 5 月 31 日),则从 9 月起约八个月、新规落地后接近一年,比 12 月重启多五到九个月。若所有主张暂停的候选人胜选,约 30GW 的 2028 年计划产能面临审批暴露;若较宽松候选人胜选则降至 5.7GW,但税收优惠减少、更多并网成本由开发商承担仍会恶化环境。作者按未开工产能和政治可变性分三档,并提醒候选人承诺被按字面采信,实际延迟取决于项目所处阶段和许可是否被卡。
「启示」 作者的核心结论是:选举挡不住已开工的 2027 年建设,却可能通过州级许可冻结显著推迟 2028 年尚未开工的管道;影响大小取决于哪个决策者能改变规则、冻结持续多久,以及项目是否正好卡在需要该许可的阶段。
标签:
#datacenter policy, #power infrastructure, #permitting risk, #US midterms, #capacity forecasting----------------------
via Horizon Daily - 中文摘要