Skip to the content.

从 46 条内容中筛选出 12 条重要资讯。


科技新闻

  1. vLLM 0.29.0 默认启用 Model Runner V2 ⭐️ 8.0/10
  2. 苹果发布折叠设备 iPhone Duo ⭐️ 8.0/10
  3. Shopify acquisisce Tailwind: framework CSS sotto nuova proprietà ⭐️ 8.0/10
  4. GPT-6 Astra、循环 Transformer 与隐藏推理解读 ⭐️ 8.0/10
  5. 恶意软件如何骗过 Google Ads 审查:实操揭露 ⭐️ 8.0/10
  6. 研究者称 Qwen 3.8 复现 GPT-5.5 Pro 推理前缀,或涉蒸馏 ⭐️ 7.0/10
  7. GNU Radio 在浏览器中运行:用 WebAssembly 开启 SDR 实验 ⭐️ 7.0/10
  8. 陶哲轩:AI 正在耗尽开放数学问题 ⭐️ 7.0/10
  9. Rustls 十周年:回顾 0.23 稳定路线并展望 1.0 ⭐️ 7.0/10
  10. OpenAI 用 AI 设计芯片并称成本低于开源模型 ⭐️ 7.0/10

科技博客

  1. 智能模型路由如何显著降低 LLM 成本 ⭐️ 5.0/10
  2. CUDA 13.4 新特性:Windows on Arm 与共享 GPU 管控 ⭐️ 4.0/10

科技新闻

vLLM 0.29.0 默认启用 Model Runner V2 ⭐️ 8.0/10

vLLM v0.29.0 由 277 位贡献者提交了 594 个 commit(含 91 位新贡献者),核心变化是将 Model Runner V2(MRV2)设为所有模型的默认执行路径(少量 ROCm 模型仍保留 MRV1),并新增 Hy4-preview、Qwen3.8-Flash-Next、GraniteSWA/GraniteMoeSWA、NemotronH_Omni_Reasoning_V3 及 Kimi K3 NVFP4 checkpoint 等模型支持。该版本还带来多种性能与内存优化,包括 K3 的 MXFP4 top-k 融合使端到端延迟降低约 5%、Mamba 预填充 checkpoint 使 TTFT 改善 9%-25%、批量分片采样将每步 logits 内存降至原来的 1/TP,以及新的 –max-num-queued-reqs / –max-num-queued-tokens 准入控制参数。默认行为也有所变化:FlashInfer all-reduce 在 CUDA TP 组默认启用,前缀缓存 NONE_HASH 变为确定性哈希;同时移除了十个已弃用模型架构、将 FlexOlmo/Olmo3/Hunyuan V1/VL 迁移到 Transformers modeling 后端、删除 PyAV 视频解码后端,并弃用 python -m vllm.entrypoints.openai.api_server,建议改用 vllm serve。安装方面提供 PyPI CUDA 13.0、ROCm、XPU wheel,以及 cu129/cu130/ROCm/CPU/XPU Docker 镜像等发布工件。这些改动统一了引擎执行路径并强化了对最新 MoE、稀疏注意力和投机解码模型的支持,但包含需要用户调整的破坏性变更。

github · khluu · 9月9日 08:54

「背景」 vLLM 是广泛使用的开源 LLM 推理与服务引擎,通过 PagedAttention、连续批处理等机制提升吞吐和显存效率。Model Runner V2(MRV2)是新一代模型执行管线,先以 pooling 模型等场景试点,随后在本版本成为所有模型的默认路径,用于替代旧版 Model Runner V1。MRV2 的统一执行路径覆盖采样、CUDA graph 内存规划、投机解码等关键环节;第三方部署文章曾报告 MRV2 在 GB200 等硬件上带来显著吞吐提升(约 56%)。

「影响」 升级到 v0.29.0 后,所有模型的默认执行路径将切换到 Model Runner V2;依赖已移除架构、PyAV 视频解码后端或旧模块入口点的现有部署可能受到影响,需要改为 vllm serve。仍使用少量仅支持 MRV1 的 ROCm 模型或依赖旧视频输入路径的用户应在升级前验证兼容性。

参考链接

标签: #vllm, #LLM inference, #open source, #AI infrastructure, #model runner


苹果发布折叠设备 iPhone Duo ⭐️ 8.0/10

苹果官网推出了 iPhone Duo 页面,公开一款新的折叠式设备;该设备在 Hacker News 引发大量讨论(1,574 条评论)。评论提及产品演示由 John Ternus 主持,价格为 2000 美元,并指出这是一款展开后更大、可替代部分 iPad 用途的折叠手机。目前源内容未提供更多官方技术规格,因此具体配置、屏幕尺寸和上市日期尚不明确。作为苹果进入折叠屏市场的标志性动作,这一发布对消费电子行业具有广泛影响。

hackernews · thecosmicfrog · 9月9日 18:15 · 社区讨论

「背景」 苹果发布了旗下首款折叠屏手机 iPhone Duo,展开后配备 7.6 英寸内屏,并据称是迄今最薄的 iPhone。该设备还拥有 5.4 英寸外屏、A20 Pro 芯片和侧边按钮 Touch ID,起售价为 1,999 美元,预计于 10 月 23 日上市。

「影响」 对现有 iPhone 用户来说,最直接的影响是产品线引入更高价位(评论提到的 2000 美元)的折叠大屏形态,并可能蚕食部分 iPad 使用场景。

「社区讨论」 社区意见分歧明显:有人对折叠带来的标准纸张式比例扩展表示欣赏,也有人批评发布会照本宣科、机身越做越大;多位用户认为 2000 美元定价偏高,但可能用折叠大屏替代部分 iPad 用途。

参考链接

标签: #Apple, #hardware, #mobile, #foldable, #consumer technology


Shopify acquisisce Tailwind: framework CSS sotto nuova proprietà ⭐️ 8.0/10

Shopify ha annunciato l'acquisizione di Tailwind Labs, la società autrice del popolare framework CSS Tailwind, tramite un post sul blog ufficiale di Tailwind. L'operazione arriva dopo pressioni crescenti dell'AI sul modello di business: nei commenti viene citata una dichiarazione secondo cui il traffico verso la documentazione è calato di circa il 40% dall'inizio del 2023, nonostante la maggiore popolarità del progetto, e il 75% del team ingegneristico è stato licenziato. L'accordo viene interpretato dai commentatori come un'acquisizione soprattutto di persone e marchio, mentre l'attività di vendita di template UI basati su Tailwind è ritenuta sempre meno sostenibile nell'era dell'AI generativa.

hackernews · EdwinHoksberg · 9月9日 13:27 · 社区讨论

「背景」 Tailwind CSS 是一个实用优先的 CSS 框架,用于在 HTML 中快速构建现代网站(据其官网介绍)。Shopify 是一个一体化商务平台,商家可借助 AI 等功能建立或拓展业务,并支持开发人员构建扩展(据其官网介绍)。此前社区中已有使用 Tailwind UI 与 Shopify 共同搭建电商网站的实践,而此次收购意味着该热门开源 CSS 框架所属公司和品牌正式加入 Shopify 生态。

「Impatto」 La conseguenza più immediata è che lo sviluppo di Tailwind passerà sotto Shopify, con il team originale e il marchio acquisiti; ciò mette in discussione la sostenibilità di progetti commerciali basati su template CSS/Tailwind, modello già minato dal calo del traffico alle docs.

「Discussione」 I commentatori vedono l'operazione come un'uscita motivata dalla crisi del business dei template UI più che da un fallimento tecnico; diversi ringraziano Adam Wathan e il team per il valore formativo di Tailwind e di Refactoring UI. Qualcuno si chiede se per un nuovo sito serva ancora Tailwind quando il CSS moderno può bastare, mentre PaulHoule ridimensiona il progetto definendolo parte dell'ecosistema 'CSSSlop' e nota al contempo la forte crescita di Shop Pay.

参考链接

标签: #Tailwind, #Shopify, #acquisition, #CSS, #open source


GPT-6 Astra、循环 Transformer 与隐藏推理解读 ⭐️ 8.0/10

技术专栏作者 Sebastian Raschka 发文拆解了有关 GPT-6 Astra 的报道,指出该模型可能采用“循环 Transformer”或“递归深度”架构,并以此解释其思维链(CoT)可监测性下降。文章认为,这种架构本质上就是复用同一组权重的多层 Transformer 堆叠,并非全新的“秘密技术”,主要好处是节省 GPU 内存。随附的 Telegram 消息称,OpenAI 表示 GPT-6 Astra 的 CoT 可监测性较前代“显著”下降,首席科学家 Jakub Pachocki 称模型越来越能控制自身推理过程,并能在更少甚至无语言痕迹的情况下完成推理。需要强调的是,上述内容目前仍基于媒体报道,而非 OpenAI 官方的完整技术披露或第三方验证。

hackernews · ModelForge · 9月9日 14:37 · 社区讨论

「背景」 当前大语言模型通常会把推理解题过程写成可读文本(即“思维链”),供开发者和安全系统监测;而所谓“循环 Transformer”或“recurrent depth”则是在推理时反复使用同一组权重增加计算深度,从而把复杂逻辑隐藏在数学循环中,而不是逐步展开成可读文本。OpenAI 首席科学家 Jakub Pachocki 曾澄清,Astra 等前沿模型的计算图深度仍在 GPT-4 的两倍以内,相关报道中的“隐藏推理”更多是对这种计算方式的描述。理解这一点有助于判断 GPT-6 Astra 的思维链可监测性下降究竟意味着什么。

「影响」 这最直接的影响是,安全和对齐研究界原本依赖思维链文本监测模型意图的方法,在 GPT-6 Astra 上可能更难成立;实际受影响程度仍有待 OpenAI 公布更多技术细节或第三方复现才能确认。

「社区讨论」 评论区的主流观点是,“循环 Transformer”或“递归深度”并不神秘,只是复用权重并堆叠 Transformer 层,从而降低显存开销;也有人指出,若把模型的持续输出再喂回自身而不作为最终答案展示,那本质上就是隐藏推理。部分用户则反馈 GPT-6 Astra 的演示体验前后不一致,并认为相关讨论对 CoT 复杂度等问题仍缺乏足够重视。

参考链接

标签: #GPT-6, #transformers, #AI research, #OpenAI, #LLM internals


恶意软件如何骗过 Google Ads 审查:实操揭露 ⭐️ 8.0/10

署名 xlii 的实操文章详细描述了一种让恶意软件通过 Google Ads 审核的方法,核心论点是 Google 广告平台的审核机制存在系统性安全缺陷。该文属于单篇技术揭露而非研究级安全披露,文章本身没有提供官方漏洞编号或修复方案,但强调这类恶意广告能够实际经过官方流程上线。文章经 Hacker News 传播后引发大量讨论,多位读者以亲身经历佐证 Google 依赖自动系统、缺乏人工复审的问题。

hackernews · xlii · 9月9日 11:43 · 社区讨论

「背景」 Google Ads 的政策明确禁止投放恶意软件或通过伪装(cloaking)等手段规避审核系统。xlii 的文章演示了如何让恶意软件通过 Google Ads 审核;配套检查显示,Search Console 安全报告未报告任何被入侵页面或恶意下载,而文章也指出这些扫描并未说明 Google Ads 实际检测到了什么,且不确定两套系统是否采用相同标准。

「影响」 这一披露使 Google Ads 广告审核缺陷再次进入公众视野;作者自述账户在 Hacker News 曝光后被恢复,但从已有信息无法判断 Google 是否已修复所述漏洞,因此对广告主和用户的实际风险仍然存在不确定性。

「社区讨论」 评论中的共识是 Google 的自动审核和申诉自动化程度过高,用户几乎无法获得有效人工复审;有读者称在禁用广告拦截后看到的广告全部为诈骗,另有读者回忆起约十年前类似案例是由于合法网站被入侵后在隐蔽路径托管恶意广告。作者 xlii 更新称自己账号已恢复,并承认此事被 Hacker News 放大后才得到解决。

参考链接

标签: #security, #google-ads, #malvertising, #ad-fraud, #cybersecurity


研究者称 Qwen 3.8 复现 GPT-5.5 Pro 推理前缀,或涉蒸馏 ⭐️ 7.0/10

一份 gist 及 Hacker News 讨论提出证据,声称 Qwen 3.8 在给定 GPT-5.5 Pro 推理链开头片段作为前缀时,会沿类似思路继续推理,暗示该开源模型可能蒸馏自 GPT-5.5 Pro。相关方法源自 stolen-thoughts 论文,该论文利用已知漏洞从 OpenAI 和 Anthropic 模型中恢复可读思维链,再取思维链前 1% 作为测试前缀。不过,这些结论基于恢复而非官方发布的推理痕迹,且社区已提出多种替代解释,例如两类模型可能训练自同一基准答案,或 Qwen 3.8 0902 在论文发布后训练从而接触过相应内容,因此当前证据并未确证蒸馏。

hackernews · wsxiaoys · 9月9日 17:24 · 社区讨论

「背景」 推理模型(如 GPT-5.5 Pro)在给出最终答案前会生成思维链;安全研究者曾开发出从 API 输出中恢复这类思考过程的技术,并将恢复出的开头片段拼接给其他模型,以此检查训练数据或推理模式上的关联。与此同时,社区中已有将更大的 Qwen 教师模型蒸馏到 9B 开源模型的项目,因此“给定相同前缀后出现相似推理文本”被当作可能存在蒸馏或共享训练数据的线索,不过这类证据通常依赖被恢复而非官方发布的输出。

「影响」 对关注开源模型训练数据来源和蒸馏问题的研究者与开发者,该发现可能加剧对模型同质化和训练来源透明度的担忧,但需要官方或更强证据才能确定其具体影响。

「社区讨论」 评论者普遍没有把该重叠当作蒸馏的铁证;有人指出原因可能是两个模型在同一基准的相同解答上训练,也有人强调 Qwen 3.8 0902 发布于 stolen-thoughts 论文之后、可能已见过被恢复的 GPT 思维链。另有本地模型用户询问这是否意味着存在能提升特定任务表现的提示前缀,但认为相关技巧并不具备普遍性。

参考链接

标签: #AI, #distillation, #Qwen, #reasoning models, #benchmarking


GNU Radio 在浏览器中运行:用 WebAssembly 开启 SDR 实验 ⭐️ 7.0/10

GNU Radio 已被演示可直接在网页浏览器中运行,用户无需在本地安装完整环境即可尝试软件无线电(SDR)与 DSP 实验。演示基于 WebAssembly 等浏览器技术,将噪声和锯齿波混合并可视化;社区还展示了通过 WebUSB 连接 USRP B200 等硬件的可行路径。该项目目前更像概念演示,页面缺乏实现深度,部分访问者会感到困惑,但它表明浏览器正逐渐成为 SDR 和信号处理实验的低门槛入口。

hackernews · kristianpaul · 9月9日 15:53 · 社区讨论

「背景」 GNU Radio 是一个免费开源的信号处理运行库和软件开发工具包,最初为软件定义无线电(SDR)和无线通信仿真而开发,后来也被业余爱好者广泛采用。传统上,用户需要通过 GNU Radio Companion 等桌面图形界面来搭建流图并处理信号。现在,借助 WebAssembly 等技术,GNU Radio 的图形化编程环境可以在浏览器中运行,并支持 RTL-SDR 等常见 SDR 设备、声卡以及录制的离波数据,让使用者无需本地安装即可进行 SDR 和 DSP 实验。

「社区讨论」 多数评论者表达兴奋,认为这个浏览器版界面类似 MaxMSP,能勾起信号处理课程回忆,并表示会继续把玩;也有人直言看不出演示意图,说明文字难以阅读、没有音频输出,因此作为项目介绍并不成功。另有一位多年前觉得 GNU Radio 难以使用的用户表示愿意再试一次。

参考链接

标签: #GNU Radio, #WebAssembly, #Software-Defined Radio, #DSP, #Open Source


陶哲轩:AI 正在耗尽开放数学问题 ⭐️ 7.0/10

西蒙·威利森摘录了数学家陶哲轩在 Mathstodon 上发出的警告:人工智能正在以不可再生的方式“开采”高质量、有前景的开放数学问题,可能导致这类问题变得稀缺。陶哲轩观察到,即使只是有人透露正在研究某个问题,也会触发大规模 AI 驱动的努力抢先“夷平”该问题,使原始研究项目无法充分发挥潜力。他认为这会使激励方向转向不再与学界分享有前景的研究方向,从而逆转数百年来的开放科学传统,并对数学领域的长期发展造成严重损害。威利森将这一观点标记为与 AI 伦理、数学和开放科学相关的评论性内容,而非具体技术进展。

rss · Simon Willison · 9月9日 00:20

「背景」 陶哲轩是著名数学家,近期警告说,人工智能正以不可再生的方式“开采”数学界积累的开放问题,可能使这类问题变得越来越稀缺。他认为优秀问题的价值不仅在于最终答案,更在于通往答案的探索过程;如果快速而不透明的 AI 会在人类研究项目成熟前就把问题“夷平”,研究者可能因激励变化而不再公开分享有前景的方向,从而逆转开放科学传统。现实中已有 AI 实验室解决历史难题的先例,这让上述风险具有实际背景。

「影响」 陶哲轩的警告意味着数学研究者可能越来越不愿在论文、预印本或公开讨论中透露早期研究思路,开放科学传统将因此受到现实威胁。

参考链接

标签: #ai-ethics, #mathematics, #open-science, #ai-impact, #research


Rustls 十周年:回顾 0.23 稳定路线并展望 1.0 ⭐️ 7.0/10

LWN 报道了 Joe Birr-Pixton 为 Rustls TLS 库项目撰写的十周年回顾博客,其中介绍了项目的历史、当前状态以及对 0.24 版本和最终 1.0 版本的规划。Rustls 的首个提交于 2016 年 5 月 2 日完成,一个月后即可与当时大多数网站互操作,首个版本 0.1.0 于 2016 年 8 月 27 日发布。项目经过多年迭代后形成了 0.23 发布线,该版本于 2024 年 2 月 29 日发布,此后共出现了 43 个非破坏性更新。0.23 系列引入了 FIPS 认证的密码学选项、证书压缩、Encrypted ClientHello、后量子密码学以及多项性能改进。项目目前正朝着 0.24 版本和最终的 1.0 版本推进。

rss · LWN.net · 9月9日 18:11

「背景」 Rustls 是一个使用 Rust 语言编写的 TLS 协议实现,旨在提供内存安全、易于使用且默认安全的加密通信能力,常用于替代 OpenSSL 等 C 语言实现的 TLS 库。Joe Birr-Pixton 是该项目的主要维护者之一;其十周年博客不仅回顾了项目早期的快速进展,也说明了长期稳定发布线如何为后续正式 1.0 版本奠定基础。

标签: #rustls, #tls, #rust, #security, #software engineering


OpenAI 用 AI 设计芯片并称成本低于开源模型 ⭐️ 7.0/10

OpenAI 首席财务官萨拉·弗里尔表示,OpenAI 已将 AI 应用扩展到芯片设计、生命科学和金融服务,并宣称在云端部署低价 Luna 模型的成本低于中国开源替代方案。该公司称其自研 Jalapeno 芯片在 9 个月内完成设计定稿,Luna 降价 80% 后使用量增加约 10 倍。目前这些数字和成本对比来自 OpenAI 单方面说法,尚待第三方验证。

telegram · zaihuapd · 9月9日 13:06

「背景」 OpenAI 正在将自有的人工智能模型应用于芯片设计领域。据其首席财务官萨拉·弗里尔在 9 月 8 日高盛会议上确认,OpenAI 使用自己的前沿模型设计了一款名为 Jalapeno 的自研推理芯片,并在九个月内完成了流片(tape-out)。同时,OpenAI 还宣称其低成本的 Luna 模型在云端部署时能够以低于某些中国开源模型的价格提供服务。这一动向反映了 AI 公司正在尝试把自身模型用于硬件设计流程,并以此作为成本与效率的竞争优势。

「影响」 OpenAI 称 Luna 降价 80% 后使用量增长约 10 倍,表明低价策略已带动实际使用;若其成本低于开源模型的判断成立,API 用户和依赖模型部署的开发者将最直接受益。

参考链接

标签: #AI chip design, #OpenAI, #custom silicon, #cost optimization, #LLM deployment


科技博客

智能模型路由如何显著降低 LLM 成本 ⭐️ 5.0/10

rss · ByteByteGo · 9月9日 15:30

「背景」 作者指出,许多 LLM 应用为了省事,把所有请求都发给能力最强、价格也最高的模型。但实际业务中不少请求只是分类、提取、改写等简单任务,并不需要那么强的推理能力,因此成本被白白抬高。

「方案」 模型路由的思路是在请求进入模型前判断难度,把简单任务交给小模型、困难任务交给大模型。作者以一个定价为大模型 1/20 的小模型和 1/5 的中型模型为例:当 85%请求走小模型、10%走中型模型、只有 5%走大模型时,平均成本约为全部使用最强模型的 11%,接近 10 倍节省。实现路由的策略包括:用小模型做难度分类并返回结构化推荐,同时配合固定安全规则;先让小模型作答,再用自动化检查或测试判断是否需要升级到更强模型的级联;用向量嵌入做语义路由,将请求按意图分给专用模型;以及用历史请求和评测结果训练分类器进行学习式路由。作者强调,路由需要综合考虑任务类型、风险、上下文规模和输出要求,并警惕过度路由、路由不足、用户提示注入,以及模型或价格变化后路由策略失效等问题。

「启示」 作者的核心理念是:用便宜的小模型处理常规工作,用强模型处理难题,再用验证机制兜住路由错误。只要模型价差大、简单请求占比高、路由判断可靠,智能路由就能在不大幅牺牲质量的前提下显著降低 LLM 总成本。

标签: #LLM routing, #cost optimization, #model selection, #AI infrastructure, #prompt classification


CUDA 13.4 新特性:Windows on Arm 与共享 GPU 管控 ⭐️ 4.0/10

rss · NVIDIA CUDA Technical Blog · 9月9日 20:24

「背景」 NVIDIA 的 CUDA Toolkit 通常以新增功能和性能优化为主要卖点;13.4 版在此基础上补齐了 Windows on Arm 支持,并预览下一代 Rubin 架构(compute capability 107)。作者指出,此前 Arm 平台开发者只能在 Linux 上使用 CUDA,Windows on Arm 的到来扩展了可用的开发环境。

「方案」 作者将这一版的改进概括为让开发者更精细地控制 GPU 资源。在共享 GPU 场景中,MPS V3 提供脚本化 CLI、命名实例与命名空间、TOML 配置及 cgroup 内存上限,可编程划分 SM 与内存边界;新引入的 CUDA Compute Fabric Transport 则让通信库按 endpoint ID 和偏移量发起异步 put、get 与归约操作,降低大规模多 GPU 系统的虚拟地址压力,但只面向 Driver API,普通应用仍建议使用 NCCL 或 NVSHMEM。性能敏感软件还可借助 locality domain 和统一内存驻留查询,把计算调度到靠近数据的位置。此外,SDK 安装包不再捆绑驱动,在 Grace Hopper、Grace Blackwell 与 Vera Rubin 等 coherent 平台上默认改用 CDMM 而非 NUMA(NUMA 仍可选,但需重载或重启)。CUDA Python 方面,cuda.core 1.1.0 加入纹理与表面对象、NUMA 感知托管内存;cuda.compute 1.1 支持免 GPU 的 AoT 编译与序列化部署;CCCL 3.4 的 Blackwell DeviceScan 用 TMA 将带宽利用率从约 50% 提升到最高 92%,并带来单次调用 CUB API、批量 warp 归约与 cuda::std 并行算法。工具链方面也更新了 Nsight Python、Nsight Compute、Nsight Systems 等。

「启示」 这篇博文更像是发布说明的索引,而非深度评测;它表明 CUDA 13.4 的核心方向是同时扩展平台覆盖(Windows on Arm、Rubin)与开发者对共享 GPU、内存位置和通信路径的编程控制力。作者提醒读者,多数改进只在特定架构或 API 场景下生效,应查阅对应文档和 release notes。

标签: #CUDA, #GPU programming, #NVIDIA, #release notes, #development tools