夜雨聆风学习资料网

ARTICLE · 1076067

ChatGPT语音接入插件,GitHub让AI辅助模糊测试

ChatGPT语音接入插件,GitHub让AI辅助模糊测试
 
早上好。今天读到的更新,让我想到一个很日常的动作:说完一句“帮我处理一下”,接下来谁去找资料、谁来执行、谁判断结果?语音、代码测试和科研数据给出了三个不同的切口。我更关心这些工具把哪一步变容易了,又把哪些判断留给了人。以下依据原始发布材料整理,未进行产品亲测。

📰 今天值得关注的新闻

🧠 ChatGPT 语音接入插件,说完之后任务还能继续

💬 GitHub 介绍开源模糊测试任务流,AI 负责追问“哪里还没测到”

🖥️ NVIDIA 等机构开放病毒蛋白复合物预测结构

📌 Runway 进入 DaVinci Resolve,生成结果可直接回到时间线

📌 vLLM 加入文本水印,检测仍取决于文本与配置

📌 OpenAI 发布心理健康对话评测,强调具体回应质量

📌 GitHub 测试高影响操作前再次验证身份

📌 ChatGPT 新增互动记忆卡,可从笔记生成复习材料

📌 Copilot 应用测试本地沙箱,默认仍需主动开启

📌 Copilot 代码审查增加个人配置与企业默认力度

📌 Copilot 应用接入 OpenTelemetry,方便回看执行过程

ChatGPT 语音接入插件,说完之后任务还能继续

OpenAI 在九月二十三日的更新说明中宣布,Live 语音现在支持网页版、iOS 和 Android 上的插件。用户可以在说话时使用账号已有的插件和已连接应用,文字回复也会留在聊天里。
语音同时进入网页版和移动端的 Work。官方列出的用途包括制作文档、演示文稿和表格,调用已连接应用,以及在浏览器中工作。结束 Work 语音通话后,没做完的任务可以继续以文字方式推进。
这让我感兴趣的地方是任务的连续性:口头交代工作之后,还能回到文字结果里检查进度。对于边看材料边补充要求的人,这可能减少来回输入和切换的麻烦。这是对功能的观察,实际效率仍需要具体任务检验。
可用范围要一起看。Free 和 Go 用户可以在 Chat 中使用其套餐支持的语音插件;在 Work 使用语音,需要同时具备 Voice 和 Work 的访问资格。既有应用连接、权限和用量限制继续生效,不能把新入口理解成所有账号都能调用所有工具。
🔗 来源:OpenAI 帮助中心

GitHub 介绍开源模糊测试任务流,AI 负责追问“哪里还没测到”

九月二十四日,GitHub Security Lab 介绍了面向 C/C++ 项目的 Fuzzing Taskflow。模糊测试可以简单理解为不断给程序喂入各种输入,观察它会不会崩溃。难处在于,随机输入未必能进入那些藏着问题的代码路径。
这套任务流把选测试入口、分析构建方式、编写测试驱动、运行 AFL++、读取覆盖率和整理崩溃报告串了起来。模型负责判断下一步,工具负责实际执行,阶段状态则保存在数据库中。开源的是可运行的工作流,不代表它已经证明自己能找到所有漏洞。
最值得看的设计是覆盖率反馈:每轮测试之后,智能体查看哪些分支尚未走到,再决定补充输入、调整测试驱动,或者放过不值得继续追的路径。测试时间逐轮增加,也有覆盖率增长趋缓时停止的机制,避免没有终点地消耗算力。

Codespace 中的模糊测试项目与启动命令截图,来源:GitHub Security Lab。

发现崩溃也不等于发现安全漏洞。任务流会缩小触发样本、合并重复问题、分析调用路径,再区分库本身的问题、测试驱动错误、内存不足或超时。报告附带定位和修复建议,但原文明说模型会判断错误,补丁需要复核。
这里还有一个不能省略的使用条件:它会在运行环境里执行编译与构建命令,默认没有再套一层容器。作者要求放在可丢弃的 Codespace 或虚拟机中,并避免提权运行。本文仅介绍设计,没有运行这套安全测试工具。
从程序员的角度看,我更在意它留下的证据:测试覆盖到了哪里、哪个输入触发崩溃、建议修改能否重现验证。把这些材料整理齐全,才有机会减少维护者真正花时间的那部分工作。
🔗 来源:GitHub Security Lab

NVIDIA 等机构开放病毒蛋白复合物预测结构

九月二十四日,NVIDIA 宣布与 Google DeepMind、EMBL-EBI 等机构合作,开放覆盖两千八百多种病毒的蛋白复合物三维预测结构。研究者可以通过 AlphaFold Database 获取这些资料。
这次关注的是蛋白质如何组成复合物。单个蛋白的形状是一层信息,多个蛋白怎样相互配合,又是另一层信息。为原本资料较少的对象提供结构候选,有助于研究者决定接下来优先研究什么。
按官方介绍,结构使用 AlphaFold2 推断,并借助 NVIDIA BioNeMo Inference Runtime 优化计算。团队同时开放了用于生成数据的 BioNeMo Structure Prediction Pipeline,让研究者能够对自己的目标运行结构预测流程。

蛋白质结构可视化示意图,来源:NVIDIA。

数据附带置信度标记。这里必须把“预测”两个字保留下来:它们描绘的是复合物可能的形态和相互作用,并不等于所有结构已经通过实验确认,更不能直接推导出疫苗、药物或治疗效果。
我把这类消息看作科研基础设施的进展。一个团队的计算结果成为其他团队可检查、可继续研究的起点,价值会在后续验证中逐步显现。今天能确认的是数据与流程开放,具体科学发现仍要看研究者怎样使用它们。
🔗 来源:NVIDIA 官方博客

Runway 进入 DaVinci Resolve,生成结果可直接回到时间线

Runway 九月二十三日宣布推出 DaVinci Resolve 插件,可在剪辑软件中生成图片和视频、重绘已有片段,并把结果导入媒体池和时间线。官方还介绍了通过最多五个关键帧控制重绘的方式。
插件支持 macOS 和 Windows,要求 DaVinci Resolve Studio 19 或更新版本。免费下载的是插件;生成需要付费 Runway 套餐,并使用原有额度。对剪辑者来说,直接变化是少几次导出、上传和重新导入,画面质量仍要逐个镜头判断。

Runway 原文展示的片段重绘宣传示意图,来源:Runway。

🔗 来源:Runway 官方公告

vLLM 加入文本水印,检测仍取决于文本与配置

vLLM 九月二十四日介绍基于 Gumbel-max 的文本水印实现,通过生成时的采样过程留下可检测信号,并支持推测解码。它的目标是保留预期输出分布,同时降低性能开销。
这不意味着任意一小段文字都能可靠验明来源。官方指出,短文本和高度可预测的输出信号较弱;检测需要匹配的分词器与水印密钥。复制足够长的原文和大幅改写文本也不是同一种情况,不能把项目测试写成通用的 AI 文本鉴定能力。
🔗 来源:vLLM 项目博客

OpenAI 发布心理健康对话评测,强调具体回应质量

OpenAI 九月二十三日发布开放评测 MentalHealthBench,由来自二十二个国家的八十多位持证心理健康专家参与设计。它用合成对话评估安全、补充背景信息、尊重用户自主性等回应行为。
原文说明,每段对话由至少三名专家审阅,保留满足一致性要求的评分标准。评测场景的构成不代表这些情况在真实使用中的发生比例;模型得分也不是临床疗效证明,不能据此把聊天工具当作专业治疗的替代。
🔗 来源:OpenAI 官方研究公告

GitHub 测试高影响操作前再次验证身份

GitHub 九月二十四日推出“在场证明”公开预览:创建令牌、调整安全设置等高影响操作,可要求用户回到身份提供方重新认证或完成多因素验证。当前范围限于使用 Microsoft Entra ID 的受管理用户企业。
通过挑战后,同一浏览器会话有两小时的有效窗口。合并拉取请求前的这项验证仍是后续计划,不能当成已经上线。它补上的,是有效凭证之外对当下操作者的再次确认。
🔗 来源:GitHub Changelog

ChatGPT 新增互动记忆卡,可从笔记生成复习材料

OpenAI 九月二十二日更新说明新增互动记忆卡。用户可以指定主题,或上传笔记生成卡片;翻面查看后标记是否掌握,再打乱顺序练习。卡片会保存到资料库,方便下次接着复习。
官方说明该功能面向所有 ChatGPT 套餐,支持网页和移动端。自动整理材料很方便,但学习者仍应核对卡片里的答案,尤其是从含糊或有错的笔记生成时。
🔗 来源:OpenAI 帮助中心

Copilot 应用测试本地沙箱,默认仍需主动开启

GitHub 九月二十三日介绍 Copilot 应用的本地沙箱公开预览,可按项目限制文件、网络和凭证访问。操作系统无法执行所请求的隔离策略时,沙箱命令会报错,而不是直接取消隔离继续运行。
它默认关闭,项目设置主要作用于新会话,已有会话需要重启或单独开启。云端沙箱和远程主机会话不在这项本地功能的范围内,应用与 CLI 的沙箱设置也分开管理。
🔗 来源:GitHub Changelog

Copilot 代码审查增加个人配置与企业默认力度

九月二十三日,GitHub 宣布新的代码审查配置正式可用。独立个人设置页扩展到所有 Copilot 套餐,包括 Business 和 Enterprise,可分别设置自动审查、新推送和草稿拉取请求的审查行为,以及默认审查力度。
企业管理员也能设置统一默认力度,但组织与仓库仍可覆盖。这里的变化是审查何时触发、用什么默认设置,不能理解为 AI 审查结果会自动满足项目的验收要求。
🔗 来源:GitHub Changelog

Copilot 应用接入 OpenTelemetry,方便回看执行过程

GitHub 九月二十二日宣布,Copilot 应用支持通过企业托管设置配置 OpenTelemetry,把智能体活动发送到兼容的监控工具。团队可以查看会话中模型请求与工具调用的过程,排查意外行为。
提示词和回复正文默认不包含在导出内容里,是否采集内容需要另行检查配置。对团队而言,能回看执行步骤有助于定位问题,但接入监控本身不代表任务结果已经正确。
🔗 来源:GitHub Changelog

✨ 留一个小实验

我想先试一个小任务:用语音请助手从已经授权的资料里整理一页清单,再核对它引用了什么、遗漏了什么。入口越自然,越值得看一眼任务最后留下的结果。新世界缓慢生成,我们继续观察这些小变化。

相关学习资料