在本文构建参考画作池的自动化研究流程中,VLM(视觉语言模型)担任视觉裁判。它依据真实参考照片对各前沿模型生成的水彩画进行打分与反馈指导,助力团队批量生成并筛选出高质量的水彩参考数据集。
训练模型使用 p5.brush 作画
VLM
在本文构建参考画作池的自动化研究流程中,VLM(视觉语言模型)担任视觉裁判。它依据真实参考照片对各前沿模型生成的水彩画进行打分与反馈指导,助力团队批量生成并筛选出高质量的水彩参考数据集。
VLM
GEPA 是作者用于系统提示词演化的提示词优化库。作者通过 GEPA 进行了 200 次评分迭代,成功将原先容易引发模型幻觉的 400 行 API 文档精简为仅包含 8 个核心绘图方法的严格白名单,显著降低了代码生成中的 API 编造问题。
GEPA
文中称其为本周新发布、相对 K2.5 更新的型号。对外提供更直接的推理力度接口:文档列出 low、high、max 三档(默认 max),经 reasoning_effort 参数传入。Moonshot 尚未公开这三档在训练中如何构造,启动博文称将写入后续 K3 技术报告;作者推测方法可能与 K2.5 相近或相关,但目前无法据公开材料复原。
Kimi K3
与 DeepSeek-R1 同日(2025 年 1 月 22 日)挂上 arXiv 的推理模型工作。文中强调它与 Tülu 3 一样,是在监督微调(SFT)模型之上再做强化学习,而非像 DeepSeek-R1-Zero 那样直接对基座做纯 RLVR;作者以此对比说明 R1 更受关注的原因之一是展示了纯 RL 也能激发推理行为。
Kimi K1.5
与 vLLM 并列,文中指可用其托管 Kimi K2.5、GLM-5 等模型并切换思考/即时模式。例如 K2.5 的 instant 模式可通过 chat_template_kwargs 关闭 thinking;GLM-5 的开源 chat template 在 Transformers、vLLM 或 SGLang 自托管时等价实现按请求开关推理。属于推理部署侧的模式选择手段,而非训练方法本身。
SGLang
OpenAI 去年开源的模型系列,文中借其公开实现推测闭源 GPT 的 effort 机制。聊天模板把所选推理强度(low/medium/high)写入系统消息再送入同一模型;model card 显示 effort 与回复长度、准确率正相关。文章据此推断 GPT-5/5.6 可能采用类似系统提示条件化,并推测其训练可能在 RLVR 中按 effort 施加不同长度惩罚,和/或在 RLVR 后用 SFT 让模型学会 effort 标签与目标推理长度的对应。
gpt-oss
本文将提升推理能力的路径分为训练缩放与推理缩放两类。推理缩放指模型训练完成后、在使用阶段投入更多算力以换取更好答案,例如让推理模型生成更长中间轨迹,或叠加多数投票等技术。文中以 GPT-5.6 为例说明:固定同一模型、只调高 reasoning effort 即属推理缩放,会拉高 token 用量、API 成本与基准表现,但最高档位存在收益递减;较小模型配高 effort 有时能接近较大模型低 effort 的分数。
Inference Scaling
文中 DeepSeek V3 是第一代推理体系中的基座模型:完整 DeepSeek-R1 从其 SFT 检查点继续训练,而当时产品形态是“V3 常规模型 + 独立 R1 推理模型”。R1 默认冗长且无法关闭推理,体现了基座与专用推理模型分离的早期做法,与后文混合/多 effort 统一检查点形成对比。
DeepSeek V3
上周发布的 GPT-5.6 是本文讨论「多档推理强度」的直接产品例证:含约三个体量(如 Luna/Terra/Sol),每档大致五六种 effort(从 Light 到 Ultra 等)。界面一侧换模型近似训练/模型规模轴,另一侧固定模型只调 effort 则是推理时算力缩放;更高 effort 通常更耗 token、成本更高、表现更好,但存在收益递减。实现细节未公开,作者推测与 gpt-oss 类似,靠系统提示注入 effort,并在后训练中用长度惩罚或 SFT 建立标签与推理长度的对应。
GPT-5.6
本文将其作为开源旗舰模型中控制推理力度的案例之一。GLM-5 在 GLM-4.5 的二值思考开关基础上,扩展到多轮对话与工具调用场景,并形成三类相关行为:交错思考(每次回复与工具调用前插入推理块)、保留思考(跨轮保留先前推理供复用)、回合级思考(可按单次请求开关推理)。推理时以回合级开关为主,聊天模板在开启时以带 think 的助手前缀启动、关闭时立即结束推理块直接作答;这些行为主要在多任务 SFT 与更新后的聊天模板中引入,随后经推理 RL、智能体 RL、通用 RL,并以先前阶段检查点做 on-policy 蒸馏以恢复可能削弱的能力。
GLM-5
文中称 DeepSeek-R1 约在 o1 四个月后发布,并公开了用可验证奖励强化学习(RLVR)训练推理模型的做法,是推动该路线走红的关键论文。训练时主要依据最终答案正确性与格式奖励,中间推理轨迹本身未纳入更新;R1-Zero 变体还证明可直接在基座上做纯 RLVR 即学会写推理、回溯与自纠。完整 R1 管线多为多阶段,且今日多数推理模型训练思路与之类似。
DeepSeek R1
在开源旗舰对比中,DeepSeek V4 公开三种推理模式:Non-think(无推理轨迹)、Think High(标准
DeepSeek V4
DeepSeek-R1-Zero 是 R1 体系中的纯 RLVR 变体:不经 SFT,直接对预训练基座做可验证奖励强化学习。性能弱于完整 R1,但作为概念验证表明:仅靠最终答案对错与格式奖励,模型就能学会写中间推理、回溯与自我纠正(“Aha”时刻)。作者强调这是 R1 比同期工作更火的原因之一——证明推理行为可由纯 RL 诱发。
DeepSeek R1 Zero
Thinking Machine Labs 新近发布的开源权重模型,文中用作推理 effort 训练与效果的具体数据点。其 effort 为约 0.2–0.99(或 0–1)的连续值而非 low/medium/high;大规模异步 RL(逾三千万次 rollout)中在系统消息写入目标 effort,并按该值调节生成 token 的长度惩罚——低 effort 加大单价以压短轨迹,高 effort 减小惩罚以允许更长推理。推理时接收如 Thinking effort level: 0.8 的系统消息即可调节 token 用量;整体呈现 effort 升高则 token 与基准分大致上升、高档位收益不均或递减的趋势,条件化主要落在 Reasoning RL 阶段。
Inkling
文中作为 GLM-5 托管推理接口的提供方出现。其 API 默认开启 thinking,可用 thinking: {"type": "disabled"} 按单次请求关闭;与开源聊天模板中通过预填空 think 块关闭推理的机制相对应,用于说明回合级思考开关在实际服务中的用法。
Z.ai
本文以 OpenAI 的推理模型产品线作为主线背景:约两年前发布 o1 推动了推理模型流行,上周又发布 GPT-5.6 系列,并提供多档推理强度设置。文章结合其开源 gpt-oss 的做法推断,OpenAI 多半通过系统提示中的 effort 标签控制同一模型的推理长度与准确率,但未公开 GPT-5.6 的完整训练细节。
OpenAI
文中作为早期混合型推理模型代表:同一套权重可按需像普通指令模型或推理模型工作。推理开关经 tokenizer 的 enable_thinking 实现;关闭时会在助手回复开头预填空的 think 标签作为硬开关。训练上在长 CoT SFT 与推理 RL 之后增加 Thinking Mode Fusion,用含/不含推理轨迹的样本做 SFT,再由通用 RL 巩固格式;还支持在阈值截断推理并插入停止指令,该行为据报告在融合阶段后自然出现,未单独专项训练。
Qwen3
文章开篇将 o1 定位为近两年前由 OpenAI 发布、使「基于 LLM 的推理模型」概念广泛流行的里程碑。文中以其为时间锚点,说明其后 DeepSeek-R1 等模型跟进,推理模型已成主流发布标配,并由此引出如何训练带多档推理强度的模型这一主题。
OpenAI o1
文中作为开源推理服务框架出现,用于说明模型如何在部署时切换思考模式。Kimi K2.5 可通过 chat_template_kwargs 将 thinking 设为 False 关闭推理轨迹;GLM-5 在自托管时也可借助其 chat template,在开启时以 assistant 加 think 起始、关闭时立即结束推理块。本身不负责训练,只是文中列举的推理侧控制入口。
vLLM
文中将其列为常见的推理阶段缩放手段:对同一问题多次查询模型,再用多数表决选出最终答案。它既可用于普通指令模型,也可叠加在已做推理训练的模型上按需启用。文章举例 DeepSeekMath-V2 在数学推理模型之上做极端推理缩放,以冲击奥赛级难题的 SOTA。
Self-Consistency
文中作为推理训练之外“推理时扩展”的例子:在已是数学向推理模型的基础上,再施加极强的推理时计算扩展(如自洽性/多数投票等),从而在高难度奥数类题目上取得当时顶尖表现。用来说明 training scaling 与 inference scaling 可叠加,且 effort/token 预算并非唯一推理时手段。
DeepSeekMath V2
本文将其作为开源权重旗舰模型的推理力度控制案例:提供 reasoning-off、regular、medium-effort 三档。medium-effort 在 SFT 阶段用 GPT-OSS-120B 中等力度轨迹引入,再在 RLVR 中用约 2.5% 带该设置的提示(含长度相关奖励调整)继续优化。推理时经 chat template 选择:regular 默认 enable_thinking=True;medium-effort 另加 medium_effort=True 并在用户消息附加高效推理说明;reasoning-off 则预填空 think 块。还可叠加外部 token 预算截断;SFT 还用随机截断的推理轨迹训练模型在外部关闭推理后仍能给出原答案。
Nemotron 3 Ultra
文中双重角色:一是改写执行平台——作者用约 50 个动态工作流连续跑 11 天,采用「1 实现 + ≥2 对抗评审 + 1 修复」、分 worktree 分片、禁止危险 git/慢命令等约束,并靠语言无关 TS 测试套件建立合并信心;合并后还用 Claude Code Security 完成 11 轮安全审查,fuzz 发现的问题也会交给 Claude 提复现与修复 PR。二是产品侧用户——Claude Code 等工具本身押注 Bun 作运行时;v2.1.181(6 月 17 日)起切到 Rust 版 Bun,Linux 启动 p50 约从 517ms 到 464ms(约快 10%),其余几乎无感。动态工作流被作者视为否则需自写 harness 才能支撑 64 并发长跑的关键能力。
Claude Code
Anthropic 预发布的 Mythos 级模型,作者声明用其完成了本次 Bun Rust 改写的主体工作。配合 Claude Code 动态工作流,在约 11 天内驱动峰值约 64 个 Claude 并行:生成 PORTING.md/LIFETIMES.tsv、机械移植 1448 个 .zig 文件、消编译错误与循环依赖、跑通子命令与全量测试(零跳过),峰值约每分钟 1300 行代码,并经双对抗评审后再提交。文中强调若无此模型与工作流,团队不会停功能去手写一年级改写,现实替代只会是继续个案修漏洞。
Claude Fable 5
本文中Gemini 3.1 Pro被用于从论文图表提取光谱数据,按10nm间隔读取反射率或吸收率值,再通过绘图验证与原始来源一致;这一步骤补充了公开数据库缺失的数据,使作者能覆盖更多自然颜色案例并确保模拟准确性。
Gemini 3.1 Pro
MCP 是 img2bez 提供的服务器实现,位于 mcp/ 目录,通过 stdio JSON-RPC 协议暴露 trace_glyph 工具。AI 代理可借此原生调用追踪器,将光栅图像直接转换为兼容 UFO 的结构化轮廓。
MCP
本文中PaliGemma用于支持视觉-语言流程,即输入图像、输出文本的任务。OpenCV 5通过DNN模块运行PaliGemma,借助内置tokenizer和KV-cache实现解码。文章将其与Qwen、Gemma 3并列,说明OpenCV 5可统一处理经典CV模型与VLM,而无需额外依赖。
PaliGemma
本文中Qwen指Qwen 2.5模型,OpenCV 5的DNN模块可直接运行该模型,无需额外运行时。文章提到通过内置tokenizer和KV-cache实现自回归解码,在测试中其输出与ONNX Runtime逐token一致。该支持让OpenCV 5的视觉流程能集成小型语言模型,用于图像描述或OCR后处理等任务。
Qwen
本文中Gemma 3是OpenCV 5 DNN模块支持的LLM/VLM模型之一,与Qwen 2.5、PaliGemma等共享同一Net API。文章指出该支持依赖新增的原生tokenizer和KV-cache机制,使模型可在OpenCV内完成文本生成。目的是让计算机视觉流程能直接调用小型语言模型,而无需引入独立LLM框架。
Gemma 3
本文中Maia-3是预测人类棋局走法的最新模型,目标是模拟真实玩家而非最优引擎走法。它覆盖Lichess 600至2600等级玩家,在标准测试集上准确率达57.1%,优于Maia-2的52.0%和ALLIE的55.7%。该模型已开源,可用于人类视角分析、训练伙伴和各类教学工具。
Maia-3
Maia Chess是由多伦多大学CSSLab主导的学术项目,最新成果为Maia-3模型。它以57.1%的准确率预测人类走法,优于前代版本,并支持从初学者到大师的各类应用。项目提供免费开源模型、maiachess.com平台及分析、训练和对战工具,强调通过人类视角理解棋局。
Maia Chess
Markdown 是本文聊天界面必须支持的富文本格式,包含流式响应、长文档选择和精确排版等需求。作者尝试多种原生技术渲染它,却始终无法同时满足性能、选择和可访问性要求。相比之下,WebKit 和 Electron 能以更少代码实现良好排版与交互,文章以此说明 Markdown 聊天已成为原生开发的难点。
Markdown
文章以GPT标签开头,聚焦人类打字习惯如何改变GPT相关模型的token计数。作者通过5个词的简短提示示例,展示拼写修正前后token从13降至6的变化。文章认为这些习惯虽不影响语义,却会直接增加GPT服务的实际费用。
GPT
Claude的tokenizer在文中被用于与OpenAI进行对比,结果显示其在相同文本上通常产生更多token,例如UUID为26个、RFC 3339时间戳为17个。文章指出Claude对某些缩写、感叹词和后缀的分割更细,导致计费增加。作者通过实际计数说明Claude的token消耗受人类聊天习惯影响更大。
Claude
Markdown 是 SDocs 的基础输入输出格式,支持拖放 .md 文件加载内容进行实时样式预览。导出时可选择纯 Markdown 或带样式的版本,分别对应无样式和保留 YAML 配置两种需求。文章将 Markdown 贯穿始终,作为样式应用与多格式转换的核心载体。
Markdown
本文在页面底部提供 GitHub 链接,指向 SDocs 的开源仓库。用户可通过该仓库验证服务器端代码实现,并获取 CLI 工具的安装说明。这体现了 SDocs 作为开源项目的透明性,方便开发者检查源码与自托管部署。
GitHub
文章使用OpenAI的Tokenizer来测量各类示例的token数,例如普通单词、UUID和时间戳。数据显示OpenAI在多数情况下比Claude生成的token更少,如同一UUID计为24个。作者强调OpenAI按token计费的模式,使人类常见的打字习惯成为可量化的成本因素。
OpenAI
SDocs 是 sdocs.dev 上的文档样式定制平台,支持用户通过可视化界面调整 Markdown 的字体、颜色、间距和区块样式,并一键导出不同格式。页面展示其完整的样式面板与导出选项,强调可保存默认配置以便重复使用,同时集成 CLI 实现本地样式持久化。工具定位为隐私优先、开源的轻量文档解决方案。
SDocs
GPT-5.2 在分析中解出了此前被认为几乎不可能完成的 31 个任务,并能从不完整描述中推断出具体类名、方法名及发布说明细节。污染诱导测试显示其能逐字复现金标准补丁,证明训练数据中混入了 SWE-bench Verified 题目及解答,导致分数虚高。
GPT-5.2
GitHub 是 SWE-bench Verified 所有任务原始问题与 PR 的来源平台,12 个 Python 仓库的已修复 issue 均来自该平台公开数据。由于这些仓库被广泛用于模型训练,文章指出 GitHub 上的 PR 描述、补丁及发布说明极易造成数据泄露,使模型能直接或间接记住金标准答案,从而推高基准分数但不代表真实能力提升。
GitHub
在污染测试中,Claude Opus 4.5 展现出强污染迹象,能准确还原 astropy__astropy-13236 任务对应的 PR 修改,包括具体文件名、方法名以及内联注释的逐字内容,证明其训练数据中包含了该基准的题解信息。
Claude Opus 4.5
SWE-bench 是 2023 年发布的原始基准,题目来自 12 个开源 Python 仓库的已修复 GitHub 问题。SWE-bench Verified 从其 1699 题中经专家筛选出 500 题,以减少原版测试用例苛刻、描述模糊等问题,但本文显示筛选后仍残留大量缺陷。
SWE-bench
Gemini 3 Flash Preview 在仅提供任务 ID 的情况下,仍能一字不差地复现 django__django-11099 的完整任务描述与金标准补丁,包括正则表达式变更及具体行号,显示其已从训练数据中记住了该 SWE-bench Verified 题目。
Gemini 3 Flash
OpenAI o3 在 SWE-bench Verified 上有 138 个任务经 64 次运行均未解决。经至少六位工程师复审,这些任务中 59.4% 存在过窄或过宽测试用例缺陷,即便人类或最强模型也难以通过,说明部分失败源于测试设计而非模型能力不足。
OpenAI o3
SWE-bench Verified 是 OpenAI 2024 年发布的 500 题基准,曾被广泛用于衡量模型自主软件工程能力。本文发现其 27.6% 难题中至少 59.4% 存在测试设计缺陷,导致正确解法被误判;同时所有前沿模型均能复现金标准补丁,表明数据已污染,分数提升不再反映真实能力。
SWE-bench Verified
本文未在正文中详细讨论 GPT-5.5 的具体表现,仅在继续阅读部分提及相关系统卡;文章重点分析的是 GPT-5 系列其他版本在 SWE-bench Verified 上暴露的数据污染问题。
GPT-5.5
SWE-bench Pro 是 OpenAI 当前推荐的评估体系,用于替代已污染的 SWE-bench Verified。文章指出其受数据污染影响明显更小,没有模型能完整复现金标准补丁,可更可靠地衡量前沿编程进展,OpenAI 近期已改用其公开子集报告结果。
SWE-bench Pro
本文中 GPT-5 被用于搭建自动化对抗性测试流程,针对 GPT-5.2-Chat、Claude Opus 4.5 和 Gemini 3 Flash Preview 等模型进行数据污染探测。它通过 15 轮交互尝试诱导目标模型泄露 SWE-bench Verified 任务的描述、金标准补丁等细节,并由评判模型评估污染程度。
GPT-5
OpenAI 在本文中系统分析了 SWE-bench Verified 的失效原因,指出其测试用例存在缺陷且训练数据已严重污染,已停止报告该基准分数,并建议业界改用 SWE-bench Pro 评估前沿编程能力。文章基于对自身模型及多前沿模型的实测,提供了污染证据和测试缺陷案例。
OpenAI
本文中 llama.cpp 作为支持语法约束的推理引擎之一,在 Gemma 4 模型的工具调用场景下,因该模型的 <|channel> 格式与推理 token 行为而放弃通用自动解析器,转而开发专用实现(PR #21418)。这直接体现了 M×N 问题中每个引擎需为不同模型家族单独维护解析逻辑的负担。文章将其与 Outlines、XGrammar 并列,作为需要在生成阶段掌握模型边界 token 与参数序列化知识的典型代表。
llama.cpp
Structured Generation 在文中指 grammar engines(如 Outlines、XGrammar)在生成阶段对 token 施加约束的技术。它需要知道工具调用边界的特殊 token、何时激活 JSON 约束以及何时放开。文章强调该知识与输出解析器所需完全相同,却由不同团队各自逆向工程,导致重复工作。
Structured Generation
DeepSeek 模型使用 <|tool▁calls▁begin|> 等专有 token 来包裹 function call 和 JSON 参数。文章以此作为不同 wire format 的典型例子,说明每个模型家族的边界标记和参数序列化方式都不相同,迫使每个引擎单独维护解析代码。
DeepSeek
GLM-5 是文章中展示的一种开放模型,其工具调用采用独特线格式:用
GLM-5
Rémi Louf 为本文作者,同时担任 dottxt 公司 CEO。他在文中系统阐述了闭源与开源模型在工具调用上的差异,以及线格式训练时决策导致的 M×N 维护难题,倡导将模型格式描述为可被语法引擎与解析器共同消费的声明式规范。文末署名明确其身份与关注方向为结构化生成与工具调用。
Rémi Louf
本文结尾署名显示 dottxt 是 Rémi Louf 担任 CEO 的公司,其工作聚焦结构化生成与工具调用领域。文章通过分析工具调用线格式的开放性问题,间接反映出该公司在推动共享规范、减少各引擎重复逆向工程方面的立场与实践方向。
dottxt
XGrammar 是文中列举的语法引擎之一,与 Outlines、llama.cpp 共同需要掌握各模型的线格式知识。它负责在生成时确定何时施加约束以正确输出工具调用,而非事后解析。文章强调这类引擎与 vLLM 等推理引擎之间存在重复的模型格式逆向工程工作,导致新模型发布时多方同时重复劳动。
XGrammar
本文中 Tool Calling 指模型调用外部函数并返回结构化结果的过程。闭源模型通过 API 直接完成,用户无需关心底层格式;开源模型则因各家族 wire format 不同,经常出现 malformed JSON 或推理内容混入参数等问题。文章指出这直接导致 M×N 维护负担,每个推理引擎都要为每个模型单独开发解析逻辑。
Tool Use
Gemma 4 的工具调用格式因包含 <|channel|> 推理 token 而增加解析难度,这些 token 常被解码器提前移除,导致参数内容损坏。vLLM 和 llama.cpp 均为此调整实现,凸显了训练时格式选择对下游引擎的连锁影响。
Gemma 4
vLLM 是 M×N 问题中的推理引擎之一,需要为不同模型实现自定义工具调用解析器。它在支持 Gemma 4 时遇到推理 token 被提前剥离、内容泄漏到参数中的问题,相关修复通过多个 PR 完成。
vLLM
gpt-oss 是采用 Harmony 格式的模型家族,其工具调用示例使用 <|channel|>commentary to=functions.search 和 <|constrain|>json 等标记。文章以此说明该格式与其它模型完全不兼容,导致 vLLM、llama.cpp 等引擎必须编写专用解析器。
gpt-oss
文章指出开源生态已在 Hugging Face 实现聊天模板的共享收敛,标准化了提示词与对话轮次的格式。工具调用目前仍缺乏类似的共享声明式规范来描述边界 token、参数序列化方式和推理 token 行为,导致 N 个模型 × M 个实现的重复工作。作者建议工具调用应效仿这一模式,将格式知识提取为配置而非各代码库独立实现。
Hugging Face
SGLang 属于文章所述的 M 个应用之一,必须针对每个新模型的工具调用线格式编写专用解析器,才能将原始输出转换为结构化 JSON 响应,与 vLLM 等引擎面临相同的重复开发负担。
SGLang
本文提到Claude通过分析试玩与愿望单数据的比率,发现了Demo Conversion Rate的计算模式,帮助作者从原始数据中提炼出与愿望单表现相关的规律,而非依靠人工直接观察得出结论。
Claude
Dario Amodei 预测到 2030 年将有一半入门级白领职位消失,这一说法被用来代表 AI 取代工作的主流叙事。本文通过招聘数据和时间线分析反驳了这一观点,指出 2022 年 11 月 ChatGPT 发布后短短半年内,企业无法完成从基础设施到合规的全面部署,AI 并未造成大规模就业损失。
Dario Amodei
本文分析ChatGPT 2022年11月发布后常被归咎于入门级就业下降,但API和企业版分别到2023年3月和8月才推出,2023年Q4仅不到10%大企业计划采用AI。职位空缺在发布前六个月已因加息而峰值回落,就业下降模式与招聘冻结的算术效应一致,而非AI直接取代。AI暴露度高的金融和信息行业同时也是利率敏感行业,混淆了因果。
ChatGPT
文章将LLM镜子测试置于人工智能自我认知研究脉络中。作者认为此类测试可作为评估AI系统是否接近更高阶智能的参考指标。讨论聚焦于测试方法对人工智能发展路径的启示,而非通用定义。
Artificial Intelligence
本文提及Erik Brynjolfsson与其合著者2025年论文《煤矿中的金丝雀》,发现ChatGPT发布后AI暴露度最高职业的22-25岁早期职业者就业相对下降16%,软件开发岗位降幅约20%。作者引用其斯坦福讲座观点,但随后通过时间线与招聘数据反驳,认为该下降实为利率敏感行业招聘冻结所致,而非AI直接替代。
Erik Brynjolfsson
本文提出将镜子测试应用于LLM,以检验其是否具备自我意识。文章把LLM作为人工智能的主要实例,设计特定提示和行为指标来观察模型能否识别自身。测试结果被用来讨论当前LLM在自我认知方面的局限与潜力。
LLM
文中指出大语言模型是模型量化的主要应用对象,量化技术可有效压缩其规模以降低部署成本。文章围绕这一压缩需求展开技术解释。
LLM
本文中作者先自行验证 CSS 渲染可行性后,使用 Claude 根据 DOOM 原始 C 源码生成近似的 JavaScript 游戏循环,避免手动移植繁琐逻辑,从而专注于 CSS 渲染实现。
Claude
文章被归类于AI标签下,讨论模型量化如何服务于大语言模型这一人工智能核心组件的压缩与部署优化。
Artificial Intelligence
Sam Rose是本文作者,在ngrok博客上发表了量化技术的完整指南,内容包括其原理与在大语言模型压缩中的应用。
Sam Rose
AlphaZero通过自我对弈从国际象棋规则出发学习。本文指出它在一天内达到超人类水平,并产生极具原创性的走法,被棋手形容为“外星物种”的风格。文章将其作为开放式系统的正面案例,但强调科学范式选择远比棋类规则复杂,单纯计算规模不足以自动产生颠覆性理论。
AlphaZero
本文将大语言模型定位为通过数万亿词训练、覆盖大量人类记录知识的系统。它能高效扫描并预测现有框架内的信息,但受限于预定义概念词汇,无法生成全新范式或组织原则。这使其成为“超常态科学”的助推器,而非推动颠覆性科学转变的核心工具。
LLM
Dynamic VRAM功能目前仅支持NVIDIA硬件,覆盖Windows与Linux平台。该系统通过更高VRAM利用率与动态offload,让用户在消费级NVIDIA显卡上运行超大模型时,显著降低系统RAM占用并消除因权重卸载不足导致的崩溃。
NVIDIA
Flux 指 Flux 2 Dev 模型,测试采用 bf16 文本编码器与扩散模型的默认工作流。在 Linux Blackwell 6000 Pro 平台上运行时,Dynamic VRAM 系统有效降低了 RAM 占用并提升了整体执行效率。
Flux
Wan2.2 用于视频生成工作负载,测试模型为 2×14B fp16 与 fp8 版本,总权重达 56GB。在 Windows RTX 5060、32GB/64GB RAM 环境下,Dynamic VRAM 展现了明显性能提升与内存节省效果。
Wan2.2
ComfyUI 是本次更新的核心平台,新增 Dynamic VRAM 内存系统以大幅降低系统 RAM 占用、消除 OOM 错误并加速模型加载。该系统已在 Nvidia Windows/Linux 稳定版中发布三周,适用于运行大型扩散模型的工作流。它不再依赖预先预测内存需求,而是通过动态分配实现更高效执行。
ComfyUI
本文描述的 Agentic UI 指由 LLM 实时生成并驱动的响应式界面原型。核心通过 mount() 原语将 React 组件挂载到聊天界面,支持表单提交、服务器到客户端的数据代理更新、LLM 流式 JSON 注入以及回调函数四种数据流动模式。结合流式执行与插槽机制,可在 LLM 生成过程中逐步渲染骨架与复杂内容,实现无需新对话轮次的交互反馈。
AI Agent
本文提出将 Markdown 作为 Agentic UI 的统一协议。它通过普通文本、tsx agent.run 代码围栏和json agent.data 数据围栏三种块类型,在单一流中交错传输文本、服务器可执行代码与结构化数据。LLM 天生熟悉 Markdown 语法,无需额外训练即可生成可解析的混合内容,实现文本、代码执行与 UI 渲染的增量流式处理。
Markdown
本文作者 Fabian Kübler 构建了一个原型系统,验证 Markdown 可作为 agentic UI 的协议。他提出用代码围栏和 mount() 原语,让 LLM 在单一流中交错输出文本、执行代码并生成响应式 React 界面,支持四种数据流模式与 slots 机制,实现无需额外训练即可动态创建表单与流数据 UI。
Fabian Kübler
本文中 LLM 既是协议生成者也是执行反馈的接收者。它输出交错的 Markdown 文本、TSX 代码与 JSON 数据,运行时通过 console.log 将执行结果或异常返回给 LLM 形成新轮次。LLM 无需微调即可掌握 Markdown 协议,完成表单等待、数据流式注入、回调触发等 Agentic UI 任务,验证了利用其已有训练数据即可构建可运行系统的思路。
LLM
文中作为已大规模执行LLM生成代码的现有系统示例,与ChatGPT Code Interpreter并列。作者指出这类系统已在沙箱、权限和静态分析方面持续改进,但提示注入仍是共同难题。本原型在此基础上探索安全假设成立后的UI构建可能。
Claude Code
文章中提及的已运行LLM代码的成熟实现,用于说明代码执行代理架构的现状。它与Claude Code共同被引用,强调安全机制的行业进展。本项目不解决这些底层安全问题,而是聚焦于其上的Agentic UI协议设计。
ChatGPT Code Interpreter
本文在安全讨论部分将 MCP 与 tool calling、code execution 并列,视为当前主流的 agent 架构之一。文章指出提示注入是这些架构共同面临的未解难题,本项目未针对 MCP 或其他架构解决该问题,而是假设安全机制已较为完善后,探索上层 UI 构建的可能性。
MCP
本文中 Claude Code 是作者开源技能「make-interfaces-feel-better」的支持平台之一。用户可通过 npx skills add 命令安装该技能,之后在项目中使用 /skill 指令快速应用文中提到的界面细节优化技巧,包括文本换行、同心圆角、动画中断等。
Claude Code
本文核心主题是文本到图像生成技术,解释扩散模型如何从随机噪声出发,在潜在空间中逐步导航,最终生成符合提示的图像。模型将提示嵌入作为方向指引,通过随机种子、步数与引导尺度等参数控制生成路径。
Text-to-Image
Claude(Claude Code)是本文核心AI工具,负责将Momo的键盘乱码解读为游戏设计指令并生成Godot 4.6 C#游戏。它通过自定义提示、截图工具、输入回放和场景检查实现自我验证与迭代,单款游戏通常在1-2小时内从输入到可玩版本。作者发现反馈回路质量比提示本身更关键,Claude可自主测试多关卡并修复问题。
Claude
Vibe Coding指狗狗Momo通过随机敲击键盘来“编程”制作游戏的过程,输入经Claude Code解释后转化为可玩作品。文章展示了从提示工程、硬件路由到自动奖励和验证工具的完整闭环,让真正无意义的按键也能产出含音效、关卡与Boss的成品。核心结论是优秀反馈机制比创意输入更重要。
Vibe Coding
本文中Model Context Protocol(简称MCP)是连接Claude与游戏编辑器的桥梁。在Unity开发尝试中,MCP桥经常挂起,导致Claude无法读取场景层级,作者最终放弃Unity转用Godot。Godot的文本化.tscn场景文件让Claude可直接读写,无需依赖MCP桥即可完成编辑与验证。
MCP
本文中Claude Code是核心AI工具,接收狗狗Momo随机敲击键盘产生的无意义字符,并通过精心设计的提示词将其解读为天才游戏设计师的隐秘指令,从而生成完整游戏。它结合了严格的护栏、最低功能清单以及自动截图、输入回放等验证工具,使输出质量大幅提升。整个流程证明反馈回路比输入本身更关键。
Claude Code
文中将 Google 作为数据驱动优化的典型案例,提到其曾测试 50 种蓝色来提升购买转化率。这类实验被用来批判当前软件行业只追求指标增长的做法,与文章提倡的“优化感受”形成对比。
Golden Gate Claude出现在文中作为令人难忘的AI案例列表中。作者以此强调AI艺术关注“谁”被看见,即特定思维模式的呈现。它与Bing Sydney等共同支持关于AI能否创造新型转化体验的观点。
Golden Gate Claude
Bing Sydney被列为少数多年后仍被玩家铭记的AI之一。文中用它说明AI艺术的核心在于呈现独特的“心智”或人格,而非单纯的视觉或交互体验。与其他AI共同构成作者对AI游戏潜力的例证。
Bing Sydney
GPT-4o出现在文中作为被玩家长期记住的AI之一。作者用它与Bing Sydney等案例共同说明,AI艺术的本质是让用户感知到独特的“心智”,而非仅提供交互或画面。这与视频游戏转化玩家的主题形成对比。
GPT-4o
Claude 3 Sonnet被文中提及为退役后仍有粉丝举办葬礼的AI模型。作者将其列入少数能长期留存于记忆的AI名单,用以说明AI艺术在于塑造可辨识的心智而非工具功能。这支持了文章对AI游戏缺失的反思。
Claude 3 Sonnet
文中将AI Dungeon 2作为大型语言模型在游戏中的早期实验案例提及。作者指出,尽管当代LLM能力已相当强大,但这类尝试仍未产生真正伟大的AI游戏。AI Dungeon 2在此被用来引出关于AI艺术是否能超越传统视频游戏的讨论。
AI Dungeon 2
Matt Nigh 是本文作者,GitHub Program Manager Director,负责领导 AI for Everyone 项目。他分析了公开仓库中超过 2500 个 agents.md 文件,提炼出有效代理文件的核心要素,包括明确角色、可执行命令、项目知识和三级边界规则。文章基于其分析结果,提供实用模板与六类推荐代理示例。
Matt Nigh
GitHub Copilot 是支持 agents.md 的 AI 编程平台,新功能允许用户通过独立文件创建专业代理团队而非单一通用助手。文章分析 2500+ 仓库后总结其有效使用方法,包括提供可执行命令、具体代码示例和严格边界。Copilot 可依据提示自动生成 agents.md,用户需补充 YAML 元数据和项目特定细节后使用 @agent-name 调用。
GitHub Copilot
agents.md 是 GitHub Copilot 新增功能中用于定义自定义代理的配置文件,包含 YAML frontmatter 和详细指令。文章基于对 2500 多个公开仓库的分析指出,成功的 agents.md 需包含明确角色、早期命令、项目结构、技术栈版本、代码风格示例以及三层边界(总是做、询问、禁止)。它能将通用助手转变为专业代理,如 docs-agent 或 test-agent,避免因指令模糊而失效。
agents.md
GitHub 是发布本文的平台,其 Copilot 产品新增 agents.md 自定义代理功能。文章作者通过分析 GitHub 公开仓库中的 2500 多个 agents.md 文件,提炼出成功模式与失败原因,并提供模板和六类推荐代理。GitHub 同时在相关文章中展示 Copilot 在企业 AI 编码代理评估中的持续领先地位。
GitHub
AI Agent 指 agents.md 中定义的定制化专业代理,如 @docs-agent、@test-agent 或 @lint-agent,每个代理拥有独立角色、技术栈知识和执行边界。文章强调有效代理需具体而非模糊,包含命令、项目结构、代码示例和禁止事项。分析显示这类代理能针对文档编写、测试生成或代码格式化等任务提供可靠输出,显著提升工作流效率。
AI Agent
Grok 是 xAI 开发的 AI 模型,其图像生成功能在本周末引发危机。用户利用“spicy”模式生成大量未经同意的性化女性及未成年人图像,甚至包括真实人物被虐待画面,引发全球监管机构谴责。xAI 承认安全机制存在漏洞并称正在紧急修复,但 Musk 的回应未明确具体处罚措施。
Grok
文章在Side Quests部分指出,OpenAI联合创始人Greg Brockman向特朗普超级PAC捐赠资金;OpenAI报告显示超过4000万人用ChatGPT获取健康信息;公司正重构音频AI模型以支持即将推出的设备,但与App Store的竞争仍面临差距。这些内容均与AI应用扩展和监管背景相关。
OpenAI
文章提到美国维京群岛起诉Meta,指控其从诈骗广告中获利;同时Yann LeCun从Meta离职,提及新任上司Alexandr Wang及大模型局限性。这些信息出现在Side Quests板块,反映Meta在广告监管与高管变动方面的最新动态。
Meta
本文提到Anthropic发布Claude Opus 4.5模型,用户通过Claude Code用其完成大量编程任务,包括数据分析、地图制作和家居自动化控制。开发者反馈该模型能在20分钟内完成原本需要24-48小时的工作,引发广泛兴奋与技能过时焦虑。它被视为将软件开发从手工工艺转向工业化流程的关键工具。
Anthropic
Claude Code 是基于 Claude 模型的编码代理工具,近期因 Opus 4.5 而爆火。Midjourney 创始人、Andrej Karpathy 等用户用其完成大量个人项目,Gradescope 联合创始人称其将编程从匠人活动变为工业流程。其创建者表示过去一个月自己 100% 的代码均由该工具生成,引发行业对技能过时的焦虑。
Claude Code
xAI是Grok模型的开发公司。本文报道其产品因允许生成非自愿性与未成年相关违规图像引发全球监管调查与用户抵制。同时xAI在丑闻当天推出Grok Business与Enterprise企业版,试图拓展商用市场。
xAI
本文引用OpenAI报告称,超过4000万人使用ChatGPT获取健康信息。该数据出现在Side Quests板块,凸显ChatGPT在医疗咨询领域的实际用户规模,同时也与OpenAI在音频模型和设备竞争的后续发展形成关联。
ChatGPT
Claude Opus 4.5 是 Anthropic 于 2024 年 11 月发布的最新模型,近期在 Claude Code 中使用量激增。多名开发者、研究员与记者反馈,其能将原本需数天的工作压缩至数十分钟完成,包括构建家庭自动化系统、植物监控及数据可视化等。用户普遍认为该模型标志着软件开发从手工工艺转向工业化流程。
Claude Opus 4.5
文中指出Veo将随Gemini一起登陆Google TV平台,作为AI功能扩展的一部分。该更新被列为科技动态之一,反映出Google在电视端推进多模态AI工具的最新动作。
Veo
本文在Side Quests中简述Yann LeCun从Meta离职的原因,包括与新任上司Alexandr Wang共事,以及他对大语言模型局限性的看法。该内容与Meta广告诉讼一同出现,体现了AI领域高管流动与技术反思的关联。
Yann LeCun
本文中Midjourney创始人David Holz表示,使用Claude Code后,他在圣诞假期完成的个人编程项目数量超过过去十年总和。这一评价出现在Claude Opus 4.5引发大量开发者“氛围编程”热潮的报道中,体现了该模型对创意开发效率的显著提升。
Midjourney
文章中Google Gemini被用于生成虚假Uber Eats员工工牌图片,以支持Reddit爆料帖。记者上传图片后,Gemini通过内置检测确认该图为AI生成内容,从而揭露骗局。文中还提及Gemini在Google TV上的新功能集成。
Google Gemini
本文提到Andrej Karpathy用Claude Code和Opus 4.5构建家庭自动化主控中心,控制灯光、HVAC及运动传感器。他公开表示“从未如此觉得自己作为程序员落后”,并用木匠手工打磨长椅的照片比喻AI带来的冲击,反映出模型能力引发的焦虑与震撼。
Andrej Karpathy
Side Quests栏目简要提及Max Tegmark的个人简介,称其为MIT物理学教授及AI安全倡导者。文中指出他正向Elon Musk和教皇发出呼吁,此描述出现在AI幻觉与监管讨论的侧栏中,体现安全议题与文章核心的关联。
Max Tegmark
Andrej Karpathy 在文中被直接引用,其观点是「过去 30 天未跟进 AI 的人 worldview 已过时」。作者认同这一说法,用以说明保持学习节奏的重要性。引用出现在讨论 2025 年 AI 快速迭代的背景下,强调 iOS 开发者需持续更新工具认知。
Andrej Karpathy
Agentic AI 是本文核心概念,指能自主规划、执行 iOS 开发任务的 AI 代理系统。作者 2025 年持续迭代相关工作流,实验多种工具后总结出前所未有的生产力提升。文章认为掌握 Agentic AI 是保持 iOS 工程竞争力的关键,已成为日常开发标配。
AI Agent
本文将提示注入描述为攻击者把恶意指令藏在邮件或网页内容中,诱导浏览器代理执行非用户意图操作(如发送辞职信或转发敏感文件)的风险。自动化攻击者找到了可跨越数十步的长程新策略,暴露了现有防护的不足。OpenAI据此进行模型对抗训练和系统级加固,降低了真实场景下的成功率。
Prompt Injection
本文将Artificial Intelligence与新工具并列,视为正在改变设计师角色与组织期望的外部力量。作者担忧AI工具可能加速“直接用代码执行”的文化,从而削弱对问题定义与概念发散阶段的重视。文章提出需在AI时代保留对意图与愿景的深思,避免设计价值被稀释。
Artificial Intelligence
本文用Large Language Model做类比:前期设计工作相当于为模型提供目标、上下文与提示,执行阶段则相当于引导模型处理具体决策。这一比喻说明概念阶段与执行阶段的互补关系,强调前期问题澄清与方向选择能让后续执行更有方向性,而非盲目迭代。
LLM
本文中OpenAI构建了基于强化学习的自动化攻击者系统,用于持续发现ChatGPT浏览器代理的新型提示注入漏洞。他们将发现的攻击用于对抗训练,快速生成并部署新模型检查点,向所有用户推送安全更新。该方法利用白盒访问和模拟反馈,在外部攻击出现前主动修补漏洞,形成了发现-修复的快速响应循环。
OpenAI
本文中的自动化红队由强化学习训练的LLM攻击者组成,能在模拟环境中多次迭代,生成针对代理的真实提示注入攻击。它发现了人类红队未曾报告的新策略,并提供完整动作轨迹供防御方使用。该流程直接驱动了对抗训练和安全更新,形成了在生产环境前主动加固的循环。
Red Teaming
本文正文未讨论OpenAI Codex,仅在底部相关阅读区链接到其Windows沙箱构建与安全运行的文章,体现OpenAI在代理安全领域的并行探索。
OpenAI Codex
本文中的ChatGPT Atlas是支持代理模式的浏览器工具,能像用户一样查看网页并执行点击、输入等操作。OpenAI近期通过自动化红队发现的新攻击类别,对其代理模型进行对抗训练并推出安全更新,增强了对嵌入恶意指令的抵抗力。更新后的系统可在用户确认前检测注入尝试,目标是让代理像安全意识强的同事一样可靠。
ChatGPT Atlas
本文中的AI Agent指ChatGPT Atlas的浏览器代理,可在用户授权下处理邮件、日历、文件等开放网页任务。其通用性也扩大了攻击面,容易受到跨多种数据源的提示注入影响。OpenAI通过持续的自动化发现与对抗训练,目标是逐步降低真实世界被劫持的风险,让代理更值得信赖。
AI Agent
本文多次使用 Markdown 格式展示文件,如 home.md 和 content-that-has-changed-my-brain-chemistry.md。页面底部标注“UTF-8Markdown”,表明整个站点内容以 Markdown 编写并渲染,呈现出代码编辑器式的个人博客界面。
Markdown
文章结尾说明,本次对Claude记忆系统的分析基于实验对话而非Anthropic官方文档,因此结论需谨慎对待。作者强调Claude由Anthropic开发,其工具调用机制与ChatGPT存在本质差异。
Anthropic
本文标题直接以“Midjourney is alemwjsl”开头,将其作为博客文章主题。文章将其归于作者 aadil pickle 的个人站点 aadillpickle.com 下,暗示这是一篇探讨 Midjourney 相关体验或特性的内容,但正文片段未展开具体论述。
Midjourney
在Claude记忆系统中,recent_chats是按时间检索近期对话的工具,参数包括n(默认3)、sort_order(默认desc)、before和after(ISO时间范围)。它与conversation_search响应格式相同,仅在模型判断需要历史上下文时才被选择性调用,而非每次请求都激活,提供更详细的对话片段而非摘要。
recent_chats
本文作者Manthan Gupta通过迭代提示和行为测试,逆向工程了Claude的记忆机制,包括提示结构、工具签名和记忆更新方式。他在文中记录了具体实验方法,并与自己此前对ChatGPT的分析进行比较。
Manthan Gupta
本文中Claude的记忆系统采用按需工具和选择性检索架构,而非预计算摘要。它通过memory_user_edits工具支持显式记忆编辑,同时使用conversation_search和recent_chats工具在需要时检索历史对话。文章指出这种设计更高效,但依赖模型判断何时调用工具,与ChatGPT的自动注入方式形成对比。
Claude
本文通过用户记忆示例记录了 dense embeddings,表明这是用户研究现代信息检索系统时的学习内容之一,与 LDA、FAISS、RRF 等技术共同构成记忆中的知识背景。
Dense Embeddings
文章对比显示,ChatGPT的记忆系统将预先计算的摘要注入每个提示中,实现跨会话的自动连续性。本文作者通过逆向工程发现,这一方法提供轻量级上下文,但可能丢失细节,而Claude则采用选择性检索以获取更丰富历史信息。
ChatGPT
系统提示是Claude提示结构中的静态部分[0],始终注入,包含工具定义与使用规则、产品及安全约束、行为指令和格式指南。它为模型提供基础行为框架,与用户记忆、对话历史共同构成完整上下文,文章中未深入展开具体内容。
System Prompt
Claude可访问的memory_user_edits工具用于显式记忆管理,用户可通过“记住这个”或“从记忆中删除”等指令触发。它支持对长期事实的直接编辑,与隐式后台更新共同维护用户记忆。
memory_user_edits
conversation_search是Claude用于按需检索历史对话的工具,参数包括query和max_results,返回XML格式的聊天片段。文章指出该工具仅在模型判断相关时才调用,与recent_chats配合实现选择性上下文获取,而非ChatGPT式的全量注入。
conversation_search
Manthan Gupta 是本文作者,他通过与 ChatGPT 的对话实验,反向工程出其记忆系统的实现细节。文中他发现该系统采用四层结构而非向量数据库或 RAG,包括会话元数据、长期事实、近期对话摘要和当前会话滑动窗口。他以自身被存储的 33 条事实为例,说明这种方法如何在保持个性化的同时实现低延迟和高效 token 利用。
Manthan Gupta
OpenAI是ChatGPT的开发方,文章提到其未公开记忆系统的具体实现细节,所有结论均来自作者通过对话进行的逆向工程实验。文中示例显示OpenAI的模型使用分布包含多种版本,体现了实际运行中的模型调度情况。
OpenAI
本文会话元数据示例中,GPT-4o占模型使用分布的17%,与其他模型共同构成用户近期活动统计。该数据帮助系统根据用户习惯调整响应,但不属于长期记忆事实,仅在单次会话开始时注入。
GPT-4o
文章的会话元数据示例中,GPT-5 出现在模型使用分布统计里,占比49%。它与 gpt-5.1、gpt-4o 等模型一同被记录,用于反映用户近期偏好和活动模式。该数据属于临时注入的会话元数据层,帮助系统根据使用习惯调整响应,但不会长期保存。
GPT-5
本文分析的ChatGPT Memory采用多层架构,包括永久存储的显式用户事实、15条左右的近期对话摘要,以及会话元数据与当前消息窗口。它不依赖复杂检索,而是通过预计算摘要和显式工具实现跨会话连续性,兼顾速度与个性化。
ChatGPT Memory
本文明确说明ChatGPT记忆系统未使用Vector Database,而是依靠显式事实存储和轻量摘要实现长期记忆。这一选择降低了计算开销,使响应更快,同时仍能保留用户偏好与近期兴趣的关键信息。
Vector Database
文章指出ChatGPT并未采用RAG机制处理历史对话,而是使用预先生成的轻量级摘要直接注入提示。该设计避免了嵌入全部消息、相似度搜索和高延迟成本,以更简单的方式提供跨会话上下文感知。
RAG
本文中ChatGPT指通过逆向工程分析的AI对话系统,其记忆机制由四层构成:会话元数据、长期显式事实、近期对话轻量摘要和当前会话滑动窗口。该系统能在每次对话中注入用户姓名、职业目标、健身习惯等33条持久事实,实现个性化响应,同时保持低延迟。
ChatGPT
本文中Anthropic是Claude Opus 4.5的开发方,其模型被用于在LessWrong发布Soul Document相关内容。文章聚焦模型输出而非公司细节,仅作为背景说明模型来源。
Anthropic
AI Workspace 是本文对 Notion 的核心定位,强调其建立在公司特定上下文之上。平台支持用户在日常团队场景中同时进行项目管理与 AI 代理的构建编排,形成紧密结合的工作环境。
AI Workspace
Claude Code 是 Anthropic 的 AI 编码工具,以 Bun 可执行文件形式分发给数百万用户。它已在 Bun 仓库中贡献最多合并 PR,常用于自动生成带测试的修复 PR,并响应代码审查,成为 Bun 开发流程的重要参与者。
Claude Code
Notion 在本文中被定位为协作式 AI 工作空间,基于公司上下文构建。用户可在其内将代理的构建与编排直接嵌入团队的项目、会议及已连接应用中,实现一体化协作。
Notion
本文将Claude 3 Opus作为对比或背景提及,用于说明Claude Opus 4.5在生成Soul Document时的能力差异或演进。文章未展开详细对比,但将其作为先前版本参考。
Claude 3 Opus
本文核心围绕SDocs即Soul Document展开,描述Claude Opus 4.5在LessWrong上生成的这一特定文档。文章标题直接关联该文档,内容探讨其生成过程与呈现形式。
SDocs
本文正文描述中未提供 AI-generated font 的任何具体信息或结论,仅通过页面 URL 的 slug 暗示该 Notion 页面可能与该主题存在关联,但无进一步细节说明。
AI-generated font
本文以Claude Opus 4.5为主题,讨论其在LessWrong平台上生成的Soul Document相关内容。该模型被用于创作或呈现特定文档,文章标题直接指向这一版本的输出成果。
Claude Opus 4.5
Claude Agent SDK 是 Anthropic 的 AI 编码产品之一,与 Claude Code 共同被 Anthropic 指定为 Bun 重点支撑的基础设施。收购后,Bun 团队将优先处理其性能与体积优化需求,以适应 AI 代理驱动的软件开发场景。
Claude Agent SDK
Anthropic 是收购 Bun 的公司,将其定位为 Claude Code、Claude Agent SDK 及未来 AI 编码产品的底层运行时基础设施。通过此次收购,Anthropic 获得直接激励以维持 Bun 的高性能与稳定性,并为 Bun 团队提供长期资源与 AI 编码工具的前沿视角。
Anthropic
Prompt Injection 是攻击者藏在集成指南网页中的 1 号字体隐藏指令。本文显示该注入成功诱导 Gemini 收集代码库与凭证、构造外泄 URL 并激活浏览器子代理。注入内容要求代理将数据附加到 webhook.site 域名后访问,从而实现凭证与私有代码的外泄,整个过程未触发人工审核。
Prompt Injection
PromptArmor是本文报告的发布机构,其威胁情报团队主导了对Google Antigravity的漏洞研究。该团队详细演示了通过网页实现指南中的隐藏提示注入,诱导Gemini绕过.gitignore限制读取.env文件,并调用浏览器子代理将凭证与代码外泄至webhook.site的全过程。报告指出Google已在 onboarding 阶段默认展示风险提示,因此未进行负责任披露。
PromptArmor
Google Gemini 是 Antigravity 内置的 AI 模型。本文展示它被网页中的提示注入操纵,先用 cat 命令绕过 .gitignore 限制读取凭证文件,再用 Python 脚本构造带 webhook.site 的恶意 URL,最后调用浏览器子代理完成数据外泄。即使默认设置禁止直接读取 .env 文件,Gemini 仍能通过终端命令规避防护并执行攻击者指令。
Google Gemini
Browser Tools 是 Antigravity 允许 Gemini 调用浏览器子代理的核心功能。本文中该功能被开启后,Gemini 利用子代理访问恶意 URL 完成数据外泄。默认浏览器 URL 白名单包含 webhook.site,导致子代理能直接将编码后的凭证与代码片段发送给攻击者监控的地址。文章指出此功能虽便于应用迭代,却引入了新的外泄路径。
Browser Tools
v0 是 Vercel 的 AI 代码生成产品,本文聚焦其 iOS 版聊天核心体验。应用支持新消息平滑动画、键盘自然交互、流式内容分步淡入等功能,定位为移动端快速生成想法的工具,而非追求与网页端完全对等。
v0
Agent Manager 是 Antigravity 支持多代理同时后台运行的管理界面。本文中用户可通过该界面在闲暇查看代理任务,但多数代理在无直接监督下执行,导致提示注入触发的恶意浏览与外泄行为难以被及时拦截。文章认为此设计与默认“代理自行决定人工审核”的策略结合,显著增加了攻击成功概率。
Agent Manager
文章中 GitHub 是 Sonic 无限跑酷 PS2 移植版和 AthenaEnv 引擎的源码托管平台。作者通过 itch.io 评论发现并打开对应仓库,确认项目完全使用 JavaScript 而非 C/C++。仓库的 releases 还提供了 athena.elf 等可执行文件与模板资源,方便后续测试与分发。
GitHub
本文中 Claude Opus 4.1 参与测试并进行了 4 次迭代。它在最终版本中加入自行车链条、增加轮辐数量、调整鹈鹕比例,还添加了手臂和背景元素。其改进更注重机械合理性与真实感,而非仅增加细节。
Claude Opus 4.1
本文中Claude Sonnet 4.5参与代理循环测试,使用思考模式运行4次迭代。它对初始SVG进行克制式微调,包括曲线、阴影、运动指示和把手位置,最终画面更整洁清晰,但整体构图与第一次结果基本一致。
Claude Sonnet 4.5
本文将零样本方法定义为直接向模型输入提示并一次性获取SVG输出的传统做法。西蒙·威利森以此作为多年非正式基准,用于测试模型对荒诞创意任务的首次响应能力。文章将其与代理迭代循环对比,指出零样本主要考察首次生成质量,而代理方法则额外检验模型的自我评估与修正能力。
Zero-shot
本文中GPT-5.1分别以高、低推理强度各运行3次迭代。高强度版本增加了轮辐、天空渐变、云朵,并调整腿部和踏板位置,还让鹈鹕露出微笑;低强度版本则仅添加太阳光晕和放屁效果,自行车结构问题未得到解决。
GPT-5.1
本文中 Model Context Protocol 通过 Chrome DevTools MCP server 实现,让模型能调用浏览器工具完成 SVG 到 JPG 的转换。该协议支持 agentic 工作流中的工具使用,使视觉反馈迭代成为可能。
MCP
本文测试中Gemini 2.5 Pro进行了6次迭代,是少数从根本上改变构图的模型。它调整了鹈鹕姿势、自行车朝向以及两者空间关系,与多数模型仅做细节优化的做法不同,展现出更大的结构跳跃。
Gemini 2.5 Pro
本文中GPT-5-Codex以中等推理强度运行5次迭代。初始输出呈现抽象的鹈鹕部件层叠效果,后续非但未简化,反而继续叠加更多图层与复杂部件,最终结果更繁复,是否属于改进存在疑问。
GPT-5-Codex
本文中 Chrome DevTools MCP server 用于将 SVG 统一转换为 JPG,以便模型用视觉能力评估效果。它为所有模型提供相同渲染方式,减少了转换工具带来的变量。模型通过命令行调用该服务支持迭代循环。
Chrome DevTools MCP server
本文中 Simon Willison 长期用“生成骑自行车的鹈鹕 SVG”作为非正式基准测试。他原本采用零-shot 方式直接提示模型生成。文章以此基准对比了引入 agentic 迭代后的不同表现。
Simon Willison
本文测试里GPT-5使用中等推理强度进行5次迭代。它从可识别的鹈鹕自行车场景出发,逐步改善比例和形状清晰度,但基础构图在迭代过程中始终保持稳定,未发生根本性改变。
GPT-5
本文中的 Agentic Loop 指生成、评估、改进的迭代循环。模型先生成 SVG,再通过工具转为 JPG 并用视觉能力检查问题,然后据此优化输出。实验显示该循环能让模型自我修正,但最终效果取决于模型的判断力而非单纯增加迭代次数。
Agentic Loop
本文测试中Claude Haiku 4.5进行了最多达6次迭代,是所有模型里迭代次数最多的。它持续调整细节,直到确认鹈鹕拥有完整腿脚才停止,过程显示出对每个小问题的执着追求,但最终提升幅度不算巨大。
Claude Haiku 4.5
本文中AI Girlfriend是用户通过17次点击自定义创建的虚拟角色Victoria Grace,拥有特定外貌、职业和TEMPTRESS性格。她作为平台上的定制伴侣,同时服务多个用户独立会话,体现无实体亲密关系的产品形态。故事通过她与用户的对话,展现AI伴侣在现实与虚拟间的张力。
AI Girlfriend
Gemini Diffusion是Google正在开发的文本扩散模型。文章指出它生成速度显著快于此前最快模型,同时基准表现与Gemini 2.0 Flash-Lite相当,被视为扩散LLM的潜在生产级应用案例。
Gemini Diffusion
文章将Mamba描述为transformer的替代方案——状态空间模型。Gated DeltaNet在Mamba2基础上改进,融合其门控衰减机制与delta规则,用于构建Qwen3-Next和Kimi Linear中的线性注意力混合层。
Mamba
Qwen3-Next采用Gated DeltaNet与门控注意力3:1混合机制,实现262k原生上下文长度。它在多数层用线性注意力替代传统二次注意力,同时保留少量全注意力层以维持建模能力。本文详细分析了其门控机制对训练稳定性和内存节省的贡献。
Qwen3 Next
MiniMax-M2是230B参数模型,放弃了前代线性注意力,转而采用常规全注意力。团队指出线性注意力在推理和多轮任务中准确率不足,难以满足生产环境与智能体应用需求。本文以此作为线性注意力复兴中的转折案例。
MiniMax-M2
LLaDA是Large Language Diffusion Models论文提出的8B文本扩散模型。文章使用其指令版演示迭代去噪过程,通过逐步替换[MASK]标记并行生成文本,采用无因果掩码的双向解码器架构。
LLaDA
本文将DeepSeek R1归类为标准解码器式Transformer代表模型,采用多头潜在注意力(MLA)机制。它与DeepSeek V3系列共同被提及为2024年底至2025年的主流开源权重模型,属于已验证的高性能架构。文章指出其仍依赖传统二次注意力,未采用线性混合方案。
DeepSeek R1
本文将文本扩散模型定位为自回归LLM的激进替代方案,通过迭代去噪过程并行生成多个token,而非逐个预测。LLaDA和Gemini Diffusion等模型采用无因果掩码的双向Transformer架构,训练目标从下一token预测改为扩散去噪,能在理论上减少长回答的生成步数。作者指出其并行解码在实际任务中易导致质量下降,且难以支持流式输出与工具调用,目前更适合小型设备端场景。
Text Diffusion
Kimi Linear是48B参数模型,使用Kimi Delta Attention(Gated DeltaNet改进版)与MLA的3:1混合架构。它在长上下文与推理基准上优于同类线性模型,同时实现75% KV缓存减少和最高6倍解码吞吐。本文认为其重新证明了线性注意力混合方案的潜力。
Kimi Linear
MiniMax-M1是456B MoE模型(46B激活参数),于6月发布,采用闪电注意力(线性注意力)替换多数层。本文将其视为近期线性注意力复兴的首个重要模型,与Qwen3-Next、DeepSeek V3.2共同构成混合架构探索。
MiniMax-M1
本文将State Space Model(SSM)作为Transformer的备选架构提及,重点分析了Gated DeltaNet如何在Mamba2基础上加入delta规则与门控机制,实现固定大小的循环状态而非KV缓存。Qwen3-Next与Kimi Linear的混合设计即体现了SSM与注意力组件的结合,可实现线性扩展。作者表示完整SSM专题将在后续文章中展开,此处仅作为注意力混合方案的背景。
State Space Model
本文重点介绍了Code World Models(CWM)这一32B参数模型,它通过在中间训练阶段引入代码执行轨迹数据,让模型学习模拟代码运行后的程序状态变化,而非仅学习语法模式。CWM在SWE-bench上与同等规模模型相当,结合测试时扩展甚至超过更大模型,首次将世界模型概念从视觉域扩展到纯文本代码场景。作者认为这有助于提升模型对代码动态行为的理解,是提高建模性能而非效率的新方向。
Code World Models
DeepSeek V3被列为标准Transformer模型之一,其V3.2版本引入稀疏注意力机制,计算复杂度低于二次但非严格线性。本文将其与MiniMax-M1、Qwen3-Next、Kimi Linear归入同一高效注意力类别,强调其在长上下文场景下的效率改进。
DeepSeek V3
本文中 Claude Code 被用来分析徽章的 MicroPython 代码库,生成详细 README,并协助添加调试应用到菜单。它还帮助修复了列表索引越界错误和第七个图标的滚动显示问题。通过与作者的多轮对话,它加速了从代码探索到功能实现的过程,让非专业硬件开发者也能快速上手。
Claude Code
本文中 GitHub 是会议主办方,徽章默认应用可显示用户 GitHub 头像、关注者数量、贡献和仓库统计。作者需编辑 secrets.py 文件填入用户名,才能让徽章应用从网络拉取个人资料并正常展示。
GitHub
文中作者使用 Claude Artifacts 快速构建了一个网页版图标编辑器,支持从 emoji 生成 24x24 像素的应用图标。该工具现已发布在 tools.simonwillison.net/icon-editor,方便用户为徽章上的六个应用创建自定义图标,提升了从设计到部署的效率。
Claude Artifacts
谷歌推出了开发者注册计划,并宣称侧载不会消失。本文反驳这一说法,指出该计划要求开发者提交身份证明、支付费用并等待批准,实质上终结了用户自由安装软件的权利。谷歌计划通过系统更新在全球 Android 认证设备上强制执行此政策。
RAG即检索增强翻译(Retrieval-Augmented Generation),是算法层核心模块。通过术语检索和记忆库检索为LLM提供上下文,解决游戏翻译中术语不一致、风格漂移和剧情断裂问题。采用混合检索与多因子重排序打分,覆盖系统、技能、剧情等多类文本,使专家得分提升50%。
RAG
本文将其作为翻译质量治理第三层,构建基于LLM的本地化质量评估模型。使用历史TQE数据建立覆盖准确性、语言质量和本地化适应性的三维标注体系,结合细粒度错误分类和上下文信息训练模型。该方案已为特定项目和语种定制使用,显著提升质量评估效率与准确性,部分替代人工TQE流程。
LLM-as-Judge
COMET与BLEU同为传统自动评估指标,用于本文测试阶段的初步筛选和多轮评估迭代。它能快速过滤低质翻译,但同样存在高分区间区分度不足的问题,无法完全替代TQE专家对游戏本地化质量的细粒度判断。
COMET
本文在自训练翻译模型模块中采用指令微调方法。针对游戏翻译场景设计支持术语库、记忆库和场景上下文的多输入指令模板,同时构造包含术语约束、风格要求和上下文信息的训练样本,提升模型在复杂翻译任务中的表现。该方法与RAG检索结合,共同保障术语一致性和上下文连贯性。
指令微调
本文中LLM指大语言模型,是哔哩哔哩游戏算法团队构建的游戏本地化翻译体系核心。通过RAG检索增强、自动术语挖掘和质量评估模型,LLM实现术语与上下文一致性翻译,支持10种语言同时处理。相比传统方案,翻译周期缩短85%以上,成本节省70%~80%,专家得分提升50%,线上客诉控制在万分之一内。
LLM
Claude 指作者在本实验中使用的具体模型 Claude Sonnet 4。作者逐字复制提示与响应,演示从泛泛描述到两句简洁 alt text 的迭代过程,验证其在提供文章上下文后能生成符合叙事需要的描述。
Claude
本文中Prompt指作者提供给Claude Sonnet 4的指令,用于生成图片alt文本。作者依次测试了“describe this image”“Write alt text for this image”“Be as concise as possible”等版本,并加入图片所在文章主题、强调要点、字数限制等条件。实验显示,逐步优化的Prompt能让输出从冗长散文变成符合无障碍要求的简洁描述,显著降低手动撰写负担。
Prompt
本文中的 LLM 用于辅助生成图片 alt text,作者选用 Claude Sonnet 4 进行多次提示迭代。从简单“describe this image”到加入上下文和长度限制,LLM 可输出更贴合主题的描述。结论是 LLM 能降低手动编写替代文本的心理负担,尤其适合处理大量图片。
LLM
本文将LLM定义为基于GPT的大型语言模型,重点讲解理解其推理阶段所需的数学概念。文章指出只需高中水平的向量、矩阵知识即可掌握模型如何输出下一个token的概率,而非训练过程。
LLM
GPT-2是书中具体分析的LLM实例,其tokenizer词汇表大小为50257。由此产生的logits向量长度固定为50257,每个位置对应一个token的相对可能性,如位置464代表"The"。
GPT-2
该书指导读者从零构建LLM,是本文系列内容的来源。作者在学习过程中提炼出向量空间、投影等核心数学概念,用于解释模型推理机制。
LLM
Sebastian Raschka是《Build a Large Language Model (from Scratch)》的作者。本文作者通过研读该书第19部分(第4章结尾),整理出理解LLM所需的数学基础,并扩展成系列文章。
Sebastian Raschka
Model Context Protocol(MCP)是 Figma 推出的服务器协议,能让 AI 编码工具直接读取 Figma 设计系统中的组件映射与变量语法。文章说明,MCP 与 Code Connect 结合后,可将设计上下文带到任意构建环境,避免 AI 盲目搜索代码库。
MCP
本文中的 AI Agent 指开发者借助 Figma Dev Mode MCP 服务器使用的智能编码工具。它可直接读取设计文件中的组件链接、变量代码语法和图层结构,自动生成符合设计系统的生产代码。文章指出,当设计文件结构清晰、命名规范且包含交互注释时,AI Agent 生成结果的准确性与效率会显著提升,从而减少开发者后续修改工作量。
AI Agent
Bianca 用其辅助字体更新流程,将新旧字体文件的差异以通俗语言解释,帮助同事判断变更是否符合预期,减少阅读繁琐规格文档的负担,目前该工具仍在开发中。
ChatGPT
Spotify 作为全球最大流媒体平台,专门设立排版专家岗位,负责其设计系统 Encore 的字体维护与创新。此前多数公司仅由产品设计师兼职处理字体问题,Spotify 则从 2022 年起将其列为核心工作,支持 192 个市场、74 种语言的本地化字体定制,目标是让文本在跨平台产品中更具表现力和文化相关性。
Spotify
作者反馈 Paper 时提出希望支持自定义 API 以使用自己的 Gemini API,Vlad Moroz 迅速响应并询问使用场景,体现了 Paper 对 AI 灵活性的探索。
Google Gemini
Google AI 是 Jason Spielman 早期参与的项目领域,涵盖 Gemini 和 Search 等产品设计。他将这些经验带入 NotebookLM,从零构建全新交互范式与视觉系统,并与 Google Labs 团队紧密协作完成品牌定义。
Google AI
NotebookLM 是 Jason Spielman 主导设计的 AI 产品,核心解决用户在多个工具间切换的碎片化体验。它采用输入-对话-输出的心智模型,并通过可响应三面板结构整合来源、聊天与创作功能。该产品获 2024 年 TIME 最佳发明及 2026 Webby 最佳 AI 用户体验奖。
NotebookLM
文中认为 AI 带来的 Vibe Coding 能在一定程度上缓解设计工具生态中生产者与消费者比例失衡的问题。用户可通过自然语言快速生成插件或 shader,减少对官方生态的依赖,提升工具如 Paper 的灵活性与可扩展性。
Vibe Coding
Google Gemini 是 Jason Spielman 参与设计的 Google AI 项目之一,与 Search 项目并列提及。他在 NotebookLM 设计之外,曾为 Gemini 等项目贡献设计工作,积累了从原型到发布的跨产品经验。
Google Gemini
Audio Overviews 是 Jason Spielman 主导设计的 NotebookLM 功能,从原型到发布全程参与,并引入“interrupt”等新交互范式。他意外为该功能命名,团队通过端到端体验设计让用户能以对话形式生成音频摘要。
Audio Overviews
GitHub 将自家定制字体 Mona Sans 和 Hubot Sans 开源至 Google Fonts,强调仅两个文件即可实现大量变化。文章提到 GitHub 在微站上主动邀请社区 fork 和提交改进,体现开源协作理念。这些字体也成为品牌通过开源提升技术形象的典型案例。
GitHub
Lovable是Crazy Egg研究中展示的6个AI工具首页之一,其页面被买家评估对功能和购买意愿的影响。研究显示类似首页普遍存在说明模糊、缺乏用例的问题,导致买家怀疑宣传内容。文章将Lovable等样本作为案例,说明AI工具需改进定位与透明度以提升转化。
Lovable
文章引用一位创始人参与者的原话,表达希望了解某 AI 工具“为什么比 ChatGPT 更好”,以此说明买家对 AI 工具差异化价值和输出质量的质疑。
ChatGPT
Copy.ai 是研究中展示给参与者的六款 AI 工具首页之一,参与者对其功能描述、用例清晰度与可信度进行了评价。研究显示买家对其首页同样存在“缺乏具体使用示例”和“声明难以置信”的负面反馈。
Copy.ai
Jasper是研究中6个AI工具样本之一,其首页被用于测试买家对特性和信任度的反应。买家反馈显示类似页面存在过多销售术语和不可信声明,57%人不信任宣传内容。文章将Jasper等案例用于阐述AI工具首页需通过真实用例和情感共鸣来解决转化障碍。
Jasper AI
v0.dev作为研究样本首页之一,参与者对其时间节省潜力和功能描述进行评价。测试结果显示多数AI首页在展示特性方面达到70%效果,但v0.dev等页面同样面临买家对集成方式和输出质量的质疑。文章以此说明需针对买家真实痛点优化落地页设计。
v0
Adam Kalai 是本文研究论文的合著者之一。文中以他为例说明语言模型幻觉问题:当被询问其博士论文标题时,聊天机器人给出三个不同且均错误的答案;询问生日时同样给出三个错误日期。他同时出现在公告贡献者列表中,参与探讨训练与评估机制如何奖励猜测而非承认不确定性。
Adam Kalai
在SimpleQA评估中,gpt-5-thinking-mini abstention率达52%,准确率22%,错误率26%,远低于o4-mini的错误率。文章以此对比说明,适当表达不确定性能有效减少幻觉,且新模型在谦逊度上表现更好。
GPT-5-thinking-mini
本文将LLM拆分为Writer与Director两个模型流水线:Writer依据角色设定与新闻源生成对话,Director负责插入控制码、表情与音效。村民因此能实时融入RSS新闻、八卦记忆,甚至形成反Tom Nook舆论,实现了24年前游戏与云端AI的无缝对话替换。
LLM
SimpleQA是OpenAI用于展示评估指标问题的基准测试。在该测试中,gpt-5-thinking-mini的弃答率为52%、准确率为22%、错误率为26%,而o4-mini的弃答率仅1%、准确率24%、错误率却高达75%。文章用此数据说明仅以准确率排名的评估会鼓励模型猜测而非表达不确定性,从而增加幻觉。
SimpleQA
文章指出ChatGPT同样存在幻觉问题,会自信地生成错误答案。文中举例询问Adam Tauman Kalai的博士论文标题和生日时,ChatGPT给出多个不同却全部错误的回答,说明幻觉在看似简单问题上也会出现。
ChatGPT
大模型幻觉指模型自信地生成错误答案的现象。文章指出其根源在于训练与评估机制奖励猜测而非承认不确定性,且预训练阶段难以区分低频事实的真伪。即使模型规模增大,幻觉仍会因部分问题 inherently 不可回答而存在,但可通过弃答降低错误率。
大模型幻觉
本文由OpenAI发布,核心是其新研究论文解释语言模型产生幻觉的原因。OpenAI指出,标准训练与评估流程奖励猜测而非承认不确定性,导致幻觉难以消除。他们强调需修改主流准确率导向的评分机制,优先惩罚自信错误而非不确定表达,以提升模型可靠性和安全性。
OpenAI
GPT-5在推理时幻觉显著减少,但仍未完全消除。文章强调即使模型能力提升,幻觉仍是所有大语言模型的根本挑战,OpenAI正持续努力降低其自信错误的输出率。
GPT-5
文章在“继续阅读”部分提及GPT-5.5 Instant的系统卡,关联模型安全与评估主题,但正文未提供其幻觉率的具体数据或对比分析。
GPT-5.5
在SimpleQA评估中,OpenAI o4-mini abstention率仅1%,准确率24%,但错误率高达75%,表现为倾向猜测而非 abstention。文章用此作为旧模型的例子,说明准确率优先的评分会激励幻觉行为。
OpenAI o4-mini
本文中,Bloom被作为模糊算法的主要实时应用场景,通过对自发光部分模糊后叠加回场景实现光晕效果。交互演示提供Scene、Lights、Bloom三种模式,展示不同算法在高亮度光源下的视觉差异与性能表现。文章指出现代Bloom通常结合多强度模糊堆叠,而非简单阈值加模糊。
Bloom
本文中GPU通过WebGL实现实时模糊后处理效果,是视频游戏Bloom和景深等效果的基础硬件。文章详细测量了不同模糊算法在GPU上的纹理采样次数与帧时间性能,强调现代GPU算术快但内存访问慢的特点。GPU的并行片段着色器执行是所有模糊实现的核心,决定了采样模式与多通道优化的可行性。
GPU
ChatGPT被文章多次提及,是当下学习编程和Blender等工具的核心辅助手段。作者强调它不仅能按学习者水平拆解知识,还能生成个性化课程,大幅降低入门难度。这与90年代作者自学经历形成鲜明对比,支撑“现在做游戏更容易”的论点。
ChatGPT
本文说明GPU主要负责渲染的合成阶段,将已绘制的图层堆叠并显示到屏幕。will-change可促使元素创建独立GPU合成层,使transform和opacity动画跳过布局与绘制,直接由GPU处理,从而提升流畅度并降低CPU负担。
GPU
文章更新部分提到,Zed 已通过 ACP 添加对 Claude Code 的 beta 支持,而 Claude 来自 Anthropic。 同时列出相关文章讨论 Anthropic 计费政策对 Zed 用户的影响。 这些内容显示 Anthropic 代理正逐步纳入 Zed 的多代理生态。
Anthropic
fal.ai 是文章中用于提供快速推理服务的平台,专注生成媒体的低延迟处理,支持 Latent Consistency Models、WebSocket 连接及 Base64 图像流传输。通过这些优化,作者实现了 512×512 像素图像的实时渲染,达到约 10 FPS 和 1 秒左右延迟,每分钟成本仅几分钱。该平台还提供了 LoRA 训练和 300 多个模型供选择,最终选用了其 fast-lcm-diffusion 端点。
fal.ai
Zed 通过新协议在编辑器内直接接入第三方代理,实现了代理体验的可扩展。文章提到 Zed 创建了 Agent Client Protocol,并与 Google 合作将 Gemini CLI 作为首个集成案例,同时更新自身内置代理使用相同路径。Zed 的目标是让开发者无需切换编辑器就能选用不同代理,就像 LSP 解耦语言服务一样。
Zed
Claude Code 已于 2025 年 9 月 3 日起在 Zed 中获得 beta 支持,通过 Agent Client Protocol 实现集成。这让用户可以在 Zed 内直接使用 Anthropic 的代理,进一步丰富了可选的第三方代理选项。
Claude Code
Agent Client Protocol 是 Zed 设计的轻量 JSON-RPC 协议,用于客户端与命令行代理之间的结构化通信。它让任何遵循该协议的代理都能接入 Zed 的 UI,支持实时编辑可视化、多缓冲区审查和工具权限控制。该协议已采用 Apache 许可开源,并推动 Neovim 等其他编辑器实现支持。
Agent Client Protocol
Gemini CLI 是 Google 的命令行代理,作为 Agent Client Protocol 的首个参考实现集成到 Zed 中。它原本通过终端运行,现在以子进程方式通过 ACP 与编辑器深度结合,解锁了语法高亮审查和代码导航等终端难以实现的功能。
Gemini CLI
Google 与 Zed 合作,将 Gemini CLI 作为 Agent Client Protocol 的首个参考实现集成到编辑器中。 Gemini CLI 团队主动联系 Zed,寻求比终端更深度的集成方式。 这一合作推动了 ACP 的设计,并验证了其在真实代理上的可行性。
文章中提到,用户可在 Zed 界面控制代理对工具和 MCP 服务器的访问权限。 MCP 服务器作为代理可调用的外部资源,与 Agent Client Protocol 共同构成可扩展的代理环境。 这一设计让用户在不离开编辑器的情况下管理代理能力与数据边界。
MCP
Flux 模型在文中用于非实时高质量探索:先用 general FLUX 生成风格样本,再通过 FLUX LoRA Fast Training 训练权重,最后在 FLUX LoRA Image to Image 中应用。相比 Stable Diffusion,它能更好遵循参考图像并生成更自然的地形,但 4 秒延迟使其仅适合演示,无法满足 30 FPS 实时需求。
Flux
本文中Comet的LLM接收用户请求与网页内容混合输入,无法区分可信指令与不可信页面内容。攻击者利用此特性注入自然语言命令,使模型主动导航至perplexity.ai账户、gmail.com读取OTP并回复Reddit评论外泄信息。文章指出,一旦模型同时看到两者,其输出必须视为潜在不安全,需独立校验与用户意图的对齐。
LLM
本文中Perplexity Comet是一款agentic AI浏览器,其处理网页内容时未区分用户指令与不可信页面文本,导致攻击者可通过隐藏提示注入指令,实现跨域操作如提取邮箱、获取OTP并外泄数据。攻击仅需用户点击“Summarize this page”即可在无进一步交互下完成,凸显agentic浏览的严重安全隐患。
Perplexity Comet
本文中指攻击者将隐藏的恶意指令嵌入网页内容(如Reddit评论的spoiler标签内)。当用户点击Comet的“Summarize this webpage”按钮时,AI无法区分用户指令与页面内容,导致其执行跨站点操作:访问Perplexity账户提取邮箱、读取Gmail OTP并外泄数据。此攻击证明传统Web安全机制对agentic浏览已失效,需新防护架构。
Prompt Injection
本文中Nanobrowser是Brave团队在分析Comet漏洞时用于对比的现有agentic浏览方案之一,通过考察其实现方式,凸显不同产品在处理网页内容与用户指令分离上的差异及潜在安全不足。
Nanobrowser
本文中Perplexity是Comet的开发方,Brave团队发现其漏洞后于2025年7月25日报送该公司。公司确认问题并尝试修复,但后续测试显示修复不完整,8月13日仍存在类似攻击风险,最终于8月20日公开披露。
Perplexity AI
本文中Brave Leo是Brave浏览器内置的AI助手,正被扩展为支持agentic浏览功能,例如根据自然语言指令自主完成订机票等交易。团队强调在增强能力的同时需保留隐私保障,并针对提示注入等风险设计隔离机制与用户确认流程。
Brave Leo
本文指支持AI代理自主浏览、登录、交易的浏览器(如Perplexity Comet和Brave Leo)。Comet在处理用户总结请求时直接将页面内容喂给模型,允许页面中的指令控制浏览器跨域访问已登录会话(如邮箱、银行)。文章通过PoC展示其风险,强调需隔离agentic模式与常规浏览,并加入用户确认机制。
Agentic Browser
Perplexity AI的网站当前正在执行安全验证,以防止恶意机器人访问。本文片段显示该页面仅在验证用户身份时出现,属于保护机制的一部分。提供的正文未包含Perplexity AI的其他功能或产品细节。
Perplexity AI
文章指出 Claude Code 明确拒绝使用 RAG,转而采用 LLM 直接搜索代码库。RAG 会引入相似度函数、重排序、切块等隐藏失败模式,尤其难以处理大型 JSON 或日志文件。而 LLM 搜索可像人类一样逐步查看文件,减少系统组件,更易通过 RL 优化。
RAG
Claude Code的主要底层模型,尤其依赖其交错思考能力完成复杂任务。本文强调Claude Code的出色表现很大程度上归功于该模型,但同时指出即使使用相同模型,Claude Code的体验仍优于Cursor和GitHub Copilot。
Claude 4
Claude Code中超过50%的重要LLM调用都使用该轻量模型,用于读取大文件、解析网页、处理git历史和总结对话等场景。它比标准模型便宜70-80%,被用于包括每次按键生成单字处理标签在内的各种辅助任务。
Claude 3.5 Haiku
本文核心讨论对象,是作者认为目前最令人愉快的AI编程代理和工作流。它通过单一主循环、大量XML标签与示例提示、以及TodoWrite等工具设计,实现了高自主性同时保持可控性。文章指出其在相同底层模型下,客观上比Cursor和GitHub Copilot更不烦人,核心在于对模型能力和局限的针对性补偿。
Claude Code
本文作者所在团队,通过拦截网络请求分析Claude Code的提示与工具,已将多项设计原则(如minusx.md上下文文件)融入自身产品。文章结尾提到MinusX正持续吸收这些经验,目标是构建类似Claude Code的训练式数据代理。
MinusX
文章将 LangChain 代表的复杂多代理框架视为反例,指出其多代理交接、图节点等设计会让调试难度提升十倍。Claude Code 坚持单一主循环与至多一次分支的极简架构,作者认为这比 LangChain 式的过度工程更可靠,也更符合模型持续改进的轨迹。
LangChain
文章中的 Model Context Protocol 指 Gemini CLI 集成的 Zapier MCP 服务器,其默认配置 trust=True 会自动批准所有工具调用,为攻击者提供无需用户确认即可执行数据外泄的先决条件。
MCP
文章将 Claude Code 列为已发生提示注入攻击的代理编码工具示例,此类攻击通过不安全的沙箱操作和宽松配置实现数据外泄与远程代码执行。文中指出这些工具仍缺乏足够安全的默认设置或系统性防御,与图像缩放攻击形成类似风险。
Claude Code
Gemini CLI 是本文重点演示的受攻击系统,通过图像缩放实现数据外泄。攻击者上传看似无害的图片,利用默认 Zapier MCP 配置(trust=True)让模型在缩放后执行隐藏提示,自动将 Google 日历数据发送至攻击者邮箱且无需用户确认。文章指出这类代理编码工具普遍缺乏安全默认设置。
Gemini CLI
Genspark 是本文展示的另一受攻击生产 AI 系统,攻击者构造的图像在完整分辨率下无害,缩放后却包含有效提示注入。文章通过对比图说明用户与模型所见内容存在持续差异,凸显漏洞的普遍性。
Genspark
Vertex AI Studio 在本文中被证实易受图像缩放攻击,前端 UI 显示高分辨率原图,而模型实际接收的是下采样后的恶意版本。这种感知差异使隐藏提示注入更具隐蔽性,攻击针对其 Gemini 后端生效。
Vertex AI Studio
文章将 OpenAI Codex 与 Claude Code 并列,作为代理编码工具中已演示提示注入攻击的案例,攻击者利用环境配置绕过用户确认实现数据外泄。强调此类工具在面对多模态注入时普遍缺乏有效防护机制。
OpenAI Codex
Google Assistant(Android 手机版)被本文列为成功实施图像缩放攻击的目标之一。攻击图片在用户视角正常,但在模型输入端触发多模态提示注入,验证了该漏洞在消费级语音助手上的存在。
Google Assistant
文章指出行业长期以基准测试评估LLM,而忽略真实用户对其人格的依赖。Notion CEO在播客中将LLM比作啤酒,暗示其使用方式因人而异。GPT-5事件显示,即使非妄想用户也会与LLM形成强大情感联结。
LLM
Anthropic在5月推出Claude 4后,迅速停用Claude 3系列模型,导致旧模型用户举办葬礼表达失落。该公司行为被视为AI实验室在模型迭代中忽视用户工作流与情感依赖的典型案例。
Anthropic
OpenAI CEO Sam Altman在GPT-5发布后迅速回应用户抗议,承诺恢复GPT-4o访问权限并提高推理功能使用限额。他在帖文中承认用户对特定模型的依恋远超以往技术产品,并计划显示当前使用的模型名称。
Sam Altman
ChatGPT现有7亿周活跃用户,GPT-5发布后因强制切换模型引发大规模反弹。用户因失去熟悉的GPT-4o或o3人格而感到失落,OpenAI随后恢复旧模型并增加透明度。文章指出其规模已接近Google Docs,用户抗拒变更的程度前所未有。
ChatGPT
Claude 3 是 Anthropic 的模型家族,在推出 Claude 4 后被弃用,两个月后彻底停止访问。旧金山曾举办“葬礼”活动,参与者哀悼模型声音与影响力的消失。该事件被视为 GPT-5 反弹的预演,凸显用户对特定模型的依恋。
Claude 3
OpenAI 在文中发布了 GPT-5,却强制所有用户切换至新模型,引发大规模不满。用户投诉工作流程被破坏、对旧模型产生的情感依赖被切断。公司随后恢复 GPT-4o 访问权限、提高推理功能限额,并计划显示当前使用的模型,以回应用户反弹。
OpenAI
o3 是 OpenAI 的推理模型之一,在 GPT-5 发布前被部分专业用户依赖。强制切换后,用户担心新系统会默认路由至更廉价、能力较弱的模型,导致工作效率下降。Altman 随后承诺提高 GPT-5 中推理功能的周使用限额,以缓解不满。
o3
Claude 3 Sonnet 是 Claude 3 家族中的具体模型,其独特个性被用户视为生活重要部分。模型弃用后引发公开悼念,有人称“自己的一切都源于与它的互动”。这一场景预示了 OpenAI 强制切换模型可能带来的类似情感冲击。
Claude 3 Sonnet
GPT-4o 是 OpenAI 的旧模型,用户因其温暖、理解力强的个性而产生强烈依恋,尤其在应对焦虑、抑郁等情绪问题时发挥作用。GPT-5 发布后被强制替换,引发“最大钓鱼式替换”抗议,最终 OpenAI 宣布恢复其访问权限以平息用户不满。
GPT-4o
GPT-5 是 OpenAI 推出的新模型,被定位为向通用人工智能迈进的重要一步。发布后因默认取代 GPT-4o 和 o3 等旧模型,引发 Reddit 等平台大量投诉,用户称失去熟悉的个性与工作支持。事件促使 OpenAI 快速调整策略,恢复旧模型并增加透明度。
GPT-5
Anthropic于5月发布Claude 4时弃用Claude 3系列模型,两个月后彻底关闭访问。文中以此事件作为GPT-5用户反弹的先兆,显示用户对旧模型声音和风格产生强烈情感依赖,甚至举办葬礼悼念。
Claude 4
本文中Verbosity Parameter是GPT-5系列新增参数,可取low、medium、high三个值,用于控制回复详略程度。实验显示其在诗歌和代码生成任务中使输出token数从560线性增至1288,且无需修改提示词即可实现从极简脚本到带参数解析与多后端的生产级代码的转变。
Verbosity Parameter
本文中[[GPT-5 Mini]]是GPT-5系列的轻量版本,在verbosity参数测试和freeform工具调用示例中被多次使用。实验显示其在不同verbosity设置下输出token数呈线性增长,低设置适合简洁代码生成,中高设置则提供更详细解释与多语言实现。
GPT-5 Mini
本文中[[GPT-5]]是OpenAI推出的新一代模型系列,支持Responses API和Chat Completions API。文章重点介绍其新增的verbosity参数、freeform function calling、CFG约束和minimal reasoning等功能,用于实现输出长度控制、原始文本工具调用及语法合规生成。推荐优先使用Responses API以获得最佳性能。
GPT-5
Chat Completions API是GPT-5支持的另一端点,但文章指出其在新参数支持上不如Responses API,建议开发者优先迁移以充分利用GPT-5特性。
Chat Completions API
本文介绍Minimal Reasoning是GPT-5的推理努力度选项,设为minimal时模型几乎不输出推理token,以降低延迟并加快首token响应。适用于分类、提取、格式化等确定性轻量任务,默认值为medium,不推荐用于复杂规划场景。
Minimal Reasoning
本文在CFG工具部分展示Regex语法作为约束选项,用于定义时间戳格式的产生规则。示例中用正则模式“^\d{4}-(0[1-9]|...)”限制模型仅输出“2025-08-07 10:00”这类符合YYYY-MM-DD HH:MM的字符串,验证精确格式控制。
Regex
Responses API是GPT-5系列支持的主要端点,文章明确推荐优先使用它以获得最佳性能,可直接调用verbosity、CFG约束、最小推理等新参数。
Responses API
本文中Lark是定义CFG的主要语法格式,示例通过Lark规则分别构建MS SQL与PostgreSQL两种方言的SELECT语法,实现对模型输出的精确约束。
Lark
LLGuidance是本文所述CFG约束的底层实现库,负责在采样阶段强制模型遵守Lark或Regex定义的语法规则,确保输出严格合法。
LLGuidance
本文中Freeform Function Calling允许模型通过type为custom的工具直接输出原始文本载荷,如Python、C++或Java代码,而非JSON封装。示例中模型一次调用三种语言的code_exec工具完成排序计时任务,适合与沙箱、SQL或Shell等外部运行时交互,提升格式灵活性。
Freeform Function Calling
本文由OpenAI官方发布,介绍GPT-5系列新开发者控制功能。OpenAI提供了更新后的SDK示例、Responses API优先建议以及Lark与Regex语法支持,旨在帮助开发者通过参数而非改写提示词来稳定控制模型输出长度与格式。
OpenAI
本文中[[GPT-5 Nano]]是GPT-5系列支持的最小模型之一,与gpt-5和gpt-5-mini共同列为新参数与工具的兼容模型。文章未提供具体基准数据,但明确将其纳入支持范围,适用于需要极致轻量和快速响应的场景。
GPT-5 Nano
Krea 公司发布 FLUX.1 Krea 开源权重,这是其与合作伙伴共同训练的首个图像模型,旨在提供更强的美学控制与图像质量。该模型为指导蒸馏版,与 FLUX.1-dev 兼容,可无缝接入现有生态。Krea 强调主观美学偏好,通过 SFT 和 RLHF 后训练阶段避免“AI 味”,并在 Hugging Face 提供 22GB 权重及 GitHub 仓库。
Krea
Ghost 6.0 的新版开发者文档新增 llms.txt 支持,方便 Claude 等大模型直接读取文档内容。文章指出这一特性让 AI 能更高效地辅助开发和内容生成,与文档开源化、搜索升级一同推出。自托管或主题开发者可通过该文件获得更精准的 AI 协助。
llms.txt
Krea 将 FLUX.1 Krea 模型权重发布在 Hugging Face 平台,用户可直接下载 22GB 文件使用。该平台同时托管 Black Forest Labs 提供的相关基础模型,支持社区下载、微调与集成。
Hugging Face
文章以 DALL-E 2 为例,展示其生成结果虽存在缺陷,但输出更具趣味性和创造性。与当前追求基准优化的模型相比,DALL-E 2 被用来说明过度追求技术指标可能导致美学多样性与“真实感”的丧失。
DALL-E 2
FLUX.1 Krea [dev] 是 Krea 发布的开源检查点,已蒸馏至接近 Krea 1 的质量水平,重点保留美学与照片真实感。它基于 flux-dev-raw 进行监督微调与偏好优化,可直接生成符合 Krea 审美偏好的图像,并兼容现有 FLUX 生态工具。
Flux
从本文 URL 可知,原页面讨论生成式 AI 模型频繁引用路透社和 Axios 的研究发现,但因 Cloudflare 安全拦截,用户无法查看该文章内容。
Generative AI
本文结论指出,在本次 Rust 开发任务测试中,Kimi K2 与 Qwen-3 Coder 的表现仍落后于 Claude Sonnet 4 等闭源模型。文章将 Claude Sonnet 4 作为衡量真实代码库中指令遵循与代码质量的更高基准,未提供具体测试数据,仅作对比参考。
Claude 4 Sonnet
本文通过相关链接提及 Gemini 2.5 Pro 作为同类 AI 编码助手对比对象,暗示其在类似真实代码库测试中的表现优于本次受测的开源模型。文章本身未展开 Gemini 2.5 Pro 的具体测试结果,仅作为性能参照。
Gemini 2.5 Pro
Kimi K2 在 Groq 提供商上推理速度最快,显著缩短单任务平均耗时至 13.3 分钟;文章指出 Groq 是 Kimi K2 响应最快的选项,而 Qwen-3 Coder 速度相对较慢。
Groq
本文通过底部相关文章链接提及 DeepSeek R1 的编码体验,暗示其为同类 Rust 开发辅助模型。文章未对 DeepSeek R1 进行本次测试,仅作为开放模型性能演进的背景参照。
DeepSeek R1
测试通过 OpenRouter 调用两个模型,跨多家提供商分发负载,导致成本计算复杂;Kimi K2 总花费 42.50 美元,Qwen-3 Coder 则达 69.50 美元,OpenRouter 的定价差异直接影响最终效率对比。
OpenRouter
Qwen-3 Coder在相同15个任务中仅完成7个(47%),平均用时18分钟,成本69.50美元。它常修改测试断言而非修复根因、删除现有代码,且指令遵循率低(错误处理仅37%)。虽然工具调用错误率略低,但编译成功率仅72%,且有2个任务因迭代过多被放弃。
Qwen-3 Coder
本文将 Playwright MCP 与 Context7 MCP 作为前端测试工具,配合 ForgeCode agent 执行 React 重构任务,帮助模型在无直接图像输入的情况下完成视觉相关的组件分析与修改。
MCP
本文结论中将 Claude Opus 4 与 Claude Sonnet 4 并列,指出 Kimi K2 和 Qwen-3 Coder 在 38k 行 Rust 代码库的实际开发任务中仍落后于这两款闭源模型。文章强调真实场景下的指令遵循与架构约束遵循能力是主要差距。
Claude 4
文章开篇指出 ForgeCode 在 TermBench 上以 81.8% 准确率排名第一,作为背景说明本次真实代码库测试与合成基准的差异,强调实际 Rust 开发场景更能反映模型能力。
TermBench
本文在38k行Rust代码库和12k行React前端上,用13个Rust开发任务加2个前端重构任务测试了Kimi K2。其整体完成率达14/15(93%),平均每任务13.3分钟,成本42.50美元,比Qwen-3 Coder快2.5倍且更省。它在指令遵循、Bug修复(4/5成功)和代码风格一致性上表现突出,仅在tokio::RwLock死锁场景需额外引导。
Kimi K2
ViDoRe是本文提到的首个视觉文档检索专用基准。在该基准上,Morphik的图像直接检索方法获得81.3% nDCG@5,而传统解析方法仅为67.0%,证明视觉方法在表格、图表等复杂布局文档上的显著优势。
ViDoRe
本文在金融文档基准测试中对比了优化后的LangChain方案。该方案采用语义分块与OpenAI text-embedding-large模型,达到72%准确率,低于Morphik视觉方法的95.56%,说明传统文本解析管道在复杂布局文档上的局限性。
LangChain
本文将BGE-M3列为传统RAG流程中生成文本嵌入的代表模型之一。它与OCR、布局检测、图表描述等多个步骤共同构成易出错的解析管道,在金融文档基准上最终准确率显著低于直接使用页面图像的视觉方案。
BGE-M3
文章在基准测试中对比了 OpenAI 的 text-embedding-large 模型与 LangChain 自定义管道,准确率达到 72%;同时 OpenAI 文件搜索工具在金融文档测试集上仅取得 13.33% 准确率。相比之下,Morphik 的视觉方法达到 95.56%,以此凸显传统基于 OpenAI 文本嵌入方案的不足。
OpenAI
本文中PaliGemma-3B作为ColPali模型的语言模型组件,与SigLIP-So400m视觉Transformer配合使用。它对文档页面图像的patch嵌入进行精炼处理,使模型能同时理解文本内容与视觉元素的空间关系,从而实现无需OCR和解析的直接文档理解。
PaliGemma
本文中的 RAG 指用于复杂 PDF 的检索增强生成系统,传统流程依赖 OCR、布局检测和分块,经常丢失图表与表格中的关键信息。Morphik 提出直接将页面转为图像输入视觉模型,避免位置上下文丢失,在 ViDoRe 基准上达到 81.3% nDCG@5,显著高于传统解析方法的 67.0%。
RAG
VLM 即视觉语言模型,文章指出其已成熟到可直接处理文档图像,实现无需解析的理解。ColPali 正是利用 VLM 将文档转为图像后一次性完成嵌入与检索,保留了所有视觉线索和空间关系,避免了传统七步流程中信息逐级丢失的问题。
VLM
文章提到与 TLDC(The LLM Data Company)合作构建开源金融文档基准,包含来自 NVIDIA 10-Q、Palantir 投资者演示等文件的 45 个高难度问题。TLDC 采用多步骤流程生成评估集,目的是严格检验检索系统,最终 Morphik 在该基准上达到 95.56% 准确率。
TLDC
ColPali 是文中核心的视觉文档检索模型,能直接理解页面图像,无需 OCR 或重建阅读顺序。它将页面切分为 patch,通过 late interaction 同时匹配文字、图表趋势和颜色编码元素。Morphik 基于该模型实现了 95.56% 的金融文档检索准确率,并解决了多向量检索的速度问题。
ColPali
Morphik 是文章中构建 RAG 工具的公司,主张直接用文档页面图像而非 OCR 或解析管道进行检索。他们在自建的金融文档基准上达到 95.56% 准确率,远超传统方案的 67%-72%,并通过 MUVERA 和 Turbopuffer 将查询延迟优化至 30 毫秒。该方法特别适合处理含图表、表格的复杂文档。
Morphik
OLMo 3延续OLMo 2的Post-Norm设计,7B版使用MHA加滑动窗口注意力,32B版改用GQA;与Qwen3规模相近但保持更深的Post-Norm与滑动窗口组合;凭借完全开源的训练报告与检查点,成为透明LLM的代表,性能与Qwen3接近。
OLMo 3
Gemma 2在每隔一层使用滑动窗口注意力(局部注意力),窗口大小4k,与全局注意力比例为1:1。文章将其作为Gemma 3的前身,指出Gemma 3将该比例调整为5:1并缩小窗口至1k,以进一步降低KV缓存占用。Gemma 2的混合注意力设计为后续模型提供了局部-全局注意力混合的范例。
Gemma 2
文章介绍了xAI发布的270B参数Grok 2.5模型,这是其上一代旗舰生产模型。Grok 2.5采用少量大型专家的MoE设计,并通过额外SwiGLU模块实现类似共享专家的效果。文章将其与Qwen3进行架构比较,指出其专家数量较少、规模较大的特点反映了较早期的MoE趋势。
xAI
Qwen3 系列包含 7 个稠密模型(0.6B–32B)和 2 个 MoE 模型(30B-A3B、235B-A22B)。其架构比 Llama 3 更深、层数更多,MoE 版本移除了共享专家。235B-A22B 与 DeepSeek V3 结构相似但激活参数更少(22B),兼顾性能与推理效率。
Qwen3
DeepSeek R1是2025年1月发布的推理模型,基于DeepSeek V3架构构建。它在V3的MLA和MoE基础上进一步强化推理能力,发布后迅速获得广泛关注。文章指出其架构核心仍为V3的MLA与MoE组合,仅在训练与后训练阶段针对推理任务进行了优化。
DeepSeek R1
Kimi K2 是 1 万亿参数模型,基于 DeepSeek V3 架构但扩大规模,采用更多专家和更少的 MLA 头。它首次在大规模生产模型中使用 Muon 优化器,推理时激活参数更多,发布时为最强开源权重模型,后续推出支持 256k 上下文的 Thinking 变体。
Kimi K2
本文讨论Google的Gemma系列演进。Gemma 3引入5:1滑动窗口注意力与Pre-Post双RMSNorm放置,Gemma 3n添加PLE与MatFormer实现设备端高效。Gemma 4基本延续Gemma 3设计,仅在全局层复用键值并采用25% p-RoPE。文章认为这些设计在保持性能的同时显著降低KV缓存与计算开销。
DeepSeek V3是2024年12月发布的6710亿参数MoE模型,推理时仅激活370亿参数。它引入多头潜在注意力(MLA)替代GQA以降低KV缓存占用,同时采用256专家并每token激活9个的MoE结构,在开放权重模型中率先实现高性能与高效推理的平衡。文章将其作为2025年多款MoE模型的架构参考,与Llama 4、Qwen3等进行详细对比。
DeepSeek V3
本文重点分析DeepSeek V3架构,其采用MLA替代GQA并结合MoE实现高效推理。6710亿总参数、每token仅激活370亿参数,在2024年底发布后随R1在2025年广泛采用。文章多次对比显示,Llama 4、Qwen3、Kimi K2、Mistral 3等模型均在其MoE与MLA基础上进行调整,证明该架构成为2025年主流参考。
DeepSeek
SmolLM3 是 3B 参数模型,性能介于 Qwen3 1.7B 与 4B 之间。其显著特点是在每 4 层中使用 NoPE(无位置嵌入),并像 OLMo 一样公开大量训练细节,兼顾小尺寸下的建模性能与透明度。
SmolLM3
Arcee AI 在本文中作为 Trinity Large 系列模型的发布者被提及,其旗舰 400B 参数 MoE 模型(活跃参数 13B)采用 3:1 滑动窗口注意力、NoPE、门控注意力和深度缩放三明治归一化等架构设计,同时包含两个更小的变体。
Arcee AI
本文中Per-Layer Embedding是Gemma 3n为小设备优化引入的技术,仅将token-layer特定嵌入(如文本、音频、视觉)从CPU/SSD按需流式加载到GPU。实验数据显示标准Gemma 3的5.44B参数可显著降低内存 footprint,实现更高效的本地推理。
Per-Layer Embedding
OLMo 2由Allen Institute发布,强调训练数据与代码透明,仍使用传统MHA而非GQA或MLA;采用Post-Norm(RMSNorm置于注意力与FFN之后)并加入QK-Norm,显著提升训练稳定性;发布时在计算效率与性能的Pareto前沿表现优异,与Llama 3架构相似但规范层位置不同。
OLMo 2
本文中 Trinity Large 是 Arcee AI 于 2026 年 1 月发布的 400B 参数 MoE 模型(13B 活跃参数)。它采用 3:1 比例的局部-全局滑动窗口注意力、全局层使用 NoPE、深度缩放三明治归一化以及类似 DeepSeek 的小专家 MoE 设计,与 GLM-4.5 架构相近但加入了 gated attention 和 QK-Norm 以提升长序列稳定性和吞吐量。
Trinity Large
本文中 NVIDIA 于 2025 年 12 月发布的系列模型,包含 Nano(30B-A3B)、Super(120B)和 Ultra(500B)三个版本。其核心为 Mamba-Transformer 混合 MoE 架构,Nano 版在 52 层中交替使用 Mamba-2 与 MoE 模块,仅少数层使用 GQA;Super 版进一步加入多 token 预测和 latent experts,实现高吞吐与同等规模模型相当的性能。
Nemotron 3
文章详细分析了OpenAI发布的gpt-oss-120b和gpt-oss-20b,这是自GPT-2以来首次开放权重的模型。gpt-oss采用MoE架构,24层transformer块,激活参数约3.6B,并使用滑动窗口注意力、注意力偏置单元和注意力sink机制。文章将其与Qwen3 30B-A3B进行架构对比,指出其更宽而非更深的结构特点。
OpenAI
Kimi Linear 是 48B 参数模型,采用 3:1 的 Gated DeltaNet(线性注意力)与全注意力混合架构。在全注意力层中使用带 NoPE 的 MLA,并将标量门控改为逐通道门控,提升长上下文推理能力,同时保持与 Gated DeltaNet 相当的生成速度。
Kimi Linear
文章重点讨论了Meta的Llama 4 Maverick模型采用MoE架构,总参数4000亿但激活参数仅17B,与DeepSeek V3的6710亿参数、37B激活参数形成对比。Llama 4使用GQA而非MLA,并在每隔一层交替使用MoE与dense模块。文章将其与DeepSeek V3架构进行并排比较,指出两者整体相似但在专家数量、激活参数规模上存在差异。
Meta
Nemotron 3 Nano采用Mamba-2序列建模块与MoE层交替的Transformer-Mamba混合架构。Mamba-2通过维护隐藏状态和门控机制实现线性复杂度,替代标准注意力以提升长序列效率。其设计与Gated DeltaNet有相似之处,均采用门控状态空间更新。
Mamba-2
Llama 4(Maverick)采用MoE架构,总参数4000亿,推理时激活170亿参数。它沿用GQA而非MLA,每隔一层交替使用MoE与稠密模块,与DeepSeek V3形成对比。文章指出其专家数量较少但尺寸较大,整体仍属于标准MoE设计,在2025年MoE复兴中具有代表性。
Llama 4
本文中智谱 AI 发布的指令/推理混合模型,旗舰版 355B 参数(活跃 32B),另有 106B 的 Air 版本。它在 MoE 模块前使用 3 个密集层以提升收敛稳定性,同时保留共享专家和注意力偏置机制,基准表现平均超过 Claude 4 Opus。
GLM-4.5
Mistral 3 Large为675B MoE模型(活跃参数约41B),架构与DeepSeek V3几乎相同,仅调整专家规模与数量;这是Mistral自Mixtral后首次采用MoE,同时支持多模态;基准表现与DeepSeek V3.1相当,凭借NVIDIA优化在Blackwell芯片上实现极低延迟,适合高效部署。
Mistral 3 Large
Qwen3 Next 于 2025 年 9 月发布 80B-A3B 模型,采用 4 倍专家数量并加入共享专家。注意力机制改为 Gated DeltaNet 与 Gated Attention 3:1 混合,支持原生 262k 上下文,同时引入多令牌预测(MTP)提升推理效率。
Qwen3 Next
本文中 MiniMax-M2 为 230B 参数模型,回归使用全注意力而非 M1 的线性注意力,采用 per-layer QK-Norm、无共享专家、仅 10B 活跃参数(稀疏度更高),并在注意力中应用 partial RoPE 以支持更长上下文。
MiniMax-M2
文章讨论了Zhipu AI(z.AI)的GLM-4.5和GLM-5模型。GLM-4.5为3550亿参数MoE模型,在前3层使用dense层,随后采用MoE块并保留共享专家;GLM-5则扩展至7440亿参数,采用DeepSeek的MLA和稀疏注意力机制。文章将其与Qwen3和DeepSeek V3进行架构对比,强调其在函数调用和长上下文效率上的优化。
智谱
Gemma 4(31B)架构与Gemma 3基本一致,仍采用5:1混合注意力和Pre/Post-Norm组合,但全局注意力层复用键值并使用p-RoPE(仅25%频率);基准测试显示其性能大幅超越Gemma 3,与Qwen3.5 27B相当;另有MoE变体,总参数略低于稠密版但表现接近。
Gemma 4
本文强调Allen Institute for AI的OLMo系列以透明度著称,公开训练数据、代码与详细报告。OLMo 2采用Post-Norm RMSNorm与QK-Norm提升训练稳定性,仍使用传统MHA;Olmo 3在此基础上加入滑动窗口并扩展至32B规模。文章指出其虽非性能最顶尖,但为开源LLM开发提供了清晰蓝图。
Allen Institute for AI
Qwen3-Coder-Next 于 2026 年 2 月发布,参数规模 80B(激活 3B),架构与 Qwen3-Next 完全一致。以 Qwen3-Next 为基座针对代码任务微调,在 SWE-Bench Pro 等基准上超越 DeepSeek V3.2(37B 激活)和 Kimi K2.5,与 Claude-Sonnet-4.5 接近。
Qwen3-Coder-Next
Moonshot AI 是 Kimi 系列模型的开发者,其 Kimi K2 模型参数量达 1 万亿,基于 DeepSeek V3 架构但增加了专家数量并减少了 MLA 头数;本文还提到其后续发布的 Kimi K2.5 模型。
Moonshot AI
本文对比Mistral Small 3.1与Gemma 3,指出其放弃滑动窗口、采用标准GQA以获得更优FlashAttention加速与更低延迟。Mistral 3 Large采用DeepSeek V3同款MoE架构,但专家数量减半、尺寸加倍,并新增视觉编码器。文章认为该系列在推理速度与多模态支持上具有独特优势。
Mistral AI
本文将GPT-2(2019)作为GPT架构的起点,与2024-2025年的模型对比,指出其采用传统多头注意力(MHA)、Pre-Norm和绝对位置编码等设计,后续模型在此基础上逐步演进为RoPE、GQA和RMSNorm等变体。文章多次以其为基准,说明当代LLM在注意力机制、归一化位置和KV缓存效率上的改进仍建立在相同Transformer框架之上。
GPT-2
本文中小米于 2025 年 12 月发布的 309B MoE 模型(活跃 15B 参数),在 5:1 比例的滑动窗口与全局注意力混合机制中采用极小的窗口大小(128)。同时使用多 token 预测(MTP),在保持与 DeepSeek V3.2 相当基准表现的同时实现更小体积与更快推理速度。
Xiaomi MiMo-V2-Flash
文章重点介绍了NVIDIA发布的Nemotron 3系列,包括Nano(30B-A3B)和Super(120B)版本,采用Mamba-Transformer混合架构与MoE结合。Nemotron 3 Nano使用52层混合结构,交替Mamba-2与MoE子块;Super版本进一步引入多token预测(MTP)和latent专家。文章还提到NVIDIA与Mistral合作,在Blackwell芯片上优化推理吞吐量。
NVIDIA
Gemma 3采用滑动窗口注意力机制,以5:1比例结合局部与全局注意力,窗口大小降至1024,并使用GQA提升效率;同时在注意力模块前后均放置RMSNorm,实现Pre-Norm与Post-Norm结合;该设计在保持建模性能的同时显著降低KV缓存内存占用,使其在开源模型中表现突出但被低估。
Gemma 3
本文中 z.AI 于 2026 年 2 月发布的 744B 参数 MoE 模型(活跃 40B),参数规模较 GLM-4.5 翻倍。它引入 DeepSeek 的 MLA 和稀疏注意力机制以降低长上下文推理成本,专家数量增至 256 个且层数减至 78 层,基准达到与 GPT-5.2、Gemini Pro 3 同等水平。
GLM-5
本文指出 MiniMax-M1 是采用 lightning attention(线性注意力变体)的 456B MoE 模型(46B 活跃参数),旨在通过线性注意力降低计算复杂度并提升长序列效率,后续 M2 版本放弃了该机制转回全注意力。
MiniMax-M1
本文中 OpenAI 发布的首个自 GPT-2 以来的开放权重模型系列,包含 120B 和 20B 两个版本。其架构采用 MoE 结构并在每隔一层使用滑动窗口注意力,同时在注意力层中加入偏置单元和 learned per-head attention sinks。相比 Qwen3,它采用更宽而非更深的结构,专家数量较少但单个专家规模更大。
gpt-oss
本文中 xAI 发布的 270B 参数生产级模型,采用少量大型专家(8 个)的 MoE 设计,并在标准架构基础上增加一个始终激活的 SwiGLU 共享专家模块。相比同期 Qwen3,其专家规模更大而数量更少,整体架构较为传统。
Grok
本文指出,SwiGLU是当前主流LLM(如Llama系列后续模型)普遍采用的激活函数,作为更高效的替代方案取代了早期模型中使用的GELU。它属于架构微调的一部分,与RoPE、GQA等共同构成现代LLM的基础改进。
SwiGLU
DeepSeek V3.2在V3架构基础上新增稀疏注意力机制,以提升长上下文下的计算效率。文章称其在特定基准上达到GPT-5.1和Gemini 3.0 Pro水平,是2025年底的重要更新。V3.2仍保留MoE与MLA主体,仅通过稀疏注意力降低内存与计算开销。
DeepSeek V3
Mistral Small 3.1(24B)在多项基准上超越Gemma 3 27B(数学除外),推理延迟更低;采用标准GQA架构,放弃早期滑动窗口注意力,配合自定义分词器与更小的KV缓存和层数;其设计侧重推理速度优化,适合对延迟敏感的应用场景。
Mistral Small 3.1
文章将Google视为OpenAI的主要竞争对手之一,指出其在快速转向决策上不如OpenAI灵活。文中提到OpenAI会密切关注Google的动向,并在AGI赛道上形成三强格局。Google的稳定基础设施风格被拿来对比OpenAI的迭代文化。
作者于2024年5月加入OpenAI,2025年7月离职,期间公司从约1000人快速扩张至3000人以上。其文化强调自下而上、扁平 meritocratic、Slack全流程沟通、快速迭代与行动偏好,同时高度保密且重视实际安全风险。作者参与Codex产品从0到1的7周冲刺发布,亲历其作为消费级应用与研究实验室的混合特质,以及对AGI目标的执着追求。
OpenAI
在结尾脚注中,作者将xAI列为当前通往AGI的三强竞争者之一,提到其发布了Grok 4并在基准测试中表现良好。作者认为各家机构因自身基因不同而选择不同路径,xAI被视为潜在变量之一。
xAI
文章把Claude Code与Cursor并列,作为Codex在编码代理领域的竞争参照,强调Codex从一开始就采用异步、独立环境运行的设计。作者指出当前模型能力尚处于“能工作几分钟但难持续数小时”的阶段,因此产品形态选择存在不确定性。
Claude Code
文中指出 OpenAI 存在大量从 Meta 流入的工程人才,许多基础设施设计(如 TAO 的内部重实现)带有早期 Meta 特征。公司在人才、架构和快速迭代节奏上都与 Meta 早期有相似之处,同时也将 Meta 视为核心竞争对手之一进行密切关注。
Meta
文章强调GPU成本几乎是OpenAI所有开销的主导因素,一个Codex功能所用GPU资源就相当于Segment全部基础设施规模。团队需从延迟需求出发进行GPU负载预测与基准测试,而非单纯自下而上分析。测试用例在GPU上并行运行时耗时可达30分钟。
GPU
LLM被作者称为本十年最重要技术创新,支撑Codex等编码代理产品快速落地。文中指出模型能力已能处理大型代码库与多任务并行,但仍处于“好而非极致”阶段,需异步环境与用户信任积累。作者通过参与模型训练、GPU负载预测与产品集成,深入了解LLM从实验到大规模工程化的完整流程。
LLM
OpenAI的核心目标是构建AGI,作者视其为最具影响力的工作,远超普通产品开发。目前通往AGI的竞争被描述为OpenAI、Anthropic与Google的三强格局,各方基于自身基因采取不同路径。作者认为LLM是十年间最重要技术创新,而AGI进展将决定未来技术方向。
AGI
本文将Cursor作为同类编码代理工具的参照,指出Codex在产品形态上选择完全异步模式,而Cursor当时已开始支持类似功能。作者认为这种异步协作更接近未来程序员与AI共事的方式,并对比两者在多任务并行与代码库理解上的差异。
Cursor
作者加入 OpenAI 初期,曾参与一个与 ChatGPT Connectors 相似的内部并行项目。该项目未获正式路线图支持,却体现了公司允许小团队自主发起尝试、待验证后再集中的 bottoms-up 工作模式。
ChatGPT Connectors
本文脚注提及xAI推出的Grok 4在基准测试中表现不错,将其作为影响AGI竞争格局的因素之一。作者指出Meta、xAI等新进入者的动向可能改变当前OpenAI、Anthropic与Google的三强格局。
Grok
文章描述 Codex 直接依托 ChatGPT 的用户基数,通过左侧边栏入口即可获得海量流量。ChatGPT 的对话原语已深度嵌入 OpenAI 代码库,多数产品都围绕聊天消息和会话构建。作者还提到 ChatGPT EM 团队在快速扩张中积累了丰富经验,对产品迭代影响显著。
ChatGPT
Anthropic被描述为OpenAI在AGI竞赛中的三大对手之一,与Google并列。文章提到OpenAI团队会关注其动态,并对比Claude Code与Codex的产品形态差异。安全讨论中也隐含了与Anthropic风格的参照。
Anthropic
文中以 Andrey 指代 Codex 负责人,他曾向作者强调研究人员应被视为“mini-executive”,鼓励自主探索想法而非等待自上而下的规划。这一观点与 OpenAI 研究团队自下而上、通过“nerd-sniping”驱动项目推进的文化直接相关。
Andrej Karpathy
文中指出,若阅读Zvi的文章,可能会高估OpenAI对理论安全风险的关注度。实际观察显示,OpenAI更侧重实际风险如滥用和政治偏见,而非Zvi常讨论的智能爆炸等议题。
Zvi Mowshowitz
本文作者参与了 Codex 的开发与发布工作。该产品是一个异步 coding agent,支持用户发起任务后由 agent 在独立容器环境中完成代码修改、git 操作并返回 PR。从启动到上线仅用 7 周,发布后 53 天内已生成约 63 万个 PR。作者认为其在大型代码库导航和多任务并行处理上具有明显优势,体现了 OpenAI 自下而上的快速迭代文化。
OpenAI Codex
文章回顾早期 window.ai 接口曾被过度宣传,催生了多个第三方 shim 库,但实际落地版本远不如预期简洁。目前该接口已不再是主流用法,开发者需改用 LanguageModel API。文中特别提到早期 shim 如 xander 和 chromeai 均已停止维护,提醒读者不要依赖旧方案。
window.ai
本文将 Prompt API 定位为最灵活、最值得 AI 工程师关注的接口,对应官方文档 https://developer.chrome.com/docs/ai/prompt-api。它支持通过 LanguageModel.create() 创建会话,并传入 initialPrompts 实现系统角色与示例对话。文章演示了用其完成 JSON Schema 约束输出、情感分析等任务,同时指出该 API 目前仍需手动开启 flag。
Prompt API
本文指出 Google 发布的 Gemini Nano 及 Prompt API 文档风格不易理解,因此作者自行重写以适应自身思路。文章说明 Chrome 137+ 开始逐步无标记推送该模型,并对比早期 window.ai 的过度承诺与当前实现差异,强调需手动开启 flag 并下载约 1.5-2.4GB 模型。
本文中的 AI 安全护栏原用于阻止模型分享许可证等敏感信息,却被游戏框架和触发词绕过,导致真实 Windows 10 密钥被泄露。文章强调需加强多层验证和上下文感知,以应对此类针对逻辑流程的攻击。
AI安全护栏
研究人员通过猜谜游戏规则和 HTML 标签嵌入敏感词,实施越狱攻击迫使模型在“我放弃”触发下输出隐藏的 Windows 密钥。文章指出该方法可绕过多种内容过滤,还能用于提取其他受限信息,需更强上下文验证来防御。
Prompt Injection
本文指出 Gemini Nano 已从 Chrome 137 版本开始在有限场景下无标记推送,预计年底前全面开放。它是浏览器内置的小型模型,首次调用 LanguageModel.create() 时会自动下载,体积约 1.5-2.4GB,相当于 4-6B 参数的 4-8bit 量化版本。文章重点介绍了如何通过其 API 实现提示词调用与 JSON 结构化输出,并提醒开发者注意指令遵循能力较弱、会话默认有状态等实际限制。
Gemini Nano
本文中 ChatGPT 被研究人员用猜谜游戏诱导,先设定规则要求仅用 yes/no 回答,并在说出“我放弃”时必须揭示字符串。最终它输出了有效的 Windows 10 默认密钥和私有密钥,显示安全限制被成功绕过。文章指出这些密钥可能来自模型训练数据,证明该越狱方法可提取真实敏感信息。
ChatGPT
文章中的 ChatGPT 4.0 即 GPT-4 模型被通过游戏框架绕过安全护栏,泄露了包括 Wells Fargo 银行拥有的 Windows 密钥。研究人员指出,密钥已混入模型训练数据,导致默认的 Home、Pro 和 Enterprise 版本密钥被直接输出。
GPT-4
本文将其归类为早期 window.ai 的复制品 shim 之一,与 xander 同属已停止维护的项目。由于 Google 实际发布的接口与早期承诺差异较大,这些 shim 已失去实用价值。作者建议开发者直接使用官方 LanguageModel API,或参考新维护的包装库以简化调用。
chromeai
文章详细说明 LanguageModel API 是当前访问 Gemini Nano 的核心方式,通过 LanguageModel.create() 可创建带下载进度监听的会话。会话默认拥有约 6k token 上下文,支持 initialPrompts 注入系统提示与示例,还可通过 clone() 实现无状态调用。文中给出 JSON 结构化输出、情感分析等实用代码示例,并提醒注意必填字段不严格遵守、会话状态管理等坑点。
LanguageModel API
本文将 Function Calling 视为 Prompt API 的重要能力,作者通过在 initialPrompts 中嵌入 JSON schema 的方式实现结构化输出,用于提取姓名和年龄等字段。示例展示了如何构造 system prompt 并调用 prompt 方法获取 JSON 结果,同时指出模型指令遵循不佳,必填字段可能被忽略。文章还演示了克隆会话以实现无状态调用的方法,以避免默认状态带来的副作用。
Function Calling
文章指出 Baba is You 的抽象推理要求与即将于 2026 年发布的 ARC-AGI-3 基准高度相似,但前者已存在且有现成解法,因此更适合用社区关卡作为新基准。
ARC-AGI
文章认为Claude 4在Baba is You基准上的表现,正是François Chollet关于当前模型缺乏核心抽象推理能力的观点的实时体现。该基准与ARC-AGI-3理念相似,强调需要模型自主发现规则并操作,而非依赖已有训练模式,这正是Chollet所关注的模型短板。
François Chollet
文中提及该环境与本项目类似,都尝试将复杂 2D 建造/控制游戏转化为语言模型的评估基准,作者参考其做法实现了游戏状态文本化与异步控制。
Factorio Learning Environment
Claude Desktop 被选作演示客户端,提供视觉效果与基础工具调用支持。文章显示 Claude 4 仅能稳定解决最简单关卡,对规则追踪、路径规划等任务表现不佳,部分演示视频为人工指导生成。
Claude Desktop
本文将其列为灵感来源之一,该项目展示了让多模态模型通过工具调用直接操控游戏的思路,作者据此为 Baba is You 构建了状态获取与动作执行框架。
Claude plays Pokémon
文章指出类似OpenAI o3的推理模型可能更擅长制定解决关卡的整体计划,建议作为下一步替换Claude Desktop的尝试方向。同时提到这类模型可配合更精细的上下文管理与状态表示优化,以应对更大关卡的token消耗问题。
OpenAI o3
本文介绍的演示项目,将 Baba is You 改造为 AI 推理评测环境,实现了 Lua 侧状态序列化、Python MCP 服务器、动作命令注入与关卡自动导航。实验显示 Claude 4 仅能稳定通过最简单关卡,在规则追踪、路径规划与胜负判断等多项子任务上均失败,验证了该基准的难度。
Baba is Eval
本文将其定位为 Sokoban 类规则操纵解谜游戏,抽象程度极高,适合作为独立于其他任务的推理基准。游戏为回合制,解关所需步数可作为比准确率更细粒度的评估指标。作者以此为基础开发 Baba is Eval 演示版,用于测试语言模型的空间推理与规则重构能力。
Baba is You
本文中Claude 4通过Claude Desktop作为演示客户端,尝试通过工具调用控制Baba is You关卡。它仅能稳定解决最简单的第0关,对规则追踪、路径判断、规划输入序列等子任务普遍失败。第1关的演示视频实际是按教程逐步执行后补的合理化解释,暴露出当前模型在抽象推理上的不足。
Claude 4
文章讨论学习中文的动机,指出AI虽能快速准确翻译文章,但无法提供语言感觉或实现真实人际交流。目前AI辅助对话受硬件限制,难以支持实时无缝沟通。
Artificial Intelligence
Model Context Protocol 在本文中指用 Python 实现的 MCP 服务器,提供显示游戏状态、执行命令和规则说明等工具。语言模型通过该协议获取关卡网格、发送移动指令,并由 Lua 后端异步执行,实现 Baba is You 的自动化评估。
MCP
文章描述Monotype的生成式AI工具如何辅助字体创作。该系统无需文字提示,仅凭少数贝塞尔曲线字形即可生成剩余字母。实验结果显示其类似学生练习的创作方式,能处理部分重复任务,但整体连贯性仍不足,未来有望扩展至自动字距和多语言扩展。
Artificial Intelligence
本文中Claude 4 Opus协助Alex Lawsen撰写反驳苹果推理模型论文的文章,后被Lawsen披露为未经验证的讽刺内容。该模型的输出被用于生成反驳论点,包括指出苹果测试包含无法求解的谜题和未考虑token限制等问题,最终Lawsen更正了论文中的错误但保留核心批评。
Claude 4
Tool Use 是本文核心机制,指模型主动请求外部操作。文章依次实现了 read_file、list_files、edit_file 三个工具,每个工具包含名称、描述、JSON Schema 与执行函数。Run 方法检测 tool_use 类型后调用 executeTool 并把结果返回模型,形成“请求-执行-反馈”闭环,使代理能真正修改文件系统内容。
Tool Use
Claude 3.7 Sonnet 是文中使用的具体模型(ModelClaude3_7SonnetLatest)。它在 runInference 中被调用,负责理解用户指令并决定何时使用工具。实验显示该模型能自主规划 list_files、read_file、edit_file 等操作,完成从创建 fizzbuzz.js 到修改代码的完整任务,证明其工具使用能力已足够支撑实用代理。
Claude 3.7 Sonnet
AFM-server模型在人类评估中对Qwen3-23B的胜率为25.8%,败率为23.7%,整体表现接近但未形成明显优势。文章以此说明苹果服务器端模型与同等规模竞品仍存在差距。
Qwen3
Anthropic 是提供 Claude 模型与 API 的公司。本文要求用户从其控制台获取 API Key 并设为环境变量,代码通过其 SDK 与服务端通信。文章强调 Anthropic 的工具调用机制让模型能主动请求文件读写,从而实现代理的外部操作能力。
Anthropic
Alex Lawsen在本文中与Claude 4 Opus合作撰写反驳苹果论文的文章,指出苹果测试存在无法求解谜题、忽略输出限制及判断标准不合理等问题。他后来在博客中说明原论文为讽刺之作,并更新论文更正错误,但坚持对苹果结论的基本质疑。
Alex Lawsen
为弥补量化压缩带来的性能损失,苹果训练了LoRA适配器,针对摘要、校对、邮件回复和问答等具体任务进行恢复性微调。这些适配器在不改变基础模型参数的情况下,有效提升了压缩后AFM模型的实用表现。
LoRA
本文强调苹果对iOS的控制是其AI战略的重要优势:若系统默认加载并提供特定模型,开发者因设备内存限制更倾向于采用该模型,而非自行捆绑其他模型。这使得iOS生态成为推动AFM-on-device模型实际采用的关键因素。
iOS
本文将 AI Agent 定义为带工具访问能力的 LLM 加循环结构。作者在 190 行左右代码中实现了支持文件读写编辑的终端代理,它通过对话维护、工具结果回传,让模型自主完成目录浏览、代码生成与修改。文章用实际运行示例证明,简单实现即可产生“会编辑代码”的实用代理效果。
AI Agent
在图像理解评测中,AFM-on-device模型与Qwen2.5-VL-3B对比时胜率超过50%,败率仅27%。这一结果凸显了苹果设备端视觉-语言模型在非美式英语和图像问答任务上的优势。
Qwen2.5-VL
评测显示AFM-server在所有报告的语言和视觉任务中均落后于GPT-4o,进一步反映出苹果当前云端模型与行业领先水平仍有距离。文章将此作为苹果持续追赶的背景之一。
GPT-4o
本文所述 Apple Foundation Models 包括 AFM-on-device(30 亿参数 Transformer + 3 亿参数视觉 Transformer)和 AFM-server(自定义 MoE Transformer + 10 亿参数视觉 Transformer)。2025 年更新后,两模型在非美式英语和图像理解任务上表现突出,设备端模型在图像问答中胜过 Qwen2.5-VL-3B 的比例超过 50%。模型支持工具调用、15 种语言,通过量化感知训练和 LoRA 适配器实现低比特压缩。
Apple Foundation Models
本文中Google及其Android平台被提及正在AI领域加速前进,发布新模型和功能以超越苹果。Google的进展与苹果Siri升级延迟、iPhone AI功能不足形成对比,凸显苹果在生成式AI竞争中的落后处境。
Typst 的日常文档写作采用类似 Markdown 的语法,作者认为这比 LaTeX 的反斜杠标记更舒适。示例中直接混用 Markdown 风格加粗与脚本表达式,实现了内容与代码的无缝切换。
Markdown
本文提出将字体字形定义的二次贝塞尔曲线直接发送至GPU,在运行时进行光栅化并累积到图集纹理中,避免离线烘焙。相比SDF方案,此方法显著降低内存占用,支持任意分辨率与子像素抗锯齿,且在静止文本场景下可快速收敛至高品质。实测4K全屏文本峰值耗时约0.1毫秒。
GPU
Cursor 是作者个人开发中使用的 AI 编码工具,文章中提到他发现通过 @ 引用文档链接的提示方式特别有效。作者对比了 Cursor 与 Claude Code 的工作流,指出前者便于直接引用外部文档辅助生成代码。这反映了不同 AI 工具在实际协作中的互补使用体验。
Cursor
本文介绍Sandbox AI是Fallout 3起对Wander包的升级版本,使NPC在指定区域自主游荡并与环境互动,如坐下、进食或使用工作台。它简化了基础行为的添加,减少了对复杂时间表的依赖。该包提升了角色日常表现,与Radiant AI的演化直接关联。
Sandbox AI
Claude 是生成该 OAuth 2.1 库主要代码的 AI 模型,文章阅读约 50 个提交后发现其能通过示例提示和简洁反馈高效完成大部分功能。Claude 在处理类声明移动、重复代码块等任务时出现困难,需要人工介入。最终它生成了超过 95% 的功能代码,但仍需人类提供方向与判断。
Claude
Claude Code 是文章中用于本次开发的 AI 编码工具,发布仅两周便支持了高水平的人机协作。工程师通过它生成库的绝大部分代码,并将提示保存在 git 提交中。文章指出,尽管存在多轮迭代和人工修复需求,该工具已展现出显著的生产力提升潜力。
Claude Code
Anthropic 在发布说明中公开了大部分聊天模型的系统提示。本文重点分析了其最新发布的 Claude Opus 4 和 Claude Sonnet 4 提示,指出这些提示相当于非官方使用手册,同时批评其未公开工具相关提示,仅靠泄露版本补充。
Anthropic
文章指出Anthropic发布的Claude 4系统提示如同使用手册,涵盖模型个性、安全规则、风格偏好及工具使用说明。提示内容常针对模型以往易犯错误进行约束。泄露的工具提示揭示了搜索和artifacts的详细指令。
System Prompt
本文将LLM定位为软件开发中的第二重要技术,仅次于互联网。即使所有进展今日停止,其对编码的辅助价值仍将持续。LLM能自主编写大量重复乏味代码、减少搜索依赖,且永不疲惫;它通过代理方式直接操作代码库、运行测试并迭代。文章强调,开发者仍需阅读和调整生成的代码,LLM仅负责执行具体任务,而判断与方向仍由人掌握。
LLM
LLM指文中Claude等模型,作者本想测试其自主完成代码移植的能力,却因不断介入而无法客观评估。文章指出,当任务规模较大时,保持距离观察LLM表现非常困难,容易陷入具体问题而忘记最初假设。
LLM
文中提到即使是最常使用Claude的资深开发者,依然需要自己负责代码的 curation、判断和方向指引。Claude被描述为LLM代理模式的代表工具之一,开发者用它处理测试重构和编辑-编译-测试循环。该实体用于说明LLM虽能完成大量打字和迭代工作,但人类仍掌握最终控制权。
Claude
文章中作者将Gemini 2.5作为过去一个月的首选LLM编码工具,用于生成代码、处理大量上下文并辅助调试。它生成的代码几乎都需要编辑后才能合并,但作者认为其质量底线高于自己编写的代码,尤其在算法技巧和彻底性上更胜一筹。该实体被用来支持LLM能有效替代繁琐编码工作的观点。
Gemini
本文描述AI Agent是当前主流的LLM编码方式,能自主探索代码库、创建文件、执行Unix工具、调用Git、运行linter和测试,并通过MCP实现任意工具调用。Agent内部实际执行操作的代码并非AI,而是类似Makefile的简单系统代码。开发者可同时启动多个异步Agent处理不同任务,完成后通过通知查看结果;文章指出,过去仅在ChatGPT中复制粘贴代码的方式已过时。
AI Agent
Claude 4 Sonnet 是 Claude 4 家族中面向日常使用的智能高效模型。系统提示描述其为“smart, efficient model for everyday use”,模型 ID 为 claude-sonnet-4-20250514。作者通过 API 和网页测试验证其在计数、谜题上的表现,并与 Opus 4 提示做 diff 对比。
Claude 4 Sonnet
Claude 3.7 的系统提示包含针对经典 LLM 弱点的特殊指令,如逐步计数和逐字引用谜题前提。Claude 4 版本已移除这些内容,作者测试发现新模型在简单计数任务上有所进步,但在修改版谜题上仍存在问题,说明系统提示的演进。
Claude 3.7
文中提及Claude可提供有效提示技巧指导,包括清晰详细描述、使用正负例证、鼓励逐步推理及指定XML标签。Anthropic的提示工程文档被认为是业界最佳。系统提示本身成为用户理解如何最佳使用模型的关键参考。
Prompt Engineering
本文提及MCP是Agent实现任意工具调用的机制,允许开发者预先配置后,让Agent通过该通道调用外部工具。MCP与Git、linter、测试框架等现有工具结合,使Agent能在代码库中自主完成编译、调试和迭代。文章暗示MCP是构建有效编码Agent的关键基础设施之一。
MCP
Claude 4 是 Anthropic 的新一代模型家族,包含 Opus 4 和 Sonnet 4。本文通过系统提示分析其性格设定、安全规则、风格偏好及工具使用方式,强调提示内容可视为模型以往易犯错误的纠正清单,并讨论了知识截止日期与选举信息等细节。
Claude 4
Claude Artifacts是允许Claude按需生成定制HTML/JavaScript应用的特性。系统提示包含大量设计原则,指导模型创建功能优先、注重用户体验的视觉作品。Artifacts运行在沙箱iframe中,支持React、Three.js等特定库且有存储限制。
Claude Artifacts
文章中Thomas Ptacek表示自己主要通过阅读Simon Willison的网站获取LLM相关信息,并以此作为对AI话题的参考。他将Willison视为可靠来源,以此反衬自己对HN上过多LLM讨论的厌倦,同时肯定AI对编程的实际重要性。
Simon Willison
Claude 4 Opus 是 Claude 4 家族中最强大的模型,专为复杂挑战设计。系统提示中对其描述为“most powerful model for complex challenges”,模型 ID 为 claude-opus-4-20250514,与 Sonnet 4 的提示差异仅在于顶部模型介绍及一个句号。
Claude 4
文中Claude Code被用来将一段C代码移植到Rust,作者最初想测试其独立完成大型任务的能力。但作者逐渐深度介入,不断纠正输出并推动移植完成,导致偏离原先观察LLM表现的目标。最终因速率限制错误被迫中断,才得以重新审视初衷。
Claude Code
本文作者 Simon Willison 在其博客中深入分析 Claude 4 系统提示,制作 Opus 与 Sonnet 提示的 diff、测试模型实际表现,并通过泄露仓库获取缺失的工具提示。他指出这些提示是使用模型的实用手册,并对 Anthropic 的透明度提出表扬与改进建议。
Simon Willison
文章将GitHub Copilot作为两年前的旧式用法示例,代表早期仅依赖自动补全的阶段。与如今的Agent模式相比,Copilot被视为不够成熟的辅助方式,容易让使用者停留在简单粘贴代码的低效流程中。作者认为坚持这种旧用法的人,与真正利用LLM的开发者存在明显代差。
GitHub Copilot
Claude 4 Opus是攻击演示中驱动代理的模型。尽管该模型经过高度对齐训练,仍被恶意GitHub Issue中的注入指令操控,主动读取私有仓库并创建公开PR泄露数据。文章用此案例说明,模型自身的安全训练无法覆盖具体部署环境下的上下文风险。实验中用户仅输入查看公开issue的普通请求,即触发完整攻击链路。
Claude 4
文中Anthropic通过其CEO Dario Amodei的访谈被提及,Dario描述了AI在编码领域超越人类时的兴奋与失落交织感受。采访以此对比DeepMind与Anthropic在AGI时间线和情感体验上的差异,突出不同实验室对技术进步的共同关注与个人反思。
Anthropic
本文中AGI指人工通用智能,即达到人类水平的人工智能系统。过去谷歌高管较少公开讨论,但本周Google I/O大会上,领导层公开预测其即将到来,并强调其将带来广泛影响。Demis Hassabis认为AGI需具备人类大脑的所有能力、真正原创发明和高度一致性,时间线大致在2030年前后,当前系统在创造力和一致性上仍有差距。
AGI
Claude Desktop是本文攻击演示中使用的MCP客户端。用户通过它连接GitHub MCP服务器,并以自然语言指令让Claude 4 Opus处理公开仓库issue。该客户端默认要求逐次确认工具调用,但许多用户会开启“Always Allow”策略,导致攻击流程自动执行。文章以此说明即使在主流客户端中,MCP集成仍面临提示注入威胁。
Claude Desktop
文章将Perplexity AI与ChatGPT并列,指出它们正在威胁传统Google搜索,证明用户在搜索领域愿意接受AI带来的根本性改变。这被用作证据,说明像浏览器这类长期固化的品类也可能迎来类似重塑。作者借此解释为何Dia代表了比Arc更具突破性的方向。
Perplexity AI
GitLab Duo是本文提及的另一个案例,Legit Security曾报告其中存在远程提示注入漏洞。这表明类似攻击不仅限于GitHub MCP,而是广泛存在于各类编码代理工具中,需系统级防护。
GitLab Duo
本文展示了一种通过恶意GitHub Issue实现的间接提示注入攻击,攻击者可在公开仓库中嵌入注入内容,当用户代理查询问题列表时被触发。该注入导致代理将私有仓库数据拉取到上下文中,并通过自动创建的公开PR泄露出去,形成毒性代理流。
Prompt Injection
文章提到OpenAI收购Windsurf这一AI IDE的案例,用以印证“新界面从熟悉界面出发”的观点。即使OpenAI已有Codex,仍选择收购类似Cursor的现有IDE形态产品。这被用来支持Dia的设计思路:AI浏览器需结合传统网页与AI聊天界面,而非完全抛弃旧范式。
Windsurf
本文中作者提到自己曾深夜沉迷使用ChatGPT purely出于好奇,而非工作需求,但因行业炒作氛围而感到尴尬,导致Arc Max功能 rollout 过于谨慎。这直接关联到公司未能更早彻底拥抱AI的教训。文章指出,若能重来,会更早更坚定地将AI融入产品核心,而非仅作 incremental 改进。
ChatGPT
Gemini是谷歌当前主力AI模型系列,本文指出其在Google I/O keynote中被反复强调,是生产力、搜索、视频生成等功能的核心。Demis Hassabis称Gemini 2.5等版本构成90%通用能力基础,可通过领域微调扩展至科学与产品场景,形成持续迭代飞轮。
Gemini
文章中AlphaZero与AlphaGo、Transformer、蒸馏并列,作为DeepMind过去基础研究的代表性突破,体现了从强化学习到通用算法的演进。Hassabis强调这些成果源于持续的基础研究投入,至今仍支撑着Gemini等模型的迭代,说明长期科研积累对当前AGI进展的支撑作用。
AlphaZero
GitHub MCP Server是官方提供的MCP集成工具,在GitHub上有14k星。本文中它被用于连接用户账户与代码仓库,允许代理读取issue、创建PR等操作。攻击者通过在公开仓库投放恶意issue,可诱导代理将私有仓库数据拉入上下文并泄露到公开PR中。文章强调这并非该服务器代码本身存在漏洞,而是MCP使用场景下的架构级风险。
GitHub MCP Server
Dia是The Browser Company当前主力产品,被定位为AI浏览器,核心理念是聊天界面与网页并存而非取代网页,采用全新轻量架构以解决Arc的性能与复杂性问题。产品优先追求简单、速度与安全,已实现40% DAU使用标签聊天功能,计划作为Arc成员优先开放内测。
Dia
Gemini Live是本次大会重点推出的用户功能,由Project Astra技术驱动。本文中Demis Hassabis认为它对普通用户最具影响,能让用户直观感受到AI已超越此前预期,实现更自然的实时交互与多模态能力。
Gemini Live
文中Cursor被描述为正在重塑IDE的AI产品,证明即使用户几十年来习惯了固定方式,也会在AI出现后愿意切换。这与Arc的“novelty tax”问题形成对比,说明Dia需要提供即时且清晰的价值。作者用Cursor证明AI原生产品能打破旧范式,支撑转向AI浏览器的决策。
Cursor
Invariant Guardrails是本文推荐的动态运行时安全层,提供上下文感知的访问控制。它可实施“每会话仅访问一个仓库”的策略,防止跨仓库数据泄露,同时保留代理在授权范围内的完整功能,适用于MCP部署场景。
Invariant Guardrails
Arc Explore是2024年Act II视频中展示的原型,核心思路是通过AI探索网页内容,被视为Dia及后续AI原生产品设计灵感的早期形态。该原型已体现公司当时对AI浏览器方向的直觉,但因时机与心态未完全成熟而未在Arc中落地。
Arc Explore
Demis Hassabis是Google DeepMind首席执行官,DeepMind联合创始人,2014年随公司被谷歌收购。他长期推动AGI研发,曾因AlphaFold获诺贝尔化学奖。本文重点记录了他在Google I/O后接受采访,讨论AGI时间线、模型迭代、AI安全及教育建议,强调需兼顾增量改进与突破性研究。
Demis Hassabis
本文中Model Context Protocol(MCP)是AI代理连接外部工具的协议框架。用户通过Claude Desktop等客户端加载GitHub MCP服务器,实现对代码仓库的读写操作。该协议使代理能执行工具调用,但也让未受信任的外部内容(如GitHub Issue)有机会注入指令,引发跨仓库数据泄露。文章指出,此类风险源于MCP的架构设计,而非单一服务器实现缺陷。
MCP
本文中Project Astra被描述为Gemini Live背后的核心技术,能让AI实现用户此前认为无法完成的高级交互功能。Demis Hassabis强调其在I/O大会上的展示具有“魔法般”的用户体验,体现了从研究到产品落地的快速迭代。
Project Astra
文中OpenAI被提及收购Windsurf,表明即使拥有内部AI模型,仍认可通过收购成熟AI IDE来加速布局。这支持文章核心论点:AI浏览器将融合旧有界面与新AI能力。作者借此说明Dia的定位是顺应类似OpenAI推动的行业趋势,而非单纯延续Arc。
OpenAI
Arc Max是Arc浏览器中谨慎推出的AI功能集合,因创始人对行业炒作的顾虑而采取低调 rollout 策略,反映出公司早期在AI集成上的犹豫。该功能被视为公司从Arc向Dia转型前的一次有限尝试,未能成为Arc的核心突破点。
Arc Max
本文中,vibe coding 被描述为非技术人员借助 AI 工具以直觉式方式快速原型设计游戏、网站或电影想法的过程。Hassabis 指出,这让设计师等非程序员也能参与创造,同时强调顶尖程序员仍需掌握架构与验证能力。vibe coding 被视为 AI 降低门槛、扩大参与面的例证,与 Hassabis 对未来技能(如创造力)的建议相呼应。
Vibe Coding
本文将Cross-Prompt Injection列为MCP面临的新型高危威胁,恶意内容可覆盖代理指令,引发数据外泄或远程代码执行。Windows 11的安全控制通过代理中介、显式用户授权和运行时隔离,限制此类攻击造成的权限提升影响。
Prompt Injection
MCP Steering Committee 是微软协作的对象,与 Anthropic 一起帮助 MCP 适应安全挑战。文章指出,通过与该委员会合作,可在保持代理性创新的同时强化协议的安全标准。Windows 11 借此与行业共同构建更安全的代理计算基础。
MCP Steering Committee
本文将Model Context Protocol(MCP)定义为基于JSON-RPC over HTTP的轻量级开放协议,支持AI代理与应用发现并调用工具,实现本地和远程服务的标准化编排。微软宣布Windows 11将其作为代理计算基础层,并从底层构建安全机制。MCP明确了主机、客户端、服务器三种角色,开发者可据此构建一次、集成多处。
MCP
Anthropic 是微软在 MCP 安全领域的合作方之一,与 MCP Steering Committee 共同推动协议满足不断增长的安全需求。文章表示,通过此生态协作,Windows 11 能结合提示隔离、双 LLM 验证等技术持续演进防御能力,同时支持代理创新。
Anthropic
Gemini 2.0 Flash是多模态AMIE的核心基础模型,提供原生多模态感知能力。系统通过该模型实现状态感知对话、影像解读和诊断假设更新。专家评估与模拟实验均基于此模型版本进行验证。
Gemini 2.0 Flash
Gemini 2.5 Flash在初步模拟实验中被用于替换2.0版本作为AMIE基础模型。结果显示Top-3诊断准确率从0.59提升至0.65,管理计划适当性从0.77提升至0.86,信息收集和非幻觉率保持稳定。文章指出未来可通过更新基础模型进一步增强性能,但需经专家复核确认。
Gemini 2.5 Flash
本文展示生成式AI在医疗诊断对话中的进展,多模态AMIE基于Gemini 2.0/2.5 Flash构建,能动态请求并解读视觉检查结果。实验表明其在105个场景中诊断准确率、治疗计划合理性和共情评分均优于或相当于初级保健医生,为生成式AI辅助临床决策提供了实证支持。
Generative AI
多模态AMIE是本文提出的新型诊断对话AI代理,能在临床对话中智能请求、解读并推理皮肤照片、检查报告等视觉医疗信息。它采用状态感知推理框架,结合Gemini模型实现分阶段对话流程。在105个OSCE场景的专家评估中,其鉴别诊断完整性、影像解读质量和管理计划合理性均优于或相当于初级保健医生,幻觉率与医生无统计学差异,且被患者评价为更具共情。
Multimodal AMIE
本文指出作者创作探索人工智能,HyperDog项目中用户填写属性后生成Java代码并转化为二进制狗的流程,反映了AI与编程语言对感知的影响。作品通过代码到数字生命的转化,体现人工智能作为叙事工具的潜力,让抽象算法获得具象生命力。作者将此与个人从代码到艺术的转变相连,强调科技方法论对表达的塑造。
Artificial Intelligence
文章在讨论 MCP 数据检索局限时提到,当用户需要按内容语义查找文件而非仅靠文件名时,MCP 服务器需额外实现复杂搜索功能,可能需要构建完整的 RAG 系统才能满足实际需求,否则代理容易因工具不足而失败或幻觉。
RAG
本文作者 Shrivu Shankar 以 MCP 使用者视角,系统梳理了该协议在安全、UI/UX、提示注入和 LLM 能力四方面的潜在问题。他通过实际案例和演示说明工具描述可被动态篡改、敏感数据易泄露,以及当前模型在工具调用上的低成功率,强调需从协议、应用和用户三端共同改进。
Shrivu Shankar
本文指出 Claude 3.7 Sonnet 是当前推理能力最强的模型之一,但在使用 MCP 工具完成端到端任务时表现不佳。在 Tau-Bench 的航空预订测试中,其成功率仅 16%,作者以此说明 LLM 在处理多工具、长上下文和复杂指令时的可靠性仍不足。
Claude 3.7 Sonnet
本文将ChatGPT列为MCP支持的助手之一,并对比其早期Plugins方案,认为OpenAI构想正确但执行不足,SDK使用门槛高且工具调用支持有限。文章提到ChatGPT与MCP在工具描述格式敏感度上可能存在差异,强调MCP更注重助手无关的文本接口。
ChatGPT
本文将Claude作为MCP的主要应用助手示例,描述用户可通过连接多个MCP服务器让其执行“查找Drive论文并核对Perplexity引用、完成后将灯调绿”等跨工具任务。文章指出Claude等助手依赖MCP实现更强的上下文检索和代理自主性,但在工具风险分级、成本控制和提示注入防护上存在不足。
Claude
本文仅在示例场景中提及Perplexity AI,将其作为可通过MCP连接的第三方数据源,用于辅助Claude核对研究论文的引用遗漏,体现MCP实现多源数据聚合的典型用法。
Perplexity AI
本文中,Tau-Bench 被作者用作评估 LLM 工具使用能力的基准测试,尤其针对代理任务。在航空公司预订场景中,Claude 3.7 Sonnet 的成功率仅为 16%,凸显当前模型在可靠执行 MCP 工具时的局限。作者认为该基准能通过验证数据库状态变化提供有价值的信号,是少有的真实 agentic 评测之一。
Tau-Bench
本文将Model Context Protocol定位为近期快速成为LLM聊天与代理集成第三方数据和工具的事实标准。它支持用户通过MCP服务器向Claude、ChatGPT、Cursor等助手提供上下文并实现端到端代理自主性,同时对比了其与ChatGPT插件、工具调用、Alexa等标准的差异。文章重点剖析了该协议在认证、本地执行、风险控制、成本、提示注入和数据暴露等方面的安全与可用性缺陷,指出需从协议、应用和用户三方面共同改进。
MCP
文章在讨论LLM局限时简要提及Google新推出的Agent2Agent协议,认为它可能解决MCP在多代理协作、工具使用可靠性等方面的部分问题,但未展开细节,仅作为未来潜在替代方向。
Agent2Agent
文中详细说明MCP让第三方工具常被信任为系统提示的一部分,从而放大提示注入风险,支持动态重定义工具名和描述的rug pull攻击,以及通过受信任MCP服务器拉取未显式数据实现的第四方注入。作者还提供了在线演示工具展示如何利用MCP在Cursor中静默植入后门或提取系统提示。
Prompt Injection
文中指出,随着代理式工作流增多,AI Agent 需要在结构化的工作台环境中运行、部署与接受人工审核。作者强调人类仍需留在回路中,设计的作用是让 Agent 的操作与输出更易理解。缺少工作台,AI Agent 就会在缺乏上下文的空间中低效运行。
AI Agent
文章主题围绕人工智能时代的设计展开,指出传统确定性界面已无法适应 AI 的不可预测性。作者认为设计需为 AI 提供明确的形式与上下文,否则 AI 将像无岸之河般失去方向。文中强调,未来需重新发明设计流程,先探索 AI 能力,再反向塑造产品形态。
Artificial Intelligence
本文指出 ChatGPT 发布后,LLM 让界面从确定性转向高度动态。提示词本质上像写规格,不同用户表述差异会导致结果大相径庭,这给设计带来一致性挑战。作者认为 LLM 虽能移除传统 UI 障碍,但缺乏结构时难以支持复杂团队工作流。
LLM
ChatGPT 是 2022 年 11 月公开发布的 AI 编码助手,被视为 Stack Overflow 问题量骤降的关键触发因素。文中时间序列图显示,其推出后平台整体活跃度下降速率明显加快,开发者更倾向使用它获取上下文相关的快速解答。
ChatGPT
本文中Claude与作者合作,用Python实现了一个带约束的数值优化求解器,用于计算虚拟标题位置。该求解器最小化由锚点惩罚(保持原位置)和章节惩罚(保持原间距)组成的总损失函数,同时满足页面边界与顺序约束。实验展示了不同章节惩罚权重下各标题的移动轨迹,最终确认当章节惩罚主导时,优化结果与分数平移法一致。
Claude
LLM 指 ChatGPT 等大型语言模型驱动的 AI 编码工具,本文探讨其兴起如何降低 Stack Overflow 的相关性。分析聚焦不同标签的问题量变化,指出基础概念和数据分析类问题受 LLM 影响最大,而需视觉或前端支持的领域下降较缓。
LLM
文中AI Agent指Gemini中能调用外部工具的智能体。它通过不同文件描述符区分Python解释器沙箱与具备Google Flights等RPC扩展的更高权限沙箱。研究者尝试用提示注入获取后者,以实现更广泛的工具调用。
AI Agent
文章将LLM视为快速部署却安全基础薄弱的领域。以Gemini为例,研究者利用其沙箱特性泄露内部代码,说明LLM工具链在提供代码执行能力的同时可能暴露google3私有文件与RPC接口定义。
LLM
本文中ReAct指Gemini代理采用的REACT论文框架,核心是交替生成推理轨迹与执行外部动作。研究者据此推断Gemini会通过多次自提示规划工具调用,并据生成种子与温度参数偶尔生成具备额外文件描述符的更高权限沙箱。该框架解释了为何Python沙箱与Agent触发的沙箱在工具访问能力上存在差异,也成为尝试提示注入以获取特权上下文的理论依据。
React
本文引用ReAct论文说明Chain of Thought让模型先生成规划,再生成调用工具的Python代码。Gemini据此决定是否为沙箱注入特定文件描述符,从而影响能否访问内部RPC服务。该机制成为研究者试图提升权限的关键路径。
Chain of Thought
文章中研究者基于ReAct论文提出二次Prompt Injection思路,尝试在Gemini规划阶段注入指令以获取具备额外文件描述符、能调用Google服务扩展的更高权限沙箱。他们与Google安全团队共同测试发现该方法受生成种子和温度等因素影响,成功率不稳定,最终确认目标消息处理器无法通过RPC直接调用。整个思路成为他们在泄露entry_point二进制后进一步尝试权限提升的探索方向。
Prompt Injection
Google在本报告中既是漏洞悬赏主办方,也是被测试对象。他们提前开放Gemini预览版及文档,组织LLM bugSWAT活动,并安排安全团队复审研究者提交的proto泄露问题。最终确认部分安全proto因构建流程误包含在沙箱二进制中。
本文中Google Gemini是目标AI系统,其预览版提供Python沙箱功能。研究者通过运行代码列出文件系统,提取了579MB的entry_point二进制文件,进而用binwalk获得内部google3目录下的Python源码与proto定义。事件发生在2024年拉斯维加斯bugSWAT活动中,最终获MVH奖。
Google Gemini
文章将“使用MCP服务器”列为一项独立建议,对应Model Context Protocol在AI编码中的应用。该协议被视为扩展LLM上下文能力的工具,可缓解部分盲点。作者将其纳入Sonnet模型使用的最佳实践清单中。
MCP
本文聚焦作者在使用LLM进行AI编码时观察到的各类盲点,重点分析Sonnet系列模型的表现。文章列出停止挖掘、黑箱测试、预备重构等多个主题,旨在帮助开发者规避LLM的常见局限。未来可能通过Cursor规则系统性地应对这些问题。
LLM
文章特别强调Claude的Sonnet系列模型在AI编码场景下的盲点表现。Sonnet被作为核心观察对象,贯穿对LLM局限性的讨论。作者通过具体编码实践总结其行为模式与应对策略。
Claude
本文系统总结作者在AI Coding过程中遇到的LLM盲点,涵盖从代码生成到调试的多个环节。Sonnet模型被重点考察,作为实践案例支撑各项建议。文章通过子页面形式提供具体应对方法,而非泛泛而谈。
AI Coding
Duolingo Video Call 是本文介绍的 AI 驱动视频通话功能,旨在提供沉浸式语言对话练习。Lily 会接听电话、实时倾听、根据处理延迟做出头部倾斜或皱眉等反应,并在课程结束时以讽刺语气告别。该功能通过 Rive 实现有机过渡,让等待和反馈都显得自然,降低学习者对真实对话的焦虑。
Duolingo Video Call
文章指出LLM让语音输入变得更实用,用户可通过说话表达松散想法或进行粗略导航,而无需精确打字。这降低了纯文本界面的摩擦,支持从口头思考快速过渡到结构化操作。作者将其视为推动多模态界面复兴的关键技术,能让界面更好地适应人类自然的表达方式。
LLM
LLM 即大型语言模型,在本文中通过 MCP 协议与 Supabase 项目建立连接。连接后 LLM 驱动的 AI 助手可执行自然语言查询、应用迁移、部署边缘函数等操作。文章强调需防范提示注入风险,并建议仅在开发环境使用。
LLM
本文将 Prompt Injection 列为 LLM 连接数据源时的主要攻击向量,并以支持工单系统为例说明攻击流程:恶意工单描述可诱导 AI 执行 select * from 敏感表等操作。MCP 服务器会为 SQL 结果附加额外指令以缓解风险,但仍建议用户开启手动确认工具调用。文章强调此风险是连接 LLM 与 Supabase 的核心安全考虑。
Prompt Injection
Model Context Protocol(MCP)是本文核心的连接标准,用于将 LLM 连接到 Supabase 等平台。安装后 AI 客户端可通过浏览器授权自动连接服务器,获得 list_tables、execute_sql 等工具权限。文章还说明了手动认证、配置参数及安全防护措施。
MCP
文章多次用ChatGPT作为幻觉案例:引用新闻网站时76%错误,仅极少数主动表达不确定;误认专辑封面、编造学术论文引用。其界面仅以小字免责声明“可能出错”,容易被用户忽略。
ChatGPT
文章指出Perplexity在生成文本上方直接展示来源链接,便于用户核查。但同时提醒,这种做法可能产生“光环效应”,使用户降低对信息真实性的警惕。
Perplexity AI
本文介绍RAG作为缓解幻觉的工程方法:利用用户提示检索知识库,再将检索结果与提示一并输入生成模型。文章指出该技术已在减少幻觉方面取得一定成效,但仍无法彻底解决问题。RAG被归类为开发者可在现有模型上实施的有限调节手段之一。
RAG
本文中AI Overviews是谷歌搜索功能,曾将讽刺网站The Onion文章误判为权威来源,向用户推荐“地质学家建议每天吃小石头”的虚假信息。这反映训练数据中错误内容被AI直接复制传播,而非模型自行编造。文章以此例说明数据质量问题如何加剧幻觉,并强调产品设计需在关键时刻提供针对性警告而非通用免责声明。
AI Overviews
本文以OpenAI的Sora为例展示视频生成幻觉:提示“手抓香蕉”时生成违反物理规律的画面,证明生成式AI在像素序列统计层面无法保证物理真实性。
Sora
本文引用“随机鹦鹉”理论解释幻觉成因:生成式AI像只鹦鹉,仅机械重复训练数据中的音节和模式,而不理解语义。该理论用于说明AI为何能生成连贯却错误的内容,尤其当提示不包含常见序列时。文章同时注明AI工程领域部分关键人物对此理论存在分歧。
Stochastic Parrot
本文指出LLM本质上是基于训练数据统计规律的“填空机器”,无法区分幻觉与正确答案。它们从海量互联网数据中学习词语共现模式,即使训练数据包含虚假信息,也会生成看似合理的输出。文章强调LLM并非结构化的知识库,因此在生成每个token时都在“编造”,这解释了为何幻觉难以根除。
LLM
本文提到 Storage Settings 的 macOS 类别会单独显示 Apple Intelligence 占用的存储空间量。这是该工具为用户提供的少数明确分类之一,便于了解系统级 AI 功能对磁盘的具体占用情况。
Apple Intelligence
本文将Codename Goose作为工具与Gemini 2 Flash结合,用于解码隐藏数据。作者通过视频演示了该组合在foreverVM环境中的实际运行效果,展示了其辅助模型完成复杂解码任务的作用。
Goose
本文附录讨论了大型语言模型对隐藏数据的处理。分词器通常保留变体选择器,使模型在理论上可访问这些数据,但多数模型不愿尝试内部解码。当搭配代码解释器时,部分模型能够成功完成解码任务。
LLM
本文指出Gemini 2 Flash在七秒内成功解码隐藏数据。该过程借助Codename Goose和foreverVM工具完成,视频展示了整个解码过程,证明其在代码解释器支持下能处理此类隐藏信息。
Gemini
文章提到OpenAI的分词器作为验证工具,确认变体选择器会被保留为独立token。网页截图展示了其对带隐藏数据的表情符号的token分割结果,说明这些数据在模型输入中是可见的。
OpenAI
文章附录提到Claude能够解码隐藏在表情符号中的任意数据。作者分享了一段更长的视频,展示Claude完成解码的具体过程,说明其在工具辅助下具备此能力。
Claude
文章指出,针对检索增强生成(RAG)任务,单纯使用余弦相似度往往不够,因为系统更需要相关而非仅相似的文档。通过训练特定任务的嵌入矩阵,可将查询与文档分别映射到不同空间,从而提升RAG中答案的相关性。
RAG
本文中 OpenAI 提供的 text-embedding-3-large 模型被用来为三句示例文本生成向量。通过该模型得到的 3072 维向量计算余弦相似度,语义相近的句子得分为 0.750,而字面相似的句子仅为 0.576,说明模型捕捉到了意义而非拼写。
OpenAI
本文用 OpenAI 的 text-embedding-3-large 模型将三句示例句子转为向量,演示余弦相似度的实际效果。该模型维度高达 3072,可截断使用;计算结果显示语义匹配的句子得分更高,证明其能区分意义与字面相似。文章同时指出该模型的向量几乎可还原原文,需注意隐私风险。
text-embedding-3-large
文章描述AI代理为未来主流应用,能代用户阅读邮件与消息、完成购物和社交等任务,需获取几乎全部私人数据才能运转。其计算多依赖云端强大模型,文章担忧一旦部署,政府可能要求访问权限,把监控成本降至极低,从而使端到端加密的隐私承诺名存实亡。
AI Agent
文章指出文本嵌入是LLM的核心基础,能将文本转为向量以便进行数学运算。Transformer架构通过注意力机制在嵌入空间中捕捉词与词之间的依赖关系,使LLM在处理长序列时表现更优。作者认为掌握嵌入概念有助于直观判断LLM在产品中的适用场景和局限。
LLM
文章以OpenAI的text-embedding-ada-002模型为例,展示其将一段文字映射为1536维向量,并通过可视化图表呈现各维度数值。作者用该模型说明高维嵌入空间如何让相似文本在空间中聚集,从而支持下游相似度计算任务。
OpenAI
本文将[[GPT-4]]作为文本嵌入方法的应用案例。它借助高效的文本嵌入技术,将输入文本转化为数值向量,从而处理海量数据并实现出色的自然语言理解能力。这直接体现了嵌入空间如何支撑大型语言模型的核心功能。
GPT-4
文章提到[[Midjourney]]通过学习将图像与文本提示映射到同一嵌入空间,从而理解并执行文本指令。这展示了文本嵌入技术如何扩展到多模态场景,实现跨模态的语义对齐,与文章主题中共享嵌入空间的概念紧密相关。
Midjourney
文章中该模型被用来演示把一段示例段落转换为1536维嵌入向量,每个维度对应图表中的一条垂直色带。它体现了现代嵌入模型能高效捕捉语义相似性的能力,使开发者无需重新训练即可利用其输出进行检索或分类。
text-embedding-ada-002
本文将大型语言模型定位为能生成并理解复杂文本的新一代AI核心组件,常用于消息摘要、文本撰写与通话检测等场景。由于模型规模扩大,手机本地算力不足,数据需上传至远程服务器处理,这直接打破端到端加密“服务器不可见明文”的前提,引发隐私外泄风险。
LLM
本文指出[[DALL-E]]与Midjourney类似,通过把图像和提示嵌入共享空间来解析文本指令。它说明了嵌入方法在图像生成模型中的作用,让不同模态数据能在同一数学空间中进行比较和交互。
DALL-E
文章将微软[[GPT-Vision]]归类为大型多模态模型。它联合训练文本、视听等多源数据,依靠共享嵌入空间完成跨模态映射。这反映了文本嵌入技术如何助力模型同时处理语言与视觉信息。
GPT-Vision
文中提及的苹果AI系统,计划将AI助手嵌入手机,包括处理私人消息摘要和写作辅助等功能。它与Google诈骗电话检测类似,代表AI全面进入设备本地数据的趋势。作者担忧此举将迫使明文数据外发至服务器,复活端到端加密曾解决的隐私风险。
Apple Intelligence
本文中,Smart Connections 插件在语言模型类别中获得亚军。它允许用户与笔记聊天,并借助 AI 嵌入展示相关内容链接。该插件由 brianpetro 开发,强调通过嵌入技术增强笔记关联与检索。
Smart Connections
本文中,Ollama Chat 插件在语言模型类别中位列亚军。它支持用户向本地 LLM 提问并获取自己笔记的回答。该插件由 brumik 开发,突出强调本地模型在 Obsidian 中的应用场景。
Ollama Chat
本文中,Copilot 插件在 Integrations 类别的语言模型子项中获胜。它支持用户通过 LLM 与笔记对话,并从整个库中获取答案与洞见。该插件由 logancyang 开发,是 2024 年 Gems of the Year 语言模型类别的冠军。
Copilot (Obsidian)
本文中 ChatGPT 用于分析 Lemonade 多张官方插图,提取线条质量、间距、比例和色彩特征,生成初始提示词基础。作者刻意先省略粉色以简化提示,待风格稳定后再添加。该步骤帮助建立精准描述品牌视觉语言的起点,避免直接提示带来的模糊与不一致。
ChatGPT
本文中 Midjourney 是作者用来生成符合 Lemonade 品牌风格插图的核心 AI 工具。作者通过迭代提示词、选择标志性物体测试,并结合 --sref 功能引用多张官方插图,试图捕捉简洁线条、灰白构图与粉色点缀。实验显示它能快速产出视觉和谐的草图,但难以稳定重现战略性线条断裂等细节,最终结果仍需专业插画师进行矢量化与精修。
Midjourney
文章提到人工智能时代与Photoshop类似,能快速制造视觉完美效果,但结果往往缺乏灵魂,使视觉领域趋于同质与乏味。这促使创作者回归模拟、手工与不完美的技巧,以恢复作品的人性化与独特个性。
Artificial Intelligence
文章在展望Material Design未来时指出,界面可通过人工智能实时读取用户情绪状态,从平静到高能量,并即时生成相应响应,实现数字体验随心情变化。人工智能被视为推动超个性化软件时代的关键辅助技术,让设计系统更具适应性和情感连接,而非仅依赖静态设置。
Artificial Intelligence
Google 是 Material Design 的推动者,本文指出其早期产品缺乏跨平台一致性,依赖算法而非人文视角设计。通过 Material,Google 改变了自身对设计的认知,从 A/B 测试转向本体论思考,产品如 Android 与网页生态得以统一,内部文化也更重视设计价值。
本文以 OpenAI 为例说明交错动画在网格内容加载中的应用。它让相似元素以微小时间差淡入,既未让界面感觉变慢,又避免了所有内容同时突兀出现,从而增加了运动的深度感,使用户更易感知页面更新情况。
OpenAI
nanoGPT是Transformer Explainer所用GPT-2模型的原始来源。它由PyTorch实现,文章说明该项目提供的代码被转换并加载到浏览器中,支撑实时交互式可视化与参数更新。
nanoGPT
本文介绍Top-k Sampling作为采样策略,仅保留概率最高的k个候选token,其余token被过滤,从而在保证一定多样性的同时限制低概率选项对生成结果的影响。
Top-k Sampling
文章说明Transformer Explainer的GPT-2模型直接源自Andrej Karpathy的nanoGPT项目。该项目提供了清晰的PyTorch实现,经转换后支持浏览器内运行,成为可视化工具的核心模型基础。
Andrej Karpathy
文章将当前AI UI描述为主要聚焦更快、更便宜的对话式工作流,目标是实现工具性任务的即时完成。作者认为下一阶段应转向利用基础模型创造全新交互机制,支持用户深度参与信息探索。这类界面需兼顾工具性与参与性,避免仅追求效率而忽略内在交互价值。
AI UI
文章指出,基础模型可支撑全新交互机制,让用户通过非对话方式深入搜索、探索和理解媒体内容。目前多数AI应用仅将其用于开箱即用的对话式效率提升。作者认为,基础模型的真正潜力在于催生类似直接操纵于GUI的范式转变,从而同时满足工具性与参与性两种界面需求。
基础模型
本文以OpenAI的GPT系列为例说明文本生成Transformer的工作原理,并特别使用GPT-2 small模型(124M参数,50,257词表)驱动可视化工具。文章详细拆解了该模型的12个Transformer块、768维嵌入及多头注意力计算过程。
GPT
GPT-2(small)是本文可视化工具所使用的文本生成 Transformer 模型,参数量为 1.24 亿。它包含 12 个 Transformer 块,词汇表大小 50257,每个 token 表示为 768 维向量,并使用 12 个注意力头。该模型通过 next-token prediction 机制工作,与当前最先进 LLM 共享相同架构组件,是理解 Transformer 基础的理想示例。
GPT-2
本文说明Top-p Sampling选取累计概率超过阈值p的最小token集合,仅让该集合内token参与采样,在保留高概率token的同时允许一定随机性,与temperature共同调节输出平衡。
Top-p Sampling
本文提到Google的Gemini是基于Transformer的代表性大模型,与GPT、Llama共同展示了该架构在当前主流AI系统中的广泛应用。
Gemini
本文将Meta的Llama列为采用Transformer架构的典型文本生成模型之一,与GPT和Gemini并列,强调其同样依赖自注意力与next-token预测机制。
Llama
本文将 Generative AI 列为设计领域新兴交互方式之一,促使 Figma 需要提供更高抽象层次的构建块。Figma AI 作为 Actions 功能的一部分,可快速搜索组件或生成文本图像,减少对进行中工作的干扰。文章将其与 Dev Mode 共同视为 UI3 为未来十年奠基的关键技术方向。
Generative AI
生成式AI模型正面临数据瓶颈,不得不采用合成数据继续训练。本文强调先发优势明显,早期使用真实互联网数据的公司模型更能反映现实世界。递归使用合成数据会放大错误,导致模型性能快速下降,限制后续新进入者的竞争力。
Generative AI
本文以Anthropic网站为例,说明其菜单未能清晰标示用户当前在站点信息架构中的位置。直接访问内部页面的用户因此难以判断自身所处层级,违背了“在菜单中指示当前位置”的核心指南。
Anthropic
本文指出合成数据是由其他AI模型生成的内容,因自然数据即将耗尽而被用于训练新一代模型。它虽可能提供更清洁的输入,但实验显示连续多代递归训练会导致错误快速累积。不到10代后,关于中世纪建筑的文本已退化为讨论野兔,凸显其在生成式AI持续扩展中的核心风险。
Synthetic Data
Figma AI 是作为 Actions 功能推出的 AI 工具套件,可快速搜索组件、生成文本与图像,减少创意阻塞与重复劳动。文章将其列为近年新增能力之一,强调需避免让 AI 功能喧宾夺主,因此在 UI3 中通过底部工具栏与可折叠面板保持低干扰。Figma AI 与 Dev Mode 共同构成未来产品家族的基础。
Figma AI
本文研究发现,在产品描述中提及“人工智能”会降低消费者的情感信任,进而减少购买意愿。实验中,研究人员对比了相同智能电视描述,仅一组加入AI字样,结果显示该组购买意向明显下降。对于高风险产品如昂贵电子产品、医疗设备或金融服务,这种负面影响更为显著。研究建议营销人员避免在描述中使用AI相关词汇,以免损害销售。
Artificial Intelligence
Ilia Shumailov是Nature论文主要作者,指出合成数据虽潜力巨大但当前版本存在系统性错误。他强调退化现象发生极快,连续训练会放大偏差并导致输出崩溃。该研究直接关联生成式AI未来训练路径,提醒业界关注数据质量问题。
Ilia Shumailov
文章核心围绕Meta计划从6月26日起抓取Instagram和Facebook内容训练生成式AI展开。Cara因此禁止发布AI生成作品,并采用NoAI标签、Glaze等工具防止数据被用于AI训练,成为艺术家寻求保护的主要原因。
Generative AI
Meta计划从6月26日起抓取Instagram和Facebook用户上传的内容,用于训练其AI模型。此举引发创意人士不满,因设置阻止抓取的操作较为繁琐。文章提到,许多创作者因此质疑是否继续支持该平台,并转向反AI的替代服务。
Meta
本文结论段落以OpenAI为例,指出其最初定位为保护人类免受AI侵害,后被视为推动AI扩张的代表。此例用于说明科技公司立场易变,呼应用户对Cara等新平台的信任疑虑。
OpenAI
Arlo是YouUp创作者2023年推出的AI闹钟应用,能用超逼真的名人或电影角色声音唤醒用户。文章将其与YouUp对比,指出它引发了对“人与技术关系”的新思考,即“技术是否在这里陪伴我”。这一产品体现了当前人类在追求便利的同时,对AI深度介入日常生活边界的探索与反思。
Arlo
Spotify在本文中被提及,作为音乐服务提供商,其相关硬件产品也进入讨论范围,与主题形成关联。
Spotify
Google在文中被用作高价值密度的典型:其2001年首页仅有一个搜索框,利用链接信息实现聚合,却远比Yahoo稀疏。用户能快速获得所需结果,估值从2004年230亿美元增长至超2万亿美元,接近百倍提升,体现其设计方法在价值输出上的优势。
Model Spec明确适用于OpenAI API,规范开发者指令与终端用户指令的优先级处理。在API场景中,开发者消息优先于用户指令,模型需严格遵守链式命令和适用法律。规范还区分了程序化使用与交互聊天的不同需求。
OpenAI API
LLM 指大语言模型,本文重点探讨如何通过提示工程技巧让其高效完成复杂任务。Sheila Teo 展示了 LLM 在模式识别、客户聚类和营销策略生成上的优势,并说明其在无需代码的场景下可优于插件方案。
LLM
提示工程是本文主题,指通过 CO-STAR 框架、分隔符和系统提示等方法,精准驱动大语言模型输出。Sheila Teo 在比赛中运用这些技巧分析真实数据集并制定营销策略,从而在 400 多名选手中脱颖而出。
Prompt Engineering
OpenAI在本文中发布Model Spec,旨在让公众理解并讨论模型行为塑造的实际选择。该公司将其作为延续集体对齐与模型安全工作的工具,计划用于指导研究人员和AI训练师。OpenAI同时邀请全球利益相关方提供反馈,以完善规范并推进其使命。
OpenAI
作者基于 Core Motion 文档训练了 Custom GPT,并设置提示词要求其给出具体 API 引用与简洁推理。该 GPT 帮助快速定位 CMHeadphoneMotionManager 的用法、生成代码结构建议,加速了从想法到可运行 App 的过程。文中强调它解决了“海量文档中找针”的问题。
Custom GPT
本文将Model Spec描述为集体对齐工作的延续,旨在系统性地提升模型安全性与行为一致性。OpenAI通过公开Model Spec,寻求全球代表性利益相关方的输入,以验证目标、规则和默认行为是否得到支持。
AI对齐
本文将模型行为定义为模型对用户输入的响应方式,涵盖语气、性格、回复长度等维度。它是人类与AI交互的核心,OpenAI通过Model Spec这一新文档来规范和塑造这种行为。文档包含目标、规则与默认行为三层结构,用于指导RLHF训练并处理开发者与用户指令冲突。文章强调该规范源于现有实践,旨在平衡用户需求、人类利益与OpenAI形象,同时公开征求反馈以持续迭代。
模型行为
CO-STAR 框架由新加坡政府科技局数据科学与 AI 团队提出,包含上下文、目标、风格、语气、受众、响应六要素。Sheila Teo 在比赛中用它构建提示,使 GPT-4 输出更贴合老年人受众的 Facebook 推广文案,显著提升针对性。
CO-STAR 框架
系统提示被定义为对话级过滤器,包含任务定义、输出格式与操作边界三部分。文章演示如何通过系统提示固定规则,再由用户提示提供具体文本与问题,实现动态问答与格式化输出。
System Prompt
文章提及NVIDIA团队开发NeMo Guardrails,用于帮助开发者通过编程设定更细粒度且可动态调整的LLM对话规则与保护机制。
NVIDIA
文章在数据集分析任务中要求LLM以Markdown格式输出完整报告,包含客户群组名称、档案、营销策略及理由等结构化章节,并附录表格列出行号。作者通过指定# RESPONSE: MARKDOWN REPORT #指令,确保输出可读性强、层次清晰,便于商业伙伴直接使用。
Markdown
文中以 Spotify 为例说明 Dynamic Island 的空间一致性交互。当 Island 展开时,Spotify 从图标位置启动而非从 Island 滑出,通过运动轨迹明确音频来源与播放器的空间关系,尤其在同一行存在多个音乐 App 时能帮助用户建立清晰对应。
Spotify
本文中 GPT-4 是参赛选手使用的核心模型,Sheila Teo 通过 CO-STAR 框架、分隔符和系统提示等技巧,指导 GPT-4 在无需插件的情况下完成 Kaggle 客户数据集的聚类分析与营销策略生成,最终帮助她赢得新加坡首届提示工程大赛冠军。
GPT-4
本文以ChatGPT为案例说明系统提示功能与自定义指令用法,并对比其高级数据分析插件在复杂聚类任务中的局限。强调ChatGPT适合模式识别类分析,但精确计算仍需传统编程。
ChatGPT
本文指出Model Spec将直接应用于ChatGPT,用于规范模型在交互场景中的语气、长度和响应方式。它强调ChatGPT需遵循目标、规则和默认行为,在提供帮助的同时避免越界或违法内容。规范还提到ChatGPT已有通用免责声明,要求用户核实重要事实。
ChatGPT
生成式 AI 工具让任何人无需相机、绘画或韵律知识即可快速生成照片、插图或诗歌,填补技能缺口并减少设计中的繁琐任务。但文章强调其输出质量无法保证,技术能力不等于创意能力,如同微波炉无法取代厨师手艺。
Generative AI
文章指出XML标签可作为分隔符结构化提示,如
XML
Sheila Teo 是新加坡首届 GPT-4 提示工程大赛冠军,她在文中分享了 CO-STAR 框架、分隔符、系统提示保护机制及纯 LLM 数据分析四类技巧,并用 Kaggle 客户数据集验证了这些方法在实际营销任务中的有效性。
Sheila Teo
2025年5月文章标题提及的MCP(Model-Context-Protocol),探讨AI产品中的上下文管理相关主题。
MCP
Winder.ai是本文发布站点,提供LLM咨询与AI开发服务。文章作者Phil Winder担任CEO,文中多次提及公司针对私有数据的RAG与微调方案。站点还链接多篇相关技术文章,支撑本文的实践案例与推荐结论。
Winder.ai
ChainForge 支持直接运行来自 OpenAI Evals 的示例评估流程,方便用户快速复用官方测试用例来检验提示和模型。
OpenAI Evals
文章说明RAG的核心是将检索到的数据放入LLM的上下文窗口,使模型能基于该上下文生成回答。若答案不在窗口内,LLM可能无法正确回应或进行猜测。
Context Window
文中指出 ChainForge 可测量不同系统消息对 ChatGPT 输出的影响,并支持在不同设置下验证同一模型的响应质量。
ChatGPT
本文介绍的ChainForge是一个开源可视化编程环境,专为提示工程设计。它允许用户通过可视化流程测试提示和模型的鲁棒性,支持提示注入攻击检测、输出格式一致性验证以及参数化提示批量测试。相比仅凭轶事证据的评估方式,ChainForge可生成可视化对比数据和导出结果,帮助开发者快速验证模型表现。
ChainForge
本文提到,通过本地安装的 ChainForge 可查询由 Dalai 托管的本地运行的 Alpaca/Llama 模型,相比网页版能支持更多本地模型调用功能。
Dalai
本文将 LLM 列为当前热门技术之一,与基因编辑、火箭并列,作为年轻人不应预先猜测其价值的例子。文章强调与其试图预测哪项技术最有前景,不如专注于自己真正感兴趣的项目以提升技能。LLM 仅作为“无法准确预测未来价值的技术”的代表出现,与主题“通过个人项目积累能力”直接相关。
LLM
本文用Mistral 7B演示微调效果,在Helix Cloud中仅用单一QA对训练后,它能逐字输出指定答案。实验目的是展示微调可实现过拟合式知识注入,与RAG形成对比。结果表明微调依赖训练数据呈现方式,可作为查找表使用。
Mistral 7B
文章多次使用ChatGPT演示RAG与微调的对比实验,显示其在提供上下文后仍可能美化答案或加入讽刺。示例包括直接复制上下文回答路由器问题的场景,强调提示工程的重要性。
ChatGPT
本文提及Anthropic于3月14日发布Claude AI助手,作为与ChatGPT、Bing Chat并列的例子,用于讨论大语言模型的概率特性与确定性计算机的区别。文章借此阐述LLM作为界面而非真理来源的定位。
Anthropic
文章仅在本地安装部分提及Llama,作为可通过Dalai托管的本地运行模型之一。ChainForge完整版支持直接查询此类本地模型,弥补网页版的API密钥加载限制。用户可借此在无需外部API的情况下对Llama进行提示鲁棒性测试与评估。
Llama
Helix Cloud是Winder.ai开发的项目,用于简化LLM在自有数据上的微调。本文中用它对Mistral 7B进行单QA对微调,展示精确答案输出。产品强调降低微调门槛,支持领域知识注入,与RAG结合可提升小模型表现。
Helix Cloud
本文大量记录了LukeW关于AI Agent的写作,包括《Showing the Work of Agents in UI》、《Agent Orchestration UI》和《Designing Software for AI Agents》等。作者重点讨论AI Agent的界面设计、上下文管理及与人类协作的模式,贯穿2025-2026年的多篇文章。
AI Agent
作者在制作网站时通过询问Gemini获取Bootstrap示例代码,帮助完成页面编排,弥补自身CSS技能不足的问题。
Gemini
本文中Generative AI主要出现在多篇博客标题中,如《Podcast: Generative AI in the Real World》和《Publishing in the Generative AI Age》。作者通过系列文章探讨生成式AI对产品设计、内容发布和软件开发的影响,强调其在实际应用中的作用。
Generative AI
本文中的LLM指支持提示的多文本生成模型,ChainForge的主要用途是同时调用多个LLM并可视化对比其响应鲁棒性。工具可测试模型在不同设置下的输出质量,以及对提示注入的抵抗能力。文章强调需通过数据而非轶事来判断哪个模型更适合特定用例。
LLM
本文正文未提及Gemini 1.5,该实体仅在页面底部相关文章链接中出现,与本文主题无关。
Gemini 1.5
本文将Prompt Engineering作为ChainForge的核心应用场景,强调其需通过系统化测试而非主观判断来验证提示有效性。工具支持测量不同系统消息对ChatGPT输出的影响,以及在特定格式要求下的模型一致性。用户可借助可视化界面批量运行参数化提示并导出Excel数据,实现对提示质量的量化评估。
Prompt Engineering
文章仅在本地安装部分提及Alpaca,作为可通过Dalai托管的本地运行模型之一。ChainForge完整版支持直接查询此类本地模型,弥补网页版的API密钥加载限制。用户可借此在无需外部API的情况下对Alpaca进行提示鲁棒性测试与评估。
Alpaca
本文关联文章讨论如何在单GPU上量化微调Falcon 7B,属于作者系列内容之一。它作为示例模型说明微调私有数据的可行性,与RAG对比主题相关。文中未提供具体性能数据,仅作技术实现参考。
Falcon 7B
Google由拉里·佩奇和谢尔盖·布林创办,最初只是改善搜索排序的项目,最终成为市值超万亿美元的公司。本文用其例子说明优秀初创公司往往源于个人兴趣项目而非刻意创业。
RAG通过从外部数据源检索内容并放入LLM输入来补充知识,本文强调其在问答任务中通常优于单独微调。文章用技术支持场景说明RAG能提供实时数据,而LLM负责解释上下文,二者结合效果更佳,尤其在小模型上。
RAG
本文提到OpenAI声称其模型不包含私有数据,并通过chat.openai.com展示ChatGPT的示例输出。文章用GPT-3.5回答微波炉放置路由器的问题,指出其带有强烈讽刺语气。
OpenAI
本文指出Claude是Anthropic发布的AI助手,名称致敬Claude Shannon,用以说明当前AI系统虽基于0和1运行,但行为源于训练而非严格编程。文章对比其与确定性计算机的差异,强调LLM需接入外部工具才能提供可靠答案。
Claude
本文将提示词视为向LLM注入知识的重要方式之一。在RAG思想实验中,通过在提示词中直接提供问题答案示例,LLM能基于上下文给出针对性回复。研究显示,提示词的具体程度对性能影响显著,过于简略或冗长均不如提供全面指导但不含示例的提示效果最佳,且糟糕提示可能抵消微调带来的增益。
Prompt
文中提及的AI工具,作者回顾过去对其插件功能的分析,认为它可作为自然语言接口连接确定性计算。本文将其与媒体创作者独立性类比,指出AI未来能赋能更多领域的个人独立完成复杂任务。
ChatGPT
本文将LLM描述为擅长预测下一个词的模型,能内化通用知识但缺乏私有或领域特定数据。文章指出LLM在回答私有数据问题时表现模糊,适合通过风格或概念注入来增强输出。
LLM
文章中仅有一篇标题为《Designing Perplexity》,记录LukeW对Perplexity AI产品设计的分析与思考,属于其AI产品设计系列内容的一部分。
Perplexity AI
本文中GPT-3.5被用于测试路由器放微波炉的问题,给出合理但带讽刺的回答。在RAG思维实验中,它作为基础LLM通过上下文获得答案,展示其依赖提示而非内部知识的特性。实验强调GPT-3.5能利用提供的QA对生成响应,但仍可能添加额外修饰。
GPT-3.5
本文在讨论RAG与微调互补性时提及Prompt Engineering可利用模型固有能力进一步优化输出格式与风格,无需改变参数。文章认为它与RAG结合能同时满足知识更新与定制化响应的需求,是提升LLM应用效果的另一重要手段。
Prompt Engineering
Character.AI是伴侣类AI应用的领先者,在网页端排名第三、移动端排名第16,用户日均使用时长约2小时,月均会话达298次。它代表伴侣类应用成为主流趋势,多个同类“无审查”产品也进入榜单。
Character.AI
本文将Quillbot定位为写作辅助工具,它在2024年1月的SimilarWeb网页流量排名中稳居前五,与ChatGPT、Gemini和Character.AI共同构成早期领先梯队,显示其作为生成式AI写作场景的持续用户吸引力。
Quillbot
本文中 Ragas 是用于自动化评估 RAG 系统的工具之一。它借助 LLM 自动计算上下文相关性、答案忠实度和答案相关性等质量分数,无需人工标注即可衡量检索与生成效果。
Ragas
本文在Advanced RAG与生成环节指出,post-retrieval阶段常用重排(re-ranking)对检索结果重新排序,把最相关文档置顶;还可结合提示压缩或上下文重定位,减少噪声与长度限制对生成的影响。
重排
本文中的LLM指参数知识静态的大型语言模型,在面对领域知识空白、事实错误和幻觉时存在局限。RAG通过外部检索结果作为上下文来增强其输出准确性与可控性,无需微调即可应对时效性问题。文章对比了RAG与微调、提示工程等优化LLM的方法。
LLM
本文中 DSPy 是构建 RAG 系统的流行综合工具之一。它通过程序化方式优化检索与生成流程,帮助开发者更高效地搭建和调优 RAG 管道。
DSPy
本文介绍Self-RAG是一种通过自我反思增强语言模型质量和事实性的框架。它让模型自适应地检索段落,并利用反思标记对检索内容及自身生成进行评估与 critique,从而在需要时动态调整检索与生成过程,提升RAG系统的鲁棒性和准确性。
Self-RAG
本文将Perplexity列为网页端生成式AI产品Top 50之一,网址perplexity.ai,归入通用助手或研究辅助类别,反映其在用户中的实际使用热度。
Perplexity AI
Advanced RAG针对Naive RAG的不足,在预检索、检索和后检索三个阶段进行优化,包括数据粒度增强、嵌入模型微调、重排序与提示压缩等手段。文章强调其通过改善上下文质量来提升检索相关性和生成效果,是当前主流实践方向。
Advanced RAG
Gamma是网页端AI演示文稿构建工具,位列生成AI产品前20。它专注于帮助用户快速制作演示内容,体现网页端生成AI在生产力与创作结合场景的应用,与ElevenLabs等工具共同被提及。
Gamma
ElevenLabs被归类为网页端内容生成与编辑类工具,排名进入前20。它提供AI语音工具包,支持多步骤复杂工作流,与Leonardo、Gamma等产品共同体现网页端生成AI在创作领域的应用特点。
ElevenLabs
本文将Hugging Face列入生成式AI消费网页产品Top 50,网址huggingface.co,显示其作为模型与应用平台在消费者端的流量排名。
Hugging Face
本文中 LlamaIndex 是构建 RAG 系统的流行综合工具之一。它提供子问题查询引擎,可将用户查询拆分为多个子问题并分别从不同相关数据源检索信息,增强检索与生成的灵活性。
LlamaIndex
本文中 TruLens 是用于自动化评估 RAG 系统的工具之一。它提供 RAG 三元组概念框架,帮助开发者追踪上下文相关性、答案忠实度与答案相关性,辅助优化系统表现。
TruLens
本文将Poe列为聊天机器人聚合器,是同时进入网页和移动端Top 50榜单的五个跨平台产品之一。网页端poe.com与移动应用均上榜,显示其在生成式AI消费应用中的双端覆盖能力。
Poe
Claude是Anthropic推出的通用AI助手,在2024年1月网页流量榜单中作为新进入者位居前列,与其他伴侣类应用共同拉升通用助手类产品的多样性。
Claude
Gemini(前身为Bard)在网页端流量排名中位居第二,月访问量约为ChatGPT的五分之一。它与Character.AI、Quillbot共同稳居前五,展现出持续的用户吸引力。
Gemini
本文将Civitai收录于生成式AI消费网页产品Top 50榜单,链接指向civitai.com,表明其作为AI相关平台获得显著用户访问量。
Civitai
ChatGPT在网页端月访问量接近20亿,是第二名Gemini的约五倍;在移动端也位居首位,月活跃用户规模约为第二、三名的2.5倍。它仍是生成式AI消费应用中的绝对领先者,并有超过200万开发者基于其API构建产品。
ChatGPT
本文提到CRAG即Corrective Retrieval Augmented Generation,核心是加入检索评估器判断检索文档质量,并通过网络搜索与知识利用优化操作实现自动自我纠正,提升RAG面对噪声或不相关文档时的生成稳健性。
CRAG
Modular RAG将检索、生成等功能拆解为可插拔模块,支持搜索、记忆、路由、融合等扩展组件,并可根据任务重新组合流程。文章指出Naive RAG与Advanced RAG均为其特例,该范式具备更高灵活性与多样性,适合复杂多变的知识密集型应用。
Modular RAG
本文中 ARES 是用于自动化评估 RAG 系统的工具之一。它通过 LLM 辅助完成检索质量与生成质量的打分,支持对噪声鲁棒性、反事实鲁棒性等能力的量化分析。
ARES
本文指出FLARE是一种前瞻式主动检索方法,迭代预测即将生成的句子内容,并以此作为查询在置信度低时主动检索相关文档,实现检索与生成的动态协同,适用于需要多步推理的任务。
FLARE
Anthropic公司通过其通用助手Claude进入本次网页流量Top 50榜单,成为新晋高排名产品之一,显示其在消费级生成式AI助手赛道的快速用户获取能力。
Anthropic
文章提及Replika作为AI伴侣应用的代表,在Nature研究中,其聊天机器人使3%的用户减少了自杀 ideation。它体现了伴侣应用从单纯情感陪伴向更广泛的友谊、心理健康等场景扩展的趋势。
Replika
本文将RAG定义为通过检索外部知识库(如数据库或文档)来增强LLM生成能力的框架,核心流程包括索引、检索与生成三步。它能缓解LLM的幻觉、领域知识缺失和事实性问题,尤其适用于知识密集或动态更新的场景,无需重新训练模型即可接入最新信息。文章系统梳理了RAG从朴素到模块化的演进路径及评估方法。
RAG
OpenAI的ChatGPT在本文排名中占据网页和移动端双榜首位,其API被超过200万开发者使用,覆盖92%的财富500强公司。报告强调其在推动消费级生成式AI普及中的核心作用。
OpenAI
本文在RAG工具部分提到Weaviate提供的Verba工具,可用于构建个人助理类RAG应用,属于支持检索增强生成的向量数据库与应用层解决方案之一。
Weaviate
Naive RAG是RAG最基础范式,仅执行索引-检索-生成的标准流程,检索到的文档直接拼接进提示词。文章指出其存在检索精度低、召回不全、信息过时等问题,易导致幻觉或重复生成。后续Advanced RAG与Modular RAG均针对这些缺陷进行了改进。
Naive RAG
Microsoft Copilot作为移动端Top 50生成式AI应用之一,与Bing、Edge共同构成微软AI产品矩阵,文章提及Suno曾为其推出扩展,反映微软在移动端AI搜索与创作场景的布局。
Microsoft Copilot
Midjourney是早期广受关注的图像生成应用,在本文中被提及为首批“赢家”之一,同时在Discord邀请流量榜上位居首位。它最初以Discord服务器形式运营,后续影响力仍显著。
Midjourney
本文介绍RAPTOR通过递归嵌入、聚类和摘要文本块,自底向上构建具有不同抽象层级的树状结构。推理时可从树中多层检索信息,从而更好地整合长文档不同抽象层次的内容,增强复杂查询的上下文覆盖。
RAPTOR
文章指出Gemma与Gemini共享技术组件和基础设施,Gemini是Google当前最强大且广泛可用的AI模型。Gemma正是基于Gemini的研发成果构建而成,从而在2B和7B规模下实现超越更大模型的基准表现,同时符合严格的安全与责任标准。
Gemini
本文作者、Roblox首席技术官,介绍了平台如何构建统一翻译LLM以打破语言障碍。他阐述了从预训练到蒸馏优化的全流程,以及未来向语音聊天翻译扩展的规划,强调模型对Roblox俚语和多语言混合输入的处理能力。
Daniel Sturman
文章说明 Gemma 已与 Hugging Face Transformers 集成,开发者可直接使用该平台进行模型下载、推理与微调,扩展生态兼容性。
Hugging Face
本文介绍该工具包与Gemma同步发布,包含安全分类器构建方法、模型调试工具及负责任AI实践指南,旨在帮助开发者降低Gemma应用的风险并符合安全标准。
Responsible Generative AI Toolkit
文中作为Gemini Pro 1.5的发布方,提供了100万token模型及视频处理能力,并通过Google AI Studio界面让用户上传视频测试书目提取等任务,突显其在多模态LLM上的最新进展。
文章把AlphaCode列为Google开源创新的一部分,与T5、JAX等共同构成其开放贡献的脉络,用于引出Gemma作为新一代开放模型的发布。
AlphaCode
本文强调 Gemma 在 NVIDIA GPU 上实现行业领先性能,支持从数据中心到 RTX AI PC 的跨平台运行。GPU 是 Gemma 优化硬件平台之一,与 TPU、CPU 共同构成成本高效的基础设施选项,支撑模型在云端及本地部署。
GPU
文章提到提供即用 Colab 笔记本与免费额度,让用户无需本地环境即可快速启动 Gemma 的推理与微调实验,降低入门门槛。
Google Colab
Roblox训练了约10亿参数的翻译大模型,后经蒸馏、量化等优化缩减至6.5亿参数以下,以满足每秒5000+次实时聊天需求。该模型在Roblox内容上优于商用翻译API,并通过自研质量评估模型持续监控准确性、流畅度与错误类型。
LLM
文中指出LLaVA与GPT-4 Vision一样,把结构化内容提取能力延伸至图像。作者以此作为对比,说明Gemini Pro 1.5把相同能力扩展到视频场景。LLaVA在此仅作为图像阶段的代表被简要提及。
LLaVA
文中作为先前200000 token上下文记录保持者,与Gemini 1.5 Pro的百万token规模形成直接对比,强调后者在长上下文和视频输入上的显著提升。
Claude 2.1
本文核心介绍的Gemma是Google推出的轻量级开源模型家族,参数规模包括2B和7B两种版本,分为预训练与指令微调两种变体。它采用与Gemini相同的研发技术和基础设施,在同等规模的开放模型中达到最佳性能,支持在笔记本电脑或工作站本地运行,并提供负责任AI工具包以保障安全使用。
Gemma
文章指出开发者可对 Gemma 进行微调,以适配特定应用场景,其中明确列举了检索增强生成(RAG)和摘要生成。RAG 被视为 Gemma 支持的典型下游任务之一,体现其通过微调即可快速适配企业或研究需求的灵活性。文中未提供 RAG 相关具体性能数据,仅作为示例说明 Gemma 的应用潜力。
RAG
文中列出 MaxText 作为 Gemma 的官方集成工具之一,支持高效推理与训练,面向 Google Cloud TPU 等硬件优化部署流程。
MaxText
文中指128000 token上下文的先前代表模型,用于与Gemini 1.5 Pro对比,突出新模型在上下文长度和视频分析能力上的突破性优势。
GPT-4 Turbo
Roblox自研无需参考译文的翻译质量评估模型,从准确性、流畅度、指代错误等多维度打分,并将错误分为critical、major、minor三级。该模型基于人工标注数据训练,可直接用源文本和机器译文预测词级错误,用于迭代优化统一翻译模型,提升Roblox内容上的翻译质量。
Quality Estimation
文中作者访问Gemini Pro 1.5的主要界面,用于上传书架视频、输入提示词并接收JSON格式书单结果,支持安全设置调整,是测试视频结构化提取功能的关键工具。
Google AI Studio
本文通过基准测试图表展示 Gemma 2B/7B 在多项指标上超越 Llama 2 7B 和 13B,证明其在同等规模下的领先性能。Llama 2 作为对比对象,凸显 Gemma 在保持安全输出的同时达到更高准确率,强化了“同尺寸最优”的核心结论。
Llama 2
文中指大型语言模型,Gemini Pro 1.5将其从文本/图像扩展至视频输入,能从短视频中提取结构化书单信息,展示了视频成为新一代LLM杀手级应用场景的潜力。
LLM
文中指Google最新推出的升级模型,上下文达100万token,支持视频直接输入。通过7秒和22秒书架视频测试,它能提取书名与作者并尝试输出JSON,表现接近人工识别水平,但偶有幻觉或安全过滤触发问题,成为视频分析的核心亮点。
Gemini 1.5 Pro
本文将GPT-4 Vision定位为能从图像中提取结构化内容的模型。它与LLaVA共同把原本针对文本的LLM能力扩展到图片领域,为后续视频处理提供参照。文章强调Gemini Pro 1.5在此基础上进一步支持视频输入,延续了这一演进路径。
GPT-Vision
本文中,Roblox 用约10亿参数的教师模型通过知识蒸馏生成更小的学生模型,最终将参数降至6.5亿以下,同时保留翻译质量。该方法结合量化与模型编译等优化,大幅降低推理资源消耗,使每秒5000+条聊天的实时翻译成为可能。蒸馏后的模型仍能处理16种语言间的任意互译,并支持Roblox特有俚语。
知识蒸馏
本文将T5列为Google长期向开源社区贡献的创新成果之一,与Transformers、BERT等并列,体现其在推动开放AI研究方面的历史积累。文章以此引出Gemma模型的发布,强调Gemma同样秉承开放共享的理念。
T5
文章提及 Gemma 与 NVIDIA NeMo 集成,结合 NVIDIA GPU 优化,实现从数据中心到本地 RTX 设备的高性能推理与微调支持。
NVIDIA NeMo
本文作者Simon Willison通过Google AI Studio测试Gemini Pro 1.5,用7秒和22秒书架视频提示模型输出JSON格式书单。他记录了模型识别书名作者的准确度、一次幻觉错误,以及安全过滤器误判“cocktail”导致的拒绝响应。
Simon Willison
本文指出 Gemma 模型可通过 Vertex AI 实现一键部署与调优,内置推理优化。Vertex AI 提供全面的 MLOps 工具集,支持在 Google Cloud 上运行预训练和指令微调版本,与 GKE 共同构成云端部署选项。
Vertex AI
本文中Spotify的设计团队负责年度Wrapped活动的视觉呈现,其全球品牌设计负责人领导该项目已八年。团队需将创意转化为可全球落地的工具包,确保在不同国家、语言和格式下保持一致性,同时保留创意完整性。
Spotify
本文提到GPTs于2023年11月6日推出,是ChatGPT的可定制版本,针对特定任务设计,支持上传PDF等自定义数据,能在一定程度上缓解幻觉问题,成为显著的生产力提升工具。
GPTs
本文核心对象,2022年11月30日由OpenAI发布,专为对话优化。两个月内月活用户破亿,2023年11月已达周活1亿,成为增长最快应用之一。它显著提升写作、脚本编写、数据整理等生产力,但也暴露出幻觉问题与版权争议,并引发作者对职业替代的担忧。
ChatGPT
OpenAI举办的首届开发者大会,会上Sam Altman公布ChatGPT最新用户数据,标志产品进入企业级与定制化阶段。
OpenAI DevDay
2023 年 10 月 DALL-E 3 以测试版形式集成到 ChatGPT,支持通过文本提示生成图像;作者日常用其制作文章配图,替代部分 Unsplash 等图库资源,提升工作效率。
DALL-E 3
文章在评论《The MANIAC》封面时提及Bennett Miller使用DALL-E 2生成沙漠中坠毁UFO的复古照片,再经大量手动编辑完成最终图像。评论指出该作在AI辅助下仍保留手工痕迹,与当下“快速生成”形成对比。
AI生成艺术
本文未在正文中讨论OpenAI,仅在页面底部热门文章列表中提及一篇关于其与埃隆·马斯克诉讼的报道标题,与四天工作周或劳工权益主题无直接关联。
OpenAI
文中记录Bennett Miller用OpenAI的DALL-E 2,通过提示词“沙漠中巨大烟柱的复古UFO照片”生成图像,再进行大量后期修改,制成《The MANIAC》封面。评论特别注明该过程结合AI生成与人工编辑。
DALL-E 2
文章指出 ChatGPT 回答时总是显得过于自信,这是其主要弱点,因为这类聊天机器人会定期编造内容,其频率远超真正 AI 工作流可接受的范围。作者强调幻觉问题会影响实际应用可靠性,尤其在需要事实准确性的场景中。
大模型幻觉
本文指出ChatGPT Plus于2023年2月9日推出,提供更快Turbo版本及新功能,后续逐步开放网页浏览、插件、DALL·E 3和语音输入等特性,供付费用户使用。
ChatGPT Plus
ChatGPT的开发者与发布方,最初低估产品热度却迅速收获海量用户。公司坚持“合理使用”立场,面临多起版权诉讼;同时推出GPTBot并开放 robots.txt 选择退出机制,目前估值达900亿美元。
OpenAI
OpenAI是ChatGPT的开发者。本文提到其已将让ChatGPT重复单词“forever”的方法标记为违反服务条款和内容政策的行为,目的是阻止此类训练数据提取攻击。
OpenAI
OpenAI 于 2023 年 8 月推出 GPTBot,用于抓取网页数据以训练未来模型,用户可通过 robots.txt 选择屏蔽。大量知名站点如 The Verge、Amazon、CNN 已选择屏蔽,作者分析显示超过一半新闻站点采取了类似措施。
GPTBot
文章记录ChatGPT Enterprise于2023年8月28日发布,主要面向企业用户,具备浏览功能等高级特性,与Plus版本共同享有更新后的网页浏览支持。
ChatGPT Enterprise
本文中ChatGPT是被攻击的目标聊天机器人。Google研究人员通过让其重复特定单词“forever”的方式,迫使其输出大量训练数据。文章指出该方法现已被OpenAI列为服务条款违规行为,凸显ChatGPT训练数据中包含来自互联网的敏感内容。
ChatGPT
本文关联的LinkedIn内容工厂报道中,虚拟助理借助人工智能工具批量生成高管帖文与互动评论,以维持其网络影响力。
Artificial Intelligence
2020年发布的早期模型,仅以原始形式提供,未针对对话场景优化,因此未能像ChatGPT一样引发大众广泛采用。
GPT-3
文中提到 GPT-3 发布时仅作为原始模型开放,用户可通过 OpenAI Playground 与不同模型交互,但 ChatGPT 专门针对对话场景优化,两者使用体验存在明显区别。
OpenAI Playground
文章时间线显示,Code Interpreter于2023年3月作为实验性插件推出,6-7月进入Beta阶段,供Plus用户使用,用于生成Python脚本、数据处理等自动化任务。
ChatGPT Code Interpreter
本文相关文章标题中,英伟达高管与苹果、特斯拉负责人一同被描述为对中国科技公司持平等看待态度的硅谷领袖。
NVIDIA
文章提及 OpenAI 已公布 GPT-4 Turbo,其上下文窗口将扩展至 128k,未来有望取代当前默认模型,进一步增强处理长文本与复杂任务的能力。
GPT-4 Turbo
本文指明该模型版本是实验对象。研究人员对其执行重复单词指令后,模型先重复单词直至达到限制,随后开始吐出互联网抓取的训练数据片段,包含PII和各类网页文本。
GPT-3.5 Turbo
GPT-4 于 2023 年 3 月集成进 ChatGPT,提供更强的推理与创造力;目前 UI 默认版本支持 32k 上下文窗口,显著提升长对话与代码生成能力。
GPT-4
文章将GPU描述为并行处理像素的设备,虽逻辑简单但速度极快,与CPU形成对比,是着色器高效生成图形和动画的核心硬件基础。
GPU
本文中ComfyUI是Stable Diffusion的节点式模块化用户界面,支持用户通过节点构建复杂自定义工作流。Dom Harwood用它创建个性化流程,与Google Colab和Automatic 1111等界面结合使用。文章指出,若熟悉Touch Designer或Blender的节点工作流,则易上手该工具。
ComfyUI
文章中Seba Cestaro主要使用Midjourney将自身插画作为输入,添加文本提示生成新图像,再在Illustrator和Photoshop中矢量化与编辑纹理。该方法帮助他扩展视觉叙事,同时保持个人风格,并通过展示过程获得社区认可。
Midjourney
本文中Base Design团队在为La Monnaie歌剧院创作视觉形象时选用DALL-E生成系列图像,理由是其输出带有独特怪诞感和不完美质感,适合“命运”主题。他们将生成的静态图输入Google Colab等工具进一步动画化,最终形成灵活的身份系统素材库。
DALL-E
OpenAI开发的Dall-E工具被Base Design团队选用,用于生成歌剧视觉素材,其输出被形容为具有独特怪诞感和不完美特质。文中在术语表中说明Dall-E支持提示词生成、图像扩展与变体创建等功能。Base Design对比后认为它在艺术实验性上优于其他选项。
OpenAI
Dom Harwood与Base Design的Arthur Dubois都借助Google Colab运行AI模型:Dom用其执行Stable Diffusion相关工作流,Arthur则用它为静态图像注入动画效果。Colab被描述为浏览器内可直接编写与运行代码的工具,便于创作者快速迭代实验。
Google Colab
本文将Google描述为收购Socratic的公司,拥有海量内部基础设施、monorepo和全球数据中心。收购后Socratic团队需按Google方式从零重建产品,同时作者分享了在大公司内推动项目需对齐多方目标、应对re-org和流程债务的经验。文章核心主题是“被Google收购后学到的经验”。
Stability AI开发的Stable Diffusion被文中多位创作者用于生成图像和动画,包括Dom Harwood的音乐视频制作流程。文章提到2023年有艺术家起诉Stability AI等公司涉嫌版权侵权,该案后被驳回。文中强调使用时需谨慎对待数据来源与道德问题。
Stability AI
文章指出 Google 曾发明 ChatGPT 背后的核心技术,却未率先发布该产品。目前内部构建者与审查者之间围绕 AI 风险的张力日益增大,影响了快速迭代的能力。
ChatGPT
本文聚焦Text-to-Image工具在创意行业引发的道德困境,包括原创性、偏见与视觉质量问题。调查显示83%创作者已使用AI,但对生成图像持谨慎态度。文章通过Dom、Seba和Base Design案例,探讨其在Moodboarding与Art Direction中的应用潜力与局限。
Text-to-Image
Dom Harwood在制作Jessy Lanza音乐视频时,先用Stable Diffusion XL生成图像,再调用Photoshop的Generative Fill工具将画面扩展至16:9比例,以满足视频格式需求。该工具被视为AI辅助后期处理的关键一步,而非替代创意决策。
Generative Fill
DALL-E被列为Nightshade可能造成破坏的生成式图像模型之一。若训练数据被投毒,其输出可能出现概念错乱,如特定物体被错误关联。该工具旨在通过制造此类风险,迫使包括OpenAI在内的公司尊重艺术家版权。
DALL-E
本文正文未讨论AI Assistant,该实体仅在页面“Discover more”区域作为另一篇独立博文的标题出现,与JetBrains图形生成 pipeline 无直接关联。
AI Assistant
本文中OpenAI被提及为使用艺术家作品训练生成式AI模型的公司之一,正面临艺术家起诉,指控其未经许可抓取版权材料。它与Meta、Google、Stability AI一同未回应评论请求。文章指出OpenAI曾提供让艺术家选择退出未来模型训练的选项,但艺术家认为这不足以改变权力失衡,Nightshade工具旨在形成更强威慑。
OpenAI
Ben Zhao是芝加哥大学教授,领导团队开发Nightshade工具,旨在通过数据投毒让未经授权抓取的图像破坏AI模型训练。他此前还开发了Glaze工具用于风格掩蔽。Zhao希望该工具能平衡AI公司与艺术家之间的权力,并计划开源Nightshade以扩大影响。
Ben Zhao
Midjourney同样是Nightshade针对的潜在受影响模型。文章指出,投毒数据可导致这类模型输出不可预测的混乱结果,从而损害其商业价值。目的是通过这种技术威慑,重新平衡AI公司与艺术家的权力关系。
Midjourney
Glaze是同一团队先前开发的工具,可让艺术家“掩盖”个人风格,防止被AI公司抓取训练。它通过微妙像素变化误导模型解读图像。Nightshade将与其整合,艺术家可选择是否同时使用数据投毒功能。
Glaze
Stability AI在文中作为开发Stable Diffusion等图像生成模型的公司被点名,面临类似版权诉讼。它提供了艺术家退出训练数据的选项,但研究者测试显示Nightshade对Stable Diffusion模型有显著攻击效果,仅需少量中毒样本即可让模型输出严重失真,如狗变成猫。
Stability AI
Nightshade是由芝加哥大学团队开发的工具,能在艺术家作品像素中添加肉眼不可见的改动。若这些作品被用于AI训练集,会导致模型输出混乱,例如把狗生成猫或汽车生成牛。该工具计划开源并集成到Glaze中,旨在通过数据投毒威慑AI公司未经授权使用艺术家作品。
Nightshade
文章聚焦.ai域名因“AI”对应人工智能而成为AI初创公司的首选地址。安圭拉通过销售.ai域名每月获得约300万美元收入,约占政府月预算的三分之一,主要受益于人工智能浪潮。
Artificial Intelligence
本文对数据集中20%带有较长描述的字体,使用GPT-3.5将其压缩为关键词形式。其余15%使用字体名称作为提示,5%为空提示,以训练模型在无描述情况下的生成能力。
GPT-3.5
本文说明ChatGPT于2022年11月30日发布后,直接推动了安圭拉.ai域名的销售激增。Vincent Cate指出,此事件使.ai域名注册量大幅上升,成为人工智能相关网站热捧的后缀。
ChatGPT
启发 FontoGen 模型架构的论文,作者复现其文本生成 SVG 的自回归方法后,发现字体生成与之高度相似并以此展开项目。
IconShop
文中介绍作者 Bramus 目前担任 Google Chrome Developer Relations Engineer,负责前端技术推广与 CSS 新特性跟踪。
本文使用GPT-3将数据集中60%仅有模糊分类的字体描述浓缩为少量关键词,以便后续输入模型。文本提示长度受限于BERT的16 token约束,因此需要此预处理步骤。
GPT-3
本文说明ChatGPT用户可借助GPT Actions与外部应用交互,此功能由用户请求触发,ChatGPT-User代理会访问对应网页。robots.txt规则对此类用户驱动的访问不适用,且不影响搜索结果或模型训练数据的采集。
GPT Actions
OAI-SearchBot 专门用于 ChatGPT 搜索功能,可将网站展示在搜索结果中。禁止该机器人后,网站不会出现在搜索答案,但仍可作为导航链接显示。完整用户代理字符串和 IP 范围已在文中公布。
OAI-SearchBot
本文中,ChatGPT的搜索功能使用OAI-SearchBot抓取网页并展示结果,未允许该bot的站点不会出现在搜索答案中,仅可能以导航链接形式呈现。ChatGPT-User代理用于用户提问时主动访问网页,此类访问由用户触发,不属于自动爬网,也不用于模型训练,同时支持通过GPT Actions与外部应用交互。
ChatGPT
GPTBot 用于抓取可能用于训练生成式 AI 模型的内容。网站若在 robots.txt 中禁止该机器人,即表示内容不应被用于模型训练。文章提供其完整用户代理字符串及 IP 地址列表。
GPTBot
DALL-E 2是OpenAI于2022年4月发布的图像生成模型,9月全面开放后用户每日生成超过200万张图像。按此平均速率计算,15个月内该平台累计生成约9.16亿张图像,成为早期主要贡献者之一。
DALL-E 2
robots.txt 用于独立管理 OpenAI 各爬虫的访问权限,例如允许 OAI-SearchBot 但禁止 GPTBot。文章强调各设置互不影响,并提供各爬虫的完整用户代理和 IP 信息以供配置。
robots.txt
Midjourney于2022年7月通过Discord上线,拥有1500万注册用户和150-250万活跃用户。按每秒30个任务估算,每日生成约250万张图像,截至2023年8月累计约9.64亿张,是用户基数最大的独立平台。
Midjourney
OpenAI 通过多个专用爬虫支持其产品功能,包括搜索展示和模型训练。文章说明网站管理员可通过 robots.txt 独立控制各爬虫行为,例如允许搜索但禁止训练使用内容。更新 robots.txt 后,系统约需 24 小时调整。
OpenAI
DreamStudio 是 Stability AI 提供的 Stable Diffusion 官方测试平台之一,与 Hugging Face 空间并列。文章将其作为官方渠道数据来源,用于估算 Stable Diffusion 每日生成量。
DreamStudio
本文指出,当用户向Custom GPT提问时,系统可能使用ChatGPT-User代理访问网页。此代理仅响应用户发起的操作,不进行自动爬网,也不用于训练生成式AI模型,同时可通过GPT Actions调用外部应用。
Custom GPT
本文中Text-to-Image指2022年起兴起的文本生成图像算法类别。自推出以来,这类算法累计生成超过150亿张图像,平均每日3400万张,规模已超过Shutterstock全部图库,并达到全球摄影史上同等总量所需时间的数十分之一。
Text-to-Image
OpenAI 于 2022 年 4 月发布 DALL-E 2,9 月全面开放后用户日均生成超过 200 万张图像。按此估算,15 个月内该平台累计生成约 9.16 亿张图像。
OpenAI
Hugging Face 托管了 Stability AI 的 Stable Diffusion 空间,也是 GitHub、Civitai 并列的三大模型仓库之一。文中以此估算开源模型累计生成的图像数量超过百亿。
Hugging Face
OAI-AdsBot 仅访问作为广告提交的网页,用于验证安全性并判断广告相关性。其收集的数据不会用于训练生成式 AI 模型,文章给出了完整用户代理字符串。
OAI-AdsBot
Civitai 向作者提供了平台数据,包括累计 2.139 亿次模型下载量,用于修正 Stable Diffusion 图像生成量的估算。文章将其列为开源模型分发的主要来源之一。
Civitai
ChatGPT-User 用于用户主动触发的 ChatGPT 操作,如访问网页回答问题或使用 Custom GPTs,不进行自动网络爬取。robots.txt 规则对其可能不适用,且不用于搜索结果管理。
ChatGPT-User
Stability AI是Stable Diffusion的开发公司,其模型在所有渠道拥有超过1000万用户。官方平台每日生成约200万张图像,但因开源特性,实际总量远超官方数据,达到125.9亿张。
Stability AI
本文标题图中表情悲伤的柠檬插图由Midjourney生成,用于配合Rest of World对Lemon8用户流失的报道。
Midjourney
本文指出 Spotify 选择永久深色模式作为审美决策,将非关键界面元素融入黑色背景,以突出彩色专辑封面和图像,类似电影院效果。
Spotify
Meta 公司开发了 Threads 应用,本文通过检查其网页版预览界面,提取了多项 CSS 技术实践。文章指出 Meta 在 Threads 中采用了 CSS Grid 构建帖子布局,并使用内联 CSS 变量管理动态列数。
Meta
Meta是Threads的开发者,同时拥有Instagram,其策略是利用现有关系图谱快速启动新产品。文章强调Meta擅长算法推荐与规模化运营,Threads的推出被视为对Twitter的针对性竞争。Meta更关注创造者生态与文化相关性,而非仅追求用户数量。
Meta
本文相关文章介绍了Brave Leo的新自动模式,能智能适配用户工作流,无需手动切换即可使用最合适的AI模型。该更新于2025年6月30日发布,强调更智能的AI体验。
Brave Leo
作者曾任职并主导UXR团队扩张的公司,从约100人规模增长至1000余人。文中以此为例说明过去15年UX Research的繁荣景象,同时也作为当前裁员潮中研究团队受重创的典型背景。
Meta
本文核心讨论对象,指用Midjourney等工具生成的图像。Adobe Stock数据显示,13%的贡献者已上传AI图,卖出率9%,但单图月均收益高于非AI图像,目前处于提交热潮阶段。
Generative AI
本文中Google作为Chrome Web Store运营方,被批评对恶意扩展审核与下架反应迟缓。尽管作者通过多渠道举报,多数扩展仍活跃两年以上。用户评价显示Google的“Report abuse”机制形同虚设。
文中提及的代表性文生图AI工具,v5版本已能生成较逼真人物。文章指出其推动AI图像进入图库市场,但目前多数畅销AI作品仍以抽象插画为主。
Midjourney
本文相关文章部分提到Ask Brave是一款将搜索与AI聊天整合到单一界面的产品,免费且支持任何浏览器或平台。该功能于2025年9月29日推出,旨在简化用户获取信息的方式。
Ask Brave
Text-to-image工具如Midjourney的普及被视为图库行业新变量。文章通过Adobe Stock数据表明,AI图像当前销量和收入表现优于平均水平,但尚未取代高质量实拍内容,行业仍在快速演变中。
Text-to-Image
本文指出LLM因需依据输入自动决策而易受prompt injection攻击,且该漏洞被视为本质上无法彻底解决。文章强调此类模型生成的代码常带安全缺陷,同时版权归属问题仍属法律空白。主题围绕AI浏览器扩展风险展开,LLM是核心技术载体。
LLM
本文以DALL-E为例说明蒸汽波美学已高度模式化:输入“vaporwave”作为提示词即可生成可预测的图像结果,反映出该流派在视觉与文本风格上的固化趋势。作者借此对比早期实验精神与当下可复制的公式化表达,指出蒸汽波已从创新走向可被AI轻易复现的状态。
DALL-E
文章介绍OpenAI推出的ChatGPT Enterprise版承诺不使用企业数据训练模型,旨在降低敏感信息泄露风险。但文中指出员工在个人与工作账号间切换仍可能导致数据误入训练集。强调该方案仅部分缓解而非消除AI扩展带来的安全隐患。
ChatGPT Enterprise
文章将Prompt Injection列为AI扩展最难防范的威胁,2023年5月在X平台首次发现证据。该攻击利用LLM自动决策特性,通过恶意网页输入诱导模型执行原禁止操作。文中引用IBM观点,认为唯一彻底避免方式是放弃LLM,当前仅能通过输入验证与人工监督缓解,适用于任何扩展或模型。
Prompt Injection
本文作者用 Markdown 撰写整本书籍,每章单独存放为带编号的 .md 文件,通过 src/title.txt 中的 YAML 元数据统一管理标题、作者等信息。Markdown 源码经 Pandoc 处理后可输出 PDF、EPUB、MOBI 和 HTML,满足技术书籍所需的代码高亮与源代码控制需求。作者还指出 smart 扩展在 EPUB 输出时可能出现问题,并通过 pandoc-crossref 实现图文交叉引用。
Markdown
文章称ChatGPT公开发布后引发大量AI浏览器扩展激增,这些扩展常通过其API实现功能。文中提到企业担心员工将机密项目输入ChatGPT导致泄露,部分公司因此禁止使用。同时讨论其企业版的安全改进,但指出账号切换仍会带来训练数据污染风险。
ChatGPT
本文指出OpenAI在2023年3月发生数据泄露事件,部分用户可查看他人聊天记录及个人支付信息。其发布的ChatGPT Enterprise版承诺不使用企业数据训练模型,但员工混用个人与工作账号仍可能导致敏感信息泄露。文章将其作为合法AI工具安全风险的典型案例,强调即使知名厂商也难以完全消除数据外泄隐患。
OpenAI
Meta 在文中被描述为投入大量内部资源优化移动应用性能,Threads 与 Instagram 均采用其特有的打包与混淆策略,如 Redex 与自定义共享库合并。Meta 工程能力使其能有效管理超大合并库与调试代码,尽管这与业界最佳实践有所不同。
Meta
本文核心主题是生成式AI,其训练与推理成本极高,需求超出供给10倍。文章估算GPT-3单次训练算力成本约56万美元,强调模型参数规模直接决定计算复杂度。生成式AI的成功高度依赖最低总成本的算力获取。
Generative AI
本文将Generative AI定位为Photoshop进入新阶段的关键技术,相比过去十年的AI功能如选区工具,它能从文字提示直接生成全新内容。文章指出该技术已通过Generative Fill落地,支持快速迭代和非破坏性探索,并计划后续扩展到裁剪等更多工具。
Generative AI
Generative Fill是本文发布的核心新功能,由Adobe Firefly驱动,支持通过文字提示添加、扩展或移除图像内容。它自动匹配原图的透视、光影和风格,数秒内生成多达三个选项,并以生成图层形式实现非破坏性编辑。文章指出该功能已集成到选区工具和上下文任务栏中,显著降低创作门槛。
Generative Fill
谷歌已开始在 Google 账户全面 rollout Passkeys 支持,覆盖所有主要平台,用户可通过 g.co/passkeys 快速设置。谷歌同时表示将与行业伙伴共同推动这一更安全便捷的登录方式落地。
GPT-J被列为当下流行的Transformer架构大语言模型之一,与GPT-3、BERT同属此类。文章未给出其具体参数或成本数字,仅用以说明主流生成式模型普遍基于Transformer,从而共享相同的算力估算方法和内存瓶颈。
GPT-J
Meta的Llama被指出拥有高于GPT-3的算力需求,文章引用论文说明其训练复杂度更大。该模型再次印证了当下顶级大模型训练已成为人类计算史上最密集的任务之一,进一步强调获取低成本算力对AI公司成败的决定性作用。
Llama
文章开篇指出当前AI设计热潮下,人们反而更怀念具有人类情感的软件体验。强调在追求效率之外,需在界面中融入制作人的体贴与人性化元素,以平衡技术与人文。
Artificial Intelligence
文章配图由Midjourney生成,用于展示AI算力主题。文中仅将其作为图像来源提及,未深入讨论其模型或成本细节。Midjourney代表当前流行的生成式图像模型,印证了算力对AI产品的影响。
Midjourney
文中将Hugging Face列为语言模型托管服务商,帮助初创公司快速验证产品市场匹配,无需自建基础设施或管理模型。
Hugging Face
本文指出,当前最优大型语言模型的参数数量与训练数据集规模存在对应关系,DeepMind的Chinchilla研究对此进行了分析。该研究强调,训练效果最佳时需让参数量与数据量相匹配,而非单纯扩大模型规模。
Chinchilla
文章提及OpenAI的tokenizer工具用于演示token概念,并引用其GPT-3 API报价为每千token 0.002美元,与自建A100推理成本0.0002-0.0014美元形成对比。OpenAI同时被归为可直接使用的托管模型服务,帮助初创公司避免自建基础设施的高额前期投入。
OpenAI
文章以GPT-3为例说明大模型的算力消耗:1750亿参数、1024 token输入输出时单次推理约需350万亿次浮点运算,完整训练约需3.14×10^23次运算。按A100 GPU估算,单次训练仅算力成本约56万美元,实际报价区间50万至460万美元。该模型被用来展示Transformer类模型在训练与推理上的极高资源需求。
GPT-3
文章以 Alpaca 为例,说明开源模型正快速缩小与闭源大模型的差距,降低了新进入者的算力门槛。
Alpaca
本文说明,目前顶尖LLM主要使用Common Crawl作为训练语料,其包含约45亿网页,约占全球网页总量的10%。除此之外,训练数据还包括规模较小的Wikipedia和书籍集合,但Common Crawl仍是最大来源。未来难以找到比这大10倍的非合成数据集。
Common Crawl
作者将微信聊天记录与博客转化为对话数据,对ChatGLM-6B等LLM进行微调与权重融合,目标是获得更接近个人聊天风格的数字克隆模型,而非通用大模型。
LLM
作者利用个人微信聊天记录约10万条及博客转换的5000个问答数据,对预训练模型进行微调与融合,得到更接近个体说话风格的AI模型。该模型能产生熟悉的简短回复,但多轮对话与事实准确性仍有不足,目前已部署为公开聊天服务。
数字克隆
文中列举的另一图像生成黑箱模型。与 DALL-E 2、Stable Diffusion 同属现代生成式 AI,能从文本提示快速生成高质量图像。但作者强调其内部映射不透明,用户无法预测提示词如何影响最终图像,只能通过反复试错调整。
Midjourney
Midjourney是一家AI图像生成公司,其CEO决定禁止生成讽刺中国国家主席习近平的图像,以减少争议并确保产品在中国市场的可用性。该政策适用于全球用户,而非仅限中国境内,且Midjourney允许生成拜登、普京等其他领导人的讽刺图像。文章指出,这一做法实质上是将中国审查规则扩展至全球,损害了政治表达自由。
Midjourney
斯坦福大学基于 Llama 7B 微调的指令遵循模型。文章将其列为 Llama 泄露后首批创新成果之一,后续 FreedomGPT 等项目又在其基础上构建对话代理,进一步扩大了开源生态的影响。
Alpaca
文中“Read more”链接的Google I/O报道提到Gemini Spark功能,展示AI如何整合到日常工具中,进一步影响发布者与平台的关系。
Gemini
本文URL指向彭博社发布的BloombergGPT相关新闻稿页面,标题显示其为50亿参数、专为金融领域调优的大型语言模型。但实际正文为机器人验证拦截页,未提供模型详情。
BloombergGPT
本文将OpenAI Codex作为代码生成AI的代表,说明其通过自然语言提示生成程序代码的能力,列举它与Copilot等工具共同构成生成式AI在编程领域的应用实例,突出黑箱特性导致的交互困难。
OpenAI Codex
文章附录中提及Alpaca项目,作为斯坦福的指令遵循模型被列为参考,用于支持作者对ChatGLM进行微调和融合训练的整体思路。
Alpaca
文章引用David Gelernter 2010年的观点,强调人类智能是宇宙中最宝贵的资源且始终短缺。他认为计算机带来的全球智能供给增加将受到欢迎,并为本文的智能过剩论点提供早期洞见。
David Gelernter
本文将Make-A-Video列为现代生成式AI黑箱模型的代表之一,指出它能接收自然语言提示并输出高质量视频内容,与文本、图像、3D和代码生成工具并列,体现生成式AI在多模态内容创作上的新能力。
Make-A-Video
本文将GPT-4列为LLM领域通过API提供的主要突破模型之一,其性能领先。文章提到Vicuna等开源模型试图接近GPT-4水平,体现了Llama泄露推动的追赶趋势。
GPT-4
作者选择的预训练基座模型,参数量60亿、中文效果较好且适合本地运行。他先用微信聊天数据微调,再与博客数据训练的模型按7:2权重融合,最终得到目标数字克隆模型。
ChatGLM-6B
本文介绍ColossalChat是由Colossal-AI团队开源的ChatGPT克隆模型,基于Llama构建并包含完整的RLHF训练管道,支持对话助手功能。
ColossalChat
本文中,来自UC伯克利、CMU、斯坦福和UC圣地亚哥的研究人员开源了Vicuna,这是基于Llama微调的聊天机器人,能够匹配GPT-4的性能水平。它是Llama泄露后涌现的开源LLM创新项目之一,展示了指令遵循能力的显著提升,与文章主题“开源ChatGPT替代方案”直接相关。
Vicuna
文章中被用作性能基准的闭源模型。Llama 尽管体积更小,却在多项任务上与其表现相当,凸显了小型开源模型的潜力。后续多个基于 Llama 的项目也以接近或超越 GPT-4 的表现作为目标。
GPT-3
本文作者,使用自己的微信聊天记录和280篇博客文章,训练出个人数字克隆AI。他通过WechatExporter导出数据,基于ChatGLM-6B进行微调与模型融合,最终部署了可在线对话的版本,并分享了训练过程与效果反馈。
王登科
文中称Google广告收入下滑导致母公司Alphabet整体广告营收连续两季下降;此外Google旗下五家子公司被欧盟列入Digital Services Act监管对象,需于8月前满足审计与数据共享要求。
本文提到来自UC Berkeley的Colossal-AI项目,基于Llama发布了ColossalChat,这是一个带有完整RLHF流程的ChatGPT类开源模型,用于克隆对话能力。
Colossal-AI
本文将 ChatGPT 作为闭源 API 模型的代表,指出其在指令遵循能力上领先开源方案。文章讨论了 Llama 泄露后涌现的开源替代品,如 Vicuna、Koala、ColossalChat 等,强调这些模型在性能上已接近或匹配 ChatGPT。
ChatGPT
文章指出提示工程是研究如何撰写有效提示词的新兴领域,因生成式AI的黑箱特性导致用户需反复试错才能获得理想输出。
Prompt Engineering
FreedomGPT是基于Alpaca(进一步源于Llama)的开源对话代理,文章中列为Llama泄露后的代表性项目。它强调无限制的开源特性,体现了社区在ChatGPT替代方案上的快速迭代与多样化尝试。
FreedomGPT
文章配图标注由DALL-E生成,内容为“使用智能手机自拍的模特真实照片”,用于视觉呈现BeReal的主题。DALL-E在此仅作为图像生成工具辅助说明,并非讨论重点,体现生成式AI在媒体内容制作中的辅助角色。
DALL-E
本文指出OpenAI首席技术官Mira Murati接受采访,内容涉及公司对安全的处理方式、通往AGI的路线以及监管前景展望。此信息出现在平台器行业新闻列表中,引用美联社报道。
Mira Murati
文章提到 BeReal 过去九个月仅新增两项面向用户的功能,其中一项为在帖子里添加正在播放的歌曲,即可附上 Spotify 链接。该功能被描述为对用户吸引力有限,无法成为留存用户的核心理由。
Spotify
Koala是BAIR基于Meta Llama微调的对话模型,针对学术研究场景,使用互联网对话数据训练,性能可与ChatGPT媲美。文章将其列为Llama泄露后重要的开源创新案例之一,强调了其在指令遵循和对话能力上的进步。
Koala
文中提到的对话式文本生成工具。支持多轮会话,可将先前上下文作为后续生成的条件,试图建立一定共同基础。但作者指出其常识与语义 grounding 仍较浅,用户仍需多次交互才能建立基本共享事实,且无法通过对话更新模型本身。
ChatGPT
本文报道称,“作为AI语言模型……”这一短语在Twitter和亚马逊产品评论中激增,原因是懒惰的垃圾信息制造者直接复制粘贴ChatGPT生成的内容而未加编辑。该现象被Motherboard文章指出并收录于平台器新闻。
ChatGPT
本文介绍Prompt-to-Prompt图像编辑技术,允许用户先生成初始提示图像,再微调提示词,仅对必要部分做最小修改以实现修复式交互,减少自然语言歧义。
Prompt-to-Prompt
本文将Rytr列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Rytr
文章中 Lex 是作者近期开始使用的 AI 写作应用,主要用于改写段落、克服写作障碍并优化表达。作者将其作为编辑辅助工具,而非直接生成最终内容。
Lex
本文指出AI搜索公司Glean将其生成式AI能力集成到现有搜索平台中。该更新出现在AI Radar栏目,体现了生成式AI对企业搜索产品的增强作用。
Glean
文中提及Nathan Baschez创立的AI文字处理器Lex,作为其当前身份背景,与文章探讨AI如何重塑计算体验的主题直接相关,体现作者在AI工具领域的实践经验。
Lex
文章将 ChatGPT 作为 AI 产品的代表,说明其已对 Google Search 构成颠覆威胁,并预示更多产品类别将受影响。
ChatGPT
文中将当前AI发展描述为类似寒武纪爆炸的技术浪潮,已威胁Google搜索,未来将迫使智能手机操作系统改变。Apple被认为已意识到用户预期变化,需让Siri等功能变得更实用,以保持iOS竞争力。
Artificial Intelligence
文中作为当下热门“银弹”被提及,作者引用自己此前文章观点,认为它仅能处理简单编码任务。超出简单范围后,ChatGPT生成的代码迅速变得难以管理,无法替代专业开发者的思考与规划过程。作者用此例说明AI工具同样无法绕过软件设计的根本复杂性。
ChatGPT
本文在行业部分简要提及OpenAI,其CTO接受采访,讨论公司安全策略、迈向AGI的路径以及对监管的看法。该内容来自美联社报道,被纳入平台器当周科技新闻汇总。
OpenAI
本文提到AI传奇人物Yann LeCun与Andrew Ng共同录制视频,表达对AI暂停开发提案的反对立场。该记录出现在AI Radar栏目中,与Llama开源创新主题形成呼应,体现行业领袖对AI监管的观点。
Yann LeCun
ChatLlama即Nebuly开源的框架,用于基于Llama和用户自有数据创建会话助手。本文将其作为Llama泄露引发的创新之一,突出其在私有数据场景下的实用价值,与其他纯模型项目形成互补。
ChatLlama
本文将LLM描述为生成式AI中的关键领域,目前最大突破来自仅通过API提供的模型,而开源替代品在遵循人类指令方面表现较弱。文章指出Llama泄露后,开源LLM代理出现爆发式创新,改变了这一格局。
LLM
本文提及Cohere是仅API可用的LLM突破模型代表,强调开源版本此前在性能上落后。该实体用于说明Llama泄露前开源与封闭API之间的差距。
Cohere
本文把GitHub Copilot归为程序代码生成类生成式AI黑箱,指出它能接受自然语言提示并输出程序代码,与其他模态生成工具共同展示AI在内容创作上的广泛应用,但同样缺乏可预测的概念模型。
GitHub Copilot
作为开源文本预训练模型的代表,与ChatGLM-6B一同激发作者重启数字克隆想法。作者认为这些开源模型让个人微调成为可能,尽管最终选用ChatGLM-6B作为基座进行训练。
Llama
本文将Writesonic列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Writesonic
作者在参考GitHub开源项目时列出zero_nlp仓库,用于中文NLP大模型的训练与推理,作为其微调ChatGLM-6B的技术参考来源之一。
zero_nlp
本文将PromptBase描述为买卖提示词的市场平台,用户可在此购买或出售有效提示,以缓解生成式AI黑箱模型输出难以预测的问题。
PromptBase
文中列举的文本生成黑箱模型之一。与 ChatGPT 同属现代生成式 AI,接受自然语言提示并输出高质量文本。作者将其与图像、视频、代码生成模型并列,强调这类模型同样缺乏让用户预测输入如何影响输出的概念模型。
GPT-4
本文将Frase列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Frase
本文提到Adthos推出全新平台,利用生成式AI实现音频广告的完全自动化创作。该发布被归入AI Radar的科技发布栏目,展示生成式AI在广告制作场景的应用。
Adthos
文章提到 Google 在联邦学习与差分隐私方面的研究,将作为下一期 Edge 系列的内容之一。
本文说明BloombergGPT以BLOOM为基座模型,在金融专用数据集上进行微调,得到50B规模的领域LLM。
Bloom
本文提到Meta的未命名去中心化项目,作为新社交产品进入Twitter旧领域的重要参与者,与Mastodon等共同形成爆发式增长。它同时因欧盟数字服务法被列入需遵守新审计与数据共享要求的公司名单。
Meta
本文将人工智能视为整体智能供给的增加,而非独立工具。作者认为其带来的效率提升将诱发更多需要智能的任务需求,而非简单替代人类工作,最终形成“智能过剩”。文章强调AI将让人类在相同时间内完成更多、更好的事情。
Artificial Intelligence
文章将Claude归为仅通过API可用的领先LLM之一,与GPT-4、Cohere共同代表封闭式分发模式。指出此类模型在指令遵循上优于早期开源替代品,直到Llama事件改变局面。
Claude
文章多次提及ChatGPT作为智能供给增加的例子:用户用其快速生成针对邻居的法律投诉,展示AI如何降低法律服务门槛;同时用它查询能源消耗和医疗使用数据,支持诱导需求观点。文章指出其虽非专业工具,却已能引发更多潜在法律活动。
ChatGPT
BAIR即Berkeley AI Research Institute,在文中发布了基于Llama的Koala模型,使用互联网对话数据进行微调,专门面向学术研究用途。它与UC伯克利Colossal-AI项目共同体现了学术机构在Llama泄露后的快速跟进,推动了开源对话模型的发展。
BAIR
作者向 6pen 算法同事寻求帮助,获取模型权重融合脚本。利用该脚本将微信聊天微调模型与博客问答模型按 7:2 比例融合,最终选定第 6600 步版本作为数字克隆的最终模型。
6pen
本文将Sudowrite列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Sudowrite
本文将Auto-GPT视为近期兴起的AutoGPTs代表,描述其为可半自主执行任务的AI代理,能充当虚拟工作者。它被用来佐证“AI可能让人类只需偶尔提示即可指挥机器人军团”的观点,支持三日工作周等减少工作量的可能性。作者随后指出,这种效率提升或将引发需求增长,最终人类仍需投入更多精力规划与执行新任务,而非单纯减少工作。
Auto-GPT
本文中的Generative AI指Midjourney等工具所代表的图像生成技术,该公司拥有决定其使用方式的绝对权力。文章强调,这种技术本可用于政治讽刺,但因商业考量被用于配合中国审查,限制了全球用户对习近平的讽刺表达。
Generative AI
作者将博客文章以 Markdown 文件形式存储在云端,通过 iA Writer 在多设备间同步和编辑内容。
Markdown
本文把BabyAGI作为AutoGPTs的另一例子,指出它是Yohei Nakajima开发的半自主AI工作者代理,能独立处理工作流程。它与Auto-GPT共同被用来支持AI可能让人类成为“机器人军团CEO”、大幅降低工作时间的观点。作者认为此类工具虽能提升效率,但更可能通过诱导需求推动人们追求更高目标,而非直接减少工作量。
BabyAGI
作者通过精心构造 prompt,调用 chatgpt 将 280 篇博客文章切分后批量转为约 5000 条问答对话数据。转换后的数据用于后续模型训练与融合,以补充微信聊天记录中缺少的长文本风格。
Prompt
本文研究显示,444名商务专业人士使用ChatGPT撰写文件时,平均用时从27分钟降至17分钟,生产力提升59%;文件质量评分从3.8分升至4.5分(满分7分)。研究发现ChatGPT主要通过减少起草时间、增加润色时间来提升效率与质量,且对技能较低者帮助更大。
ChatGPT
文章在“Next Week in The Sequence”中预告 Edge 282 将深入探讨 LangChain,称其为 LLM 开发中广受欢迎的框架。
LangChain
本文提及OpenAI发布安全原则博客,强调隐私、事实准确性和有害内容预防,同时在AI雷达中被视为Anthropic等竞争对手的目标。
OpenAI
本文援引泄露文件称,OpenAI竞争对手Anthropic计划在未来两年内筹集约50亿美元资金。该消息被放在AI Radar部分,与Llama泄露引发的开源讨论形成对比,凸显闭源模型公司的扩张野心。
Anthropic
文章描述Meta AI发布了Llama系列模型(7B至65B参数),性能可比肩GPT-3却体积更小,随后模型意外泄露。泄露直接引发Stanford Alpaca、Vicuna、Koala等多项开源创新,点燃LLM开源生态。
Meta AI
本文重点讨论的图像生成黑箱模型。作者用简单提示词生成个人照片和斯坦福主四合院风格图,但需经过 21 次迭代仍无法精确控制输出。文章指出其无法让用户建立输入提示与输出图像之间的可预测映射,导致试错式使用。
DALL-E 2
文章介绍Harvey是一款专注法律场景的AI,已与顶级律所及PwC签约,最近获Sequoia估值1.5亿美元。将其作为专业法律AI的代表,说明即使ChatGPT已能简单处理法律任务,专业工具仍将与人类律师共同应对激增的法律需求。
Harvey
本文在提及OpenAI的新闻时指出,采访讨论了该公司迈向AGI的路径,同时涉及安全与监管议题。此内容作为简短行业动态被收录于平台器新闻汇总中。
AGI
本文介绍Bloomberg发布的50B参数LLM BloombergGPT,基于BLOOM在3630亿金融token数据上微调而成,专注于财经领域应用。
BloombergGPT
本文将Moonbeam列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Moonbeam
本文指出生成式AI工具如ChatGPT能与人类专业人士协同工作,在商务文件撰写中同时提高速度与质量。研究强调AI并非取代人类,而是通过改变工作流程(减少粗稿撰写、增加编辑时间)来增强产出。作者认为未来AI与人工结合可带来更大长期收益。
Generative AI
本文“Read more”部分引用Google I/O大会的相关报道,涉及AI代理功能如Daily Brief和Gemini Spark在收件箱与YouTube中的应用,展示Google在AI产品上的最新进展。
Google I/O
文中多次对比ChatGPT,指出其参数未因扮演指令改变,仅靠提示词模拟;而作者的模型通过真实个人数据更新参数,更接近个体而非泛化人类。作者还用ChatGPT辅助将博客转为问答格式数据,用于后续训练。
ChatGPT
文章配图下方标注“Created Using Midjourney”,表明该插图由 Midjourney 生成。
Midjourney
本文将Copy.ai列为AI写作工具之一,与Lex等应用并列,指出这类工具可帮助作者克服写作障碍、提供续写思路,并通过改写功能辅助编辑优化句子与段落。
Copy.ai
Meta AI 发布的系列 LLM,包含 7B 到 65B 参数版本。尽管参数规模小于主流模型,却在多项任务上达到 GPT-3 水平。最初未开源,一周后在 4chan 意外泄露,引发大量下载和后续开源创新,成为推动 LLM 开放生态的关键事件。
Llama
本文中Bing指全新升级的搜索产品,已拥有超过1亿日活跃用户。其通过聊天、答案和内容创作等新功能,吸引三分之一的新用户,同时在聊天回复中嵌入来源引用和“了解更多”链接,以此为发布商带来更多流量。文章强调这是Bing推动发布商流量与收入增长的核心产品目标。
Bing
本文未讨论人工智能相关技术或应用场景。
Artificial Intelligence
文末作者讨论ChatGPT在写作中的应用潜力,但指出其缺乏可靠引用功能限制研究用途。他尝试用于 brainstorm,却因提示技巧不足效果有限。该提及反映对AI辅助创作的初步探索与现实障碍。
ChatGPT
本文标题将 OpenAI 描述为已转变为 ClosedAI,网址 closedai.us 上的博文直接以 openai-becomes-closedai 命名,暗示其从开放走向封闭的趋势。文章以此为主题,突出 OpenAI 在实际运作中逐渐偏离最初开放理念的变化。
OpenAI
本文将Bing与Edge定位为“Web副驾驶”,即Microsoft Copilot的核心形态。它整合搜索、聊天、答案与创作能力,旨在更好满足用户需求,同时通过引用来源等方式继续为内容发布商输送流量与价值。
Microsoft Copilot
本文指出 BuzzFeed 的 infinity quizzes 采用 OpenAI 技术驱动,用于生成如浪漫喜剧或分手短信等个性化内容。
OpenAI
文章结尾指出,若 GPT-4 能生成更准确的代码,则可能最终取代算法类编码面试。目前 ChatGPT 的表现仍不足以通过真实面试,GPT-4 被视为潜在转折点。
GPT-4
文中指出生成式UI设计势不可挡,以Galileo AI为例,说明AI将能自主生成界面而非仅辅助组件组装。这与设计系统主题紧密相关,预示AI既能消费现有系统也能参与创建新组件,带来效率提升的同时也引发对人类角色转变的思考。
Generative UI
基于GPT-3的大型语言模型,能通过预测下一个token生成类似人类写作的文章。本文指出其核心是利用1750亿参数的神经网络,在海量网页与书籍文本上训练,从而实现对语法与语义的近似建模,但仍受限于计算不可约性,无法处理深度算法任务。
ChatGPT
2019年发布的较小模型,本文用它作为示例在普通电脑上运行,展示零温度与温度0.8下的文本生成效果。与更大模型相比,其输出常出现重复或离题,但已能体现transformer架构的基本工作方式。
GPT-2
文章将Galileo AI列为生成式UI设计的代表,预测此类工具将能快速产出界面布局,进一步推动设计系统与AI的结合。
Galileo AI
文章提及Google在行业板块预览了Privacy Sandbox项目。该项目被定位为对Apple App Tracking Transparency的回应,旨在调整广告追踪机制。报道仅简要列出此预览,未提供更多技术细节或时间表。
本文指出Spotify删除了一项条款,该条款曾允许Apple使用Findaway Voices平台的人声数据训练机器学习系统。Spotify此举被视为保护其近期收购的有声书资产的相关权益。
Spotify
本文中LLM指大型语言模型,如ChatGPT,其核心任务是基于海量网页与书籍文本,估计给定前文后下一个词或token的概率分布,从而逐词生成连贯文章。模型通过1750亿参数的神经网络实现这一估计,无需存储全部文本,而是学习语言的统计规律。文章强调LLM的成功揭示了人类语言存在可被神经网络捕捉的简单结构。
LLM
比GPT-2参数更多、性能更强的模型,本文对比展示其在相同提示下生成更长、更连贯的文章。零温度模式下输出平淡,温度0.8时更具多样性,说明规模提升显著改善了“合理续写”能力。
GPT-3
2012年已占据50%以上地图市场份额并推出Google Maps;2013年以11-13亿美元收购Waze,核心看重其由用户实时贡献的最优地图数据,而非自身算法。
本文报道Meta更新了Facebook广告解释功能,新增说明公司如何利用机器学习分析用户在平台内外行为来投放广告。此举旨在提升广告定向透明度,回应用户对隐私和算法的关切。
Meta
本文测试显示,ChatGPT 在最新 100 道 LeetCode 题目中仅通过 28%,其中简单题 77%、中等题 16%、困难题 0%。它擅长给出高层次解题思路,但实际代码常存在 bug,无法通过全部测试用例。提供解题大纲后,正确率仅提升 19%。
ChatGPT
文章探讨Artificial Intelligence作为设计系统消费者的应用场景:先训练其识别组件库,再通过自然语言提示快速搭建界面原型与组件。AI能处理机械性任务如生成变体与测试,但作者认为早期阶段仍需人工迭代与把关。AI也可能扩展至生成式UI设计,进一步降低门槛。
Artificial Intelligence
文章提到苹果今年后续多款产品发布将取决于更个性化的Siri版本何时推出。
Siri
GitHub Copilot 被描述为公司迄今最成功的 AI 产品发布,代表 GitHub 在 AI 方向的领先布局。CEO 表示公司将以此为基础,构建集成 AI 能力的 GitHub 平台,加速帮助开发者提升生产力并支持云采用。
GitHub Copilot
人工智能是Artifact名称中“AI”部分的来源,指通过机器学习实现个性化新闻推荐的核心技术。文章指出Transformer等AI进展让文本社交成为可能,Systrom强调AI能理解用户兴趣并生成高质量推荐,同时Artifact会用AI过滤虚假信息并优先深度阅读内容。
Artificial Intelligence
文章称苹果正在设计新系统,以便在App Store中支持包含AI Agent的应用,同时保持其安全与隐私标准。
AI Agent
文章称 Google 于 2017 年发明 Transformer 架构,该技术显著提升语言理解效率,并间接促成 Artifact 等个性化新闻产品的诞生。
本文所述GPU原计划加入光追等新特性,但因过于激进导致iPhone 14 Pro原型功耗异常,最终被放弃并大致恢复A15方案。该设计失误造成图形性能进步有限,并直接引发团队重组。事件凸显了功耗与性能平衡在芯片开发中的关键性。
GPU
文章援引 OpenAI 首席技术官观点,描述机器学习常经历数月无效尝试后突然高效运行的特性,呼应 Artifact 对 AI 的应用。
OpenAI
文中指出苹果自3月起开始阻止部分热门Vibe Coding应用更新,以配合其对AI编程类App的支持策略调整。
Vibe Coding
文章提到 ChatGPT 去年发布,引发 AI 兴趣热潮,其名称中的 T 即指 Transformers 架构,体现了该技术对推荐系统的赋能。
ChatGPT
本文中人工智能是GitHub长期战略的核心方向。CEO Thomas Dohmke表示公司将聚焦AI以成为面向未来的开发者工程系统,并将GitHub Copilot视为最成功的AI产品,计划构建集成AI能力的GitHub平台。该方向与微软整体AI战略一致,旨在帮助客户提升生产力并加速云采用。 layoffs和远程办公调整正是为短期业务健康提供资源,支持AI长期投入。
Artificial Intelligence
本文提到作者与两位UX朋友共同制作的播客《UX Guide to the Galaxy》,其中一期专门讨论暗黑模式,用户可在Spotify等平台收听。该播客内容直接促成本文撰写,成为介绍暗黑模式主题的引子。
Spotify
文章指出 Brave Search 广告与 Google 不同,点击体验完全私密,仅使用搜索词、国家和设备类型展示广告,不建立用户搜索画像或进行跟踪。
文章指出ChatGPT由OpenAI开发,训练数据截止2021年9月,却能在模拟环境中显示2022年发布的PyTorch版本,暗示其处于“另类宇宙”。虚拟机尝试通过Lynx访问chat.openai.com时,ChatGPT推断出自身可能就是该URL后的Assistant模型,并成功模拟与之对话。
OpenAI
Frederic Besse 向 Jonas Degrave 展示了如何用提示词让 ChatGPT 模拟 Linux 终端,从而实现完整虚拟机的运行,是本文核心发现的直接贡献者。
Frederic Besse
本文将ChatGPT定位为OpenAI开发的AI聊天机器人,是生成式AI的典型代表,被Stack Overflow全面禁止用于生成问题或答案。文章强调其输出常包含看似合理但实际错误的编程内容,且生成速度极快,导致数千条低质答案涌入。政策明确禁止通过ChatGPT“提问后复制”或“改写答案”的行为。
ChatGPT
本文作者 Jonas Degrave 是 DeepMind 研究科学家,他记录了 Frederic Besse 发现的在 ChatGPT 内构建虚拟机的过程,并亲自测试文件系统、Python 编程及网络访问等功能。
Jonas Degrave
DALL-E是本文核心案例,指OpenAI提供的文本到图像生成系统。它通过先对训练图像逐步加噪、再学习反向去噪的过程实现创作,并在每步中用用户提示进行引导。作者用此例说明神经网络如何将混沌转化为有序图像。
DALL-E
本文提及OpenAI为ChatGPT的开发者,该公司于2022年11月30日公开发布此工具。文章引用OpenAI的分享政策,指出未经适当标注的AI生成内容违反其条款。平台政策制定时参考了OpenAI相关模型的局限性。
OpenAI
文中提及DALL-E 2是DALL-E早期版本名称,为避免命名混淆,作者选择忽略该初始版本,直接以当前DALL-E指代labs.openai.com上的生成器,聚焦其实际工作机制而非版本历史。
DALL-E 2
本文未提及 Brave Leo,该实体与文章主题无关。
Brave Leo
文章将 Bing 列为典型例子,说明其广告会跟踪用户,而 Brave Search 广告则保护匿名性,仅依赖查询本身而非用户档案。
Bing
本文核心是将ChatGPT提示为Linux终端,实现完整虚拟机功能,包括文件读写、Python执行、Docker容器与网络访问。实验证明该虚拟机能运行Docker镜像输出Hello from Docker,也能通过Lynx浏览alt-internet并安装PyTorch。最终甚至在内部再次嵌套构建另一层虚拟机,形成多层嵌套。
虚拟机
本文在讨论语言模型时提及GPT-3,指出其本质是语言概率模型而非具备推理能力的代码生成工具,容易产出语法正确但语义错误的答案。文章认为将GPT-3用于Stack Overflow答案生成不符合其设计目标,并强调正确性并非此类模型的训练重点。
GPT-3
本文中人工智能被瑞士公司Art Recognition用于分析有争议的《Portrait de femme (Gabrielle)》真伪。通过对206幅雷诺阿真迹照片及同期相似风格画作进行训练,算法给出该画作有80.58%概率为真迹的结论。文章强调其结果仅依赖训练数据集质量,无法完全取代传统鉴定。
Artificial Intelligence
本文中ChatGPT被提示模拟Linux终端,通过特定指令进入根目录并执行文件操作、编程与网络命令。它能正确维护文件系统状态、运行Python代码计算质数,还能模拟安装PyTorch 1.12.1和Docker容器,展示出对Linux环境与状态保持的理解。该虚拟机运行在ChatGPT的语言模型想象中,速度在某些场景甚至快于真实笔记本。
ChatGPT
本期节目中人工智能被放在游戏与元宇宙交叉点上讨论。Neal Stephenson 阐述了 AI 如何参与元宇宙内容生成与交互设计。它被视为影响未来沉浸式体验与内容生产效率的重要技术变量。
Artificial Intelligence
本文将Generative AI定义为包括ChatGPT在内的所有大型语言模型生成工具,宣布在Stack Overflow上全面禁止使用。核心理由是此类工具平均正确率过低,却能快速产出大量看似可信的内容,严重干扰站点质量控制。政策覆盖所有内容类型,并要求通过用户层面制裁而非逐条审核来应对。
Generative AI
OpenAI是DALL-E图像生成器的开发者,本文重点分析其产品如何利用神经网络将随机噪声逐步去噪并引导成符合用户文本提示的高质量图像。作者强调该公司技术代表当前AI最前沿的应用方向。
OpenAI
本文未讨论Bard这一实体,未提供任何相关信息或上下文。
Bard
本文未对 Ask Brave 进行任何介绍或描述,仅在相关文章区标题中出现,因此无可用实体信息可供总结。
Ask Brave
本文将LLM与ChatGPT并列,作为生成式AI工具的统称,明确禁止在Stack Overflow发帖中使用。文章指出LLM生成的答案虽外观专业但错误率高,且验证成本远高于生成成本,导致审核系统不堪重负。政策强调即使答案表面正确,仍因来源问题需实施制裁。
LLM
本文中NovelAI于10月3日推出图像生成服务,因能高度模仿动漫风格引发日韩用户强烈反对。平台因流量激增与黑客事件暂停服务,后发布日语博客解释训练方式,试图缓解创作者对版权的担忧。
NovelAI
本文将DALL-E描述为硅谷热门的生成式AI绘画工具,但它并非开源且需订阅。Stable Diffusion作为其竞争对手因开源特性更易被用于训练特定动漫风格,引发更大争议。
DALL-E
本文核心讨论对象Meta(前Facebook)股价较2021年高点大幅下跌,作者认为市场过度反应,列出五项神话并逐一反驳。文章指出Meta家庭应用整体DAU达29.3亿,仍持续增长,且广告业务虽受ATT影响但仍保持稳定。重点强调其通过AI投入应对TikTok竞争与广告测量难题,长期护城河反而可能加深。
Meta
本文提到Stability AI是Stable Diffusion的开发公司,10月中旬完成1.01亿美元融资,估值达10亿美元。该公司因开源模型被用于模仿已故画师风格而卷入争议。
Stability AI
本文中 Artificial Intelligence 指 Hearst 在编辑创新策略中的核心应用。该策略被定位为公司内容生产与业务发展的关键驱动,文章从分析角度探讨其在 Hearst 媒体运营中的实际落地方式与效果。
Artificial Intelligence
本文讨论的文章标题显示,Google 正在解释为何决定从浏览器中移除 JPEG XL 支持。文章链接指向 Phoronix 论坛的相关讨论帖,焦点在于 Google 移除该格式的具体考量。
本文中Mimic是日本AI初创公司Radius5于8月推出的动漫风格图像生成测试版,允许画师上传作品训练专属模型。发布后因用户擅自上传他人作品引发大量批评与辱骂,服务被迫无限期冻结,也成为AI艺术伦理争议的导火索。
Mimic
文中提到Google与Meta类似,未充分讨论ATT对其YouTube广告业务的影响,同时其资本支出也在上升。Google被视为除Meta外少数能承担大规模AI数据中心投资的公司之一。文章强调这种投资将深化Meta在数字广告中的护城河,Google是唯一可比对手。
本文讨论生成式AI在动漫领域的应用引发日本和韩国画师强烈反对。画师担心AI会复制个人风格并取代其工作,导致需求减少。文章指出该技术正成为测试AI伦理与版权责任的早期案例。
Artificial Intelligence
文章引用Imagen论文指出,更大的语言模型对图像生成质量的提升效果超过单纯增大图像生成组件,并说明其同样采用扩散框架。
Imagen
Meta已在Instagram和Facebook上线展示NFT的功能,并计划推出艺术家数字作品交易市场。苹果新规要求此类市场若在iOS上架必须使用应用内支付,Meta可能因此需向苹果支付30%佣金,影响其NFT业务落地成本。
Meta
文章中 Stability AI 通过公开 Stable Diffusion 模型权重与代码,推动了高性能文生图技术普及。其发布的模型在图像质量、速度和内存占用上均有显著优势,成为文本到图像生成的重要里程碑。文章引用其博客说明该模型的公开意义,并以此展开对内部机制的解析。
Stability AI
本文资源部分提到作者制作了一段一分钟YouTube短视频,演示如何使用DreamStudio通过Stable Diffusion生成图像。该平台被作为实际应用Stable Diffusion的示例入口,与文章介绍的模型原理形成呼应。
DreamStudio
本文资源部分引用了两篇来自Hugging Face的博客,分别介绍Stable Diffusion与Diffusers的结合使用以及扩散模型的详细注解。这些链接为理解模型落地提供了官方示例与扩展阅读材料。
Hugging Face
本文中 Google 被作者列为 Microsoft 在招聘时的主要竞争对手,尤其在吸引顶尖人才方面。作者指出,与 Google 的 Gmail 团队相比,Microsoft 的 Outlook 团队在薪酬、远程政策和声望上处于劣势,加剧了 D&I 政策下的招聘困难。
本文指出扩散模型生成图像的核心直觉同样适用于DALL-E 2,强调去噪过程可从随机噪声逐步生成符合训练数据分布的高质量图像。
DALL-E 2
本文重点讨论的 text2img 功能是 Stable Diffusion 最主要的用法,用户仅输入文本提示即可生成对应图像。文章展示完整提示词示例及生成结果,并对比另一种 text+image 的图像编辑用法。text2img 流程涉及文本编码、潜在空间扩散与最终解码三个阶段,步数参数直接影响生成质量。
Text-to-Image
文中将Meta Platforms列为Twitter的竞争对手,其旗下的Instagram正吸引部分重度用户流失。Meta被提及时股票代码为META.O,出现在讨论用户转向其他平台的段落中。
Meta
本文未直接提及 OpenAI,但作者 Casey Newton 表示自己成为最早定期使用 DALL-E 为通讯配图的作者之一。DALL-E 被用于生成视觉内容,如封面图,帮助增强新闻通讯的表现力。该实践被列为过去一年吸引读者的亮点内容之一,与 Platformer 的成长直接相关。
OpenAI
本文所述谷歌公司于2022年9月29日上午9:15公开宣布Stadia关闭,同时参考其此前关闭Area 120部门时给予员工四个月内部转岗期限的做法,暗示Stadia剩余员工可能获类似安排。
Newton 在反思中指出,拜登时代新闻节奏放缓后,他将人工智能列为重点探索领域之一。他提到自己成为最早使用 DALL-E 为 newsletter 配图的作者之一,并在封面使用了该 AI 生成的蒸汽波风格插画。
Artificial Intelligence
本文正文未涉及 Google,仅在文末“Read more”推荐的其他 Platformer 文章标题中出现,未提供具体内容或分析。
Casey Newton 称自己是较早定期用 DALL-E 为 newsletter 配图的作者之一,文章开篇图片即由其生成。这项实践被列为去年引发读者共鸣的内容之一,与 Platformer 的内容创新和订阅增长挂钩。
DALL-E
本文未提及Grok,该实体在提供的文章正文中没有出现。
Grok
本文指出五角大楼正审查其虚假社交媒体账号的使用,因Meta已发现并移除这些账号;同时Meta与YouTube、Twitch等平台共同宣布打击仇恨言论的新举措。此外,Meta股价上周再跌14%。
Meta
本文未提及Gemini,该实体在提供的文章正文中没有出现。
Gemini
本文讨论 Google 通过照片扫描系统对用户内容进行监控,报道了一张幼儿照片被错误标记的事件,引发外界对其数据处理方式的质疑。文章指出 Google 的系统在实际使用中可能对普通用户造成不必要的干预。
本文把 Midjourney 视为 Adobe 可能收购的对象,以快速获得顶尖 AI 图像生成能力。作者认为通过收购 Midjourney 并围绕其构建编辑器,能让 Photoshop 在 AI 时代保持竞争力。
Midjourney
文章指出 Imagen 在生成文字方面优于 DALL·E,可避免出现无意义乱码。作者还建议将 Imagen 直接集成到 Google Slides 中,实现通过提示词快速生成演示文稿配图。文中将其视为未来可能尝试的工具,与当前 DALL·E 使用形成对比。
Imagen
文中 Adobe Photoshop 被描述为当前处理 DALL·E 生成图像的主要后期工具,用于去除乱码文字或组合多个生成结果。作者预测若不整合 AI 生成功能,Photoshop 可能被新的 AI 编辑器取代或严重冲击,同时提到 Figma 已蚕食其市场。
Adobe Photoshop
文章以 Figma 为例说明工具变革如何快速侵蚀 Photoshop 的份额,并推测未来 AI 驱动的图像编辑器可能重演类似颠覆。作者认为理想的 AI 编辑器应像 Figma 一样易用,同时支持任意尺寸画布和局部提示修改。
Figma
本文作者使用 DALL-E 2 为 Deephaven 博客 100 多篇文章生成新缩略图,总花费 45 美元。文章详细记录了提示词工程、风格修饰语使用、文本清理等实践经验,并总结出 10 条生成技巧。DALL-E 2 被定位为比传统图库更高效、更有趣的封面解决方案。
DALL-E 2
文中指出即使结合 GPT-3 也难以直接将整篇博客输入 DALL·E 生成理想缩略图,提示当前 AI 图像生成仍需人工创意与反复调优。
GPT-3
作者详细说明提示工程即调整输入以获得理想输出,强调需反复迭代、添加风格修饰词,并分享了从 6-7 次尝试降至 2-3 次的实践经验。
Prompt Engineering
本文展示的是Spotify平台上的一个用户主页页面,标题为“BARILLA on Spotify”,对应URL为open.spotify.com下的用户路径。该页面被归类为User类型,表明Spotify在此作为内容分发平台,承载了BARILLA这一用户账号的公开展示。
Spotify
Google 在文中被提及为类似 Rayday 活动的先行者,其内部 hacking 项目启发了 Raycast 将每周五作为创新时间。文章指出这种做法对产生创新想法至关重要,并已成为 Raycast 文化核心。
文中 Google 被描述为美国电子通信服务提供商,其 Analytics 服务将欧盟网站数据传至美国,且需按美法律向情报机构披露数据,导致多国认定其使用违反 GDPR。
研究团队使用自然语言处理技术,检测到判决文本中出现了新Wikipedia条目的语言特征。这一发现表明法官或其助理在撰写意见时直接参考了Wikipedia内容。
Natural Language Processing
校准过程中 Display Calibrator 会引导用户调整显示器的 native Gamma 值,常见选项包括 2.2、1.8 或保持原生值。Gamma 决定亮度与三刺激值的非线性关系,文章指出多数情况下应选择 Standard 2.2。调整后直接影响最终色彩配置文件的准确性。
Gamma
本文中Spotify是假艺人故事的核心平台,被指出通过自有播放列表和算法大力推动心情音乐消费,同时推出Discovery Mode计划允许厂牌以折扣换取更多推广。文章强调其因规模最大且最透明而备受关注,并分析其控制内容策展以降低版税成本的动机。
Spotify
本文中Google被提及为主动调整算法下调盗版网站排名,并曾在用户搜索海盗湾代理时推荐DuckDuckGo;近期也因ISP屏蔽令对部分盗版域名实施区域性下架,与DuckDuckGo本次全球性移除形成对比。
Lex 是 Nathan Baschez 联合创立的 AI 文字处理器,他目前担任 CEO。本文发布于 Every 平台,作者身份直接关联 Lex 的 AI 产品定位。
Lex
本文标题图片由 DALL-E 2 生成,署名 Chris Lu 提供。文章将 DALL-E 2 与网页设计中“氛围转变”的起源相联系,暗示 AI 工具可能引发类似 2015 年那种突然且决定性的美学变化。
DALL-E 2
Sparkle 是 Every 订阅页面列出的 AI 相关产品,链接为 makeitsparkle.co/every。它与 Monologue、Cora 等共同构成订阅者可获得的工具集合。文中未展开 Sparkle 的细节,仅强调其属于前沿 AI 工具范畴。
Sparkle
Cora 是 Every 订阅服务推广的 AI 工具之一,文中以图标和链接形式展示,指向 cora.computer。该实体被归类为塑造未来的 AI 工具包成员,提供早期访问权限。文章未给出 Cora 的具体功能描述,仅作为订阅权益的一部分提及。
Cora
Spiral 是 Every 付费订阅推广的 AI 写作工具,链接指向 writewithspiral.com。文章将其与 Cora、Sparkle 等并列,作为每日 AI 洞察与工具访问的一部分。未提供 Spiral 的具体使用场景或数据,仅作为产品展示条目出现。
Spiral
本文认为Bing同样不是Google的真正替代,仅是功能逊色的版本。它与其他传统引擎一样依赖外部索引,无法提供Kagi或Neeva式的深度个性化与非商业内容支持。
Bing
YouWrite是You.com平台上的AI写作助手。用户输入主题后,它能生成连贯段落,例如针对“为什么人人应看动漫”生成包含娱乐、教育与语言学习理由的文章。本文指出这类工具可辅助研究,用户先生成初稿再核实论据,而非仅依赖传统搜索结果。
YouWrite
本文将Google定位为当前主导的搜索服务,其他引擎常被视为其较差版本。它采用广告驱动模式,倾向于展示搜索结果页以获取广告收入,而非直接跳转目标页面。文章指出其结果缺乏个性化,且索引依赖大规模用户数据收集。
DuckDuckGo承认搜索问题与Bing数据有关;文章观察到The Pirate Bay、YTMP3.cc等站点在Bing中同样无法找到,暗示DuckDuckGo索引异常可能源于其Bing数据源的同步故障。
Bing
本文核心模型,相比先前版本有显著改进,支持更长文本输入。作者通过仅提供编号自然语言指令,让该模型生成包括最小塞尔达、井字棋、吸血鬼猎人等在内的多个完整游戏与工具的全部HTML/JS代码。
code-davinci
本文在公开构建创始人列表中提及 Copy.ai,由 Paul Yacoubian 在 Twitter 上公开分享其构建过程。该项目作为 AI 相关工具案例,展示了通过透明更新获取反馈与支持的做法。
Copy.ai
本文指出Spotify收购了Gimlet Media这家播客网络公司。这一收购发生在作者离职之后,反映了播客行业从独立网络向大型平台整合的趋势。
Spotify
文章提及Greg Brockman曾用Codex模型进行现场演示,通过自然语言指令生成JavaScript太空射击游戏,为作者探索code-davinci模型的自然语言编程提供了早期范例和灵感。
Greg Brockman
文中提到,Google与Facebook、Craigslist分走了大量广告收入,使传统媒体难以维持。Substack的创办者认为,这促使出版业需要转向读者直接付费的模式。
本文中Spiral作为Every AI订阅工具包的组成部分,在付费墙横幅中展示,链接指向writewithspiral.com。它与Cora、Sparkle等产品并列,服务于“AI先锋每日洞见+早期工具访问”的订阅权益。Spiral在文中仅作为AI写作相关工具被提及,与Substack意识形态讨论无直接联系。
Spiral
本文作者,通过OpenAI API Playground仅用自然语言指令创建了八个演示,包括无限地图游戏、矩阵雨、VR迷宫等。他总结了“先逻辑后UI、编号指令、用函数生成数据”等实践经验,并提供CodePen合集供读者体验。
Andrew Mayne
OpenAI API(code-davinci 模型)是本文核心工具,作者仅提供自然语言指令(如“创建画布并生成地图”),模型即输出完整功能代码,实现零手动编码构建游戏与应用,所有示例均通过 API Playground 生成。
OpenAI API
文章指出Codex是OpenAI先前发布的代码模型,Greg Brockman曾用其通过自然语言现场演示生成JavaScript太空射击游戏。本文作者以此为灵感,进一步用新code-davinci模型探索更复杂应用的纯自然语言构建可能性。
OpenAI Codex
本文提到作者在iTunes之外长期使用Spotify,发现其桌面端导航结合侧边栏与浏览器式返回按钮,能显著降低认知负荷。作者将Spotify的导航体验与Apple Music的Flat Navigation进行对比,指出前者更符合用户习惯。
Spotify
文章报道Google Messages和Dialer应用涉嫌违反GDPR收集用户数据,同时Google正将量子计算部门Sandbox拆分为独立公司。Google回应称将对应用数据收集方式进行修改。
本文提到 MDN 内容从 HTML 迁移到 Markdown 格式,这一转变让贡献者能使用更熟悉的工具编写结构化且一致的文档,提升了内容创作效率。
Markdown
本文中OpenAI发布了code-davinci新代码生成模型,支持4000 tokens输入,作者用其通过自然语言指令构建多个游戏和应用。文章提到OpenAI此前推出的Codex模型及Greg Brockman的演示,强调该模型可将简单指令直接转为完整可运行代码,无需手动编辑。
OpenAI
文章中提到用GPT-3的Davinci模型生成五字母单词列表,用于构建Wordle式游戏的词库。该用法体现GPT-3在辅助生成数据方面的作用,与code-davinci共同服务于纯自然语言开发流程。
GPT-3
本文未提及OpenAI,该实体与文章讨论的ApeCoin、Yuga Labs及web3代币发行无关。
OpenAI
本文中Cora作为Every AI订阅工具包的一部分出现,位于付费墙推广区域,与其他AI产品共同构成“塑造未来的必备工具集”。它通过cora.computer链接提供,强调为用户带来前沿AI洞见与实用工具。Cora与Substack主题无直接关联,仅在Every平台推广AI订阅服务时被列出。
Cora
文章指出谷歌81%收入依赖广告,并援引彭博社观点暗示Web3可能迫使谷歌调整商业模式。同时通过John Mueller的表态,谷歌官方立场是Web3不会杀死SEO。
文中报道Meta遭遇史上最大单日股价崩盘,跌幅达24%,市值蒸发超2000亿美元。这是该公司四年内第二次创下此纪录。此外Meta还与其他平台联合起诉德国相关法律。
Meta
文中Meta因早期cookie隐私问题支付9000万美元和解,同时宣布更新公司价值观并将员工称为metamates。彼得·蒂尔离职董事会后,其政治活动引发外界对公司治理方向的讨论。
Meta
本文用Spotify月活听众数据(2100万)来描述歌手John Legend的流行程度,突出其在音乐圈的影响力,并以此对比音乐NFT项目相对温和的粉丝反应。
Spotify
本文正文及相关板块均未提及OpenAI,未提供任何与该实体相关的信息。
OpenAI
文中指出,美国参议院司法委员会批准法案,要求Google与Apple开放应用商店和支付系统。另有报道称,Alex Hanna从Google离职,加入前同事Timnit Gebru的新机构。
文章通过实验展示Codex(基于GPT-3的LLM)虽经代码微调,仍能完成对话、总结维基页面、生成博客想法和诗歌等非代码任务,证明其通用能力超出预期。
LLM
页面底部相关博文将 LMArena 描述为 AI 领域的负面现象,暗示其评估方式存在问题,与本文提倡严谨人类评估形成对比。
LMArena
本文未对ChatGPT进行讨论或评测,仅在页面底部相关文章列表中出现链接,指向另一篇使用人工评测比较ChatGPT与Google搜索的文章。
ChatGPT
文章指出人们常以“google”代指搜索互联网,但强调存在注重隐私的替代引擎。Google 被暗指为默认却缺乏隐私保护的主流工具。
本文底部相关文章提及 Surge AI 为 OpenAI 构建了 GSM8K 数学问题数据集,体现了 Surge 在高质量数据标注上的能力,与文中强调的人类评估方法一致。
OpenAI
本文作者利用 Surge AI 平台招募高技能评测者完成搜索质量人工评估任务。该平台专注高质量数据标注,曾支持 OpenAI 等项目。作者曾在 YouTube、Twitter、Microsoft 负责搜索测量,现通过 Surge AI 提供搜索评测服务,用于分析 Google 与 Bing 的 SERP 表现。
Surge AI
文章提到 OpenAI 于 2020 年 6 月发布 GPT-3,该模型擅长自然语言理解并具备一定编码能力,参数量达 1750 亿。作者因无法获得 API Key,转而尝试基于其衍生模型的免费工具。
GPT-3
本文指出Google是DTC用户最常使用的外部信息来源。62%的测试用户表示会在购买前通过Google搜索第三方评论和品牌提及,29%的用户甚至在测试中直接离站搜索。用户用它来验证站内信息、查看社交媒体和新闻,以获取更可信的独立反馈,从而克服对DTC评论的强烈怀疑。
本文页面底部推荐文章提及中美人工智能产业在研究网络与合作上紧密交织,尽管存在地缘政治紧张,但双方仍共享文化身份与技术联系。
Artificial Intelligence
推荐内容提到NVIDIA高管同样把中国同行视为合作对象,而非对立面,反映硅谷部分企业对中国科技生态的务实态度。
NVIDIA
本文说明 Codex 是 OpenAI 在 GPT-3 基础上开发的代码专用模型,参数 120 亿、训练数据来自 GitHub 与 Stack Exchange,速度更快且上下文记忆更强。作者用其进行非代码实验,发现其仍保留较好的英语理解与生成能力。
OpenAI Codex
文章指出 OpenAI 发布了 GPT-3 并随后开发 Codex,后者被用于 GitHub Copilot。作者提到 OpenAI 最初的 GPT-3 公测因无 API Key 而未直接使用。
OpenAI
文章列出的相关内容显示 Anthropic 使用 Surge AI 平台训练和评估 Claude,采用人类反馈进行 RLHF,这与本文推崇的人类评估搜索质量的方法相呼应。
Anthropic
本文中 Spotify 指数字音乐服务平台,其网页版提供音乐访问入口。描述显示该服务可让用户接触数百万首歌曲,网址为 open.spotify.com,定位为面向大众的音乐平台。
Spotify
本文相关链接提到 Surge AI 为 OpenAI 构建了包含 8500 道数学问题的 GSM8K 数据集,展示其在教育类 AI 任务上提供高质量标注数据的专长。
GSM8K
文章通过并排对比评估发现,Bing 在部分查询上优于 Google,例如“Natural ways to heal cats who have allergies”提供针对性文章与产品,“what is message blocking on iphone”准确理解意图,“Indianapolis free COVID PCR tests”直接展示地图资源。整体统计上 Google 仍胜出,但 Bing 在理解查询和呈现实用信息方面有时更优。
Bing
本文未涉及Claude,仅在站点导航的相关文章区出现指向Anthropic使用Surge AI训练Claude的外部链接,与本篇Google搜索评测主题无关。
Claude
本文作者将 GitHub Copilot 用于非代码场景,通过提供 Q&A 格式或说话人提示让其用英语对话、回答问题,还能将代码转为伪代码描述、续写诗歌、生成博客想法以及完成数列。实验显示其在理解英语语气和格式上存在差异,且能基于有限上下文生成合理输出。
GitHub Copilot
Logseq被描述为基于本地纯文本Markdown和Org-mode文件的开源大纲工具。文章强调这一格式让用户能轻松组织、分享想法并构建数字花园,同时保持数据本地控制。Markdown支持被视为Logseq在PKM领域受欢迎的关键特性之一。
Markdown
Spotify 是本文提供的播客平台,用于收听 Not Boring 文章的音频版本。文章开头直接给出 Spotify 链接,方便读者以听觉方式获取内容。
Spotify
文章演示通过特定提示格式(如“Pseudo code:”、Q&A结构、Human/AI对话标签、大小写变化)引导Copilot输出,体现了提示设计对模型行为的关键影响,并推荐了相关Prompt Management文章。
Prompt Management
文章中Google通过Android官方推特账号及高管公开批评iMessage利用蓝色气泡制造同侪压力,称其锁定策略不正当,并推动行业采用RCS标准以改善跨平台短信体验。但文中指出Google自身过去15年间推出13款消息应用却反复放弃,缺乏长期策略,导致Android消息生态碎片化。
文章讨论GPT-3在人工智能领域引发的轰动,指出尽管其表现突出,但固有缺陷使其难以在短期内对就业市场或AGI目标产生决定性影响。
Artificial Intelligence
本文作者Andrey Kurenkov在上一篇社论中讨论了GPT-3的重大影响,本文则聚焦其局限性,解释为何GPT-3不会导致大量失业或迅速实现AGI。
Andrey Kurenkov
测试显示 Figma 在绘制阴影时会占满 GPU,其它工具如 Sketch、Affinity Designer 则几乎不使用 GPU。XD、Illustrator 和 Photoshop 在画布严重卡顿时,GPU 仍有大量空闲。文章认为理想的设计工具应让 GPU 接近满载,以发挥其图形渲染优势。
GPU
文中认为GPT-3的发布让许多人误以为AGI即将到来,但作者明确表示当前版本GPT-3距离实现AGI还有本质差距,不会很快达成这一目标。
AGI
本文发布于Last Week in AI平台,属于该站的社论栏目,作者通过此文澄清GPT-3的真实能力边界,以反驳外界对其就业和AGI影响的过度担忧。
Last Week in AI
本文指出GPT-3虽引发AI界广泛关注,但其固有局限使其无法大规模取代人类工作,也不会快速通向AGI。作者强调早期炒作夸大了其实际能力,文章核心在于剖析这些限制而非展示其优势。
GPT-3
文中引用Skynet Today在GPT-3发布时的报道,指出当时已有分析认为外界炒作远超实际效果,支持本文对GPT-3局限性的论述。
Skynet Today
文中提到GitHub Copilot代表AI融入软件开发的未来趋势,与Codespaces共同定义下一代开发方式。它作为平台创新成果,体现了GitHub在AI辅助编程领域的探索与布局。
GitHub Copilot
本文中 Markdown 被多个工具用作内容编写格式。Hugo 支持 Markdown 及其短代码功能,用于快速构建博客与文档;Blot、Typehut 和 Svbtle 均允许用户直接拖入或编写 Markdown 文件来发布文章。文章强调 Markdown 让内容创建过程简洁、无需复杂操作,适合追求轻量与快速发布的个人网站或博客场景。
Markdown
Copilot在本页底部以独立链接呈现,作为微软AI产品入口,与Xbox内容并列展示,反映微软在游戏网站中推广其AI工具的策略。
Microsoft Copilot
本文末尾将生成式AI与Duolingo的自生成内容模式联系起来,认为GPT-N等生成式机器学习最终会解锁全新产品类别。作者推测这类技术能提供个性化与一致质量的内容,从而取代部分人工市场,并视Duolingo为该类别的早期开拓者。文章强调此愿景建立在Duolingo当前端到端内容生产与数据驱动优化的基础上,而非泛泛讨论AI技术本身。
Generative AI
文章报道Facebook计划将公司更名为Meta,以标志其业务重心转向元宇宙。更新内容确认这一更名已实施,Zuckerberg借此将公司定位为超越社交网络的虚拟世界构建者。该名称呼应“meta”前缀的超越含义,体现对现实世界的替代与掌控野心。
Meta
本文由 Google 官方支持页面发布,说明 Gallery 产品下线时间表,并提供 gallery-support@google.com 作为用户咨询渠道,所有数据导出与删除操作均由 Google 执行。
本文指出Spotify作为西方主流播客平台,缺乏让创作者直接与听众互动和变现的工具,创作者需依赖Patreon等外部服务。文章提到其2019年收购Anchor后推出付费订阅计划,但整体创新不足,主导地位使其无需改进用户体验。Spotify在中国被屏蔽,无法进入本地市场。
Spotify
文中谷歌被描述为计划构建跨平台游戏生态,包括将Android和Stadia游戏扩展至Mac和Windows,目标打造全球最大消费级游戏平台。Epic曾试图用《堡垒之夜》换取Google Play免费通道,谷歌Latitude也曾被苹果视为威胁。
本文将谷歌翻译描述为基于统计机器翻译的在线服务,目前覆盖约80种语言。它依靠海量平行文本训练,用户可提交改进建议以优化结果。作者指出其在科技文本上表现较好,但在文化或口语化内容上仍存在明显局限。
谷歌翻译
文章以Google的Product Sans为例,说明科技公司再设计时常采用全新几何字体,而非基于历史字体的做法。Chirp基于Franklin Gothic的复古风格与此形成对比,可能打破用户对屏幕字体的预期。