Circuit Breaker Labs用仿真用户开展AI安全红队测试
Circuit Breaker Labs以模拟不同年龄、背景、语言和文化用户的AI代理,对模型进行红队测试,排查危险及心理伤害互动。其专有评分方法可生成可审计、可解释的分数,每日运行数万至数十万次模拟交互。该初创公司目前聚焦AI教练、日记和心理健康支持等高风险应用,团队仅有5人。
Circuit Breaker Labs以模拟不同年龄、背景、语言和文化用户的AI代理,对模型进行红队测试,排查危险及心理伤害互动。其专有评分方法可生成可审计、可解释的分数,每日运行数万至数十万次模拟交互。该初创公司目前聚焦AI教练、日记和心理健康支持等高风险应用,团队仅有5人。
OpenAI硬件负责人Richard Ho介绍,团队借助Codex等内部模型和AI辅助工程流程,将Jalapeño ASIC从初始RTL推进至流片仅用九个月。AI还参与了内核编写与优化,但签核阶段仍使用Synopsys、Cadence等工具的静态时序与信号完整性分析。报道同时提到,B0版本每瓦性能据称较A0提升最高25%,但Richard Ho强调九个月并非所有芯片都能达到的固定周期。