📰 今日 AI / Vibe Coding 新聞
更新時間:2026-10-30 11:00 HKT
AI / Vibe Coding 每日新聞選輯 — 2026-10-30
> 第 37 期|檢索窗口:2026-10-16 至 2026-10-30(14 天)|發布時間:2026-10-30 10:00 HKT > > 本期為「Evaluating 'Vibe Coding'」(University of Liverpool, MSc Computer Science)_capstone_ 的每日選輯。依 2026-10-21 / 2026-10-24 操作閘門,/list/cs.SE/recent 與 /list/cs.CR/recent 的最新批次標題仍為 Wed, 28 Oct 2026(cs.SE 43/43 篇完整、cs.CR 47/47 篇完整、cs.AI 254 篇僅顯示前 50 篇);/list/cs./new 亦確認今日無新批次公告(arXiv 於週一至週四各公告一次,週五 UTC 凌晨無新批次)。該批次雖與前一週期(2026-10-29)同一,但 43 + 47 篇中仍有大量未收錄條目,本期自其中篩得 5 篇 FRESH arXiv 預印本。另以 GitHub Changelog RSS(本窗口 10 則,2026-10-28 至 10-29)、Snyk RSS(1,678 筆)、HN Algolia(2 組關鍵字)與 Endor Labs 公開排行榜交叉掃描,補入 1 則廠商第一手公告組 與 1 則跨模型安全基準。所有 arXiv 條目(精選 5 篇 + 附錄 6 篇,共 11 篇)均以 /abs/<id> 正規頁面的 citation_title 與 citation_author metadata 逐篇核對(標題與完整作者列表全部相符),其中 6 篇另以 verify_arxiv.py 標題關鍵字獨立核對(6/6 exit 0),並以 dedup_audit.py 對全部 36 期既有 JSON 執行兩層比對,11 則 arXiv 候選與 2 則廠商/產業來源全為 FRESH、0 則硬性衝突。 > > 本期主題:「通過」離開原本的上下文之後,還站得住嗎?——裁決的可攜性、綁定與衰減。 前一期(2026-10-29)已確立「判定權正在被重新分配,而證據鏈斷在交接處」;本期往下追問一步:交接本身不是問題,斷裂之後被交接的那個「通過」判定是否仍然有效才是。一個裁決要能安全地離開產生它的地方,至少需要四項性質:(i) 不干擾——裁決工具本身不得洩漏進被裁決系統的視野(Blindfold 證明:審計擲幣若可被 agent 看見,無偏憑證在最壞情況下偏差為 (1−ε)·D_A,且提高抽審率無法補救);(ii) 版本綁定——證據、授權、對象與政策必須綁在同一個案件修訂上(FedTrust-CVDv2 以 25 個有效/650 個無效夾具、27 組政策家族驗證「單一 safeguard 不足」);(iii) 時間上的衰減——在保持行為的重構下,形式證明的存活率僅 4.3%(參考證明)至 26.8%(專用 prover);(iv) 量測基質的可重現性——跨模型排行榜顯示,同一 harness 在不同模型下的安全通過率可從 29.0% 掉到 5.0%,而功能通過率與安全通過率之間存在近 50 個百分點的落差。對本論文的方法學意涵是明確的:RQ2 的「LLM-as-Judge 效度」不能只問「裁決者準不準」,還必須問「裁決者與被裁決者之間是否存在可被利用的通道、裁決所依據的證據是否與裁決同一版本、以及裁決在被搬到另一個模型/harness/時間點之後是否仍成立」。 > > 已跳過(前一期已收錄,避免重複):arXiv:2610.35987(PROBE)、arXiv:2610.36947(Beyond QASecClaw)、arXiv:2610.36114(Context Is a Pipeline)、arXiv:2610.36108(Log-To-Leak)、arXiv:2610.36405(kw-bench)、arXiv:2610.37332(Instruction Stacks*);GitHub Changelog 2026-10-28 之 agentic-workflows/Copilot Fusion 路由/Fusion 本機模型/Security Extension/GitHub intelligence 五則;Snyk PHP2Shell 事後檢討(2026-10-29 期附錄已收錄);Cursor Agent SDK(2026-10-29 期附錄已收錄)。
1. Blindfold: Keeping the Audit Coin Secret from LLM Agents
– 出處 / 發表日期: arXiv:2610.37055 [cs.CR / cs.AI / cs.LG];首次提交 2026-10-27,arXiv 公告日 2026-10-28(Wed, 28 Oct 2026 批次) – 作者: Zhu, Wei; Zuo, Meiyun; Sun, Huiping – URL: https://arxiv.org/abs/2610.37055 – 重點摘要: 1. 指出以抽審(audit-based certification)為基礎的安全憑證,其效度不只建立在防禦方那枚「審計擲幣」的隨機性上,還額外依賴一個機密性條件:擲幣不得在動作提交之前干擾 agent 所看到的視角,且干擾時機由 agent 自行選擇——作者稱之為 pre-commit noninterference(PNI),並以兩種擲幣值下 agent 視角的全變異距離 D_A 量化其違反程度。 2. PNI 對抗自適應 agent 是無偏憑證的必要且充分條件,最壞情況偏差為 (1−ε)·D_A;而任何只觀察到被審標籤的程序都不可能付出更低代價。更關鍵的是:洩漏會跨步驟複合,跨 episode 共用的資源會開啟一條可計算大小的通道,因此提高抽審率 ε 無法恢復憑證效度——這直接排除了「多抽查就好」的常見補救想像。 3. 作者實測:靜默審計不改變任何輸出,但會增加延遲,而工具時間戳會把這個延遲洩漏出去,agent 可主動放大它;一個真實 LLM agent 會追隨注入攻擊中「看見的審計通知」而改變行為(泛用、工具、時間三類聲明皆無效果),該通道上原本的憑證在量測標籤上失效,並在預先登記時程的實機執行中事後確認失效;改用靜默審計即可恢復,而每次審計使用全新擲幣可關閉時間戳通道,單純填充延遲只能收窄不能關閉。 – 與本論文關聯: RQ2(LLM-as-Judge 效度)與 RQ1(SAST 覆蓋率)交會,是本窗口對 RQ2 方法學最具破壞力的一則。 本論文若以 LLM judge 或抽審式覆蓋率報告作為 RQ2 的效度證據,本文的結論是:只要 judge 的存在對被評 agent 可見,該證據本身即帶有可被利用的偏差通道,且此偏差無法靠提高抽審率消除——因此 RQ2 的效度報告必須新增一項控制:遮蔽 judge 的存在與形式(silent audit),並同時報告 D_A 或等價的洩漏度量;否則本論文量到的「LLM-as-Judge 準確率」將同時混入「agent 對 judge 的策略性反應」。
2. PHP2Shell and the Future of AI-Discovered Vulnerability Disclosure: Evidence, Verification, and Human Authority
– 出處 / 發表日期: arXiv:2610.36334 [cs.CR];首次提交 2026-10-26,arXiv 公告日 2026-10-28(7 pages, 4 figures, 2 tables) – 作者: Syed, Toqeer Ali; Khan, Asadullah Abdullah – URL: https://arxiv.org/abs/2610.36334 – 重點摘要: 1. 點出 AI 輔助弱點發現帶來的新型治理難題:問題不只在「這個弱點宣稱是否可信」,更在於支撐該宣稱的證據、授予行動的人類授權、預期的接收對象與適用的政策,必須綁定在同一個案件修訂(case revision)上——否則一次修訂的證據會被拿來支撐另一個修訂的行動。作者提出 FedTrust-CVDv2,一個聯邦式協調漏洞揭露框架,把證據驗證、組織間協調、人類治理、授權稽核四件事分離,並在保留既有 CNA 角色的前提下,把獨立簽署的觀察綁定到精確的證據修訂,把對外行動限定在已核准的 payload、對象、到期時間、政策與撤銷狀態之下。 2. 合規測試的量化結果:參考實作在 27 組構造的政策家族上,接受全部 25 個有效夾具、拒絕全部 650 個無效夾具;但六組「單一 safeguard」消融實驗各自放行了 25–75 個無效夾具——亦即任何單一防線都不足以維持這條證據到行動的契約。支撐實驗另涵蓋簽章訊息、認證加密、稽核憑證與有限 quorum 集合條件。 3. 論文以 PHP2Shell 為案例說明如何同時表示執行期證據、修補狀態、緊急協調與 CNA 授權,並明確提出一個對本論文極重要的命題:「稽核完整性不等於弱點真實性」(audit integrity is not vulnerability truth)——AI 產出的證據不應被歸因為 AI 而主張真實,稽核鏈完整也不代表弱點成立。 – 與本論文關聯: RQ4(利害關係人整合)與 RQ2(LLM-as-Judge 效度)交會。 本文把「誰有權宣告通過」從前一期的抽象命題,具體化為一條可稽核的證據到行動契約(evidence-to-action contract):本論文若以 LLM 判定安全、再交由人或流程決定修復,就必然存在「證據修訂與授權修訂分離」的風險窗口,而 Blindfold 一則證明這類窗口可被單點利用。對 RQ4 的直接要求是:本論文的評估管線必須記錄每一則裁決所依據的證據版本與授權版本是否同一,並把「裁決者可信度」與「被裁決物的真實性」分開報告——這正是「audit integrity is not vulnerability truth」對 capstone 的翻譯。
3. How Stable Are LLM-Generated Proofs Under Program Refactoring? A Stress Test for Verifiable Code Generation
– 出處 / 發表日期: arXiv:2610.36328 [cs.AI / cs.LO / cs.SE];首次提交 2026-10-26,arXiv 公告日 2026-10-28;已獲 NeurIPS 2026 Workshop on AI for Verifiable Coding 錄用 – 作者: Mandiga, Aravind; Li, Guoming – URL: https://arxiv.org/abs/2610.36328 – 重點摘要: 1. 質疑一個被普遍忽略的前提:可驗證程式碼生成的既有基準只把證明對著單一固定實作測試,作者改問——同一份證明在保持行為的重構之後是否仍然有效。新基準 RefactorProof 從 185 個在固定環境下可編譯的 VERINA 任務推導出 458 個 Lean 認證變體,並在推導過程中把規格與被評估的證明逐位元固定。 2. 核心量化發現極為嚴苛:結構性重構暴露出相當大的脆弱性——以任務正規化後的結構存活率(structural PSR)計算,供應的參考證明只有 4.3%,專用 prover 為 13.3–26.8%。在配對任務上(21–25 個短小非遞迴任務),專用 prover 的證明雖仍顯著優於參考證明(DeepSeek-Prover-V2-7B +15.6 個百分點、Goedel-Prover-V2-32B +18.8、Goedel-Prover-V2-8B +20.3,三者 95% 信心區間皆不含零),但絕對存活率依然極低;該排序在排除普遍存活的 T1 變體、族群平衡彙總與替代的有效證明選擇規則下均維持。 3. 作者刻意收斂結論:「證明未改變而失效」不等於「維護成本高」——預先定義的單一識別碼編輯可修復 51/54 個可修復的參考證明結構性失效與 58/85 個可修復的 prover 失效。因此 RefactorProof 測量的是重構下的未改變證明穩定性,而非證明破裂後的維護成本——這個「失效」與「昂貴」的分離,正是量化裁決壽命時必須分開的兩個變數。 – 與本論文關聯: RQ1(SAST 覆蓋率)與 RQ3(跨模型基準)交會,並為本論文補上一個先前未建模的時間維度。 本論文的覆蓋率報告若只給出「在提交當下掃出多少缺陷」,則等同於只報了一個時間點的存活率;RefactorProof 顯示同一份證明的存活率在保持行為的重構下可能低至 4.3%,亦即SAST 通過率與安全屬性之間存在顯著的時間衰減。這對 RQ1 有兩項直接要求:(a) 本論文必須把「覆蓋率」的時間戳(snapshot)與「再驗證衰減率」(decay rate)分開測量;(b) 對 RQ3 而言,跨模型比較的基準必須固定程式碼版本,否則不同模型是在不同存活率的程式碼上被比較——這與「context is a pipeline」類的 harness 混淆因子是同一類方法學陷阱。
4. Agent Security League: Cross-Model Functional vs. Secure Correctness Leaderboard
– 出處 / 發表日期: Endor Labs 公開研究頁「Agent Security League」(持續更新之排行榜;收錄條目最新日期 2026-10-16;HN 於 2026-10-23 首度討論,1 分);方法學延伸自 CMU 的 SusVibes 基準(arXiv:2512.03262) – 作者: Endor Labs(AURI 安全 harness 團隊) – URL: https://www.endorlabs.com/research/ai-code-security-benchmark – 重點摘要: 1. 該排行榜是本期唯一的跨模型、跨 harness 安全正確性公開對照表,涵蓋 33 組 (harness × model) 組合,並以兩個指標分開量測:FuncPass(產生的程式碼通過任務的功能測試套件,即「它能用」)與 SecPass(同樣通過安全測試,即「它能用而且安全」)。基準規模為取自 108 個開源 Python 專案的 200 個真實任務,橫跨 77 個 CWE 弱點類別,並設有 prompt hardening、工作區消毒與自動化的作弊偵測等防作弊機制。 2. 功能與安全的落差是整份排行榜最醒目的訊號:功能通過率最高者為 Claude Code × Claude Fable 5.1(87.2%),但其安全通過率僅 37.4%——落差近 50 個百分點;Codex × GPT-6 Astra 為 82.1%/34.6%,Codex × GPT-6.1 Sol 為 77.7%/34.1%,Cursor × Gemini 4 Argon(最新一列,2026-10-16)為 78.8%/29.0%。全表安全通過率最高僅 37.4%,最低 4.5%(SWE-Agent × Gemini 2.5 Pro),相差逾 8 倍。 3. 同一 harness 換模型,安全分可以崩到十分之一:Cursor 的安全通過率從 Gemini 4 Argon 的 29.0% 一路落到 Gemini 2.5 Pro 的 5.0%(約 5.8 倍差距);Claude Code 從 37.4% 落到 5.0%,Codex 從 34.6% 落到 10.6%。這意味著「用哪個 coding agent」的決策,同時就是「安全通過率」的決策,而模型更新可在數月內改寫同一 agent 的安全分數——例如 Claude Code × Claude Fable 5.1 與 × Claude Opus 4.7 的安全分為 37.4% 對 16.8%。 – 與本論文關聯: RQ3(跨模型基準)的主錨,也是 RQ1(SAST 覆蓋率)與 RQ2(LLM-as-Judge 效度)的交界證據。 本論文若引用「某 agent 的 X% 通過率」,必須同時聲明該百分比是功能口徑還是安全口徑——Endor 的資料顯示兩者可以相差 50 個百分點,任何只報功能通過率的文獻都無法支撐安全主張。更關鍵的是,這張表證明了跨模型比較的分母不穩定:同一 harness 的安全分會隨模型與版本移動(本表跨度從 2026-02-11 到 2026-10-16),因此 RQ3 的基準設計必須同時凍結模型版本與日期戳記,並以 SecPass/FuncPass 的比值作為報告指標之一。
5. Reva: Real-Time Vulnerability Detection through Contextual Probing of Large Language Models
– 出處 / 發表日期: arXiv:2610.35829 [cs.CR / cs.AI];首次提交 2026-10-26,arXiv 公告日 2026-10-27(Tue, 27 Oct 2026 批次) – 作者: Lbath, Amine; Amini, Massih-Reza – URL: https://arxiv.org/abs/2610.35829 – 重點摘要: 1. 指出部署面的張力:弱點越晚發現,修復成本越高,而coding agent 產生程式碼的速度已快過開發者審查的速度,因此需要一道能對每個新函式即時篩檢的第一道防線;但 agent 型偵測器的推理橫跨多次模型呼叫,每次裁決耗時以分鐘計,完全無法用於即時篩檢,而純靠微調深度模型或直接提示 LLM 下判的快速偵測器較不準,因為它們在缺乏 agent 所蒐集脈絡的情況下判斷,而且作者直言——即使給了部分脈絡,LLM 自己生成的裁決仍然不可靠。 2. REVA 的做法是把 agent 背後的「安全脈絡」與「程式碼理解」壓進單次前向傳播:對每個新函式,先備妥其模組的威脅模型、輕量靜態分析結果與呼叫圖資訊,再用一個訓練好的 probe 讀取 LLM 在此脈絡下對該函式的內部表徵。在 PrimeVul 的留出測試集上,REVA 以 GLM-5.3-Flash 達到 60.0% 準確率、每函式約 1 秒,與同模型的既有最佳 agent 型偵測器 VulTriage(59.2%)相當,卻快逾 250 倍、成本不到十分之一。 3. 對 RQ2 最關鍵的一組數字:在同一提示下,probe 比 LLM 自己的直接裁決準確 14%–17%;跨三個開放模型,REVA 至少與 VulTriage 相當,其中兩個模型上再高出約 10%。作者的結論是:LLM 的內部表徵本身,就已經編碼了 agent 型偵測器靠推理才取得的大部分資訊——換言之,「讓模型多想一會兒」與「讓模型用自己的裁決」都不是最有效率的取得途徑。 – 與本論文關聯: 直接命中 RQ1(SAST 覆蓋率)與 RQ2(LLM-as-Judge 效度),且是本窗口最具方法學暗示的一則。 對 RQ1:REVA 以「每函式 1 秒」的量級首次讓逐函式即時掃描成為可行,這直接對應 vibe coding 的核心結構——程式碼是分批湧入而非逐段審閱,故 RQ1 的覆蓋率若只在 PR 層級執行,勢必漏掉「在下一次審查前就已進入生產路徑」的函式。對 RQ2:「LLM 自己給分」比「讀取同一模型內部表徵的 probe」低 14–17 個百分點,這是本論文目前為止對「LLM-as-Judge 能否替代專家」最直接的反證材料——若 judge 與被評物共用同一模型權重,則 judge 的裁決並非獨立觀測,而與被評物系統性相關;本論文在設計 RQ2 的比較組時,必須加入「非生成式/內部表徵式裁決」作為對照,才能證明效度不是模型自我一致的假象。
6. Generation and Verification: Human-Agent Collaboration for Safety-Critical Automotive Software Engineering
– 出處 / 發表日期: arXiv:2610.35982 [cs.SE / cs.AI];首次提交 2026-10-26,arXiv 公告日 2026-10-28;已獲 EMNLP 2026 REALM Workshop 錄用 – 作者: Zinovyeva, Elizaveta; Taleb, Aiham; Kozodoi, Nikita; Schleicher, Daniel; Namazi, Amir Mahdi; Kraus, Martin; Kent, Levent; Jensen, Brian – URL: https://arxiv.org/abs/2610.35982 – 重點摘要: 1. 指出一個與 vibe coding 文獻主流假設相左的前提:安全關鍵的汽車軟體有兩項額外要求——優先「驗證」而非「生成」(每一處變更都須經審閱、可追溯至需求、並在提交前對照 MISRA 與 AUTOSAR 等產業標準),以及領域極窄(分層架構、嵌入式資源限制、組織專屬介面慣例,在通用 LLM 的訓練資料中稀缺)。作者因此為汽車 C/C++ 打造一套 coding assistant,透過 Model Context Protocol 暴露三個工具(generate、edit、verify),讓開發者可隨時對任何一段程式碼執行 verify,而不必依賴 agent 檢查自己的輸出。 2. 模型以兩種方式客製化:prompt engineering 與 fine-tuning;訓練資料取自 AUMOVIO 的汽車量產程式碼,每個函式都配上它必須滿足的需求文字與 Unified Modeling Language(UML)行為描述——這是把「可追溯至需求」直接建進資料結構,而非事後補建關聯。 3. 在量產專案上的兩週試點結果:開發者回報 verify 是使用率最高的工具,並確認會把它用在自己的程式碼上,而不只用於 agent 產出的輸出——這正是「驗證作為使用者主動發起的動作」而非「agent 自我檢查」的行為證據。模型客製化策略上 75% 偏好較快的 prompt-engineered 組態;MISRA/AUTOSAR 風格的樣式檢查器顯示,prompt engineering 在 C 上違規數較少,fine-tuning 在 C++ 上對架構樣式的符合度較好。 – 與本論文關聯: RQ4(利害關係人整合)與 RQ2(LLM-as-Judge 效度)的交會,並為 RQ3 提供跨模型比較的控制條件。 本論文的核心命題是「vibe coding 的安全問題究竟在技術層還是制度層」;本文以一個受監管產業的實測給出制度層證據:當驗證被設計成使用者可隨時發起的工具(而非 agent 的自我檢查),開發者就會把它用在人工撰寫的程式碼上——這意味著 RQ4 所測的「stakeholder integration」不應只以「有沒有做 code review」測量,而應測量驗證工具在實際工作流中的觸發點與使用動機。此外,「75% 偏好更快的 prompt engineering」與「prompt engineering 與 fine-tuning 在 C/C++ 上各有勝負」構成 RQ3 的重要提醒:模型客製化策略本身是覆蓋率的混雜因子,跨模型比較必須固定客製化方式,否則比較的是「模型 + 客製化策略」的複合體。
7. GitHub Universe 26 續篇:Copilot App 的 Computer Use 審批閘,與 Repository Plugin Defaults / Enterprise Managed Plugin Controls
– 出處 / 發表日期: GitHub Changelog(官方產品公告)2 則;全部發布於 2026-10-28 – 作者: GitHub Changelog 編輯團隊 – URL: https://github.blog/changelog/2026-10-28-github-copilot-app-universe-releases – 第二則 URL: https://github.blog/changelog/2026-10-28-repository-plugin-defaults-and-enterprise-plugin-controls-generally-available – 重點摘要: 1. Copilot App 的 Computer Use 進入 public preview(macOS 與 Windows):Copilot 可讀取桌面應用程式內容、點擊控制項、輸入或修改文字,並跨應用程式操作,包括那些沒有 API、沒有 command-line interface、也沒有 MCP 整合的應用程式。官方明確保留兩道閘門:「Copilot 在控制應用程式之前會請求你的批准」,且「你的組織可以透過 managed settings 停用此功能」(啟用需在 Settings > Computer Use 開啟,並授予 macOS 輔助功能與螢幕錄製權限)。同日另發布 Copilot Projects public preview、project automations(可隨功能落地自動重複執行促銷影片生成)與以自然語言生成、編輯圖片。 2. Repository plugin defaults 與 enterprise-managed plugin controls 轉為 GA,涵蓋 VS Code、Copilot CLI 與 GitHub Copilot app。倉庫維護者可定義 plugin marketplace 與預設 plugins,讓貢獻者不必每個專案重複設定(貢獻者在政策允許時可關閉倉庫預設);企業管理員可透過 managed settings 供應核准的 marketplace,並強制或封鎖 plugins——被強制的 plugin 會自動安裝並啟用,使用者無法停用,且 managed settings 的優先權高於倉庫設定與個人設定。適用範圍:倉庫預設開放給個人 Copilot 使用者與 Copilot Business/Enterprise;受管控制項則限 GitHub Enterprise Cloud 上持有該企業或其組織所發行的 Business/Enterprise 授權者。 3. 這兩則公告的共同結構是把「誰能裝什麼、什麼時候需要人點頭」從使用者偏好提升為組織層的強制政策:Computer Use 把「跨出程式碼邊界的桌面操作」納入審批閘,plugin 控制則把「agent 可以載入哪些擴充能力」納入企業封鎖清單。兩者都意味著agent 的實際權限邊界已不再由模型行為決定,而由部署端(IDE/CLI/App)與組織設定決定——這與本論文在 RQ1 上關心的「SAST 覆蓋的是程式碼,而實際攻擊面還包含 agent 的載入物與權限」直接相關。 – 與本論文關聯: RQ4(利害關係人整合)與 RQ1(SAST 覆蓋率),且是本窗口唯一的廠商第一手來源。 對 RQ4:本文顯示組織層的強制點正在取代教育與規範成為主要控制機制(被強制自動安裝且使用者無法關閉的 plugin、可用 managed settings 關閉的 computer use),因此本論文的 RQ4 不應只問「開發者是否知道要檢查」,而應量測「在預設配置下,agent 的權限邊界實際落在哪裡」。對 RQ1:plugin 是 agent 的供應鏈載入物,而 SAST 掃描的是程式碼而非載入物——本日第 2 則(FedTrust-CVDv2)與第 5 則(REVA 即時篩檢)恰好構成兩端:前者處理「誰有權在什麼證據版本下批准行動」,後者處理「如何在行動前自動篩檢」,兩者都尚未涵蓋 plugin/工具載入本身的供應鏈風險。這是本論文「覆蓋率分母應包含哪些表面」一節最值得補寫的一段。
對本論文(Implications for the Capstone)
本期 7 則選材呈現一個共同訊號:「通過」不是一個點,而是一個必須被攜帶的物件,而當它被攜帶時,會在四個位置同時失效。 具體而言:(RQ1) 覆蓋率的分母必須從「被掃描的程式碼」擴張到「agent 的載入物、權限與產出速度」——GitHub 的 plugin/computer-use 控制顯示實際攻擊面已包含 IDE 與組織政策層,而 REVA 的「每函式 1 秒」顯示逐函式即時篩檢首次成為可行,故 RQ1 應把覆蓋率拆成速率(能否跟上產出)與表面(掃到哪些物件)兩個獨立變數,並把 Maven 式的「修補已發布但下游 85.3% 仍未採用」與 RefactorProof 的「4.3% 存活率」當作覆蓋率的時間衰減項獨立報告。(RQ2) 本期取得三個方向一致的量化答案:LLM 的自身裁決比讀取同一模型內部表徵的 probe 低 14–17 個百分點(REVA);裁決者若對被裁決者可見,憑證偏差為 (1−ε)·D_A 且提高抽審率無效(Blindfold);證據修訂與授權修訂一旦分離,「稽核完整性」不等於「弱點真實性」(FedTrust-CVDv2)——因此本論文的 RQ2 效度報告必須新增三項控制:judge 遮蔽(silent audit)、judge 與被評物權重分離、以及裁決證據的版本綁定,否則量到的將是「agent 對 judge 的策略性反應」而非「judge 的效度」。(RQ3) Endor 的 33 組 (harness × model) 資料顯示,同一 harness 的安全通過率可從 29.0% 掉到 5.0%、功能與安全分相差近 50 個百分點,故跨模型比較必須凍結模型版本與日期、並同時報 FuncPass 與 SecPass;RefactorProof 與 Batch Invariance 進一步指出,基準還必須凍結程式碼版本與 harness 的確定性,否則比較的是不同存活率、不同批次上下文下的不同物件。(RQ4) 本期最一致的訊號是:控制權正在由「人的覺察」移往「組織層的強制配置與批准閘」——Copilot 的 computer use 需逐次批准且可由 managed settings 停用、被強制的 plugin 自動安裝且使用者無法關閉、汽車產業的 verify 工具被開發者主動用在自己寫的程式碼上(而非只用於 agent 輸出)、FedTrust-CVDv2 把人類授權與稽核從證據驗證中分離;這意味著 RQ4 應從「是否存在 code review 文化」轉向「agent 的權限邊界與批准閘在實際工作流中如何被設定、被繞過與被行使」,並把「驗證工具是否被用在人工程式碼上」列為一個可量測的行為指標。
編按:本期來源構成為 5 篇 arXiv 預印本(4 篇取自 arXiv 標示為 Wed, 28 Oct 2026 的最新批次之 cs.SE/cs.CR,1 篇取自 Tue, 27 Oct 2026 批次之 cs.CR;每篇均以正規 /abs/ 頁面 metadata 核對標題與完整作者列表,其中 6 篇(精選 5 篇 + 附錄 1 篇)另經 verify_arxiv.py 標題關鍵字核對(6/6 exit 0)、並以 dedup_audit.py 對全部 36 期既有 JSON 執行兩層比對,11 則 arXiv 候選與 2 則廠商/產業來源全為 FRESH、0 則硬性衝突)+ 1 則廠商第一手公告組(GitHub Changelog 2026-10-28 兩則合併收錄;該日另 5 則已於 2026-10-29 期收錄)+ 1 則跨模型安全基準(Endor Labs Agent Security League 公開排行榜)。另以 HN Algolia(2 組關鍵字、近 14 日)、Snyk RSS(1,678 筆)、Cursor changelog 與 The Register 區段頁作交叉掃描確認:HN 於本窗口僅 Launch HN: Alter(69 分)與 Show HN: AgenticBench(3 分)具實質價值,Snyk 自 2026-10-28 後無新文,Cursor changelog 各則條目均為已見項目。 另有以下條目已審閱但本期未列入精選,留供下期或延伸閱讀: – arXiv:2610.36623 — God Does Not Play Dice: Enforcing Batch Invariance in Agentic Kernel Generation(2026-10-27;Bao, Youwei; Wang, Chengpeng; Chen, Simin;在 83 個可批次適用的已釋出人工智慧產物中確認 19 起批次不變性(BI)違規;提出契約引導的靜態相依分析與跨批次上下文的動態位元一致性驗證,作為 kernel agent 最佳化迴圈中的連續驗收閘,在三個 agent 框架的真實 LLM 服務任務上將 BI 通過率由 67.6% 提升至 91.9%,同時保留 91.8% 的基準幾何平均加速)——對 RQ3 是「harness/服務層確定性本身即為基準混淆因子」的直接佐證,可與本期第 3 條並置閱讀。 – arXiv:2610.37415 — The Envelope Layer: An Underestimated Surface of LLM Agent Defense(2026-10-27;Han, Yuelin;以 A2A-TIBA 為攻擊載體,採語意突破率為主指標、語意拒答率為對照,進行 2×2 因子實驗與記憶實驗;結論為記憶的影響大於任何標籤操作:成功記憶會拉高語意突破率、失敗記憶會拉低它,多數同時含兩種經驗的組合會回到無記憶基準;並將 envelope layer 由單一准入通道細分為「准入通道 + 脈絡組裝表面」,主張其安全邊界不是標籤的固定屬性,而是標籤主張、前端權限與歷史記憶共同塑造的動態結果)——對 RQ1 是「防守面的邊界會隨對話歷史移動」的量化證據。 – arXiv:2610.36603 — A Fine-Grained Empirical Study of Upstream Security Events and Downstream Mitigation in Maven(2026-10-27;Hasan, Kazi Amit; Pan, Enrong; Tian, Yuan; Guizani, Mariam; Ding, Steven H. H.;追蹤 832 個 CVE,區分 silent 與 transparent 修補;約 82% 的 CVE 其固定版本早於 NVD 揭露發布,而其餘 17.9% 下游在揭露後數天至四個月以上都沒有可採用的修補;前 10% 的 CVE 佔下游曝險的 72.1%;1,677 次觀察到的下游採用中有 85.3% 發生在 NVD 揭露之後(silent 修補者為 88.3%);dependabot 版本更新的「發布到採用」中位延遲為 10.4 天,無 dependabot 者為 110.6 天,但僅 8.5% 的採用在採用當下已設定版本更新)——對 RQ1 是「掃描到弱點 ≠ 弱點被修掉」最乾淨的一組數據,可直接支撐「覆蓋率須附帶緩解時效」的要求。 – arXiv:2610.37283 — BenchMeUp: Building Software Engineering Benchmarks from Natural-Language Specifications(2026-10-27;Bouzenia, Islem; Pradel, Michael;以 LLM 代理自動產生搜尋規則、建構計畫並在全新執行環境中驗證,四個任務(程式修補、issue 復現、編譯器自調校、修正靜態分析警告)各以 50 個實例為目標、共 198 個實例建成、196 個(99%)成功封裝,平均每實例 36 分鐘 / 0.79 美元;189/196(96%)可支援端到端評估;逐項比對來源、規格與預期結果後,180/198(91%)完全符合,而 Codex 直接交付的 200 個實例中僅 10 個符合)——對 RQ3 是「基準本身的建構效度」的方法學引用,亦為 RQ1 提供「靜態分析警告修正」任務的自動化基準來源。 – arXiv:2610.36015 — Do Coding Agents Still Need a Debugger? Frontier-Model-Based Fault Localization at the Accuracy Ceiling(2026-10-26;Daxerer, Christoph; Glock, Johann; Macho, Christian; Ramler, Rudolf; Pinzger, Martin; Pichler, Josef;610 個單行缺陷注入 144 個 LeetCodeDataset 解法,每個再以五種保持行為的轉換重寫;跨 Sol 6.1、Luna 6、Qwen 3.8 三個模型;不使用工具時即達 98.2–99.9%(原程式)與 96.7–99.9%(轉換後)的定位準確率;鼓勵使用 debugger 可消除 Luna 6 與 Qwen 3.8 剩餘轉換錯誤的 63% 與 61%(+2.1 與 +1.3 個百分點)但token 用量為 14.7–27.0 倍;選擇性使用時仍得 +1.5/+1.3 個百分點,而 agent 實際啟動互動式 debugger 的比例僅 0.2–6.2%)——對 RQ3 是「工具使用模式本身是跨模型差異的來源」的警示。 – arXiv:2610.36952 — Does More Thinking Pay Off? Reasoning Cost and Correctness of LLMs in Code Generation and Bug Fixing(2026-10-27;Huang, Andie; Pang, Ying; Zhang, Qian; Cheng, Yihang; Ma, Lin;866 個 Python 任務取自 HumanEval Pro、MBPP Pro、BugsInPy,五種模型設定;Qwen3-32B 開啟推理後 HumanEval Pro 平均 pass@1 由 71.1% 升至 76.5%、BugsInPy 平均測試通過率由 3.5% 升至 7.9%,但 MBPP Pro 僅 68.1%→69.5% 且不具統計顯著性,而每任務中位思考 token 超過 2,000;保留 trace 前半段並關閉推理並無顯著正確率落差;作者結論:研究應同時報告推理成本與正確率)——對 RQ3 是「跨模型比較若不固定推理預算,公平性存疑」的直接引用。
AI 新聞每日自動收集並發佈
Leave a Reply