一個值得紀念的里程碑:我們建造的第一個合約審查助手已經投入正式運行。秉承我們所遵循的原則,它附帶了證據——而不是演示和承諾。

以下是「附有證據」在該版本的實踐中的含義:

  • 來源依據0.96 — 每個答案都可以追溯到其引用的來源,而不是模型的想像力。
  • Eval suite 48 / 50 — 門保持在閾值;兩個已知的邊緣情況被標記而不是揮手通過。
  • 安全控制:綠色 — 對每個輸出進行策略和安全檢查,並記錄拒絕情況。
  • 人類的兩個案例 - 在交付任何內容之前將低置信度輸出發送給審查者。

這些數字本身並不重要。重要的是,他們隨釋放一起旅行,客戶可以看到,如果他們沒有抓住,大門就會阻止船。這就是你可以支援的系統和你只能指望的系統之間的區別。

這是一個內部里程碑,而不是一個獎項——我們之所以標記它,是因為這是整個玻璃盒子學科第一次在現場參與中進行端到端的運行。下一個以同樣的方式開始:書面範圍,附上證據,並由您保留控制權。