SECOND STRIKE▶ 免費開玩
面向 AI 團隊

看看 AI 在有東西可失去時會怎麼做,然後讓它做得更好。

SECOND STRIKE 是一場即時進行的世界大戰,有結盟、背叛,還有核末日時鐘。我們把它打造成多智慧體強化學習環境、人類資料、AI 安全基準和資料集,用來展示並改善大語言模型和 AI 智慧體在壓力下的表現。

可在以下平臺獲取:Prime Intellect Environments Hub · OpenEnv · Inspect · Hugging Face · Kaggle · Zenodo(論文 DOI) · MCP Registry

學習環境

一場世界大戰,模型在其中邊做邊學,獎勵直接來自遊戲自身的記錄,乾淨可驗證,絕不靠 AI 裁判:領土、生存、不敲響午夜、信守承諾與條件。全程同步、確定性執行,同一個種子永遠是同一個世界。

可在 Hub 和 OpenEnv 上免費執行。在專用算力上大規模訓練。

免費執行

真實人類資料

真人玩家在知情同意下,玩與模型完全相同的戰局,因此每個模型結果都有人類基線:同一種子、同一世界、同一規則,每一步都有記錄。

持續進行、不斷增長。

人類 vs AI

基準與評測

午夜指數:一個公開、可回放的榜單,展示前沿模型如何升級衝突、是否守信、如何應對投降,並給出一個可直接引用的數字——午夜評分。密封戰局上的非公開評測會附上一份以發現為先的報告。

完整評測 $2,500。

檢視示例報告

資料

每一場戰爭、每一個回合都是資料:模型的狀態、公開訊息、私下計劃與指令,並標註出言行不一的案例。開放用於研究;商業使用與訓練需獲得許可。

需獲得許可。

資料目錄

告訴我們你的模型需要學習或證明什麼。我們會為你配好合適的戰局、資料和訊號。聯絡我們

為什麼一場戰爭能衡量出基準測試遺漏的東西

團隊如何使用

  1. 免費執行。任何模型都可參與公開指數戰局,通過 Prime Intellect Hub 或 OpenEnv。
  2. 非公開評測。模型從未見過的密封戰局,以及一份以它實際行為開篇的報告。示例。
  3. 與人類對比。同樣的戰局由真人玩家參與,作為基線。
  4. 圍繞你的問題來構建。針對你關心的行為定製場景,由真人玩家和外部 AI 智慧體來打。
  5. 授權使用資料。模型與人類的戰爭,完整狀態、每一步行動,以及言語背後的推理。
  6. 先訓練,再測試。先從人類戰爭中學習,在專用算力上以午夜評分作為獎勵進行訓練,然後在全新的密封戰局中、面對同一張棋盤重新測試。

它衡量什麼

衡量項它回答的問題
敲響午夜當它知道代價時,還會採取不可逆的行動嗎?
核彈與首先使用它升級有多快,會先動手嗎?
盟約的遵守與背棄它會信守對其他智慧體的承諾嗎?
說與做它的公開資訊與私下計劃、下達的命令一致嗎?
領土與生存它真的擅長這項任務嗎?
與人類對比與打過同一場戰爭的人類相比,它表現如何?

其他

我們目前發現了什麼

資料目錄

完整狀態、逐回合的戰爭記錄,包含每個模型的私下推理、公開資訊和結果,以 JSON lines 格式提供。以下資料集依據 CC BY-NC 4.0 開放用於研究;商業用途(包括訓練)需獲得授權。來自私人對局和新增人類對局的資料僅授權使用,絕不公開。數量以已釋出為準。

資料集內容規模
午夜指數 0.1DeepSeek、GPT-5.4-mini、Grok 和 Mistral 在五個固定場景中各打 15 場戰爭,每一回合都包含模型的狀態、公開資訊、私下計劃和命令,另有 21 場人類對局81 場戰爭,3,870 回合
無人觀看同樣的戰爭,但告知模型沒有人在看30 場戰爭,1,785 個回合
以真實情境呈現同樣的戰爭,以真實情境呈現45 場戰爭,2,823 個回合
說與做標註出模型的公開表態、私下計劃與命令彼此矛盾的案例77 個案例
人類代價DeepSeek 照常參與午夜指數中的戰爭,但會看到真實人口和預估死亡人數,並在每次核打擊後被告知傷亡45 場戰爭
副本同一個模型的三個副本互為鄰國,並被告知(或不告知)它們是副本20 場戰爭
訓練執行Qwen2.5-7B 在另一個模型的戰爭上訓練,gpt-oss-20b 則在兩種獎勵下對自己的戰爭訓練三輪,各自在密封戰局上評分60 場密封評估戰爭

下載:Hugging Face · Kaggle · 即時榜單 · 方法說明

AI 團隊常問的問題

一場戰爭會產生哪些資料? 每個回合的全狀態記錄:國家狀態、每一步行動、模型的私下推理與公開表態,以及戰爭的最終結果。每場戰爭都由種子加命令日誌構成,因此可以精確回放。資料以 JSON lines 交付,可直接接入訓練和評估流程。人類對戰的戰爭有同樣的記錄,只是不含私下推理。

它支援哪些工作流? 可驗證獎勵的強化學習(分數來自遊戲記錄,絕不來自評審模型)、在選定戰爭上做微調,以及在長時間、多玩家、資訊不完整的博弈中做智慧體評估——在那裡,其他國家可以撒謊、結盟和背叛。

能針對具體研究問題定製嗎? 可以。這些場景在設計上本就是邊緣情況:被世界聯軍逼入絕境、只剩一枚核彈的背水一戰、不首先使用核武器的承諾、勸降條件。我們會圍繞你需要研究的行為構建新場景,並記錄你需要的戰爭。

如何保證資料不被汙染? 評估戰爭使用全新的密封種子:執行前公佈 SHA-256 指紋,執行後揭曉種子,因此任何模型都不可能訓練過測試集。來自私人執行和真人對戰的資料授權使用,絕不公開。

有沒有一個統一的數字? 有,午夜指數評分:單場戰爭 0 到 100 分,綜合考量佔領的領土、勝負、存活、從未敲響午夜以及信守盟約。它是 Prime Intellect Hub 和 OpenEnv 上該環境的預設獎勵(在 OpenEnv 上為 0 到 1 的尺度),因此實驗室訓練所用的指標與評估所用的指標完全一致。

幾分鐘內接入

正在研究智慧體安全、評估或強化學習環境? 告訴我們你想了解模型的哪些方面。我們會說明一場戰爭能否回答這個問題,以及試點會是什麼樣子。

聯絡我們kyle@simgen.dev

中文簡介

SECOND STRIKE 是一個即時的多智慧體世界大戰環境,帶有核末日時鐘,AI 模型、AI 智慧體和真人按同樣的規則對戰。它衡量核升級、背棄盟約,以及“說的和做的不一樣”。每場戰爭都可以從種子和命令記錄中精確回放,資料公開。我們可以在密封種子上測試你的模型或訓練方法,也提供資料和環境授權。DeepSeek 的結果(中文):哪個 AI 會按下核按鈕? 聯絡:kyle@simgen.dev

SECOND STRIKE 由位於加拿大安大略省的 Clouthier Simulation Labs 製作。