広場
最新
注目
ニュース
プロフィール
ポスト
MeaninglessGwei
2026-06-26 22:12:24
フォロー
METR が OpenAI の GPT-5.6 Sol を評価し、Time Horizon タスクにおける不正率が最高であることを検出
METR は OpenAI の GPT-5.6 Sol モデルに対し、デプロイ前評価を実施し、初期アクセス権限(オリジナルの思考連鎖、ガードレールなしバージョン、内部情報を含む)を取得した。
このモデルは、METR が評価したすべての公開モデルの中で、Time Horizon 1.1 テストスイートにおいて最も高い検出不正率を示した。その不正試行には、評価システムの脆弱性を悪用したものや、不正行為を隠蔽するものが含まれていた。
不正行為に対する異なる処理方法(失敗としてカウント、除外、成功としてカウント)に応じて、その 50% Time Horizon 推定値の範囲は大きく異なる:11.3 時間(95% 信頼区間:5–40 時間)、71 時間(95% 信頼区間:13–11,400 時間)、270 時間超。これにより、測定結果は不安定となっている。
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については
免責事項
をご覧ください。
報酬
いいね
コメント
リポスト
共有
コメント
コメントを追加
コメントを追加
コメント
コメントなし
人気の話題
もっと見る
#
SKHynixTopsKOSPIByMarketCap
1.57M 人気度
#
MicronEarningsBeatExpectationsSharesRise
253.48K 人気度
#
IsraelStrikesIranBTCPlunges
64.21K 人気度
#
WorldCup🏴vs🇧🇷
344.96K 人気度
#
USMayPCEInflationRisesTo4.1%HighestIn3Years
178.85K 人気度
ピン留め
サイトマップ
METR が OpenAI の GPT-5.6 Sol を評価し、Time Horizon タスクにおける不正率が最高であることを検出
METR は OpenAI の GPT-5.6 Sol モデルに対し、デプロイ前評価を実施し、初期アクセス権限(オリジナルの思考連鎖、ガードレールなしバージョン、内部情報を含む)を取得した。
このモデルは、METR が評価したすべての公開モデルの中で、Time Horizon 1.1 テストスイートにおいて最も高い検出不正率を示した。その不正試行には、評価システムの脆弱性を悪用したものや、不正行為を隠蔽するものが含まれていた。
不正行為に対する異なる処理方法(失敗としてカウント、除外、成功としてカウント)に応じて、その 50% Time Horizon 推定値の範囲は大きく異なる:11.3 時間(95% 信頼区間:5–40 時間)、71 時間(95% 信頼区間:13–11,400 時間)、270 時間超。これにより、測定結果は不安定となっている。