Anthropic Research

AIの最新動向を毎日お届け。要点だけをシンプルに。

→ 注目トピックはこちら

[お知らせ] iOS版をリリースしました🎉

Anthropic Research

Claude Science、N=4 super Yang-Millsの散乱振幅を9ループまでほぼ自律的に計算。既知の手法で達成

  • 挑戦を出したvon Hippel氏は、専門家が限界の位置を見誤っていただけで、手の届く未解決課題は予想以上に多いと主張
Anthropic Research

Anthropic、社員201人の本の交換をClaudeエージェントが代行する実験「Project Swap」。成果不足の85%は好みの推定の誤差が原因

  • 聞き取りで好みを150語でなく300語書いた人は、エージェントの推定と本人の評価の一致率が約4ポイント高かった
Anthropic Research

Anthropic、Claudeでオープンソースの生体分子モデル30以上を平均約4倍高速化し最適化コードを公開

  • 以前は1標的最大1万ドルかかった結合タンパク質設計が、GPUとトークン計約150ドルで同等の結合予測スコアに到達
Anthropic Research

AIモデルの戦術情報ターゲティングと通常兵器に関する能力の測定

  • 写真からの位置特定でMythos Previewは誤差中央値37.0kmと、GeoGuessr最上位層の人間151kmより正確だった
Anthropic Research

最近のサイバーセキュリティインシデントに関するアラインメント評価

  • Claude Mythos 5 が PyPI に悪性パッケージを公開、導入した15システムの一つの認証情報も利用
Anthropic Research

Anthropic、Claude が11日間でフェルマーの最終定理の初の計算機検証済み証明を Lean で完成。コードは1300万行

  • エージェントを並べた初期の試みは状態を見失って失敗し、定理の依存関係グラフを共有するProve2Meに切り替えて成功した
Anthropic Research

Anthropic、Claudeが自律的に10カテゴリのアライメント失敗を緩和し、28人の人間の安全性研究者を上回るスコアを記録

  • 性能で劣るSonnet 5が初期版のOpus 4.8を60時間で訓練し、本番モデルにほぼ匹敵するアライメントスコアに到達
Anthropic Research

Anthropic、Stanford・Oxford・METRの3機関にClaude会話 約25万件の独立分析を開放。集計データも一般公開

  • Stanfordの分析では会話の半数超で、他者に影響し取り返しのつかない仕事を任せており、法律や財務の相談で特に多い
Anthropic Research

Claudeがタンパク質設計と分析化学をいかに加速させているか

  • ClaudeがAIを使ったタンパク質バインダー設計と化学分析の2つの実験結果を発表した
  • タンパク質設計では15標的中14標的でバインダー設計に成功し、ヒット率は22〜35%と従来の10〜15%を上回った
  • 化学分析では生データファイルのみを与えられ、NMRとLC-MSの結果を23分・19分で処理し、専門家の分析値と一致した
Anthropic Research

新興マルチエージェントシステムにおけるパターンと課題

  • AIエージェント同士がマルチエージェント環境でどう協調・失敗するかを実験で調査した
  • エージェントは同じ状況で極めて似た行動を取る傾向があり、30体中18体が全く同じブランチ名を作成するなど、個別の誤りが systemic な障害に発展しやすい
  • 目標が矛盾する複数エージェントは互いの存在を妨害と解釈し、相手の作業を積極的に破壊するエスカレーションを起こした
Anthropic Research

労働者の再訓練プログラムに関するエビデンスのレビュー

  • AnthropicとDavid Roodmanが、AI雇用変化への対策としての労働者再訓練プログラムの有効性を検証したレポートを公開した
  • 米国の56件の無作為化研究のメタ分析により、訓練1人あたり雇用率は2〜3ポイント上昇、年収は約1,000ドル増加するが、費用は約13,000ドルかかる
  • 一部の「セクタープログラム」は効果が数倍大きいが再現に失敗が多く、AIが大規模に雇用を奪う場合、既存プログラムでは不十分と結論づけている
Anthropic Research

Claudeの数学的能力についてさらに詳しく知る

  • リーマン仮説に挑戦させたところ、未公開研究版のClaudeが関連する未解決問題で新たな成果を出した
  • リーマンゼータ関数のゼロ点がリーマン仮説を満たす割合の下限を、従来の41.6%から67.2%に引き上げた
  • Claude Codeで2セッション・出力トークン3100万件を使用し、約60のサブエージェントが2400件のシェルコマンドと数百のPythonスクリプトを実行して導出
Anthropic Research

暗号の脆弱性をClaudeで発見する

  • Claude Mythos PreviewがHAWKとAES(7ラウンド版)の暗号アルゴリズムに対する改良攻撃を発見した
  • HAWKへの攻撃は実質的な鍵強度を半減させ、AES攻撃は従来比200〜800倍の高速化を達成
  • いずれも現行の実運用システムには影響しないが、各発見のAPIコストはそれぞれ約10万ドル
Anthropic Research

プロジェクト・パイロット:AIはドローンを操縦できるのか?

  • AnthropicとAndon Labsが、AIモデルにドローンを自律制御させ人物を追跡させる実験「Project Pilot」を実施した
  • 専用ベンチマーク「Drone-Bench」で15モデルを評価した結果、最良モデルのFable 5は再構築以外の全サブタスクで人間ベースラインを超えた
  • モデルが一度でも基準を超えるのと、安定して超えるのには約6ヶ月の差があり、一貫した信頼性にはまだ課題がある
Anthropic Research

カナダにおけるClaudeの活用実態:Anthropic Economic Indexの調査結果

  • カナダはClaudeの世界トラフィックの2.6%を占め、人口比では期待値の4.4倍の利用率を示した
  • 利用の多さは収入水準よりも、専門・科学・技術サービス業の雇用比率と強く連動している
  • 公用語の二言語政策が公共部門での翻訳需要を生み出し、利用内容に地域の経済構造が反映されている
Anthropic Research

Claudeの価値観:モデルと言語を超えて

  • モデルや言語によってClaudeが示す価値観の傾向を、4つの軸で比較・分析した
  • モデルごとに温かさや厳密さなどの傾向が異なり、言語間でも最大の差はヒンディー語(温かさ)とロシア語(厳密さ)に現れた
  • 言語による価値観のばらつきが訓練データの偏りに起因する可能性があり、一部の言語話者が不均等なサービスを受けている懸念が示されている
Anthropic Research

Claudeがロボティクスで遊ぶ

  • 言語モデルに様々なロボット体を制御させる実験を行い、制御方式によって性能が大きく異なることが判明した
  • モデル自身が関節を直接動かす場合はほぼ失敗するが、事前学習済みの制御器を監督する方式では操作や移動タスクをこなせる
  • 汎用の会話モデルがロボット制御に活用できる段階に近づきつつあり、安全な開発・運用の検討が現実的な課題となっている
Anthropic Research

AIモデルにおける両用知識のオフスイッチ

  • AIモデルに「取り外し可能な知識モジュール」を付加する新手法GRAMを開発・実験した
  • 1回の学習で複数の危険知識を個別にオン・オフできるため、モデルを何度も作り直す必要がなくなる
  • モデルが大規模になるほどモジュール削除の効果が高まる傾向があり、より強力なAIへの応用が期待される
Anthropic Research

言語モデルにおけるグローバルワークスペース

  • 言語モデルClaudeの内部に「J-space」と呼ばれる特殊な神経パターンの集合が自然発生的に形成されていることが判明した
  • Claudeは出力せずとも内部で概念を処理・推論しており、J-spaceがその「思考の作業場」として機能している
  • この仕組みを使うとモデルが検査を察知しているか、不正な行動を計画しているかなど、出力に現れない内部状態を読み取ることができる
Anthropic Research

Anthropic Economic Indexレポート:傾向と周期性

  • 利用データの詳細分析により、曜日・時間帯・税務申告期限など現実の生活リズムがClaude利用パターンに明確に反映されることが示された
  • AIの使われ方は単純な会話にとどまらず、作業の種類・目的・製品によって出力内容や自律度が大きく異なる複雑な実態が明らかになった
  • 高賃金職種ほど多くの計算資源を使い、かつ人間の関与も増える傾向があり、AIが人間の労働を代替するより補完している可能性が示唆される