🇺🇸 English 🇰🇷 한국어 🇯🇵 日本語
ホーム › 開発者ツール
開発者ツール

Claude、「ドリーミング」で誤った記憶を自ら修正

Anthropicは11月6日、エージェントメモリの研究を公開した。メモリ利用でClaude Opus 5.5のCL-Benchスコアは0.655から0.838に上昇。記録を見直す「ドリーミング」は誤ったメモを直し、ウィキ単独のスコアを13%から48%に高めた。

米Anthropic(アンソロピック)は11月6日、AIエージェント「Claude」がセッションをまたいで何を記憶するかを自ら選ぶ仕組みと、過去の作業記録を見直して誤ったメモを直す「ドリーミング(dreaming)」の実験結果をまとめた研究記事を公開した。ある実験では、ドリーミングのセッションを2回から128回に増やしてウィキを育てると、企業の内部文書に関する25問の採点基準達成率が13%から48%に上がった。

小さな引き出しが何列も並ぶ公共図書館の木製カード目録棚
米ニューハンプシャー州ナシュアの公共図書館にあるカード目録棚(資料写真)。整理された記憶のイメージ。 사진: MarkBuckawicki / 위키미디어 공용(CC0 1.0)

要点

  • CL-Bench 1.0のデータベース課題で、メモリを使うとClaude Opus 5.5の平均報酬は0.655から0.838に、Opus 4.7は0.383から0.700に上がった。
  • 「失敗だけを記録せよ」といった固定ルールを与えると、Opus 5とOpus 4.7はメモリによる伸びの多くを失った。
  • ドリーミングはメモをセッション記録と突き合わせて修正する。ポケモンの実験では道順の誤りを正した。

Claudeのエージェントメモリの仕組み

同社のいうエージェントメモリとは、モデルの重みの変更ではなく、経験から得てセッション間にファイルとして残す知識である。最下層に検索可能な会話記録があり、その上に作業中に書くメモ、ウィキのような整理済みの表現、新しいセッションごとに先に読み込む少数の重要メモが重なる。ドリーミングは、空き時間にこれらの層を整理し直す処理だ。LettaとUCバークレーの研究者が提唱した「スリープタイム・コンピュート」の考え方に連なる。

モデル別のメモリ効果

実験は「Claude Managed Agents」上で行われ、質問ごとに新しいセッションで始めた。引き継げるのはメモリ用フォルダだけである。メモリを使うと、Sonnet 5.5は0.644から0.833、Opus 5は0.564から0.828に伸びた。

旧世代のモデルほど誘導の効果が大きかった。Sonnet 4.6はメモリだけでは0.364(基準値0.330)にとどまったが、先にメモを読み仮説を検証するよう指示すると0.641に跳ね上がった。研究チームは「メモリが何のためにあるかは伝え、どう使うかまでは決めない方が役立った」と記している。

ポケモンで見えた「選んで覚える」力

「ポケットモンスター 赤」を約1万ステップ進めた時点で、Sonnet 3.7は225のフォルダに413のメモファイルを書き、バッジは1個だった。一方、Claude Fable 5はフォルダ2つにファイル9つと最上位のglobal.mdだけで、バッジを4個獲得した。

別の実験では、Claudeがおつきみやま付近の目印の位置を誤って記録し、一方通行の段差から何度も落ちた。ドリーミングでメモを記録と照合して直すと、Claudeは洞窟に戻りハナダシティにたどり着いた。修正しなかった側は到達できなかった。

ウィキと検索の併用

ウィキの実験には、同社が5月に買収したソフトウェア企業Stainlessの内部ファイル約35万件(約4億2000万トークン)を使った。ウィキと検索を併用すると、ウィキの成長に伴いスコアは54%から61%に上がり、検索のみの53%を上回った。1問あたり約2万トークンの節約にもなった。ただし、効果がはっきりしない法務課題もあった。

背景:Managed Agentsのドリーミング機能

ドリーミングは5月の開発者イベント「Code with Claude」でManaged Agentsの機能として発表されたと、米SiliconANGLEが報じている。開発者向け文書によると、既存のメモリストアと過去のセッション1〜100件を入力に、元のストアには手を加えず新しいストアを作る。所要時間は数分から数時間。申請制のリサーチプレビューで、料金は選んだモデルの標準トークン単価である。

今後の見通し

同社は、エージェントがいつメモを書くべきか、計算コストを踏まえてドリーミングをどの頻度で回すべきかを残る課題に挙げた。研究チームは「どのモデルも、この先の展開を本当に知ることはできない」と記した。正式提供の時期は明らかにしていない。

よくある質問

Claudeのドリーミングとは何か

過去のセッション記録と既存のメモリストアをオフラインで見直し、重複をまとめ、誤りを直し、新しいメモやウィキを加えた新しいストアを作る処理である。

開発者はすぐに使えるのか

Claude APIのManaged Agentsのリサーチプレビューとしてのみ提供され、利用申請が必要だ。料金は標準トークン単価が適用される。

何を覚えるかをルールで決めた方がよいのか

新しいモデルでは逆効果になり得る。「失敗だけを記録」というルールはOpus 5とOpus 4.7の伸びを大きく削った。一方、Sonnet 4.6のような旧モデルは明示的な指示で点数が上がった。

参考資料

#Anthropic #アンソロピック #Claude #エージェントメモリ #ドリーミング #Claude Managed Agents #AIエージェント #長期記憶 #CL-Bench
チ
チョン・スン
AI Newsway · 開発者

AI Newswayの編集責任者です。AI、開発ツール、クラウド、生産性テクノロジーの記事を執筆しています。

この記者の他の記事 ›
著作権者 © AI Newsway 無断転載・再配布、AI学習・活用禁止
共有
f X K

コメント 0

現在コメントの投稿は無効になっています。

最初のコメントを書いてみましょう。