Claudeの100万トークンコンテキストウィンドウにおけるトークン消費の分析：データは無制限な増加とキャッシュミスの複合効果を示す

実際の使用データからのトークン消費分析

Claudeの100万トークンコンテキストウィンドウ実装の詳細な分析により、トークン消費が急増する具体的な技術的要因が明らかになりました。著者は複数の会話にわたるJSONLセッションファイルを解析してパターンを特定しました。

データからの主な発見

無制限なコンテキスト拡大： 100万トークンコンテキストウィンドウ導入前は、自動圧縮が約16万トークンでトリガーされていました。導入後はこの上限がなくなり、セッションが定期的に50万トークンを超えるようになりました。すべてのプロンプトでコンテキスト全体が再送信されるため、50万トークンの状態では、単純な確認でも50万トークンが消費されます。Claudeが1つのプロンプトに答えるために3回のツール呼び出しを行う場合、1回のやり取りで150万トークンが消費されます。

キャッシュミスの複合効果： Anthropicはサーバー側でコンテキストを約5分間キャッシュします。この時間を過ぎると、次のプロンプトでコンテキスト全体が再処理され、キャッシュ時の約10倍のコストがかかります。キャッシュミス率は変化していませんが（約2.5%のまま）、50万トークンのコンテキストでのキャッシュミスは、15万トークンの場合よりもはるかに高コストです。

分析ツール

著者は、会話内容にアクセスせずにClaudeのJSONLセッションファイルからトークン数を解析するPythonスクリプトを作成しました。このスクリプトはClaudeのデータディレクトリを自動検出し、matplotlibとnumpyが必要です。スクリプトは以下で利用可能です：https://github.com/RyanSeanPhillips/cldctrl/blob/master/docs/context_analysis.py

著者はまた、Claude Codeセッションの起動と監視、トークン使用量、プロジェクト活動のためのターミナルダッシュボードであるCLD CTRL（https://github.com/RyanSeanPhillips/cldctrl）についても言及しています。