グーグル、AI利用のハッキングが3ヶ月で産業規模に達したと報告

Googleの脅威インテリジェンスグループは、AIを活用したハッキングがわずか3か月で産業規模に拡大したとする報告書を発表した。同グループの主任アナリスト、ジョン・ハルトクイスト氏は次のように述べている:「AIの脆弱性競争は目前に迫っているという誤解があります。現実には、それはすでに始まっているのです。」
中国、北朝鮮、ロシアの犯罪グループや国家と結びついた攻撃者たちは、Gemini、Claude、OpenAIのツールを含む商用モデルを広く利用し、攻撃の洗練と拡大を進めている。報告書は、AIが脅威アクターに、作戦のテスト、標的に対する持続性、より優れたマルウェアの構築、スピード・規模・洗練度の向上を可能にしていると指摘している。
特筆すべきは、最近、ある犯罪グループが大規模な悪用キャンペーンを実施するためにゼロデイ脆弱性を利用する寸前
であり、AnthropicのMythosではない(Anthropicは、主要なOSとブラウザのすべてにゼロデイを発見した後、リリースを断念した)AI LLMを使用していたと見られることだ。また、報告書は、グループが2025年2月に無防備な自律性(メールボックスの一括削除を含む)を提供して話題になったAIエージェントツール、OpenClawを実験
していることも明らかにした。
ユニバーシティ・カレッジ・ロンドンのセキュリティ工学教授、スティーブン・マードック氏は次のようにコメントしている:「だからこそ、私はパニックになっていません。一般的に、バグを発見する従来の方法は終わりを迎え、今後はすべてLLM支援によるものになる段階に達しています。」
別途、アダ・ラブレス研究所は、政府のAI投資を促進する生産性の見積もりは、多くの場合、未検証の前提に基づいており、より良いサービスや労働者の福利厚生といった現実世界の成果に結びつかない可能性があると警告している。
📖 出典全文: HN AI Agents
👀 See Also

トロント大学の研究者らが、無料のオープンウェイトモデルで動作可能なAIワームを実証
トロント大学の研究者らは、無料のオープンウェイトモデルを使用して拡散時にリアルタイムで適応するAIワームのプロトタイプを実証しました。高価なAIは不要で、あらゆるオンラインデバイスを標的にします。

WebAssemblyによるAIエージェントのサンドボックス化:デフォルトでゼロ権限
Cosmonicは、従来のサンドボックス化(seccomp、bubblewrap)は、AIエージェントに対しては環境権限(ambient authority)の問題があると主張しています。WebAssemblyのケイパビリティベースのモデルは、デフォルトで権限をゼロにし、ファイルシステム、ネットワーク、資格情報に対する明示的なインポートを必要とします。

LLMエージェントにおけるツール権限注入:ツール出力がシステム意図を上書きする場合
研究者がローカルLLMエージェントラボを構築し、「ツール権限インジェクション」を実証しました。これは、AIエージェントにおいてツールの出力がシステムの意図を上書きするシナリオです。

protobuf.jsライブラリにおける重大なRCE脆弱性
protobuf.jsバージョン8.0.0/7.5.4以前における重大なリモートコード実行脆弱性により、悪意のあるスキーマを通じてJavaScriptコードの実行が可能となります。バージョン8.0.1および7.5.5で修正パッチが提供されています。