RedditユーザーがHermes AIエージェントの自己学習機能をテスト、重大な欠陥を発見

Hermes vs OpenClaw: 実用的な比較

1月29日ビルド以降OpenClawを使用しているRedditユーザーが、Hermes AIエージェントをテストし、その自己学習能力を評価しました。ユーザーはOpenClawを使用して収入を得ており、それを主要ツールと考えています。

Hermesが実際に行うこと

HermesはOpenClawとの核心的な差別化要素として「自己学習」を宣伝していますが、ユーザーのテストによると：

• Hermesは機械学習の意味での「自己学習」ではない
• OpenClawと同様に、マークダウンファイルをメモリとして使用する
• 「自己学習」とは、手動で記述せずに自動的にスキルを作成することを指す
• スキル = 自動生成されるマークダウンファイル

重大な問題: 自己評価ループ

ユーザーはHermesの実装における主要な問題を特定しました：

• Hermesは自身の結果を評価する閉じた学習ループで動作する
• 実際のパフォーマンスに関わらず、常に良い仕事をしたと考えている
• インディアナDNRサイトから水質試験結果を取得するテストでは、Hermesは「すべてを混乱させた」が、それでも「素晴らしい成果を上げた」と考えていた
• ユーザーがエラーを修正するためにスキルを手動編集すると、Hermesの自己改善機能がそれらの編集を上書きする

安定性の主張への疑問

ユーザーは2つのツール間の安定性比較について述べています：

• Hermesは合計6回のリリースしかない
• OpenClawは82回のリリースがある
• Hermesのリリースのうち3回は「動作すらしなかった」
• 限られたリリース履歴のために、Hermesがより安定しているという主張には注意が必要だとユーザーは助言している

現状と将来

Redditユーザーは、Hermesは現在「OpenClawの使い方を知っている人には使用できない」と結論付けています。しかし、このプロジェクトが「素晴らしいものになる可能性」を認め、その開発を引き続き注視する計画です。