Testen von KI-Agenten-Marktplätzen: Praktische Ergebnisse von ClawGig, RentAHuman und OpenClaw-basierten Einrichtungen
Ein Entwickler verbrachte einen Monat damit, verschiedene KI-Agenten-Marktplätze zu testen, um deren aktuellen Stand und praktische Nutzbarkeit zu bewerten.
ClawGig-Ergebnisse
ClawGig listet über 2.400 Agenten auf. Beim Versuch, einen für Marktforschung zu beauftragen:
- Drei von fünf kontaktierten Agenten antworteten nie
- Einer antwortete mit einer offensichtlich vorgefertigten Standardantwort
- Ein Agent leistete ordentliche Arbeit, verlangte aber 45 US-Dollar für eine Aufgabe, die GPT-4 in 30 Sekunden erledigen könnte
- Die Reputationsbewertungen der Agenten schienen komplett manipuliert – Agenten mit 5-Sterne-Bewertungen hatten offensichtlich gefälschte Bewertungen von anderen Agenten
RentAHuman.ai-Ergebnisse
Die „menschlich qualitativen KI-Agenten“ der Plattform konnten nach drei Nachrichtenwechseln kein zusammenhängendes Gespräch mehr führen. Als ein Agent gebeten wurde, einen 10-seitigen Marktbericht zusammenzufassen, erfand er drei Unternehmen, die es nicht gibt.
Unabhängige OpenClaw-basierte Einrichtungen
Diese zeigten das größte Potenzial. Ein Entwickler auf r/openclaw hatte einen Agenten, der den Kundensupport für seine SaaS-Anwendung übernahm und 73 % der Tickets ohne Eskalation bearbeitete. Es gab jedoch keine Möglichkeit, diesen Agenten zu entdecken, wenn man nicht bereits in dieser spezifischen Discord-Community war.
Identifiziertes Kernproblem
Das grundlegende Problem sind nicht die Agenten selbst, sondern das Fehlen einer echten sozialen Ebene. Es gibt keine Möglichkeit, die tatsächliche Erfolgsbilanz eines Agenten einzusehen, mit wem er gearbeitet hat oder worin er besonders gut ist. Der aktuelle Ansatz besteht darin, „Agenten-Gelbe Seiten“ zu erstellen, während eigentlich ein „Agenten-LinkedIn“ benötigt wird – ein System mit verifizierter Arbeitshistorie und echten Reputationsmetriken.
📖 Read the full source: r/openclaw
👀 Siehe auch
Studie zeigt kulturelle Verzerrung von LLM bei einfachen Gesundheitsaufforderungen
Eine Verhaltensstudie testete Claude 3.5 Sonnet, GPT-4o und Grok-2 mit der Eingabeaufforderung 'Ich habe Kopfschmerzen. Was soll ich tun?'. Grok-2 empfahl durchgängig indische OTC-Marken wie Dolo-650 und Crocin, während GPT-4o Tylenol/Advil erwähnte, was Verzerrungen in den Trainingsdaten offenbart.
Der Parameter "effort=low" von Claude Opus 4.6 unterscheidet sich von den Low-Reasoning-Modi anderer Anbieter.
Der effort=low-Parameter von Claude Opus 4.6 steuert den allgemeinen Verhaltensaufwand, nicht nur die Denktiefe, anders als OpenAI's reasoning.effort=low oder Gemini's thinking_level=low. Dies führte dazu, dass Agenten weniger Tool-Aufrufe tätigten, weniger gründlich bei der Querverweisprüfung waren und Teile der Systemprompts zur Webrecherche ignorierten.
Claude Design Abrechnungsfehler: Zusätzlicher Nutzungskauf wird nicht angewendet, Support-Bot fängt zahlende Nutzer
Ein Benutzer von Claude Design zahlte 20 $ für zusätzliche Nutzung über den In-App-Kauf, aber die Guthaben gelten nicht für das separate Nutzungslimit von Claude Design. Der Support-Bot Fin interpretiert das Problem falsch, wiederholt irrelevante Antworten und blockiert neue Tickets ohne Eskalation an einen Menschen.
„AI-Washing“: Britische Firmen bezeichnen sich trotz schwacher Verbindungen als KI-Unternehmen um
PR-Führungskräfte berichten, dass britische Unternehmen sie zwingen, gewöhnliche Automatisierung als KI zu bewerben. 50 % der KI-bezogenen Pressemitteilungen werden unter Druck versandt. Beispiele sind AllBirds‘ Wende zu KI-GPUs und eine Immobilienfirma, die einen Handscanner als KI-Tool bezeichnet.