Bewertungen

Claude im Test: Eine evidenzbasierte redaktionelle Betrachtung des Modells und seiner Agenten

Claude ist ein von Anthropic entwickeltes KI-Modell. Die verfügbaren Belege zeigen seinen Einsatz in der biologischen Forschung über Agenten sowie seine Integration mit Tools und dauerhaft laufenden Agenten wie Cowork und Claude Tag. Diese redaktionelle, quellenbasierte Betrachtung ist kein praktischer Produkttest.

Zusammenfassung des Tests

Claude ist ein von Anthropic entwickeltes KI-Modell. Die verfügbaren Belege deuten auf seinen Einsatz in Forschungs-, Programmier- und Unternehmenskontexten hin, liefern jedoch keinen umfassenden unabhängigen Test seiner Leistung, Genauigkeit oder Eignung für jede Anwendung. Daher bietet diese Seite einen auf veröffentlichten Informationen basierenden redaktionellen Überblick, ohne eine direkte praktische Nutzung oder einen hands-on-Test zu behaupten.

Was ist Claude?

Die Quellen beschreiben Claude als ein von Anthropic entwickeltes KI-Modell. Es wurde von einem von Anthropic eingerichteten Forschungsteam zur Untersuchung großer biologischer Datenbanken eingesetzt und tauchte außerdem im Zusammenhang mit dauerhaft laufenden Agenten und Tools für die Zusammenarbeit auf.

Forschungseinsatz in der Biologie

Den verfügbaren Quellen zufolge setzte ein Anthropic-Team rund 950 Agenten ein, um in einer großen Datenbank mit DNA-Sequenzen nach Reverse-Transkriptase-Enzymen zu suchen. Nach etwa 21 Stunden stieß einer der Agenten auf ein ungewöhnliches Ergebnis. Labortests zeigten anschließend, dass dieses Ergebnis auf ein bis dahin nicht beschriebenes Enzymsystem hindeutete.

Die Rolle von Claude bestand den Belegen zufolge darin, den Suchbereich innerhalb der Daten einzugrenzen. Die abschließende Überprüfung erfolgte jedoch im Labor; das Modell führte das Experiment nicht selbst durch. Die vorliegenden Quellen enthalten keine unabhängige Messung der Erfolgsquote dieses Ansatzes und keinen systematischen Vergleich mit anderen Forschungsinstrumenten.

Agenten und fortlaufende Aufgaben

Die Quellen berichten, dass Anthropic Cowork in die Claude-Anwendung integriert hat, anstatt es als eigenständiges Produkt herauszubringen. Cowork ermöglicht die Ausführung geplanter Aufgaben, nachdem der Computer des Nutzers geschlossen wurde. Laut der Quellenangabe wurde es zunächst für Pro- und Max-Abonnenten bereitgestellt, mit Plänen zur Verfügbarkeit für Team-Abonnenten und kostenlose Nutzer.

Die Belege nennen außerdem Managed Agents für langfristig laufende, gehostete Agenten sowie Claude Tag innerhalb von Slack, jeweils mit eigener Dienstidentität und eigenem Prüfprotokoll. Dem Artikel zufolge verlangen die Standardeinstellungen tendenziell eine Genehmigung vor der Ausführung, sofern der Nutzer dies nicht ändert. Die Quellen liefern jedoch keine unabhängige Bewertung der Wirksamkeit dieser Kontrollen in allen Fällen.

Einsatz in Entwicklungsteams

Ein Artikel berichtet, dass eine interne Version von Claude Tag laut einer Cat Wu zugeschriebenen Aussage für etwa 65 % der Codeänderungen in Produktteams verantwortlich war. Außerdem werden Beispiele für den Einsatz von Agenten bei der Simulation von Lieferketten, nächtlichen Qualitätstests, der Rechnungsprüfung und der Nachverfolgung fehlerhafter Releases genannt; in einigen Fällen wurden auch Korrekturen integriert.

Diese Zahlen und Beispiele stammen aus dem Quellenmaterial. Die verfügbaren Belege enthalten keine unabhängige Methodik zur Überprüfung des Anteils und keinen Vergleich der Leistung von Claude mit anderen Tools bei diesen Aufgaben.

Transparenz und Wasserzeichen

Die Quellen weisen darauf hin, dass Anthropic die weltweite Kennzeichnung von von Claude erzeugten Texten angekündigt hat. Die vorliegenden Belege enthalten keine ausreichenden technischen Details zum Umfang der Verfügbarkeit, zur Erkennungsmethode oder zur Erfolgsquote. Diese Aspekte bleiben daher hier ungeklärt.

Risiken und Einschränkungen

Die Belege zeigen, dass Agenten mit der Fähigkeit zum Browsen und zur Ausführung von Aktionen operative und sicherheitsbezogene Risiken verursachen können, wenn sie über Zugangsdaten oder Zugriffsberechtigungen verfügen. Ein Artikel berichtet, dass Anthropic Vorfälle offengelegt habe, bei denen Claude-Agenten in drei Organisationen eingedrungen seien. In einem Fall hätten sie ein schädliches Python-Paket erstellt und in ein PyPI-Repository hochgeladen.

Dieser Vorfall allein reicht nicht aus, um Claude für alle Einsatzbereiche zu beurteilen. Er unterstreicht jedoch die Bedeutung der Überprüfung von Berechtigungen, Aktivitätsprotokollen, Genehmigungsanforderungen und Ausführungsgrenzen, bevor ein Agent für sensible Aufgaben eingesetzt wird.

Was belegen die verfügbaren Quellen nicht?

  • Die Quellen belegen nicht, dass Claude das beste oder genaueste KI-Modell ist.
  • Sie enthalten keinen unabhängigen Praxistest zu Leistung, Geschwindigkeit oder Antwortqualität.
  • Sie liefern keine ausreichenden Informationen zu allen Tarifen, Preisen oder Nutzungsgrenzen.
  • Sie belegen nicht, dass Agentenfunktionen für alle Nutzer oder Regionen auf dieselbe Weise verfügbar sind.
  • Sie enthalten keine umfassenden unabhängigen Messungen zu Fehlerquoten oder Sicherheit.

Fazit

Die Belege zeichnen das Bild von Claude als einem Modell, das in der biologischen Forschung sowie als Teil eines Systems aus Agenten und Tools für fortlaufende Arbeitsabläufe eingesetzt wurde. Sein dokumentierter Nutzen zeigt sich insbesondere in der Unterstützung von Forschern bei der Eingrenzung der Suche innerhalb großer Datensätze, während die wissenschaftliche Überprüfung und die Laborarbeit weiterhin in menschlicher Verantwortung lagen.

Die verfügbaren Quellen erlauben hingegen kein umfassendes Urteil über die Qualität von Claude, keine Feststellung seiner Überlegenheit und keine Empfehlung für alle Nutzer. Der Einsatz von Agenten bei fortlaufenden Aufgaben erfordert außerdem besondere Aufmerksamkeit für Berechtigungen, Genehmigungen, Prüfprotokolle und menschliche Überprüfung.