Cowork und Canva: Ein Usecase, der nicht funktioniert hat

Ich habe kürzlich Claude Cowork installiert und probiere seither für meine Arbeit an der Uni aus, was mit dem Tool möglich ist und was noch nicht. Einen dieser Versuche möchte ich hier schildern, und zwar einen, der gescheitert ist. Ich zeige solche Beispiele bewusst, denn wer KI im juristischen Alltag ernsthaft einsetzen will, muss meiner Meinung nach nicht nur wissen, wo man KI einsetzen kann, sondern auch - oder vielleicht noch wichtiger - wo man KI besser (noch) nicht nutzen soll.

Kurz zur Ausgangslage: Cowork hat auf meinem Rechner Zugriff auf die freigegebenen (Test)ordner, und über das entsprechende Browser-Plugin kann der Agent auch im Internet arbeiten. Für meine KI-Kompetenz-Tagung, welche ich im Juni in Zurich durchführte, hatte ich seinerzeit auf Canva einen Flyer gestaltet. Derzeit denke ich über eine ähnliche Veranstaltung von einem Tag nach (die Details stehen noch nicht defintiv fest, weshalb ich hier noch nicht viel sagen möchte).

Meine Arbeitsidee für Cowork war die Folgende: Ich hatte den neuen Programmflyer in Word entworfen und wollte, dass Cowork daraus den Flyer mit Text abfüllt. Der Agent sollte sich also mit meinem Benutzernamen bei Canva einloggen, den bestehenden Flyer von den KI-Kompetenztagung kopieren und ihn anschliessend mit den neuen Angaben aus dem Word-Dokument abspitzen.

Der erste Teil hat einwandfrei geklappt. Cowork hat den Browser geöffnet und mir gesagt, ich soll mich bei Canva einloggen. Cowork hat dann den Flyer dupliziert und die Kopie sauber umbenannt. Besonders eindrücklich ist, dass man im Browser live zuschauen kann, wie der Agent arbeitet. Das wirkte zunächst vielversprechend und weckte entsprechend Erwartungen.

Beim Text kippte das Ganze dann. Die Angaben aus dem Word-Dokument wurden nicht korrekt übernommen, und es schlichen sich mehrere Halluzinationen ein. So fiel beispielsweise die Begrüssung der Tagung, welche im Worddokument vorgesehen war, ganz unter den Tisch. An anderer Stelle setzte Cowork um 12 Uhr einen Apéro riche an, obwohl im Programm ein Mittagessen vorgesehen war.

Eine andere Halluzination fand ich in der Rubrik Arbeitsmittel. Dort stand am Ende, man solle den Laptop mitbringen und sich vorab für die Bezahlversion eines KI-Tools registrieren.

In meinem Word-Dokument hatte ich hingegen festgehalten, dass dies lediglich empfohlen wird. Aus einer Empfehlung war also eine Anweisung geworden.

Mein Fazit ist ernüchternd. Für diesen konkreten Fall ist Cowork nicht brauchbar. Ich bin schneller, wenn ich den Text von Hand kopiere und einfüge, und ich muss anschliessend nicht Zeile für Zeile prüfen, ob der Agent unterwegs etwas erfunden oder umgedeutet hat.

Habt ihr Cowork auch schon ausprobiert? Was hat geklappt? Was noch nicht?