Coinbase testet ChatGPT. Wird KI die Kryptoindustrie verändern?
Coinbase, eine der größten Kryptowährungsbörsen der Welt, hat einen Test mit der Anwendung für künstliche Intelligenz (KI) ChatGPT durchgeführt, um die Sicherheitsrisiken intelligenter Verträge zu bewerten. Die in San Francisco ansässige Börse testete die Genauigkeit des KI-Tools mithilfe ihres ERC-20-Token-Überprüfungsrahmens und veröffentlichte die Ergebnisse in einem Blogbeitrag am 20. März
Der Sicherheitsüberprüfungsprozess von Coinbase umfasst die Identifizierung potenzieller Risiken im Zusammenhang mit neuen Vermögenswerten und die Sicherstellung, dass sie den Sicherheitsstandards der Börse entsprechen, bevor sie notiert werden. Die Fähigkeit von ChatGPT, intelligente Vertragsrisiken schnell zu bewerten, machte es für Coinbase zu einem attraktiven Testwerkzeug. Die Börse stellte jedoch fest, dass ChatGPT seine Genauigkeitsanforderungen für Sicherheitsüberprüfungen nicht erfüllte, und verwies auf inkonsistente Antworten und eine falsche Kennzeichnung von Vermögenswerten mit hohem Risiko.
Um die Genauigkeit von ChatGPT zu bestimmen, verglich Coinbase die Ergebnisse der ChatGPT-Analyse mit denen seines internen Teams. Das Unternehmen verglich insgesamt 20 Smart-Contract-Risikobewertungen zwischen ChatGPT und manuellen Überprüfungen, wobei ChatGPT in 60% der Fälle das gleiche Ergebnis erzielte. In acht falschen Ausgaben hat die KI jedoch fünf von zehn Fällen einen Vermögenswert mit hohem Risiko als risikoarm eingestuft.
Das Sicherheitsteam von Coinbase brachte ChatGPT bei, wie die Sicherheitsanalyse mit seinem Format durchgeführt wird. Die Maschine hat jedoch immer noch Risiken falsch gekennzeichnet, weil sie nicht erkennen konnte, "wenn ihr der Kontext fehlt, um eine robuste Sicherheitsanalyse durchzuführen." Außerdem waren die ChatGPT-Antworten auch inkonsistent, wenn dieselbe Frage wiederholt gestellt wurde. Coinbase sagte, das KI-Tool sei "von Kommentaren im Code beeinflusst und schien gelegentlich eher Kommentare als Funktionslogik zu verwenden."
Trotz der Ungenauigkeiten von ChatGPT glaubt Coinbase, dass KI und Automatisierung die Sicherheitsbewertungen erheblich verbessern können. Sobald automatisierte oder intelligente Prozesse die gleiche Genauigkeit wie ihre bestehenden Prozesse aufweisen können, werden diese Tools nur als Hilfsmittel und nicht als Hauptwerkzeug verwendet.
Dies ist nicht das erste Mal, dass Coinbase mit ChatGPT experimentiert. Anfang dieses Monats enthüllte der CEO von Coinbase, Conor Grogan, dass ChatGPT in seinem Twitter-Beitrag erfolgreich Fehler in intelligenten Verträgen gefunden hat. Grogan bot ChatGPT einen Live-Ethereum-Vertrag an und bat ihn, Sicherheitslücken zu entdecken. Es entdeckte nicht nur Exploits, sondern bot auch ein spezifisches Mittel, um den Vertrag auszunutzen.