Coinbase test tokenbeveiliging met ChatGPT

• Crypto exchange Coinbase gebruikte onlangs de AI-chatbot ChatGPT om token-beveiligingstests uit te voeren op 20 slimme contracten om hun nauwkeurigheid te bepalen. 
• Van de 20 leverde ChatGPT 12 keer hetzelfde resultaat op als een handmatige beoordeling, met de veelbelovende snelheid van het uitvoeren van een slimme contractanalyse.
• Van de 8 missers waren er 5 gevallen waarin ChatGPT een asset met een hoog risico ten onrechte bestempelde als een laag risico.
• De uitwisseling zei dat ChatGPT inconsistent kan zijn, dat wil zeggen dat wanneer dezelfde vraag meerdere keren wordt gesteld, verschillende antwoorden worden gegeven door de AI-chatbot.

---

ChatGPT, een chatbot met kunstmatige intelligentie (AI), ontwikkeld door OpenAI en gelanceerd in november 2022, is erg populair geworden omdat mensen verschillende manieren bedenken om het platform te gebruiken om hun taken gemakkelijker te maken. Interessant is dat veel AI-enthousiastelingen geloven dat ChatGPT handarbeid kan vervangen, maar de grootste crypto-uitwisseling in de Verenigde Staten, Coinbase, heeft onlangs bewezen dat dit niet het geval is door tokenbeveiliging te testen met de chatbot en de resultaten aan het publiek bekend te maken. 

Volgens een blogpost Vanaf de crypto-uitwisseling op 20 maart gebruikte Coinbase ChatGPT om geautomatiseerde tokenbeoordelingen uit te voeren via het ERC20-tokenbeoordelingsframework en vergeleek de resultaten met standaard tokenveiligheidsbeoordelingen. Het resultaat was duidelijk: ChatGPT voldeed niet aan de nauwkeurigheidsnormen die het bedrijf had gesteld om de chatbot te integreren in het beveiligingsarsenaal van de beurs.

Door de ChatGPT en handmatige beveiligingsbeoordelingen naast elkaar te vergelijken, bevestigde Coinbase dat de handmatige beveiligingsbeoordelingen nauwkeuriger zijn. De uitwisseling vergeleek de beveiligingsbeoordelingen van 20 slimme contracten, en het is cruciaal op te merken dat ChatGPT 12 keer hetzelfde resultaat opleverde als de handmatige beoordeling. 

Van de acht missers waren er echter vijf gevallen waarin ChatGPT een asset met een hoog risico ten onrechte als een asset met een laag risico bestempelde. De beurs merkte op dat dit een ernstige mislukking was, omdat “het onderschatten van een risicoscore veel schadelijker is dan het overschatten.”

Coinbase merkte op dat ChatGPT een veelbelovende snelheid van slimme contractanalyse laat zien in vergelijking met handmatige beoordeling, wat meer tijd kost. Het voldoet echter niet aan de nauwkeurigheidsnormen van een handmatige beoordeling. 

“Hoewel de efficiëntie van een ChatGPT-review opmerkelijk is, zijn er nog steeds enkele beperkingen die de nauwkeurigheid van de tool aantasten. In de eerste plaats kan ChatGPT niet herkennen wanneer het context mist om een robuuste beveiligingsanalyse uit te voeren. Dit resulteert in dekkingslacunes waarbij aanvullende afhankelijkheden niet worden beoordeeld”, aldus Coinbase. 

Coinbase voegde er ook aan toe dat ChatGPT inconsistent kan zijn, dat wil zeggen dat wanneer dezelfde vraag meerdere keren wordt gesteld, er verschillende antwoorden worden gegeven door de AI-chatbot. De uitwisseling voegde eraan toe dat ChatGPT ook “wordt beïnvloed door opmerkingen in de code en af en toe standaard leek te reageren op opmerkingen in plaats van op functionele logica.”

“We verwachten dat we met verdere snelle engineering de nauwkeurigheid van het gereedschap kunnen verhogen. Er kan echter niet alleen op de tool worden vertrouwd om een beveiligingsbeoordeling uit te voeren”, zegt Tom Ryan, de Blockchain Security Engineer bij de crypto-uitwisseling. 

Volgens de crypto-uitwisseling zou het een kostbare misstap zijn om afhankelijk te zijn van ChatGPT voor beveiligingsbeoordelingen, maar men kan de nauwkeurigheid vergroten door de AI-chatbot te gebruiken in combinatie met handmatige beoordeling om elk risico op te vangen dat mogelijk over het hoofd is gezien.

Zoals eerder gerapporteerd door BitcoinWisdom, bevestigde Coinbase dat het een blootstelling had van ongeveer $240 miljoen aan Signature Bank, een in New York gevestigde bankinstelling die eerder deze maand werd gesloten door het New York Department of Financial Services (NYDFS). De Federal Deposit Insurance Corporation (FDIC) werd opgericht als curator van de bank. 

Aan de andere kant, de crypto exchange is ook van plan om uit te breiden buiten de Verenigde Staten, wat kan worden gezien als een poging om te concurreren met Binance, 's werelds grootste crypto-uitwisseling qua handelsvolume. Een woordvoerder van Coinbase schreef in een e-mail dat de internationale expansiedrift van het bedrijf “zich zal concentreren op rechtsgebieden met hoge eisen”, terwijl hij eraan toevoegt dat de beurs “gefocust blijft op het aanbieden van onze producten op een veilige, conforme manier, met gezond risicobeheer als kern .”

Laatste nieuws