Dokáže umělá inteligence skutečně nahradit kryptografické audity?

Ilustrační obrázek | zdroj CoinBank.cz

Umělá inteligence

Životy lidí čím dál více ovlivňuje počítač a softwary, které na něm běží. Ruku v ruce s větším využíváním softwarů všeho typu se do popředí zájmů dostává také umělá inteligence. Ta dokáže za člověka přebírat plno úkolů a velmi rychle dopomoct s jejich řešením. Nebyl by to svět kryptoměn, kdyby takto významný faktor a inovaci opomíjel. Jsme tak svědky toho, že umělá inteligence radikálně proměňuje svět kryptoměn. Umělá inteligence (zkr. AI z angl. Artificial Intelligence) má obrovský potenciál a na její popularitě ji přidává zejména to, že dokáže najít neotřelé řešení všelijakých složitých problémů. Na rozdíl od lidí dokáže AI efektivněji využívat data, čímž jim na oplátku může pomoci při přijímání lepších rozhodnutí.

Testování, co AI dokáže

Jedna z největších kryptoburz na světě, společnost Coinbase, se tak rozhodla využít obřího potenciálu AI a začala testovat, jestli by se dala využít při provádění bezpečnostní analýzy tokenů ERC-20. Před pár dny tak společnost Coinbase prostřednictvím ChatGPT provedla test analýzy bezpečnosti tokenů ERC-20 a výsledky zveřejnila 20. března v příspěvku na svém blogu. Test se zaměřil na provádění automatizovaných přezkumů tokenů, které využívaly vlastní rámec Coinbase pro přezkum tokenů ERC-20.

Aby společnost Coinbase dostala relevantní výsledky, porovnávala výsledky analýz ChatGPT s výsledky analýz, které zároveň manuálně prozkoumal interní tým s pomocí firemních softwarových nástrojů. Tyto nástroje dennodenně používá pro včasné odhalení rizikových blockchainových projektů. Společnost prostřednictvím ChatGPT zkoumala riziko u 20 různých chytrých smluv. Výsledky posléze srovnala s výsledky manuálního přezkumu interního týmu. 

Výsledek analýzy zatím není pro AI příznivý

Po přezkoumání 20 různých chytrých kontraktů přinesl nástroj AI ChatGPT 12× stejné výsledky jako manuální přezkoumání. Ve zbylých osmi případech však fatálně chyboval. Z těchto osmi chyb totiž v pěti případech ChatGPT nesprávně označil vysoce rizikové aktivum jako nízkorizikové, což je nejhorší případ selhání. Navíc experiment odhalil, že AI v některých případech poskytla při opakovaném testování rizik odlišný výsledek. V rámci přezkumu se tak stalo u pěti případů dokonce desetkrát. Bližším zkoumáním interní tým zjistil, že stejná výzva generovala různé výsledky, zejména při přechodu z jedné iterace ChatGPT na další.

Společnost Coinbase konstatovala, že ChatGPT s dosaženou 60% úspěšností odhalení rizik zatím není schopen dobře analyzovat případná rizika. Děje se tak především tehdy, kdy AI k provedení robustní bezpečnostní analýzy chybí dostatek dat a jejich vzájemný kontext. Druhým aspektem, který Coinbase v souvislosti s testováním rizik umělou inteligencí zmiňuje, je obava, že AI je alespoň prozatím náchylná k nekonzistenci. Ta se navíc může opakovat pokaždé, když dojde k aktualizaci nástroje ChatGPT. Nicméně na závěr svého hodnocení Coinbase uznala, že i když ChatGPT nedosáhl požadované přesnosti, uznala, tak tento nástroj vykazuje zajímavý potenciál.

Budoucnost AI v rámci hodnocení rizik

Co se týče možnosti budoucího využívání AI pro odhalování rizik, je tým Coinbase v této věci optimistický a věří, že s dalším vývojem se může zvýšit přesnost ChatGPT do té míry, že by mohl být používán jako sekundární kontrola kvality. Zatím však nedosahuje takové úrovně přesnosti, která by manažery jasně přesvědčila, aby byl ChatGPT integrován do interních procesů hodnocení rizik.

Již nyní uživatelé pozorují značný pokrok mezi starší verzí ChatGPT 3.5 a novou verzí ChatGPT 4.0. Není tak vyloučeno, že díky budoucímu vývoji se přesnost a konzistentnost v poskytovaných analýzách bude zvyšovat a zlepšovat. Odmítat tak jeho výhody, popřípadě nezkoumat a netestovat jeho možnosti, by bylo chybou. Je to mocný nástroj, který může uživatelům pomoci rychle pochopit složitá témata a udržet si přehled o nejnovějších bezpečnostních informacích.