VP Teknik Google, Royal Hansen menulis di platform X bahwa temuan ini menunjukkan batas baru dalam penemuan kerentanan otomatis. Selain BigSleep, ada juga alat serupa seperti RunSybil dan XBOX. 

XBOW sempat menduduki urutan utama pada salah satu papan peringkat pemburu bug di  platform HackerOne. Namun dalam kebanyakan kasus, laporan ini melibatkan manusia di beberapa titik proses untuk memverifikasi bahwa pemburu bug bertenaga AI menemukan kerentanan yang sah seperti halnya dengan Big Sleep.

Vlad Ionescu, salah satu pendiri dan CTO di RunSybil – sebuah startu) yang mengembangkan pemburu bug berbasis AI – mengatakan kepada TechCrunch bahwa Big Sleep adalah proyek serius. Dia menilai ada tim yang memiliki pengalaman dalam menemukan bug, desain sistem terbaik, dan SDM dari DeepMind untuk melakukannya.

Meski menjanjikan, teknologi ini mempunyai kekurangan yang signifikan. Beberapa orang yang mengelola berbagai proyek perangkat lunak mengeluhkan laporan bug yang sebenarnya merupakan halusinasi.

“Itulah masalah yang dihadapi banyak orang, kita mendapatkan banyak laporan yang tampak seperti emas, tetapi sebenarnya hanya sampah,” ujar Ionescu.

(far/wep)