Prošla bitka · 2024-03-14 UTC
Software Testing (QA) Agents Obračun — 14. ožujka 2024.
Iz kategorije Software Testing (QA) Agents. 12 oznaka postavljeno među 4 boraca. Diffblue Cover je preuzeo krunu.
Konačni poredak
Postava
Borci
Profili svakog alata koji se natjecao u ovoj bitci, rangirani prema konačnom rezultatu.

Diffblue Cover
Autonomni AI agent koji generira i održava jedinice za Javu na velikim skalama s garantiranom preciznošću.

Diffblue Cover je autonomni AI agent koji generira i održava Java jedinice testova u velikom obujmu s garancijom točnosti. Orkestrira AI alate za kodiranje kako bi stvorio sveobuhvatan i visokokvalitetan pokrivač testova, smanjujući potrebu za intervenccijom razvijatelja i ručnim stvaranjem testova. Agent procesira cijeli kodni repozitorij autonomno, uključujući i legacy kodne repozitorije, kako bi proizveo pouzdane testove bez potrebe za kontinuiranim poticanjem ili promjenom konteksta. Nudi cenu temeljenu na rezultatima koji se skalira s vrijednošću koja se generira, što ga čini atraktivnim rješenjem za poduzeća koja žele modernizirati legacy kod s pouzdanošću.
Razljepljivanje kriterija
- Autonomna generacija testova
- Sveobuhvatan pokrivanje testova
- Podrška za legacy codebase
- Cijena temeljena na ishodu
- Kompatibilnost plataforma s AI alatima za kodiranje

Skill Scanner
Dostupan otkriveni sigurnosni skener koji provjerava AI agenčke veštine za injektiranje upita i loše obuhvaćene uzorke.

Skill Scanner je otvoreni izvorni staticki analitički alat koji je dizajniran za pregled vještina AI agenata i dodataka za potencijalne sigurnosne rizike prije čime se oni implementiraju. Osim toga, pregleda manifeste vještina, uputa i vezane kode za znake namjernog uvježbanja, skrivenog izdvajanja podataka te sumnjivih vzora koji bi korištenjem agenata ili njegovih korisnika mogli kompromitirati. Rezultati emitiraju se u formatu SARIF, što čini integraciju nalaza u CI tokove, stručne revizije koda ili sigurnosne ploče kao što je GitHub code scanning jednostavnom. Razvijači i timovi sigurnosti mogu koristiti ga za provjeru trećestrana skilova, izradu osobitih vlastitih, te uvjetno provjeravaju sve skille u agentu-ekosustavu. S obzirom što je projekt otvorenog kôda, pravila i detektori mogu biti prošireni ili prilagođeni kako bi se prilagodili organsacijskim-modelima prijetnji i politikama.
Razljepljivanje kriterija
- Detekcija uzoraka upita u okviru kojih se mogu izvršiti ukradene pattern
- Heuristike za eksfiltraciju podataka
- Scansiranje loših obuhvaćenih uzoraka koda
- Izvješće SARIF-a za izlaz
- Integracija u tokove CI/CD pipeline-a
- Ekstenzibilne pravilo uporabe

PentAGI
Otvorene izvore autonomne agente pronalaženja slabača koji beže 20+ sigurnošću alata u izoliranom Docker sandboxu s memorijom i web inteligencijom.

PentAGI je otvoreni izvor autonomni agent za provjeru penetracije koji pokreće 20+ sigurnosnih alata u izoliranom kontejner dizajnu Docker. Upotrebljava umjetne inteligencije tehnologije kako bi se automatsko provodila sigurnosna testiranja. Alat je dizajniran za profesionalce iz oblasti informacijske sigurnosti i istraživače koji trebaju moćni i prilagodiv alat za provjeru penetracije. Glavne značajke uključuju izolirani sustav, automatsko planiranje zadataka te integraciju s različitim alatima i pretražnim sustavima. PentAGI također nude sustav delegirana kontrola, opći nadzor i detaljna izvješća.
Razljepljivanje kriterija
- Sandbox Docker okruženje
- ogradnja izvornih 20+ profesionalnih sigurnosnih alata
- Inteligentni Sistem Pamćenja za dugoročnu pohranu
- Integracija grafa znanja
- Web Inteligencija preko grafičkog preglednika uključenog u izvornoj alatu
- Integracija vanjskog sistema pretraživanja

Keploy
Otvoreno-kodna AI agenca koja automatski generira i održava jednostavne, integracijske i API testove s mockovima.

Keploy je otvoreni kod AI testni platform, koji snima stvarni API promet uz pomoć eBPF-a i opet emitira ga u CI-u kao deterministične provjere za regresiju, automatski generirane mocke i produkcijski slične stvari u sandboxima bez bilo kakvih promjena u kodu. Podrška je dostupna za sve jezike (Go, Java, Python, Node.js, Rust, PHP, Ruby) i frameworkove. Napredne funkcionalnosti su dostupne kroz upravljanu oblак. Keploy nudi besplatni nivo koji omogućava razvojaocima pokušati platformu s 30 testnim setovima/mjesec i 5 umjetnim inteligencijom kredita. Platforma također je dostupna u nivou Pro (24$ po korisniku/mjesec) te Enterprise nivou s potporom na zahtjev i SOC2/SLA kontraktnim uvjetima. Otvoreni kôd u samoj osnovi ostaje besplatno dostupan za samohranu na kraju svoje karijere. Platforma omogućava razvojačima bilježenje regresnih testova iz stvarnog protoka APITraffica te ih ponovno igrati u CI kao izolirane sandboxe. Ovaj process traje milisekundu, što ga čini mnogo bržim nego tradicionalne metode testiranja. Keploy-je karakterizira sposobnost podržavanja bilo koje jezike i okruženja, generiranje automatskih mocks-a, te održavanje proizvodnja sličnih sandboxova bez ikakvih izmjena koda.
Razljepljivanje kriterija
- Automatski generirani mockovi
- Produkcijski-podobne sandboxe
- Regression testovi
- Pridobivanje API trafika pomoću eBPF
- Podrška za bilo koji jezik i okvir



