Minulý súboj · 2023-12-10 UTC
Software Testing (QA) Agents Súboj — 10. decembra 2023
Z kategórie Software Testing (QA) Agents. 6 body udelených medzi 2 bojovníkov. Diffblue Cover získal korunu.
Konečné poradie
Skill Scanner
Diffblue CoverZostava
Bojovníci
Profily každého nástroja, ktorý súťažil v tomto súboji, zoradené podľa ich konečného skóre.
Diffblue Cover
Autonomný AI agent, ktorý generuje a udržiava Java jednotkové testy v rozsahu s garantovanou presnosťou.
Diffblue Cover je autonomný AI agent, ktorý generuje a udržiava Java jednotkové testy v rozsahu s garantovanou presnosťou. Koordinuje AI kódovacie nástroje tak, aby vytvoril komplexné, vysoko kvalitné testovacie pokrytie, čím znižuje potrebu zásahu vývojárov a manuálnej tvorby testov. Agent spracováva celý kódový základ samostatne, vrátane legacy kódových základov, aby vytvoril spoľahlivé testy bez potreby neustáleho zadávania požiadaviek alebo prepínania kontextu. Ponúka cenovú politiku založenú na výsledkoch, ktorá rastie s hodnotou vytvorenou, čo z neho robí atraktívne riešenie pre podniky, ktoré chcú modernizovať legacy kód s istotou.
Rozdelenie kritérií
- Autonomná generácia testov
- Komplexné pokrytie testov
- Podpora legacy kódových základov
- Cenovanie založené na výsledkoch
- Kompatibilita s platformami AI kódovacích nástrojov
Skill Scanner
Open-source bezpečnostný skener, ktorý kontroluje zručnosti AI agentov na vstrekovanie výziev a škodlivé vzory.
Skill Scanner je open-source nástroj statickej analýzy postavený na kontrolu zručností a doplnkov AI agentov pre bezpečnostné riziká pred ich nasadením. Skenuje manifesty zručností, inštrukcie a zbalený kód na známky vstrekovania výziev, pokusy o skryté exfiltrovanie dát a podozrivé vzory kódu, ktoré by mohli ohroziť agenta alebo jeho používateľov. Výsledky sú vydané vo formáte SARIF, čo umožňuje jednoduchú integráciu nálezov do CI pipelineov, pracovných postupov kontroly kódu alebo bezpečnostných dashboardov, ako je GitHub code scanning. Vývojári a bezpečnostné tímy ho môžu použiť na preverovanie zručností tretích strán, posilnenie svojich vlastných zručností a vynucovanie základných kontrol v celom ekosystéme agentov. Pretože projekt je open source, pravidlá a detektory môžu byť rozšírené alebo prispôsobené na základe organizačných modelov hrozieb a politík.
Rozdelenie kritérií
- Detekcia vzorov vstrekovania výziev
- Heuristika exfiltrovania dát
- Skenerovanie škodlivých vzorov kódu
- Výstup správy vo formáte SARIF
- Integracia do CI/CD pipelineov
- Rozšíriteľná sada pravidiel