WeaveEsitoob tööriistu, kes peutatakse koodi

W&B Weave on jälgitavuse ja hindamise platvorm, mis aitab jälgida ja parandada suurte keelemudelite (LLM) rakendusi. Weave pakub tööriistu jälgimiseks, mõõdikute kogumiseks ja rakenduste vastuste hindamiseks LLM kohtunike ja kohandatud skoorerite abil. Põhijooned hõlmavad seansside jälgimist, LLM kõnesid ja tööriistakõnesid, samuti kohandatud agentide käsitsi instrumentatsiooni. Platvorm toetab integreerimist populaarsete SDK-de ja riistvaradega, samuti kohandatud agendi jälgitavust. Weave pakub Pythoni ja TypeScripti teeke platvormi installimiseks ja kasutamiseks. See on hostitud Weights & Biases'il (W&B), mis nõuab W&B konto ja API võtme olemasolu autentimiseks. Kasutajad saavad jälgida LLM-ide kõnesid, üle vaadata sisendeid ja väljundeid ning vaadata agendi mõõdikuid Weave kasutajaliideses. Kui Weave hõlbustab LLM-rakenduste automatiseerimist ja hindamist, siis see ei ole siiski nn nullkoodiga AI töövoo koostaja, nagu võib arvata selle nimest.