Relari (YC W24)Testavimas, įvertinimas ir sintetinio duomenų generavimas platforma už AI agentus.

4.3 (6)

Apžvelgė Daniel Nikulshyn·Atnaujinta 2026 m. liepa

Apžvalga

Relari yra toliau tyrimų ir įvertinimų pagrindinės funkcijos turinčios developerio platforma, skirta pagerinti AI agentų ištikimumą. Komanda pagalbos gali sukurti sintetinius duomenis, automatizuotus įvertinimus ir tikrinti agentų atlikimą iš tikrųjų scenarijų bei priklausančius rezultatus prieš siūlymą į gamybą. Pagaminta Y Combinator (W24) parama, Relari siekia technologų mėgėjus, kurie įrengia kompleksius LLM taikiklius ir įvairaus lygio agentus kurie tradicinėje QA metuose yra nepakankamai patikrinti. Šio įrankio tikslas yra įtraukti į software-engineering rigorą - vienetinius testus, regresinius kontrolierius ir matomus matavimo rodiklius netiesioginiam AI sistemoms. Plataforma priimsi specializuoti evaluatoriai, scenarijų simuliacija ir tęstinė monitorė, kad ji būtu naudinga ne tik atitikimo priimimu, bet ir nuolatiniam pagaminių agentų kokybės tikrinimui.

Pagrindinės funkcijos

Sintetiniai duomenų sąrašai generavimas
Automatizuoti agentų įvertinimo srautai
Skriptos ir pokalbių simuliacija
Šildimų įvertinimo metrikai sąranka
Reagraviniai testsai už LLM programėlių
Atlikimų ir ataskaitų našumą matavimas

Kainos

Modelis: Free
Kategorija: Apžvalginės galutiesioss
Įvertinimas: 4.3 / 5 (6)

Naudojimo atvejai

Testavimas už AŽ agentus

Relabilūs ir testuojami AŽ agentų įvertinimas už AŽ agentus.

Privalumai ir trūkumai

Privalumai

Specialiai įrengta už vertinant tikslias žingsnius AŽ agentų
Generuoja sintetinius testavimo duomenis masiškuose matmenims
Palaiko atsargines išmatavimus ir įvertinėjus
Įgija Y Combinator sujungta su aktive rengiasi
Žingsniai

Trūkumai

Primariškai skirta technikų komandoms, ne neigūdamiems vartotojams
Nauja platforma su kylančiuose funkcionalumo turiniuose
Matės su užrakinimo darbu integravosi tikslais esančioms sistemoms

Mūšių rekordas

3 mūšiuose Panteone.

Last 3 battles

Atsiliepimai

4.3

Vidurkis iš 6 įvertinimų.

Prisijunk, kad paliktum atsiliepimą.

Fatima Zahra

Apr 4, 2026

Skeptical, then convinced

I went in skeptical — most tools in this space overpromise. It actually delivers on customizable evaluation metrics, and purpose-built for evaluating multi-step AI agents caught me off guard. still, I'd recommend giving it a real trial.

Robert Ainsworth

Mar 17, 2026

Solid for our team

We rolled this out across the team last quarter and supports custom metrics and evaluators. Customizable evaluation metrics fits neatly into how we already work, and customizable evaluation metrics removed a step we used to do by hand. Primarily aimed at technical teams, not non-developers, which is the main caveat, but it has held up under daily use.

Devin Walker

Feb 6, 2026

Skeptical, then convinced

I went in skeptical — most tools in this space overpromise. It actually delivers on performance benchmarking and reporting, and supports custom metrics and evaluators caught me off guard. Primarily aimed at technical teams, not non-developers is why this isn't a perfect score, still, I'd recommend giving it a real trial.

Carlos Mendoza

Jul 20, 2025

Compared a few options

Evaluated this against two competitors. Where it wins: scenario and conversation simulation and purpose-built for evaluating multi-step AI agents. Where it lags: may require integration work to fit existing stacks. On balance the feature set — especially scenario and conversation simulation — justifies the 5 stars for our use case.

Yuki Mori

Jul 19, 2025

Use it every day

Honestly didn't expect to like it this much. Performance benchmarking and reporting is exactly what I needed, and purpose-built for evaluating multi-step AI agents. I do wish may require integration work to fit existing stacks, but I reach for it almost every day now and it just clicks.

Leila Hassan

Jul 14, 2025

Skeptical, then convinced

I went in skeptical — most tools in this space overpromise. It actually delivers on regression testing for LLM apps, and supports custom metrics and evaluators caught me off guard. May require integration work to fit existing stacks is why this isn't a perfect score, still, I'd recommend giving it a real trial.

Klausimai

Kokie yra Relari naudojimo pranašumai?

Relari yra specialiai sukurtas daugiažingsnių AI agentų įvertinimui, generuoja sintetinius testų duomenis dideliu mastu, palaiko keičiamas metrikas ir įvertintojus, su aktyvia Y Combinator parama.

Asked by Anya Sokolova · Jun 27, 2026

Ar Relari tinka netechninėms komandoms?

Relari yra daugiausia skirta techninėms komandoms, o ne neprogramuotojams, ir gali reikėti integruoti darbo, kad tiktų esamų stekų.

Asked by Hasan Demir · May 27, 2026

Kokias funkcijas palaiko Relari?

Relari palaiko tokias funkcijas kaip sintetinių duomenų rinkinių generavimas, automatinis agentų įvertinimo kasos, scenarijų simuliacija ir keičiamos įvertinimo metrikos.

Asked by Marisol Pena · Apr 17, 2026

Kam naudojama Relari?

Relari yra platforma testavimui, įvertinimui ir sintetinių duomenų generavimui AI agentams, padedanti komandoms pagerinti jų patikimumą sisteminiu testavimu ir įvertinimu.

Asked by Hana Kobayashi · Mar 25, 2026

Užduoti klausimą

Apžvalginės galutiesioss alternatyvos

KeywordsAIApžvalginės galutiesioss

Unifikuota programistų platforma, skirta LLM taiklus sukurti, monitoruoti ir skalėti.

5.0 (6)

Free

GuardianApžvalginės galutiesioss

Gynybės ir valdymo platforma autonomiškams AI agentams ir intelektinei sistemai

5.0 (5)

Free

Maxim AIApžvalginės galutiesioss

Visiškas platformoje, skirta įvertinti, stebėti ir pagerinti automatinių agentų sistemą

4.8 (6)

Free

llm scoutApžvalginės galutiesioss

Išvagėdami, kaip jūsų markė atsiranda tarp ChatGPT, Claude, Perplexity, ir Google AI Ataskaitų.

4.8 (5)

5Free

WeaveApžvalginės galutiesioss

Įvairių pradinės kodės sąrankos konstruktorius, kuris leidžia įmonėms automatizuoti veiklą, integruodami daugius kietų kalbos modelius (LLM) ir sujungdamas signalus kaip tikrai tekstą.

4.8 (5)

2Free