Battaglia passata · 2024-05-31 UTC
Research AI Agents Sfida — 31 maggio 2024
Dalla categoria Research AI Agents. 34 segni piazzate tra 8 sfidanti. Google AI Co-Scientist ha conquistato la corona.
Classifica finale
La formazione
Gli sfidanti
Profili di ogni strumento che ha gareggiato in questa battaglia, ordinati per punteggio finale.
Google AI Co-Scientist
Un sistema di intelligenza artificiale multi-agente collabora con gli scienziati per generare ipotesi e accelerare la ricerca biomedica.
Google AI Co-Scientist è un sistema di intelligenza artificiale multi-agente progettato per collaborare con gli scienziati e accelerare la ricerca biomedica. È stato sviluppato con Gemini 2.0 e funziona come un collaboratore scientifico virtuale per aiutare a generare ipotesi e proposte di ricerca innovative. Il sistema è pensato per rispecchiare il processo di ragionamento alla base del metodo scientifico e scoprire nuove conoscenze originali. Dato un obiettivo di ricerca dello scienziato specificato in linguaggio naturale, l'AI Co-Scientist genera ipotesi di ricerca innovative, una panoramica dettagliata della ricerca e protocolli sperimentali. Utilizza una coalizione di agenti specializzati, tra cui Generation, Reflection, Ranking, Evolution, Proximity e Meta-review, che utilizzano feedback automatico per generare, valutare e perfezionare iterativamente le ipotesi. Il sistema consente agli scienziati di interagire con esso in vari modi, tra cui fornire idee iniziali per l'esplorazione o feedback sui risultati generati in linguaggio naturale. L'AI Co-Scientist utilizza inoltre strumenti come la ricerca web e modelli di intelligenza artificiale specializzati per migliorare la fondatezza e la qualità delle ipotesi generate. Il sistema è progettato per scalare in modo flessibile le risorse di calcolo e migliorare iterativamente la sua capacità di ragionamento scientifico verso l'obiettivo di ricerca specificato. L'AI Co-Scientist è particolarmente utile per gli scienziati che affrontano sfide nel navigare la rapida crescita delle pubblicazioni scientifiche e nell'integrare informazioni da domini non familiari. Sfruttando i recenti progressi dell'AI, compresa la capacità di sintetizzare argomenti complessi e eseguire pianificazione e ragionamento a lungo termine, l'AI Co-Scientist mira ad accelerare la velocità delle scoperte scientifiche e biomediche. Il sistema è stato testato in varie applicazioni, tra cui la scoperta del trasferimento di geni e la riscoperta del trasferimento. Mentre l'AI Co-Scientist presenta diversi vantaggi, la sua efficacia dipende dalla qualità dell'obiettivo di ricerca inserito e dalla capacità dello scienziato di fornire un feedback significativo. L'AI Co-Scientist è un nuovo strumento che ha il potenziale per avere un impatto significativo sulla comunità scientifica, ma i suoi limiti e potenziali pregiudizi devono essere attentamente valutati. Lo sviluppo dell'AI Co-Scientist è uno sforzo continuo e le sue future applicazioni e miglioramenti dipenderanno da ulteriori ricerche e test.
Suddivisione dei criteri
- Generazione di ipotesi
- Creazione di panoramica di ricerca
- Sviluppo di protocolli sperimentali
- Agenti specializzati per ragionamento scientifico
- Ciclo di feedback automatizzato
- Integrazione con la ricerca web
Bright Data Web MCP
Server MCP che fornisce agenti AI di ricerca web affidabile, scraping e automazione del browser con 5.000 richieste gratuite mensili.
Il servizio Web MCP di Bright Data è un server che consente agli agenti AI di cercare in modo affidabile, estrarre dati e automatizzare il browser. Fornisce 5.000 richieste gratuite mensili. Il tool consente agli agenti AI di cercare efficacemente il web, estrarre dati e navigare siti web senza essere bloccati. Offre funzionalità come risultati di ricerca in tempo reale, estrapolazione dati, crawlabilità dei siti web e automazione del browser. Il servizio Web MCP è progettato per aggirare blocco e restrizioni, e si fida su oltre 20.000 clienti in tutto il mondo.
Suddivisione dei criteri
- Sfida alla ricerca web in tempo reale
- Crawlabilità dei siti web e estrapolazione dati
- Automazione del browser
- Aggiornamento di blocco e CAPTCHA delle aree geografiche
- Rendering JavaScript per contenuti dinamici
- Modellamento del comportamento di un utente reale
Kosmos
Scienziato AI autonomo per campagne di ricerca lunghe che analizza dati e letteratura per produrre relazioni scientifiche complete e citate.
Kosmos è uno scienziato AI autonomo progettato per squadre R&D biotech e ricercatori. Analizza dati e letteratura per produrre relazioni scientifiche complete e citate, accelerando il processo di sviluppo di farmaci da ipotesi a registrazione in pochi giorni, non mesi. Kosmos lavora in modo autonomo, leggendo la letteratura, generando ipotesi, orientando le indagini, eseguendo workflow scientifici. Supporta l''intera vita ciclo del sviluppo di farmaci, dalla identificazione di obiettivi attraverso lo sviluppo clinico e la presentazione. L''AI strumento collabora con gli scienziati umani tramite Slack, Teams e email, e impara dall''esperienza dell'organizzazione, costruendo su storia sperimentale e dati scientifici proprietari.
Suddivisione dei criteri
- Generazione di ipotesi autonoma
- Analisi della letteratura
- Analisi dei dati
- Esecuzione dei workflow scientifici
- Collaborazione tramite Slack, Teams e email
- Agnotico del modello per futuri modelli di stato dell''arte
THEUS (Aigora)
Sistema di ricerca AI per aziende che trasforma studi di proprietà in insight tracciabili con ID di fatto, citazioni e avatar di esperto per la sintesi.
THEUS è un sistema di ricerca AI aziendale che trasforma studi proprietari in informazioni tracciabili con ID fattuali, citazioni e avatar di esperti. È costruito sul Google Agent Development Kit (ADK) e utilizza la modellazione bidirezionale per agenti di conoscenza basati sui dati. Gli utenti possono estrarre, sintetizzare ed esplorare i loro dati di ricerca e ogni affermazione è supportata da un ID Fatto specifico con citazioni a livello di pagina. THEUS offre due modi per esplorare: generare nuove informazioni con Dr. Reed o analizzare le conoscenze esistenti con Dr. Sinclair. Questa piattaforma è progettata per i VPs di Insights, i Global Sensory Leads e i leader dell'innovazione che valutano la costruzione di capacità strategiche. Utilizza una metodologia di ricerca costruita ad hoc, non l'intelligenza artificiale generica per le imprese, e crea agenti di conoscenza basati sui dati addestrati su dati istituzionali reali. Con l'85% dei nuovi prodotti che falliscono entro due anni (Nielsen), l'esplorazione basata su prove concrete migliora drasticamente la qualità delle decisioni. THEUS offre un posto singolo, che include funzioni come fino a 30 documenti ingeriti al mese, fino a 1.500 pagine analizzate al mese e fino a 500 domande a Dr. Sinclair al mese. Uno dei principali vantaggi di THEUS è la sua capacità di trasformare decenni di dati proprietari in informazioni verificabili e pronte per essere utilizzate nelle decisioni, grazie ad agenti di conoscenza basati sull'intelligenza artificiale.
Suddivisione dei criteri
- Estrarre, sintetizzare ed esplorare i propri dati di ricerca
- Generare nuove insight con il dottor Reed o analizzare conoscenze esistenti con il dottor Sinclair
- Modellazione bidirezionale per agenti di conoscenza basati su dati
- Connettere conoscenza del prodotto e del consumatore per insight bidirezionale
- Supporta la sintesi e l'analisi di gap di ricerca attraverso studi
- Genera fino a 20-30 fatti atomici a pagina da ricerche storiche
AMIE
Un agente medico diagnostico multimediali che condotta conversazioni cliniche ed interpreta immagini mediche per una diagnosi accurata.
AMIE (Explorer dell'intelligenza medica articolata) è un agente diagnostico AI di ricerca sviluppato da Google DeepMind e Google Research. È progettato per condutere conversazioni cliniche e interpretare immagini mediche per una diagnosi accurata. Inizialmente, AMIE era un agente conversazionale medico diagnostico di tipo testuale pubblicato su Nature. L'ultima evoluzione, il multimodale AMIE, integra la capacità di richiedere, interpretare e ragionare sulla informazione medica visiva in modo intelligente durante le conversazioni cliniche. Questo sviluppo mira a migliorare l'accuratezza diagnostica incorporando dati multimodali, come immagini e documenti, nel processo diagnostico. AMIE utilizza un framework di ragionamento a stato consapevole e si basa sui modelli multimodal Gemini. È stato valutato attraverso valutazioni di esperti, comprese le Valutazioni Cliniche Strutturate Obiettive (OSCEs), confrontando le sue prestazioni con le attività pratiche primarie dei medici (PCPs) in varie scenari di pazienti.
Suddivisione dei criteri
- Diagnostica dialogico multimediali
- Interpretazione dell'informazione medica visiva
- Framework di ragionamento a stato consapevole
- Integrazione con modelli Gemini
- Ambiente di simulazione per la valutazione del dialogo
QualiaInterviews
Piattaforma guidata dall'intelligenza artificiale per la ricerca e l'valutazione qualitativa di interviste conversazionali a larga scala e linguistico molteplice.
QualiaInterviews è una piattaforma di ricerca che utilizza l'intelligenza artificiale per condurre interviste con i partecipanti attraverso un dialogo naturale e conversazionale. Consente ai team di raccogliere informazioni qualitative da campioni di dimensioni più grandi rispetto a quelli consentiti dalle tradizionali interviste uno-a-uno, preservando al contempo la profondità e le sfumature della conversazione aperta. Lo strumento supporta i colloqui in più lingue, rendendolo adatto a studi transfrontalieri, ricerche di mercato globali e valutazioni di programmi. I ricercatori possono progettare guide per i colloqui, distribuirle ai partecipanti e esaminare i risultati strutturati automaticamente senza dover moderare manualmente ogni sessione. QualiaInterviews viene generalmente utilizzato da ricercatori sociali, valutatori, team UX e organizzazioni che eseguono valutazioni di impatto che necessitano di dati qualitativi scalabili senza sacrificare la profondità conversazionale.
Suddivisione dei criteri
- Interviste conversazionali moderate dall'intelligenza artificiale
- Supporto per interviste multilingue
- Domande aggiuntive e di approfondimento automatizzate
- Analisi strutturata delle risposte qualitative
- Scalabilità del reclutamento dei partecipanti
- Strumenti per il workflow di ricerca e valutazione
Table Agent è un assistente AI progettato per aiutare nella ricerca tabellare. È concepito per automatizzare il processo di raccolta di dati su qualsiasi argomento, rendendo così la ricerca più efficiente. Il tool consente di avere schemi di dati personalizzabili, il che consente agli utenti di adattare la raccolta dei dati alle loro esigenze specifiche. La flessibilità di questo tool è particolarmente utile in un'ampia gamma di applicazioni e settori dove la struttura dei dati può variare significativamente. Al cuore della funzionalità di Table Agent si trova la sua capacità di ricerca dei dati basata sull'agente di intelligenza artificiale. Ciò significa che l' strumento utilizza l'intelligenza artificiale per cercare attivamente e compilare i dati rilevanti, potenzialmente riducendo il tempo e lo sforzo richiesti per le ricerche manuali. Sebbene non si forniscono particolari sulle sue modalità di processo e integrazioni, il concetto di assistente dei dati guidato dall'intelligenza artificiale suggerisce che potrebbe essere integrato facilmente con vari strumenti di analisi dei dati, quindi potenziare l'intero processo di ricerca. Le caratteristiche più rilevanti di Table Agent includono probabilmente la sua capacità di automatizzare le attività di raccolta dati tediose e la sua flessibilità rispetto a diverse strutture dati. Tuttavia, senza ulteriori informazioni specifiche, risulta difficile determinare i suoi limiti o come si confronti con altri strumenti di assistenza dati alternative.
Suddivisione dei criteri
- Raccolta dei dati automatizzata
- Schemi dei dati personalizzabili
- Ricerca dei dati guidata dall'intelligenza artificiale
- Raccolta dei dati veloce e precisa
Autoresearch
Progetto open-source che consente agli agenti AI di eseguire autonomamente gli esperimenti di addestramento dell'LLM e di mantenere le modifiche alla migliore modello.
Autoresearch è un progetto open-source che consente agli agenti AI di eseguire autonomamente gli esperimenti di addestramento dell'LLM e di mantenere le modifiche alla migliore modello. Il progetto consente agli utenti di configurare un ambiente di addestramento LLM di piccole dimensioni ma reale e di far lavorare un agente AI con esso durante la notte, modificando il codice, addestrando per un breve periodo e controllando se i risultati sono migliorati. L'obiettivo è automatizzare il processo di ricerca, permettendo all'agente AI di esplorare diverse architetture dei modelli, iperparametri e strategie di ottimizzazione senza l'intervento umano. Il progetto include un'implementazione semplificata single-GPU di nanochat e fornisce una struttura di base per programmare il processo di ricerca dell'agente AI utilizzando file Markdown. Il progetto è progettato per essere estendibile, consentendo agli utenti di aggiungere più agenti e migliorare il processo di ricerca nel tempo.
Suddivisione dei criteri
- Eseguimento autonomo degli esperimenti di addestramento dell'LLM
- Processo di ricerca guidato dall'agente AI
- Implementazione single-GPU di nanochat
- Programmazione del processo di ricerca tramite file Markdown
- Budget di training di 5 minuti con metrica di valutazione (val_bpb)