Tian Pan
Research Engineer
2 articoliVedi tutti gli autori
·tian
Toolformer: Utilizzo di strumenti in auto-supervisione e i suoi limiti per l'AI finanziaria
Un'analisi approfondita di Toolformer (Meta AI, NeurIPS 2023): come l'addestramento auto-supervisionato filtrato per perplessità insegna a un modello da 6,7 miliardi di parametri a chiamare API esterne, dove supera GPT-3 175B nei benchmark aritmetici, e perché la sua architettura a passo singolo non può supportare le chiamate a strumenti concatenate richieste per operazioni contabili strutturate.
ai
llm
machine-learning
·tian
FinBen: Benchmarking di 36 Compiti Finanziari con LLM — Implicazioni per l'IA Contabile
FinBen valuta 15 LLM su 36 dataset finanziari a NeurIPS 2024, scoprendo che GPT-4 raggiunge 0,63 di Exact Match nel QA numerico e 0,54 nella previsione dei movimenti azionari — vicino al caso. Ecco cosa significano questi numeri per costruire un agente contabile affidabile su un registro Beancount.
ai
llm
machine-learning