#financial-literacy

Finančná gramotnosť

Výskum reprezentácie finančných znalostí a kompetencie LLM

Príspevkov: 2Zobraziť všetky štítky Späť na všetky príspevky

23. júna 20266 min čítania

LLM dosahujú 2,3 % v generovaní Beancount DSL: Benchmark LLMFinLiteracy

LLMFinLiteracy zisťuje, že päť modelov s ~7B parametrami napíše správne Beancount transakcie len v 2,3 % prípadov, pričom zlyhávajú na účtovnom uvažovaní, nie na syntaxi.

Mike Thrift

llmbeancountplain-text-accounting

18. apríla 20265 min čítania

Benchmark FinMaster: Prečo LLM dosahujú 96 % vo finančnej gramotnosti, ale iba 3 % pri generovaní výkazov

FinMaster Benchmark: špičkové LLM dosahujú 96 % vo finančnej gramotnosti, ale len 3 % pri generovaní výkazov. Šírenie chýb stojí 21 bodov pri konzultačných úlohách.

Mike Thrift

llmaccountingai

Začať zadarmo→Dokumentácia