MAC-SQL: Spolupráca viacerých agentov pri prevode textu na SQL
Trojagentový dizajn MAC-SQL dosahuje 59,59 % presnosti vykonania na BIRD, pričom Refiner pridáva +4,63 bodu — šablóna na generovanie dotazov nad Beancount ledgerom.
#database
Databáza
Databázové systémy, generovanie SQL a správa štruktúrovaných dát pre finančnú AI
DIN-SQL: GPT-4 skočí z 67,4% na 85,3% EX na Spideri
DIN-SQL posúva GPT-4 z 67,4% na 85,3% presnosti vykonávania na Spideri cez fázy schema-link a self-correct — rovnaký rozklad sa hodí aj na Beancount BQL.
BIRD: GPT-4 dosahuje na reálnych databázach iba 54,89 % EX
Na BIRD dosahuje GPT-4 presnosť vykonávania 54,89 % s doménovými nápoveďami a 34,88 % bez nich – rozdiel 20 bodov, ktorý musí každé rozhranie NL→BQL v Beancount preklenúť.