
32% ang rate ng hallucination sa isang research tool na ginagamit ng mga tao para gumawa ng mga trade. Iyon ay Research v1.5. @SurfAI ay naglabas na ng Research 2.0 noong May 19 at binalik ito sa 8%. Ang numero na mas mahalaga ay ang pagkakatugma ng lohika ng report: 55% hanggang 94%. Sa v1.5, higit sa apat sa sampung output ay nagkondtradiksyon sa sarili nila sa ilang bahagi ng parehong report. Iyon ay hindi simpleng isyu sa kalidad. Iyon ay isang produkto na aktibong nagmamali sa mga user na basahin ang buong report. Ang pag-rebuild ay nagbago sa orchestration layer mula sa simula, hindi lang ang model. Anong data ang kinukuha, ilang pinagmumulan ang sinusuri, paano istruktura ang sagot. 37 bagong API endpoints ay idinagdag sa prediction markets, institutional capital flows, DeFi comparisons, at Hyperliquid coverage mula sa genesis. Ang Polymarket at Kalshi integration ang isa na aking nakikita bilang totoong interesante. Hindi kayang sagutin ng v1.5 ang isang tanong sa prediction market. Kayang gawin na ng v2.0 ang pag-scan ng 30 araw ng 5-minutong BTC markets at i-flag ang probability reversals sa huling 60 segundo bago ang settlement. Iyon ay isang tiyak, actionable edge na wala dalawang linggo pa ang nakalipas. Ano ang gusto kong makita sunod ay kung mananatili ba ang 8% hallucination rate kapag nagsasagawa na ang portfolio personalization layer. Ang pagkonekta ng user positions at trading style sa research agent ay nagdaragdag ng maraming surface area kung saan maaaring mali ang model sa paraan na mas mahalaga kaysa sa generic errors.
