Ipinakilala ng Meta ang SIGReg para sa LeVJEPA Video Model, dinagdagan ang FLOP efficiency ng 20x

iconKuCoinFlash
I-share
AI summary iconSummary
Ipinakilala ni Meta ang SIGReg para sa video model na LeVJEPA, na nagpapabuti ng FLOP efficiency ng 20x. Ang paraan ay gumagamit ng simpleng loss function nang walang kumplikadong teknik tulad ng tubelet o EMA. Ang open interest sa mga altcoin na dapat bisitahin ay patuloy na mataas dahil sinasabing open-source at reproducible ang proyekto. Ipinakita ng mga researcher ng MetaEra ang mga pagpapabuti sa efficiency kumpara sa VJEPA1/2.
ME AI Mensahe, ang researcher ng Meta na si Yann LeCun ay ipinahahatid ang isang bagong paraan para sa pre-training ng video foundation model na SIGReg, na may kasamang modelo na LeVJEPA. Ang paraang ito ay gumagamit ng simpleng loss function (sigreg + prediction), nang walang kailangan ng tubelet, frame aggregation, EMA, stop-gradient, at iba pang komplikadong teknolohiya, at nakamit ang 20 beses na pagpapabuti sa FLOP efficiency kumpara sa VJEPA1/2 pre-training methods. Ang proyekto ay nagsasabing open-source at reproducible. (Source: InFoQ)
Disclaimer: Ang information sa page na ito ay maaaring nakuha mula sa mga third party at hindi necessary na nagre-reflect sa mga pananaw o opinyon ng KuCoin. Ibinigay ang content na ito para sa mga pangkalahatang informational purpose lang, nang walang anumang representation o warranty ng anumang uri, at hindi rin ito dapat ipakahulugan bilang financial o investment advice. Hindi mananagot ang KuCoin para sa anumang error o omission, o para sa anumang outcome na magreresulta mula sa paggamit ng information na ito. Maaaring maging risky ang mga investment sa mga digital asset. Pakisuri nang maigi ang mga risk ng isang produkto at ang risk tolerance mo batay sa iyong sariling kalagayang pinansyal. Para sa higit pang information, mag-refer sa aming Terms ng Paggamit at Disclosure ng Risk.