Meta apresenta o SIGReg para o modelo de vídeo LeVJEPA, aumentando a eficiência de FLOP em 20x

iconKuCoinFlash
Compartilhar
AI summary iconResumo
A Meta apresenta o SIGReg para o modelo de vídeo LeVJEPA, melhorando a eficiência de FLOP em 20x. O método utiliza uma função de perda simples, sem técnicas complexas como tubelet ou EMA. O interesse aberto em altcoins para acompanhar permanece alto, pois o projeto afirma ser de código aberto e reprodutível. Os pesquisadores da MetaEra destacam os ganhos de eficiência em relação ao VJEPA1/2.
ME AI Message, Meta researcher Yann LeCun shared and announced SIGReg, a new method for pre-training video foundation models, with the corresponding model being LeVJEPA. This method uses a simple loss function (sigreg + prediction), eliminating the need for complex techniques such as tubelets, frame aggregation, EMA, and stop-gradient, achieving a 20-fold improvement in FLOP efficiency over VJEPA1/2 pre-training methods. The project claims to be open-source and reproducible. (Source: InFoQ)
Aviso legal: as informações nesta página podem ter sido obtidas de terceiros e não refletem necessariamente os pontos de vista ou opiniões da KuCoin. Este conteúdo é fornecido apenas para fins informativos gerais, sem qualquer representação ou garantia de qualquer tipo, nem deve ser interpretado como aconselhamento financeiro ou de investimento. A KuCoin não é responsável por quaisquer erros ou omissões, ou por quaisquer resultados do uso destas informações. Os investimentos em ativos digitais podem ser arriscados. Avalie cuidadosamente os riscos de um produto e a sua tolerância ao risco com base nas suas próprias circunstâncias financeiras. Para mais informações, consulte nossos termos de uso e divulgação de risco.