
ang arkitektura ng model ay nagsisimula nang maramdaman na hindi na isang fixed na neural network & kundi tulad ng runtime iparada ang iba’t ibang input sa iba’t ibang expert mag-allocate ng compute nang dinamiko palitan ang depth i-update ang memory mag-adapt ng mga parameter sa inference ang interesanteng tanong ay hindi na lang gaano kalaki ang model? kundi ano ang pinipili ng model na i-execute?
