
kiến trúc mô hình bắt đầu cảm giác ít giống một mạng nơ-ron cố định & nhiều hơn như một runtime định tuyến các đầu vào khác nhau qua các chuyên gia khác nhau phân bổ tính toán động thay đổi độ sâu cập nhật bộ nhớ điều chỉnh tham số trong quá trình suy luận câu hỏi thú vị giờ đây không còn chỉ là mô hình lớn đến đâu? mà là mô hình chọn thực thi gì?
