Giao dịch 2 tỷ USD của NVIDIA với Groq mang lại kết quả khi các chip Groq 3 LPX bắt đầu sản xuất hàng loạt

icon MarsBit
Chia sẻ
AI summary iconTóm tắt
Tin tức tiền điện tử: Các chip Groq 3 LPX của NVIDIA đã bước vào sản xuất hàng loạt hoàn toàn. Vào tháng 12 năm ngoái, công ty đã mua lại công nghệ của Groq với giá 2 tỷ USD và tuyển dụng các nhân sự chủ chốt, bao gồm cả người sáng lập Jonathan Ross. Tám tháng sau, sản phẩm đầu tiên đã ra mắt. Hệ thống Groq 3 LPX, được thiết kế cho suy luận mô hình lớn, sử dụng 256 chip Groq 3 LPU. Trong thử nghiệm, nó đạt 3.431 token đầu ra mỗi giây cho Gemma 2 31B sau 100.000 token đầu vào—nhanh gần bốn lần so với API công khai hàng đầu. Nebius sẽ là nhà cung cấp đám mây AI đầu tiên sử dụng Groq 3 LPX, cùng với Groq và Dell cũng đang triển khai nó. Tin tức tiền điện tử này đánh dấu một bước tiến lớn trong việc tăng tốc AI.

Động sát Beating AI,英伟达 Groq 3 LPX đã bước vào sản xuất hàng loạt quy mô lớn. Vào tháng 12 năm ngoái,英伟达 đã chi khoảng 20 tỷ USD để mua bản quyền công nghệ Groq và thu hút toàn bộ đội ngũ cốt lõi, bao gồm người sáng lập Jonathan Ross. Sau 8 tháng, sản phẩm phần cứng đầu tiên của giao dịch này chính thức ra đời. Groq 3 LPX là một hệ thống được thiết kế đặc biệt để tăng tốc suy luận mô hình lớn, sử dụng 256 chip Groq 3 LPU. Trong bài kiểm tra của Artificial Analysis, khi Gemma 4 31B nhận đầu vào 100.000 token, Groq 3 LPX đạt tốc độ 3.431 token đầu ra mỗi giây. Trong cùng bài kiểm tra này, API nhanh nhất có thể truy cập công khai trên thị trường lúc đó chỉ đạt khoảng 870 token/giây, tức Groq 3 LPX nhanh gần 4 lần. Trong triển khai thực tế, Rubin GPU đảm nhận các phép tính nặng hơn, trong khi Groq 3 LPX chuyên biệt tăng tốc độ tạo token. Đối với Coding Agent, khi liên tục gọi mô hình hàng chục, hàng trăm lần, thời gian chờ mô hình “phát ra” câu trả lời sẽ được giảm rõ rệt. Nebius sẽ trở thành nhà cung cấp đám mây AI đầu tiên áp dụng Groq 3 LPX. Điều thú vị hơn là chính Groq cũng là một trong những người dùng đầu tiên, và sẽ cùng Dell triển khai. Năm ngoái, họ cấp bản quyền công nghệ cho英伟达, năm nay lại bắt đầu sử dụng “Groq” do英伟达 tạo ra.

Tuyên bố miễn trừ trách nhiệm: Thông tin trên trang này có thể được lấy từ bên thứ ba và không nhất thiết phản ánh quan điểm hoặc ý kiến của KuCoin. Nội dung này chỉ được cung cấp cho mục đích thông tin chung, không có bất kỳ đại diện hay bảo đảm nào dưới bất kỳ hình thức nào và cũng không được hiểu là lời khuyên tài chính hay đầu tư. KuCoin sẽ không chịu trách nhiệm về bất kỳ sai sót hoặc thiếu sót nào hoặc về bất kỳ kết quả nào phát sinh từ việc sử dụng thông tin này. Việc đầu tư vào tài sản kỹ thuật số có thể tiềm ẩn nhiều rủi ro. Vui lòng đánh giá cẩn thận rủi ro của sản phẩm và khả năng chấp nhận rủi ro của bạn dựa trên hoàn cảnh tài chính của chính bạn. Để biết thêm thông tin, vui lòng tham khảo Điều khoản sử dụngTiết lộ rủi ro của chúng tôi.