source avatarPandit | Ξ🦇🔊

Bagikan

Bottleneck berikutnya dalam AI tidak selalu pada modelnya. Kadang-kadang itu adalah latensi. Bayangkan agen Anda perlu... membaca dokumen, memanggil database, mencari di web, menjalankan alat, lalu meminta model apa yang harus dilakukan selanjutnya. Jika setiap langkah menunggu langkah sebelumnya, tugas sederhana bisa memakan waktu beberapa detik atau bahkan menit. Di sinilah hal-hal seperti pemanggilan alat paralel, streaming, caching, dan eksekusi asinkron menjadi penting. Anda tidak selalu memerlukan model yang lebih cerdas. Anda mungkin hanya memerlukan sistem yang lebih baik di sekitarnya. Itulah salah satu hal yang saya sukai dari rekayasa AI saat ini. Banyak masalah sulit mulai terlihat sangat familier: sistem terdistribusi, caching, antrian, konkurensi, observabilitas. Bagian AI adalah hal baru. Masalah rekayasa di bawahnya bukan.

Penafian: Informasi pada halaman ini mungkin telah diperoleh dari pihak ketiga dan tidak mencerminkan pandangan atau opini KuCoin. Konten ini disediakan hanya untuk tujuan informasi umum, tanpa representasi atau jaminan apa pun, dan tidak dapat ditafsirkan sebagai saran keuangan atau investasi. KuCoin tidak bertanggung jawab terhadap segala kesalahan atau kelalaian, atau hasil apa pun yang keluar dari penggunaan informasi ini. Berinvestasi di aset digital dapat berisiko. Harap mengevaluasi risiko produk dan toleransi risiko Anda secara cermat berdasarkan situasi keuangan Anda sendiri. Untuk informasi lebih lanjut, silakan lihat Ketentuan Penggunaan dan Pengungkapan Risiko.