🚨 $KIMI MENYUSUTKAN 2,78T PARAMETER MENJADI 8GB RAM — TANPA GPU! šŸ’„

šŸ” Eksperimen open-source ini menantang setiap asumsi tentang penskalaan inferensi. Proyek murni C99 berukuran 176KB menjalankan kumpulan bobot 1,56TB milik Kimi K3 hanya dengan 8GB memori, dengan cara melakukan streaming bobot expert dari penyimpanan NVMe sesuai kebutuhan. šŸ’”

Keajaibannya adalah aktivasi sparse MoE — hanya 16 dari 896 expert yang aktif per layer. Jadi sang pengembang menukar bandwidth flash storage dengan RAM, memperlakukan disk seperti perluasan memori yang lambat. šŸ“Š Konsekuensinya kejam: satu token setiap 32,7 detik. Ini belum siap produksi, tetapi ini adalah cetak biru struktural untuk infrastruktur inferensi berbiaya ultra-rendah.

Sinyal yang lebih besar adalah arahnya. šŸ“‰ Saat bottleneck perangkat keras memaksa rekayasa yang kreatif, efisiensi menjadi narasi berikutnya. Apakah kita sedang membangun instalasi untuk gelombang berikutnya AI yang terdesentralisasi? šŸ’¬

āš ļø Bukan nasihat keuangan. Selalu kelola risiko Anda. šŸ›”ļø

šŸ·ļø #KIMI #AI #MoE #OpenSource #Crypto

šŸ’” šŸ”„