#KimiK3 この2日間、Kimiに在籍していた17歳の天才少年、陳広宇(チェン・グアンユー)の話題で持ちきりだ。彼は昨日、Kimiを離れることを正式に発表した。1年前、月之暗面に招かれてコアチームに加わり、論文「Attention Residuals」の共同筆頭著者を務めた。この論文は残差接続を改良する新たな考え方を提案し、イーロン・マスクから公開の場で称賛されたことでも知られる。Kimi K3モデルを支える重要な理論でもある。

さらに驚くのは、彼が機械学習に触れ始めたのは2024年になってからだということだ。それから間もなく、Transformerを学び始めたばかりの段階から、最先端のアーキテクチャに関する論文の著者にまで上り詰めた。

投稿された文章を見る限り、今回のKimi退社は円満で平和的なものだったようだ。ただ本人は、今まさにシリコンバレーへ向かっていると話している。進学するのか、起業するのかは分からない🤔🤔