10²⁵ FLOPs hələ də qabaqcıl həddirmi?
Anthropic-in hazırladığı yeni təhlükəsizlik qanun layihəsi Konqresdə müzakirəyə çıxarılıb. Təkliflərindən bəziləri yalnız həqiqətən qabaqcıl şirkətlərə şamil edilsə, məntiqli ola bilər. Ancaq hazırkı formada bu qanun sonda Silikon Vadisindəki şirkətlərin çoxunu əhatə edəcək və startap ekosisteminə zərər vuracaq.
Qanun layihəsi “qabaqcıl” anlayışını 10²⁵ FLOPs həcmində hesablama ilə öyrədilmiş istənilən model kimi müəyyənləşdirir — bu, Aİ-nin 2023-cü ildə qəbul etdiyi standartdır. Baydenin icra sərəncamında, Kaliforniyanın SB 53 qanununda və Nyu-Yorkun RAISE Aktında 10²⁶ (on dəfə çox) həddi tətbiq edilib. Bu gün qabaqcıl hədd əslində 10²⁷-dir (məsələn, GPT-6 Astra).
Məlumatlara görə, Astra 100 000-dən çox Grace Blackwell GPU-su ilə öyrədilib. 10²⁵ həcmli modeli cəmi bir neçə yüz GB300 çipi ilə üç ay ərzində öyrətmək mümkündür. 2026-cı ildə bu, qabaqcıl səviyyə sayılmır.
Tərifə həmçinin bütün mərhələlər üzrə hesablamalar daxildir: incə sazlama, möhkəmləndirici öyrənmə və ya digər əsaslı dəyişikliklər zamanı sərf olunan FLOPs da cəmlənir. Praktikada bu, təlimdən sonrakı demək olar ki, bütün əhəmiyyətli işləri əhatə edir — halbuki bu cür işlər müəssisələrdə getdikcə adi hala çevrilir.
Müəssisələrdəki tendensiya konkret iş yükləri üçün hazırlanmış minlərlə kiçik, xüsusi model yaratmaq istiqamətindədir. Bunlar qabaqcıl səviyyə ilə bağlı heç bir risk yaratmır. Onları qabaqcıl sistemlər kimi qəbul etmək, təhlükəsizlik baxımından heç bir fayda vermədən ABŞ-ın korporativ sektorunda böyük uyğunluq xərclərinə səbəb olar.
Dario iddia edib ki, Anthropic özününkü kimi qabaqcıl şirkətləri əlverişsiz vəziyyətə salan, kiçik rəqiblərə isə üstünlük verən qaydalar hazırlayır. Bu tərif isə tam əksini edir.
2023-cü ildən qalmış köhnə hədd artıq bu meyarı indidən qarşılayan və xərcləri qarşılamağa imkanı çatan şirkətlərə üstünlük verir. Həmçinin Anthropic-in qiymətqoyma gücünü təhdid edən açıq model ekosisteminin inkişafına mane olur.
Qabaqcıl hədd daim dəyişir. Riskləri izləmək üçün nəzərdə tutulan istənilən tərif də onunla birlikdə dəyişməlidir.
Anthropic 10²⁵ FLOPs-un həqiqətən qabaqcıl həddi təmsil etdiyinə inanıb-inanmadığını aydınlaşdırmalıdır.
Anthropic-in hazırladığı yeni təhlükəsizlik qanun layihəsi Konqresdə müzakirəyə çıxarılıb. Təkliflərindən bəziləri yalnız həqiqətən qabaqcıl şirkətlərə şamil edilsə, məntiqli ola bilər. Ancaq hazırkı formada bu qanun sonda Silikon Vadisindəki şirkətlərin çoxunu əhatə edəcək və startap ekosisteminə zərər vuracaq.
Qanun layihəsi “qabaqcıl” anlayışını 10²⁵ FLOPs həcmində hesablama ilə öyrədilmiş istənilən model kimi müəyyənləşdirir — bu, Aİ-nin 2023-cü ildə qəbul etdiyi standartdır. Baydenin icra sərəncamında, Kaliforniyanın SB 53 qanununda və Nyu-Yorkun RAISE Aktında 10²⁶ (on dəfə çox) həddi tətbiq edilib. Bu gün qabaqcıl hədd əslində 10²⁷-dir (məsələn, GPT-6 Astra).
Məlumatlara görə, Astra 100 000-dən çox Grace Blackwell GPU-su ilə öyrədilib. 10²⁵ həcmli modeli cəmi bir neçə yüz GB300 çipi ilə üç ay ərzində öyrətmək mümkündür. 2026-cı ildə bu, qabaqcıl səviyyə sayılmır.
Tərifə həmçinin bütün mərhələlər üzrə hesablamalar daxildir: incə sazlama, möhkəmləndirici öyrənmə və ya digər əsaslı dəyişikliklər zamanı sərf olunan FLOPs da cəmlənir. Praktikada bu, təlimdən sonrakı demək olar ki, bütün əhəmiyyətli işləri əhatə edir — halbuki bu cür işlər müəssisələrdə getdikcə adi hala çevrilir.
Müəssisələrdəki tendensiya konkret iş yükləri üçün hazırlanmış minlərlə kiçik, xüsusi model yaratmaq istiqamətindədir. Bunlar qabaqcıl səviyyə ilə bağlı heç bir risk yaratmır. Onları qabaqcıl sistemlər kimi qəbul etmək, təhlükəsizlik baxımından heç bir fayda vermədən ABŞ-ın korporativ sektorunda böyük uyğunluq xərclərinə səbəb olar.
Dario iddia edib ki, Anthropic özününkü kimi qabaqcıl şirkətləri əlverişsiz vəziyyətə salan, kiçik rəqiblərə isə üstünlük verən qaydalar hazırlayır. Bu tərif isə tam əksini edir.
2023-cü ildən qalmış köhnə hədd artıq bu meyarı indidən qarşılayan və xərcləri qarşılamağa imkanı çatan şirkətlərə üstünlük verir. Həmçinin Anthropic-in qiymətqoyma gücünü təhdid edən açıq model ekosisteminin inkişafına mane olur.
Qabaqcıl hədd daim dəyişir. Riskləri izləmək üçün nəzərdə tutulan istənilən tərif də onunla birlikdə dəyişməlidir.
Anthropic 10²⁵ FLOPs-un həqiqətən qabaqcıl həddi təmsil etdiyinə inanıb-inanmadığını aydınlaşdırmalıdır.