China Telecom, un gigante de las telecomunicaciones del país, ha presentado dos LLM que se han entrenado utilizando chips de producción nacional. Este avance para la empresa se ha producido durante el aumento de las restricciones estadounidenses a la exportación de semiconductores de alta gama, limitando específicamente el acceso a empresas como Nvidia, que producen procesadores avanzados.
Uno de los modelos se llama TeleChia2-115B y consta de 100 mil millones de parámetros. El segundo modelo no tiene nombre, pero contiene una gran cantidad de 1 billón de parámetros.
Estos modelos fueron entrenados por decenas de miles de chips fabricados en China. El logro resalta la creciente capacidad de China para trabajar de forma independiente en tecnologías y avances de IA.
China Telecom demuestra los esfuerzos de China por lograr la autonomía de los chips de IA
El logro resalta la creciente capacidad de China para trabajar de forma independiente en tecnologías y avances de inteligencia artificial, en un momento en que Estados Unidos impuso restricciones a la exportación de sus chips al país asiático.
Estas estrictas normas de exportación han dificultado el acceso de China a procesadores de alta gama de compañías como Nvidia y otras firmas extranjeras.
Según el Instituto de IA de la empresa, que compartió una declaración en WeChat, este desarrollo es un gran logro que demuestra la capacidad de China para entrenar de forma autónoma grandes modelos de lenguaje (LLM), lo que también señala una nueva fase de innovación y autosuficiencia en la tecnología de IA.
La empresa también ha promocionado sus modelos y ha descrito su escala como "notable", alardeando de un billón de parámetros, que simplemente se refieren a las variables que ayudan a un modelo a aprender durante su entrenamiento. Por lo tanto, se deduce que, cuantos más parámetros tenga un modelo, más complicado y poderoso se vuelve el modelo de IA.
Según AINews, las empresas chinas quieren seguir el ritmo de los líderes mundiales en tecnología de IA fuera del país a pesar de las restricciones a las exportaciones de Estados Unidos.
Las restricciones impuestas a los procesadores de inteligencia artificial más recientes y potentes de Nvidia, los A100 y H100, han obligado a China a buscar alternativas en otros países. Esto también ha hecho que las empresas chinas creen sus propios procesadores para limitar su dependencia de las tecnologías estadounidenses. Por ejemplo, el modelo TeleChat2-115B tiene unos 100.000 millones de parámetros, lo que le permite rendir tan bien como las plataformas convencionales.
Si bien China Telecom no especificó la compañía que suministró los chips de diseño nacional utilizados para entrenar sus modelos, los chips Ascend de Huawei juegan un papel clave en los planes de inteligencia artificial del país.
Las colaboraciones locales están ayudando a empresas como China Telecom a atender el mercado nacional.
Huawei, que también se ha enfrentado a sanciones estadounidenses en los últimos años, también está redoblando sus esfuerzos para lograr la autosuficiencia en la industria de la inteligencia artificial. Hace poco, Huawei comenzó a probar su último procesador de inteligencia artificial, conocido como Ascend 910C. Los clientes potenciales en China ya están haciendo cola para adquirir el procesador.
Las grandes empresas de servidores chinas, junto con las compañías de Internet que han utilizado anteriormente los chips de Nvidia, están probando actualmente el rendimiento del Ascend 910C, que es una de las pocas alternativas al hardware de Nvidia.
Los procesadores Ascend se consideran una de las alternativas viables de China a los chips de Nvidia y limitarán la dependencia del país de Estados Unidos.
Además de Huawei, China Telecom también está colaborando con otros fabricantes de chips locales como Cambrion, que es una startup que se especializa en procesadores de IA, lo que refleja las ambiciones más amplias de China de producir soluciones de IA de cosecha propia, advirtiéndose aún más de los efectos de los controles de exportación de EE. UU.
El país está reduciendo gradualmente su dependencia del hardware extranjero, en particular de Nvidia, cuyas GPU son muy solicitadas.
Las restricciones estadounidenses también han dado lugar a un floreciente mercado negro de hardware de inteligencia artificial estadounidense, que se introduce de contrabando en el país a través de diferentes medios.
También se ha descubierto que empresas chinas habrían obtenido acceso a capacidades de inteligencia artificial de vanguardia y chips estadounidenses restringidos a través de los servicios en la nube de Amazon o sus competidores.
Reuters reveló recientemente que el año pasado revisó más de 50 documentos obtenidos de una base de datos china abierta. Los documentos mostraban que más de 11 empresas chinas habían obtenido acceso a tecnologías estadounidenses restringidas o a servicios en la nube.
De ellas, cuatro empresas indicaron claramente su implicación con Amazon, afirmando que acceden a las instalaciones a través de mediadores chinos y no directamente desde AWS.
