El investigador en IA Sepp Hochreiter ha logrado otro notable avance. Un modelo lingüístico que funciona con más rapidez y eficacia que ChatGPT y otros sistemas similares. Sin embargo, la ventaja investigadora que se ha labrado minuciosamente en Austria corre peligro de evaporarse.
Un algoritmo que tiene el potencial de dejar fuera de juego al actualmente muy cortejado ChatGPT. Según Sepp HochreiterDirector del Instituto de Aprendizaje Automático y del Laboratorio de Inteligencia Artificial del Instituto Tecnológico de Linz, actualmente se encuentra en los servidores de la Universidad Johannes Keppler (JKU) de Linz.
Este científico de origen alemán, que lleva más de diez años investigando en Austria en el campo del aprendizaje automático, sentó las bases para el desarrollo de los actuales sistemas de IA con su trabajo sobre la memoria a largo plazo (LSTM) a finales de los años noventa.
Hasta ahora, sin embargo, Sepp Hochreiter ha frenado el algoritmo, principalmente por falta de fondos para la potencia de cálculo necesaria para entrenar la IA. Pero esto podría cambiar en un futuro próximo, como explicó Hochreiter en la segunda Deep Dive Meet Up de la revista del sector explicado.
Se necesitan enormes capacidades informáticas
Pero volvamos al principio: el desarrollo del algoritmo estuvo asociado a una serie de dificultades. Sobre todo con un problema que muchos investigadores de Austria critican: Para Investigación básica a menudo carecen de los pequeños cambios necesarios.
Esto no sólo es indispensable cuando se trata de IA, como explica el profesor Sepp Hochreiter en un Entrevista confirma: "La investigación básica y la Aplicación práctica van de la mano en el campo de la inteligencia artificial. Un buen ejemplo de ello son los llamados redes autonormalizadasque desarrollamos en Linz y que se implantaron en Amazon apenas tres meses después, lo que se tradujo en un aumento significativo de las ventas. El lapso de tiempo desde el modelo teórico que surge de la investigación básica hasta la aplicación práctica puede ser extremadamente corto en este campo."
Hochreiter añade: "Esto también se observa en la IA abierta, donde los investigadores apenas tuvieron tiempo de incorporar desarrolladores al equipo debido a la rapidez de los avances". Otra característica llamativa de este ámbito es que las grandes empresas adoptan inmediatamente las herramientas recién desarrolladas. En Austria estamos más acostumbrados a que un producto se perfeccione mucho antes de lanzarlo al mercado. Pero las cosas son distintas en el sector de la IA, como demuestra el rápido lanzamiento al mercado de ChatGPT".
El logro más reciente de Hochreiter se basa en su Principio LSTM de los años noventa. En vista de la creciente longitud de los textos que programas como ChatGPT tienen que tratar, Sepp Hochreiter recurre una vez más a la Concepto de LSTM atrás. Sin embargo, esto se ha combinado con la tecnología Transformer, que se utiliza actualmente en casi todos los grandes modelos de IA. El resultado es una IA más rápida y capaz de analizar frases mucho más largas.
Sin embargo, para entrenar la inteligencia artificial se necesitan enormes capacidades informáticas y mucho personal en forma de desarrolladores de software, dos cosas que no son factibles en Austria debido a lo limitado del presupuesto, según Hochreiter. En los Países Bajos, por ejemplo, se están invirtiendo dos mil millones de euros en la investigación y el desarrollo de la IA. La Universidad de Tubinga, donde Hochreiter es miembro de un comité, recibe alrededor de 2.000 millones de euros. 30 millones de euros para su centro de IA.
En comparación con los presupuestos de otros países para investigación y desarrollo de IA, Austria está a la altura de Uganda y México, según Hochreiter.
Necesidad de financiación de unos 500 millones de euros
Para Investigación básica sobre IA El profesor Sepp Hochreiter considera que en Austria se necesitan unos 500 millones de euros: "He examinado de nuevo en detalle las medidas de financiación austriacas y he llegado a una suma de financiación anual de unos doce millones de euros, que en realidad están destinados al campo de la IA, por lo que estamos muy lejos de los supuestos 150 millones de euros que mencionó el Secretario de Estado Tursky. Eso me molesta porque puedo ver lo que se está haciendo actualmente en este campo en Alemania. Hay centros de IA que merecen ese nombre".
Enseñar la IA, en particular, requiere mucha potencia de cálculo y, según Hochreiter, es el factor más caro a la hora de desplegar el algoritmo. Sin embargo, ahora cuenta con inversores de todo el mundo que quieren invertir en su tecnología. No sería la primera vez que una inteligencia desarrollada por Hochreiter y su equipo aprende a funcionar en empresas estadounidenses: hace unos años, una investigación puntera del equipo de Hochreiter se probó en Amazon. El resultado fueron dos mil millones más de ventas para la empresa estadounidense de entonces. No obstante, el profesor Sepp Hochreiter no descarta la posibilidad de que su modelo lingüístico siga desarrollándose en Austria y llegue a madurar en el mercado.
Sin embargo, el pionero de la IA se muestra muy escéptico sobre la ubicación: "¡Esto es un desastre! Llevo seis años criticando que los investigadores y empresarios de Austria no tienen dónde atracar. Las empresas industriales no saben lo que es posible con la IA, y los investigadores no saben lo que necesita la industria".

Matthias Heschl
La IA desempeñará un papel central
En su discurso de apertura de la Deep Dive Meet Up de la revista del sector Sepp Hochreiter se centró en las diversas aplicaciones posibles de la inteligencia artificial (IA) en la industria. Destacó que la IA desempeñará un papel de apoyo en numerosos ámbitos clave de los retos humanos, como la energía, el cambio climático, la producción de alimentos, la medicina y la movilidad.
Hochreiter presentó como ejemplo la imagen futura del sector energético: una complicada red transfronteriza de productores y consumidores de energía que interactúan constantemente entre sí y se mejoran mutuamente mediante la IA.
Según el experto en IA, el Producción futura de energía adaptarse continuamente a las situaciones actuales, predecir las condiciones meteorológicas y negociar de forma autónoma con los consumidores para garantizar una distribución óptima en la red. Hochreiter imagina un sistema similar en el sector del transporte para regular el flujo de tráfico y reducir así las emisiones de CO2-de forma significativa.
La tecnología JKU de Hochreiter en Canadá
La demanda mundial de los conocimientos de Linz quedó confirmada por otro ejemplo del discurso de Hochreiter. El Gobierno canadiense, por ejemplo, utiliza los conocimientos de Linz para simular un Tecnología de reactores de fusión nucleardesarrollado en la JKU de Linz. La IA también se está integrando cada vez más en la industria del automóvil. En Audi, por ejemplo, la IA se utiliza para maximizar el confort en el interior.
Hochreiter terminó su discurso de apertura con un comentario sobre la demanda de algunas empresas de TI de hacer una pausa en la investigación y el desarrollo de sistemas de IA. Sólo hay que ver qué empresas apoyan esta petición. Son precisamente las empresas que ya tienen un sistema de IA en uso. No parece creíble que los que ya tienen ventaja pidan una moratoria. Eso es sencillamente absurdo".
Sepp Hochreiter es uno Regulación de la IA no aversión, pero esto debe basarse en nivel estatal y no debe dejarse en manos de las empresas.










