Esta es la edición de hoy de The Download, nuestra newsletter diaria que ofrece una dosis de lo que está ocurriendo en el mundo de la tecnología.
Estas startups están persiguiendo la próxima gran novedad en los LLM
Nueve años después de que los investigadores de Google presentaran el transformer, esta familia de redes neuronales se ha convertido en el motor de cada gran modelo de lenguaje. Pero los transformers están empezando a mostrar su edad.
A medida que los LLM se hacen más grandes y potentes, los transformadores se han convertido en un cuello de botella. Su mecanismo de atención denso se vuelve cada vez más costoso a medida que aumenta la cantidad de texto, y no son eficientes a la hora de gestionar grandes volúmenes de información simultáneamente.
Aquí tienes cuatro nuevas ideas para solucionar el problema de los transformadores—innovaciones que podrían cambiar los LLM de forma definitiva, haciéndolos más rápidos, mucho más eficientes y (quizás) incluso más inteligentes.
—Will Douglas Heaven
Este artículo forma parte de la serie What’s Next de MIT Technology Review, que explora industrias, tendencias y tecnologías para ofrecerle una visión anticipada del futuro. Puede leer el resto aquí.
Los profesores de IA negocian las nuevas realidades de la investigación académica
—Grace Huckins
La semana pasada, me dirigí a un hotel en Mountain View, Califo ia, para unirme a algunos de los investigadores de IA más destacados, y también de los más prometedores, del mundo. Fui anfitrión de entrevistas en mesa redonda y hablé en una sesión de formación para medios con motivo de una reunión del programa AI2050 de Schmidt Sciences, una iniciativa financiada por Eric y Wendy Schmidt que apoya a académicos cuyo trabajo implica la IA.
La lista de becarios es un quién es quién de las eminencias de la IA, y aunque no todos llegaron al Área de la Bahía, cada vez que doblaba una esquina, veía a un científico a quien había entrevistado previamente o cuya investigación admiraba. Es un momento extraño para los investigadores de IA universitarios, que constituyen la mayor parte del grupo AI2050. Lea la historia de Grace para saber por qué, y qué podría venir después.
Esta historia procede de The Algorithm, nuestro boletín semanal sobre IA. Suscríbase para recibirlo en su bandeja de entrada cada lunes.
Los imprescindibles
He peinado inte et para traerte las historias sobre tecnología más divertidas, importantes, inquietantes y fascinantes de hoy.
1 Nvidia ha conseguido 500.000 millones de dólares de Wall Street para infraestructura de IA
Ha cerrado acuerdos con BlackRock, Goldman Sachs y otras cuatro empresas. (BBC)
+ Demostrando el atractivo de la computación de IA para los inversores institucionales. (Reuters $)
+ Y que la infraestructura de IA se está convirtiendo en una nueva clase de activos. (CNBC)
2 El nuevo manifiesto de Mark Zuckerberg afirma que la IA de código abierto puede salvar a EE. UU.
Presenta una visión utópica de una "superinteligencia" personalizada. (Guardian)
+ Y llegó el mismo día que el nuevo modelo de código abierto de Meta. (NYT $)
+ Zuckerberg afirmó que planea lanzar más modelos de este tipo. (WSJ $)
+ Y enfrentar a Meta contra los desarrolladores chinos de modelos de pesos abiertos. (SCMP)
3 Be ie Sanders ha instado a Silicon Valley a "pausar el desarrollo de la IA"
Señaló que los gigantes de la IA se han comprometido a hacerlo si es necesario por seguridad.
+ Y advirtió que los legisladores intervendrán si no se toman medidas. (Guardian)
+ Los demócratas de la Cámara ya están presionando a los líderes de IA por modelos descontrolados. (WP $)
+ Una reacción populista se está gestando contra la IA. (MIT Technology Review)
4 Un tribunal de EE. UU. permitirá que miles de demandas contra redes sociales sigan adelante
Las demandas apuntan a mecanismos adictivos utilizados por Meta, TikTok, Google y Snapchat. (Axios)
+ Afirman que las plataformas están diseñadas para 'enganchar' a los usuarios jóvenes. (Reuters $)
+ ¿Podemos reparar inte et? (MIT Technology Review)
5 La OPI de Unitree ha sido sobredemandada más de 8.000 veces por inversores minoristas
La empresa china de robótica humanoide recaudó 900 millones de dólares antes de su salida a bolsa. (Reuters $)
+ Su precio para la OPI de Shanghái valora la empresa en 9.000 millones de dólares. (FT $)
6 Las cámaras de seguimiento de coches de Flock se enfrentan a un rechazo bipartidista
La red de vigilancia se ha extendido rápidamente por todo EE. UU. (NYT $)
+ Flock también planea perseguir a los ladrones con drones. (MIT Technology Review)
7 China pone fin a las relaciones de IA
Pekín ha introducido nuevas reglas para la IA interactiva emocionalmente. (Rest of World)
+ Es sorprendentemente fácil enamorarse de un chatbot. (MIT Technology Review)
8 Una herramienta de IA afirma seleccionar el 1% de los mejores artículos científicos
Pero los investigadores dudan que la IA pueda juzgar de forma fiable la calidad científica. (Nature)
9 La reacción contra el contenido de IA de baja calidad está funcionando
Está impulsando a las plataformas a restringir el contenido generado por IA. (Wired $)
10 Una mujer de 82 años rechazó 26 millones de dólares para convertir su granja en un centro de datos
Criticó el impacto medioambiental de los centros de datos. (Fortune)
Cita del día
“No es demasiado tarde para evitar el desastre. Dejen de construir máquinas que los humanos no pueden controlar.”
—El senador Be ie Sanders insta a Sam Altman, Dario Amodei y Mark Zuckerberg a detener todo el desarrollo de IA en una carta.
Un Apunte Adicional
La carrera por crear el bebé perfecto está generando un embrollo ético
Un nuevo campo de la ciencia está utilizando la secuenciación genética para predecir qué tipo de persona podría llegar a ser un embrión. Algunos padres recurren a estas pruebas para evitar trasto os genéticos devastadores, mientras que un grupo mucho más reducido está dispuesto a pagar decenas de miles de dólares para optimizar la inteligencia, la apariencia y la personalidad.
Los clientes, sin embargo, quizás no estén obteniendo aquello por lo que pagan. Expertos en genética han puesto de manifiesto durante años las posibles deficiencias de estas pruebas, mientras que sus suposiciones subyacentes han convertido a estas empresas en un pararrayos político.
A medida que esta tecnología se extiende, científicos y éticos se apresuran a abordar las implicaciones: para nuestro contrato social, para las generaciones futuras y para nuestra propia comprensión de lo que significa ser humano. Lee el artículo completo.
—Julia Black
Aún podemos tener cosas buenas
Un espacio para el confort, la diversión y la distracción que alegren tu día. (¿Alguna idea? Escríbeme.)
+ Un border collie con ojo de águila está llevando el juego de buscar y traer a un nuevo nivel acuático.
+ musicForprogramming ha realizado un encomiable esfuerzo para crear las melodías ideales para una concentración sostenida.
+ Cuando los niños diseñan parques infantiles, dan vida a una alegre combinación de ajedrez gigante, pistas de baloncesto rosas —y lava.
+ Esta versión power metal de la música de “Regreso al Futuro” es una reinvención épica del tema clásico de la película.