DAI#34 - Capturas de datos, chips calientes y modelos de tallas grandes

12 de abril de 2024

Bienvenido al resumen de noticias sobre la triple destilación artesanal de esta semana.

Esta semana, las empresas que raspan sus datos gratuitamente se quejaron de que otros se los estaban robando.

Las grandes tecnológicas fabrican sus propios chips de inteligencia artificial para competir con NVIDIA.

Y un montón de nuevos modelos de IA están volando de las estanterías.

Profundicemos.

Juegos del hambre de datos de IA

La insaciable búsqueda de datos por parte de la IA continúa a medida que las empresas se afanan por obtener texto, audio y vídeo para entrenar sus modelos.

Es un secreto a voces que OpenAI casi con toda seguridad se ha servido de contenidos de vídeo de YouTube para entrenar a Sora, su modelo de conversión de texto en vídeo. El consejero delegado de YouTube, Neal Mohan, advirtió OpenAI que puede haber incumplido sus condiciones de servicio. Bueno, boohoo. ¿Has visto lo guay que es Sora?

Hay que pensar que Google debe de haber hecho algunos recortes éticos para entrenar a sus modelos. Que YouTube se queje de los "derechos y expectativas" de los creadores de vídeos en su plataforma es un poco exagerado.

Una mirada más atenta a Las grandes tecnológicas se disputan los datos de entrenamiento de la IA revela cómo Google modificó sus políticas de privacidad de Google Docs para utilizar sus datos. Mientras tanto, OpenAI y Meta siguen traspasando los límites legales y éticos en busca de más datos de entrenamiento.

No estoy seguro de dónde proceden los datos para el nuevo generador de música por IA Udio, pero la gente ha estado incitándolo con algunas ideas interesantes. Esta es la prueba de que la IA debería estar regulada.

Patatas fritas a la vista

Todos esos datos controvertidos tienen que procesarse y el hardware de NVIDIA se encarga de la mayor parte. Sam nos lleva a través de La historia de NVIDIA: de la pobreza a la riqueza desde 1993 (cuando deberías haber comprado acciones) hasta ahora (cuando serías rico) y es fascinante.

Mientras las empresas siguen haciendo cola para comprar chips NVIDIA recién salidos del horno, las grandes tecnológicas intentan desprenderse de ellos.

Intel y Google presentan nuevos chips de inteligencia artificial para competir con NVIDIA, aunque seguirán comprando el hardware Blackwell de NVIDIA.

¡Suelten las maquetas!

Es una locura que hace poco más de un año OpenAI fuera el único modelo que recibía atención real. Ahora hay un flujo constante de nuevos modelos de los sospechosos habituales de Big Tech y de startups más pequeñas.

Esta semana hemos visto tres modelos de IA publicados en 24 horas. Gemini Pro 1.5 de Google tiene ahora una ventana de contexto de 1M de tokens. Un contexto grande está muy bien, pero ¿será su recuperación tan buena como la de Claude 3?

Hubo desarrollos interesantes con OpenAI habilitando el acceso API a GPT-4 con visión, y Mistral acaba de regalar otro potente modelo más pequeño.

El político reconvertido en ejecutivo de Meta Nick Clegg habló en Evento sobre IA de Meta en Londres para defender la IA de código abierto. Clegg también dijo que Meta espera que Llama 3 salga muy pronto.

Durante los debates sobre la desinformación de la IA, restó importancia de forma extraña al papel de la IA en los intentos de influir en las últimas elecciones importantes.

¿Acaso este tipo lee las noticias que publicamos en Daily AI?

¿Qué problemas de seguridad?

Geoffrey Hinton, considerado el padrino de la IA, estaba tan preocupado por la seguridad de la IA que dejó Google. Yann LeCun, de Meta, dice que no hay de qué preocuparse. Entonces, ¿cuál es?

Según un estudio de la Universidad de Georgetown sólo 2% de la investigación en IA se centra en la seguridad. ¿Es porque no hay nada de qué preocuparse? ¿O deberíamos preocuparnos por el hecho de que los investigadores se centren en crear una IA más potente sin pensar apenas en hacerla segura?

¿Debería seguir siendo el lema de los desarrolladores de IA "Muévete rápido y rompe cosas"?

La trayectoria del desarrollo de la IA ha sido exponencial. En una entrevista esta semana, Elon Musk dijo que espera La IA podría ser más inteligente que los humanos a finales de 2025.

El experto en IA Gary Marcus no está de acuerdo y está dispuesto a apostar dinero por ello.

xAI se enfrenta al mismo problema de escasez de chips NVIDIA que muchos otros. Musk afirma que los 20.000 NVIDIA H100 con los que cuenta la empresa completarán la formación de Grok 2 en mayo.

Adivina cuántas GPUs dice que necesitarán para entrenar a Grok 3.

Vetas antrópicas por delante

Anthropic dice que desarrolla sistemas de IA a gran escala para poder "estudiar sus propiedades de seguridad en la frontera tecnológica".

El Claude 3 Opus de la compañía está sin duda en la frontera. Un nuevo estudio muestra que el modelo deja atrás al resto de la competencia para resumir el contenido de un libro. Aun así, los resultados muestran que los humanos siguen teniendo ventaja en algunos aspectos.

Las últimas pruebas de Anthropic muestran que Los LLM de Claude se han vuelto excepcionalmente persuasivos...con Claude 3 Opus generando argumentos tan persuasivos como los creados por humanos.

Los que restan importancia a los riesgos de seguridad de la IA suelen decir que, en caso de que una IA se volviera malvada, bastaría con desconectarla. ¿Y si la IA fuera tan persuasiva que pudiera convencerte de que no lo hicieras?

El gran reclamo de Claude 3 es su enorme ventana de contexto. Anthropic publicó un estudio que demuestra que las grandes LLM de contexto son vulnerable a una técnica de fuga de "muchos disparos". Es super sencillo de implementar y admiten que no saben como solucionarlo.

En otras noticias...

Estas son algunas de las historias sobre inteligencia artificial que nos han gustado esta semana:

Y eso es todo.

¿Te importa que OpenAI, y probablemente otros, puedan haber utilizado tu contenido de YouTube para entrenar su IA? Si Altman liberara Sora de forma gratuita, supongo que todo estaría perdonado. Puede que Google no esté de acuerdo.

¿Cree que Musk está siendo demasiado optimista con sus predicciones sobre la inteligencia artificial? Espero que tenga razón, pero me inquieta un poco que sólo 2% de investigación en IA se destinen a la seguridad.

¿Es una locura la cantidad de modelos de IA que estamos viendo ahora? ¿Cuál es tu favorito? Me aferro a mi cuenta ChatGPT Plus y espero que llegue el GPT-5. Pero Claude Pro parece muy tentador.

Háganos saber qué artículo destacó para usted y siga enviándonos enlaces a cualquier historia jugosa sobre IA que hayamos podido pasar por alto.

Únete al futuro


SUSCRÍBETE HOY

Claro, conciso y completo. Conozca los avances de la IA con DailyAI

Eugene van der Watt

Eugene es ingeniero electrónico y le encanta todo lo relacionado con la tecnología. Cuando descansa de consumir noticias sobre IA, lo encontrará jugando al billar.

No se han encontrado categorías.
×

PDF GRATUITO EXCLUSIVO
Adelántese con DailyAI

Suscríbase a nuestro boletín semanal y reciba acceso exclusivo al último eBook de DailyAI: 'Mastering AI Tools: Su guía 2024 para mejorar la productividad'.

*Al suscribirse a nuestro boletín de noticias, acepta nuestra política de privacidad. Política de privacidad y nuestro Condiciones generales