opción
Hogar
Noticias
La ejecución de modelos de IA se convierte en un reto para la memoria

La ejecución de modelos de IA se convierte en un reto para la memoria

9 de abril de 2026
147

La ejecución de modelos de IA se convierte en un reto para la memoria

Los debates sobre los costes de la infraestructura de IA suelen centrarse en Nvidia y las GPU, pero la memoria se está convirtiendo en una pieza fundamental del rompecabezas. Dado que los hiperescaladores están invirtiendo miles de millones en nuevos centros de datos, los precios de los chips DRAM se han multiplicado por siete aproximadamente en el último año.

Al mismo tiempo, una disciplina en auge se centra en coordinar esta memoria para garantizar que los datos correctos lleguen al agente de IA adecuado en el momento oportuno. Las empresas que destacan en esto pueden ejecutar las mismas consultas utilizando menos tokens, una diferencia que puede determinar la supervivencia en un mercado competitivo.

El analista de semiconductores Dan O’Laughlin ofrece una perspectiva convincente sobre la importancia de los chips de memoria en su Substack, donde incluye una conversación con Val Bercovici, director de IA de Weka. Ambos expertos provienen del sector de los semiconductores, por lo que su debate se inclina hacia el hardware, aunque las implicaciones para el software de IA son igualmente significativas.

Destaca un pasaje en el que Bercovici comenta la creciente complejidad de la documentación sobre el almacenamiento en caché de prompts de Anthropic:

La clave está en la página de precios del almacenamiento en caché de prompts de Anthropic. Empezó como una página sencilla hace seis o siete meses, especialmente en torno al lanzamiento de Claude Code, que básicamente decía: «Usa el almacenamiento en caché, es más barato». Ahora, parece una enciclopedia de consejos sobre cuántas escrituras en caché hay que comprar por adelantado. Se ven los niveles habituales del sector, como ventanas de 5 minutos y de 1 hora, pero nada más largo. Ese es un detalle revelador. Luego, por supuesto, hay varias oportunidades de arbitraje en torno a los precios de lectura de la caché en función de cuántas escrituras en caché hayas comprado por adelantado.

La pregunta fundamental es cuánto tiempo retiene Claude tu solicitud en la memoria caché. Puedes pagar por un intervalo de 5 minutos o por uno más caro de una hora. Acceder a los datos que aún están en la caché es mucho más barato, por lo que una gestión eficaz puede suponer un ahorro sustancial. Sin embargo, hay una trampa: cada nuevo dato añadido a una consulta podría desplazar a otro de la caché.

Aunque los detalles son complejos, la conclusión es clara: la gestión de la memoria dentro de los modelos de IA será un factor clave en el futuro de la IA. Las empresas que la dominen obtendrán una ventaja competitiva significativa.

Hay un margen considerable para el progreso en este campo emergente. El pasado octubre escribí sobre una startup llamada TensorMesh, que está trabajando en una capa de la pila conocida como optimización de la caché.

Evento de TechCrunch

TechCrunch Founder Summit 2026: Entradas a la venta

El 23 de junio en Boston, más de 1100 fundadores se reunirán en la TechCrunch Founder Summit 2026 para un día completo centrado en el crecimiento, la ejecución y la escalabilidad en el mundo real. Aprende de fundadores e inversores que han dado forma al sector. Conecta con compañeros que atraviesan etapas de crecimiento similares. Llévate tácticas que puedas aplicar de inmediato

Ahorra hasta 300 $ en tu pase o hasta un 30 % con entradas de grupo para equipos de cuatro o más personas.

TechCrunch Founder Summit: Entradas a la venta

El 23 de junio en Boston, más de 1100 fundadores se darán cita en la TechCrunch Founder Summit 2026 para una jornada completa centrada en el crecimiento, la ejecución y la escalabilidad en el mundo real. Aprende de fundadores e inversores que han marcado el rumbo del sector. Conecta con compañeros que se encuentran en etapas de crecimiento similares. Llévate estrategias que podrás aplicar de inmediato

Ahorra hasta 300 $ en tu pase o ahorra hasta un 30 % con entradas de grupo para equipos de cuatro o más personas.

Boston, MA | 23 de junio de 2026 INSCRÍBETE AHORA

También existen oportunidades en otras partes de la pila. Más abajo, por ejemplo, se plantea la cuestión de cómo los centros de datos utilizan sus diferentes tipos de memoria. (La entrevista incluye un debate revelador sobre cuándo utilizar chips DRAM frente a HBM, aunque se vuelve bastante técnico). Más arriba en la pila, los usuarios finales están aprendiendo a estructurar sus enjambres de modelos para aprovechar eficazmente las cachés compartidas.

A medida que las empresas mejoren en la orquestación de la memoria, consumirán menos tokens, lo que abaratará la inferencia. Al mismo tiempo, los modelos se están volviendo más eficientes en el procesamiento de cada token, lo que reduce los costes aún más. A medida que disminuyan los gastos en servidores, muchas aplicaciones que actualmente se consideran inviables comenzarán a acercarse a la rentabilidad.

Artículo relacionado
AstroForge implementa IA para controlar la próxima nave espacial AstroForge implementa IA para controlar la próxima nave espacial Llegar a un asteroide, aterrizar con seguridad y ejecutar maniobras impecables suena sencillo, pero está lejos de ser fácil.Las naves espaciales de la NASA que exploran el sistema solar dependen de la redundancia y la automatización, sin embargo, lo
Prentis, nuevo laboratorio de IA cofundado por Reid Hoffman y Mark Pincus, está en conversaciones para recaudar 100 millones de dólares Prentis, nuevo laboratorio de IA cofundado por Reid Hoffman y Mark Pincus, está en conversaciones para recaudar 100 millones de dólares Prentis, un laboratorio de investigación de IA emergente especializado en modelos de uso informático y cofundado por el emprendedor en serie Ritankar Das junto a los veteranos de la industria tecnológica Reid Hoffman y Mark Pincus, está actualmente n
El trío de DeepMind detrás de la IA del póker ahora está generando rendimientos para los fondos de cobertura cuantitativos El trío de DeepMind detrás de la IA del póker ahora está generando rendimientos para los fondos de cobertura cuantitativos Tres exinvestigadores de DeepMind, que previamente desarrollaron una IA capaz de derrotar a campeones humanos de póker, han pivotado esa tecnología hacia los mercados financieros, y la estrategia está generando rendimientos significativos. Su empresa
Recomendaciones de temas especiales relacionados
Diseño y Arte Las mejores herramientas de ilustración con IA: crea escenas editoriales y portadas más rápido
Las mejores herramientas de ilustración con IA: crea escenas editoriales y portadas más rápido

Las mejores herramientas de ilustración con IA de 2026: nuestra lista seleccionada incluye las mejores herramientas, diseñadas con gran potencia, para crear rápidamente impresionantes escenas editoriales y llamativas portadas. Cada opción ha sido sometida a rigurosas pruebas en condiciones reales y ofrece una comparación entre las versiones gratuitas y de pago para ayudarte a encontrar la que mejor se adapte a tu flujo de trabajo. Prueba hoy mismo estas soluciones imprescindibles para sacar el máximo partido a la IA y potenciar tu productividad creativa. Descúbrelas ahora en XIX.AI.

10 herramientas
xix.ai
Educación y aprendizaje Los mejores profesores particulares de IA para la preparación de exámenes: practica matemáticas, ciencias e inglés
Los mejores profesores particulares de IA para la preparación de exámenes: practica matemáticas, ciencias e inglés

¡Ya están aquí, en XIX.AI, los mejores tutores de IA para la preparación de exámenes de 2026, con las mejores valoraciones! Nuestra lista seleccionada incluye potentes herramientas revolucionarias que ofrecen comparativas entre versiones gratuitas y de pago, pruebas reales y clasificaciones actualizadas semanalmente. Te ayudan a mejorar tu eficiencia a la hora de escribir, a simplificar el aprendizaje de temas complejos y a desarrollar todo tu potencial académico. ¡Explora ahora mismo para descubrir tu herramienta perfecta de preparación de exámenes y empieza a crear hoy mismo para sacar partido a tu ventaja con la IA!

10 herramientas
xix.ai
Finanzas Herramientas de planificación presupuestaria con IA para la gestión personal del dinero
Herramientas de planificación presupuestaria con IA para la gestión personal del dinero

2026 Últimas Mejores Herramientas de Planificación Presupuestaria con IA Mejor Valoradas para la Gestión Personal del Dinero están aquí en XIX.AI. Esta colección seleccionada presenta soluciones poderosas y transformadoras que te ayudan a realizar pruebas en el mundo real, comprender tus hábitos de gasto y crear planes personalizados para aumentar la productividad. Disfruta de una comparación entre versiones gratuitas y de pago junto con clasificaciones detalladas. Herramientas imprescindibles diseñadas para simplificar la gestión del dinero y desbloquear tu ventaja con IA. ¡Explóralas ahora!

11 herramientas
xix.ai
Salud y bienestar Asistentes de seguimiento del sueño basados en IA: mejora tu recuperación con mejores hábitos a la hora de acostarte
Asistentes de seguimiento del sueño basados en IA: mejora tu recuperación con mejores hábitos a la hora de acostarte

Los mejores asistentes de seguimiento del sueño con IA de 2026, seleccionados para una recuperación óptima. Esta guía semanal totalmente actualizada incluye potentes herramientas que ofrecen pruebas en condiciones reales, comparativas entre opciones gratuitas y de pago, y clasificaciones detalladas para ayudarte a encontrar la solución imprescindible que mejora la calidad del sueño y fomenta mejores hábitos a la hora de acostarse. Descúbrelo ahora en XIX.AI y aprovecha todas las ventajas de la IA.

10 herramientas
xix.ai
Análisis de datos Copilotos de IA y SQL para el análisis de productos e ingresos
Copilotos de IA y SQL para el análisis de productos e ingresos

¡Los mejores copilotos de IA para SQL mejor valorados de 2026 para el análisis de productos e ingresos! XIX.AI ha seleccionado una potente colección de herramientas revolucionarias que no te puedes perder y que se someten a pruebas en el mundo real a través de clasificaciones que se actualizan semanalmente. Estas herramientas ayudan a los usuarios a aumentar significativamente su productividad al acelerar el análisis de datos, simplificar consultas complejas y generar información precisa para tomar decisiones empresariales más inteligentes. ¡Explora ahora mismo y descubre la herramienta perfecta para sacar el máximo partido a tu ventaja en IA!

14 herramientas
xix.ai
Educación y aprendizaje Las mejores herramientas de IA para los deberes que realmente enseñan: aprende conceptos, no solo respuestas
Las mejores herramientas de IA para los deberes que realmente enseñan: aprende conceptos, no solo respuestas

2026: los mejores y más valorados asistentes de deberes con IA que enseñan conceptos básicos, no solo respuestas. Potentes herramientas para estudiantes. Una selección imprescindible que debes probar. Actualización semanal. Comparativa entre opciones gratuitas y de pago. Pruebas en el mundo real. Clasificaciones precisas para ayudarte a desarrollar todo tu potencial de aprendizaje. Explora ahora y descubre la herramienta perfecta para estudiar de forma más inteligente.

10 herramientas
xix.ai
comentario (1)
0/500
NicholasNelson
NicholasNelson 7 de mayo de 2026 02:00:57 GMT+02:00

這篇文章點出了AI發展中常被忽略的記憶體瓶頸,挺有意思的。大家都在搶GPU,但DRAM價格一年漲七倍也太誇張了吧!這會不會讓小公司更難玩得起AI啊?🤔

OR