Hogar
Tencent Hunyuan integra la teoría del tamaño de puntos críticos en el aprendizaje por refuerzo PPO, aumentando el rendimiento en un 2.29x y reduciendo el tiempo de entrenamiento de GRPO en un 29 por ciento
A medida que el aprendizaje por refuerzo para grandes modelos se escala a clústeres de GPU más grandes y conjuntos de datos de entrenamiento más densos, la eficiencia del entrenamiento se ha convertido en una prioridad crítica. Investigaciones recientes del equipo Tencent Huan Yuan abordan un desafío frecuentemente pasado por alto: cuando los modelos generan sus propios datos de entrenamiento, ¿cómo deben redefinirse los tamaños de lote dadas las diferentes velocidades de generación de respuestas y entrenamiento?
Basándose en la teoría clásica del tamaño crítico de lote, el estudio vuelve a derivar este concepto para el aprendizaje por refuerzo en línea de grandes modelos de lenguaje. Los hallazgos ofrecen una solución práctica: al ajustar la tasa de aprendizaje dentro de un rango específico a medida que aumenta el tamaño del lote, tanto los algoritmos GRPO como PPO pueden garantizar que cada respuesta aprenda de manera efectiva sin ser diluida. Esto indica que el tamaño del lote no es simplemente "cuanto mayor, mejor" ni un valor fijo; más bien, existe dentro de un rango óptimo que puede ajustarse finamente para lograr la máxima eficiencia.
El impacto en los costos reales de hardware es sustancial. Con configuraciones de hardware fijas, aumentar el tamaño del lote puede impulsar la tasa de generación de PPO hasta 2.29 veces. Mientras tanto, la configuración óptima de GRPO logra los mismos objetivos de validación en un 29% menos de tiempo. Para equipos que invierten fuertemente en recursos de GPU, esto se traduce en completar tareas más rápido con el mismo clúster o procesar más datos dentro del mismo período de tiempo, reduciendo efectivamente los costos en la fase más costosa del aprendizaje por refuerzo.
Esta investigación proporciona una palanca práctica para escalar el RL en línea, donde el modelo actúa tanto como estudiante como creador de preguntas. La brecha de eficiencia surge del desajuste entre las escalas de generación y entrenamiento, que este estudio aborda combinando la teoría del tamaño crítico de lote con ajustes en la tasa de aprendizaje. Mientras la industria compite por construir los modelos más grandes, Tencent Huan Yuan se centra en optimizar el hardware existente para mayor rentabilidad.
Artículo relacionado
Las startups de inteligencia artificial aceleran el crecimiento de los ingresos
Como las empresas consolidadas y las nuevas startups compiten por aprovechar la inteligencia artificial, numerosas startups de IA informan que sus ingresos no solo están creciendo, sino que se están acelerando rápidamente, alcanzando hitos posteriore
Amjad Masad de Replit sobre el acuerdo con Cursor, la lucha contra Apple y por qué prefiere no vender
Amjad Masad ha pasado la última década construyendo Replit, pero los últimos 18 meses han sido un período transformador. La plataforma de codificación con IA ha pasado de unos ingresos anuales de 2,8 millones de dólares en 2024 a una trayectoria haci
Los agentes de IA impulsan la acuicultura de camarones mientras el MIIT emite una advertencia y Rockchip responde
La conversación en la comunidad de inteligencia artificial ha pasado de "entrenar grandes modelos" a "criar langostas". Si ves a alguien en las redes sociales discutiendo cómo alimentar datos y ajustar parámetros para una "langosta", no te confundas:
Recomendaciones de temas especiales relacionados
Finanzas
Las mejores herramientas de investigación de inversiones basadas en IA para analistas minoristas
Las mejores herramientas de investigación de inversiones basadas en IA de 2026, cuidadosamente seleccionadas por XIX.AI. Estas potentes herramientas ofrecen ventajas revolucionarias para acelerar la creación de contenidos, mejorar la eficiencia en la redacción y optimizar las tareas de análisis, con el fin de ayudar a los profesionales a sacar el máximo partido a la IA. Consigue una comparación entre las versiones gratuitas y de pago, junto con pruebas en condiciones reales y clasificaciones detalladas. ¡Explora ahora mismo para descubrir tu herramienta perfecta!
11 herramientas
xix.ai
código
Mejores generadores de pruebas de IA: Crea pruebas unitarias para APIs y funciones
Los mejores generadores de pruebas de IA de 2026, altamente calificados y actualizados, para el desarrollo de APIs y funciones. XIX.AI ha reunido una colección poderosa y revolucionaria de herramientas imprescindibles que han superado pruebas rigurosas en entornos reales a fin de ofrecer resultados precisos. Encontrará aquí análisis detallados y comparativas gratuitas frente a las opciones de pago, además de clasificaciones actualizadas semanalmente. Explore ahora mismo para descubrir la herramienta perfecta para usted y aprovechar toda la ventaja que le brinda la inteligencia artificial en las pruebas de software.
7 herramientas
xix.ai
Negocio
Los mejores generadores de planes de negocio basados en IA: convierte tus ideas en borradores de presentaciones para inversores
¡Los mejores generadores de planes de negocio con IA de 2026, los más valorados, ya están aquí, en XIX.AI! Esta selección incluye potentes herramientas revolucionarias que ayudan a los creadores a convertir rápidamente sus ideas innovadoras en borradores de presentaciones para inversores perfectamente elaborados. Encontrarás clasificaciones actualizadas semanalmente, comparativas entre versiones gratuitas y de pago, y pruebas en condiciones reales que te ayudarán a elegir la solución imprescindible que impulse tu productividad y ofrezca los mejores resultados. ¡Explora ahora mismo y descubre la herramienta perfecta para conseguir financiación!
11 herramientas
xix.ai
Finanzas
Plataformas de OCR de facturas basadas en IA para QuickBooks, Xero y la conciliación de varias entidades
¡Las mejores plataformas de OCR de facturas con IA de 2026 para QuickBooks, Xero y la conciliación de múltiples entidades! XIX.AI elabora una lista de las herramientas mejor valoradas, que ofrecen pruebas precisas en condiciones reales y clasificaciones actualizadas semanalmente. Estas soluciones imprescindibles agilizan el procesamiento de facturas, aumentan la productividad y ahorran tiempo en entornos empresariales complejos. Consulta una comparación entre las versiones gratuitas y de pago para encontrar la que mejor se adapta a tus necesidades. ¡Descúbrelas ahora y aprovecha las ventajas de la IA!
8 herramientas
xix.ai
Negocio
Software de respuesta a solicitudes de oferta (RFP) basado en IA para flujos de trabajo de propuestas empresariales
¡El mejor software de 2026 para responder a solicitudes de propuestas (RFP) con IA, ideal para los flujos de trabajo de propuestas empresariales! XIX.AI ha elaborado una lista de las herramientas mejor valoradas, que han superado rigurosas pruebas en condiciones reales y ofrecen funciones imprescindibles para impulsar la productividad y optimizar tus procesos de elaboración de propuestas. Consigue una comparación entre las versiones gratuitas y de pago, consulta las clasificaciones detalladas y descubre cómo estas soluciones revolucionarias pueden ayudarte a crear respuestas de alta calidad más rápidamente. ¡Explora ahora mismo y aprovecha tu ventaja con la IA!
9 herramientas
xix.ai
Creación de vídeos
Herramientas de subtitulado y doblaje con IA: adapta tus vídeos para un público internacional
Las mejores herramientas de subtitulado y doblaje con IA de 2026, seleccionadas para la localización de vídeos destinados a un público internacional. Amplía de forma espectacular el alcance de tus contenidos más allá de las barreras lingüísticas con una precisión revolucionaria. Las pruebas en condiciones reales demuestran que estas soluciones imprescindibles ofrecen comparativas entre opciones gratuitas y de pago, así como clasificaciones fiables para maximizar la productividad. Explora ahora y descubre la herramienta perfecta para la distribución global de contenidos.
10 herramientas
xix.ai
comentario (0)
0/500
A medida que el aprendizaje por refuerzo para grandes modelos se escala a clústeres de GPU más grandes y conjuntos de datos de entrenamiento más densos, la eficiencia del entrenamiento se ha convertido en una prioridad crítica. Investigaciones recientes del equipo Tencent Huan Yuan abordan un desafío frecuentemente pasado por alto: cuando los modelos generan sus propios datos de entrenamiento, ¿cómo deben redefinirse los tamaños de lote dadas las diferentes velocidades de generación de respuestas y entrenamiento?
Basándose en la teoría clásica del tamaño crítico de lote, el estudio vuelve a derivar este concepto para el aprendizaje por refuerzo en línea de grandes modelos de lenguaje. Los hallazgos ofrecen una solución práctica: al ajustar la tasa de aprendizaje dentro de un rango específico a medida que aumenta el tamaño del lote, tanto los algoritmos GRPO como PPO pueden garantizar que cada respuesta aprenda de manera efectiva sin ser diluida. Esto indica que el tamaño del lote no es simplemente "cuanto mayor, mejor" ni un valor fijo; más bien, existe dentro de un rango óptimo que puede ajustarse finamente para lograr la máxima eficiencia.
El impacto en los costos reales de hardware es sustancial. Con configuraciones de hardware fijas, aumentar el tamaño del lote puede impulsar la tasa de generación de PPO hasta 2.29 veces. Mientras tanto, la configuración óptima de GRPO logra los mismos objetivos de validación en un 29% menos de tiempo. Para equipos que invierten fuertemente en recursos de GPU, esto se traduce en completar tareas más rápido con el mismo clúster o procesar más datos dentro del mismo período de tiempo, reduciendo efectivamente los costos en la fase más costosa del aprendizaje por refuerzo.
Esta investigación proporciona una palanca práctica para escalar el RL en línea, donde el modelo actúa tanto como estudiante como creador de preguntas. La brecha de eficiencia surge del desajuste entre las escalas de generación y entrenamiento, que este estudio aborda combinando la teoría del tamaño crítico de lote con ajustes en la tasa de aprendizaje. Mientras la industria compite por construir los modelos más grandes, Tencent Huan Yuan se centra en optimizar el hardware existente para mayor rentabilidad.
Las startups de inteligencia artificial aceleran el crecimiento de los ingresos
Como las empresas consolidadas y las nuevas startups compiten por aprovechar la inteligencia artificial, numerosas startups de IA informan que sus ingresos no solo están creciendo, sino que se están acelerando rápidamente, alcanzando hitos posteriore
Amjad Masad de Replit sobre el acuerdo con Cursor, la lucha contra Apple y por qué prefiere no vender
Amjad Masad ha pasado la última década construyendo Replit, pero los últimos 18 meses han sido un período transformador. La plataforma de codificación con IA ha pasado de unos ingresos anuales de 2,8 millones de dólares en 2024 a una trayectoria haci
Los agentes de IA impulsan la acuicultura de camarones mientras el MIIT emite una advertencia y Rockchip responde
La conversación en la comunidad de inteligencia artificial ha pasado de "entrenar grandes modelos" a "criar langostas". Si ves a alguien en las redes sociales discutiendo cómo alimentar datos y ajustar parámetros para una "langosta", no te confundas:
Las mejores herramientas de investigación de inversiones basadas en IA de 2026, cuidadosamente seleccionadas por XIX.AI. Estas potentes herramientas ofrecen ventajas revolucionarias para acelerar la creación de contenidos, mejorar la eficiencia en la redacción y optimizar las tareas de análisis, con el fin de ayudar a los profesionales a sacar el máximo partido a la IA. Consigue una comparación entre las versiones gratuitas y de pago, junto con pruebas en condiciones reales y clasificaciones detalladas. ¡Explora ahora mismo para descubrir tu herramienta perfecta!
11 herramientas
xix.ai
Los mejores generadores de pruebas de IA de 2026, altamente calificados y actualizados, para el desarrollo de APIs y funciones. XIX.AI ha reunido una colección poderosa y revolucionaria de herramientas imprescindibles que han superado pruebas rigurosas en entornos reales a fin de ofrecer resultados precisos. Encontrará aquí análisis detallados y comparativas gratuitas frente a las opciones de pago, además de clasificaciones actualizadas semanalmente. Explore ahora mismo para descubrir la herramienta perfecta para usted y aprovechar toda la ventaja que le brinda la inteligencia artificial en las pruebas de software.
7 herramientas
xix.ai
¡Los mejores generadores de planes de negocio con IA de 2026, los más valorados, ya están aquí, en XIX.AI! Esta selección incluye potentes herramientas revolucionarias que ayudan a los creadores a convertir rápidamente sus ideas innovadoras en borradores de presentaciones para inversores perfectamente elaborados. Encontrarás clasificaciones actualizadas semanalmente, comparativas entre versiones gratuitas y de pago, y pruebas en condiciones reales que te ayudarán a elegir la solución imprescindible que impulse tu productividad y ofrezca los mejores resultados. ¡Explora ahora mismo y descubre la herramienta perfecta para conseguir financiación!
11 herramientas
xix.ai
¡Las mejores plataformas de OCR de facturas con IA de 2026 para QuickBooks, Xero y la conciliación de múltiples entidades! XIX.AI elabora una lista de las herramientas mejor valoradas, que ofrecen pruebas precisas en condiciones reales y clasificaciones actualizadas semanalmente. Estas soluciones imprescindibles agilizan el procesamiento de facturas, aumentan la productividad y ahorran tiempo en entornos empresariales complejos. Consulta una comparación entre las versiones gratuitas y de pago para encontrar la que mejor se adapta a tus necesidades. ¡Descúbrelas ahora y aprovecha las ventajas de la IA!
8 herramientas
xix.ai
¡El mejor software de 2026 para responder a solicitudes de propuestas (RFP) con IA, ideal para los flujos de trabajo de propuestas empresariales! XIX.AI ha elaborado una lista de las herramientas mejor valoradas, que han superado rigurosas pruebas en condiciones reales y ofrecen funciones imprescindibles para impulsar la productividad y optimizar tus procesos de elaboración de propuestas. Consigue una comparación entre las versiones gratuitas y de pago, consulta las clasificaciones detalladas y descubre cómo estas soluciones revolucionarias pueden ayudarte a crear respuestas de alta calidad más rápidamente. ¡Explora ahora mismo y aprovecha tu ventaja con la IA!
9 herramientas
xix.ai
Las mejores herramientas de subtitulado y doblaje con IA de 2026, seleccionadas para la localización de vídeos destinados a un público internacional. Amplía de forma espectacular el alcance de tus contenidos más allá de las barreras lingüísticas con una precisión revolucionaria. Las pruebas en condiciones reales demuestran que estas soluciones imprescindibles ofrecen comparativas entre opciones gratuitas y de pago, así como clasificaciones fiables para maximizar la productividad. Explora ahora y descubre la herramienta perfecta para la distribución global de contenidos.
10 herramientas
xix.ai
