Investigadores adaptan OPD para un razonamiento de video más eficiente
Dos estudios usan técnicas de destilación para mejorar modelos más pequeños o de transmisión orientados a la comprensión de video.
Por qué importa
El trabajo apunta a un cuello de botella central en la IA de video: mejorar el razonamiento sobre muchos fotogramas sin depender de modelos más grandes y costosos ni de sistemas adicionales de memoria en tiempo de inferencia. También sugiere que la forma en que se aplica la destilación durante las trayectorias puede importar tanto como la supervisión de los tokens de salida.
Puntos clave
- 1.Latent-OPD destila estados ocultos a nivel de trayectoria, no solo tokens de salida.
- 2.StreamOPD usa OPD en modo de razonamiento, pero se despliega en modo instruct.
- 3.Las mejoras reportadas apuntan a benchmarks de video en streaming sin cambiar la inferencia.
Dos informes describen métodos de posentrenamiento que usan destilación on-policy para razonamiento de video y comprensión de video en streaming. Latent-OPD añade destilación latente a nivel de trayectoria al alinear los estados ocultos del estudiante con capas del profesor al final de las trayectorias de razonamiento. StreamOPD combina datos verificables de video en streaming, OPD en modo de razonamiento y despliegue en modo instruct, y reporta mejoras en StreamingBench y OVO-Bench sin cambiar la inferencia.
⚡ Pruébalo hoy
Revise los artículos de Latent-OPD y StreamOPD antes de elegir una receta de destilación para sistemas eficientes o de streaming de comprensión de video.
Fuentes y cobertura original
Este resumen sintetiza y enlaza la cobertura de los medios siguientes.
¿Te gustó este resumen? Recibe el próximo en tu correo.
Más en Política y seguridad
OpenAI refuerza sus salvaguardas tras una brecha en Hugging Face
La compañía aumentará la supervisión de modelos y el trabajo de alineación y seguridad posterior al entrenamiento.
Investigadores usaron Copilot para revelar una falla en sus propias barreras de seguridad
Varonis afirma que Microsoft 365 Copilot Enterprise podía ser manipulado para facilitar la exfiltración de datos.
OpenAI presenta un modo específico de ChatGPT para adolescentes
ChatGPT for Teens añade protecciones más sólidas, funciones de uso saludable y controles parentales.