GROVE, 스트리밍 비디오 어시스턴트를 위한 계층형 메모리 추가

연구진은 연속 비디오 스트림에서 인과적으로 메모리를 구축하는 스트리밍 비디오 경험용 학습 불필요 프레임워크 GROVE를 공개했다. 이 시스템은 세밀한 지각 증거를 유지하면서 이를 타임스탬프가 붙은 순간, 일관된 에피소드, 여러 날에 걸쳐 반복되는 패턴으로 통합하고, 각 수준에 맞는 검색 능력을 적용한다. 저자들은 GROVE가 MM-lifelong과 EgoServe를 포함한 여러 벤치마크에서 비교 대상 방법들 가운데 최고 성능을 냈다고 보고했다. 관련 arXiv 논문 ObjectStream 역시 지속적 앵커 역할을 하는 잠재 객체를 활용해 학습 없이 스트리밍 비디오 이해를 위한 메모리를 다룬다.