【REDstar】流式视频理解算法工程师

我们正在探索流式视频大模型方向，致力于让模型从“看完再回答”进化为“边看边理解、实时响应”。你将参与构建面向真实世界的实时视觉理解系统，覆盖视频流理解、长时记忆建模、主动式交互等前沿课题，推动模型能力从离线走向在线。 流式理解核心研究： 1、跟踪流式视频理解领域最新进展，输出技术洞察，探索适合业务场景的创新方案； 2、设计高效的流式推理架构，包括记忆压缩模块、时序建模与位置编码方案； 3、构建流式视频训练数据集与训练框架，探索离线到在线的课程学习范式； 视频内容理解落地： 4、研发视频内容理解模型：画质和美学可归因评价、高光识别、场景分类、精彩度评分、人物/物体语义理解； 5、实现智能切片能力：从直播流/点播视频中自动定位高光片段，支持实时和离线两种模式； 6、将内容理解能力接入产品链路，包括直播封面、运营挖掘工具、创作者笔记诊断报告等； 评测与工程： 7、构建流式视频评测体系，与人工标注对比，持续提升模型精度； 8、优化端到端推理延迟、显存占用和吞吐量，满足实时性要求。 【任职要求】 1、本科及以上学历，计算机、电子工程、自动化等相关专业； 2、扎实的深度学习基础，熟悉 Transformer 架构、注意力机制、位置编码等核心技术； 3、熟练掌握 PyTorch，具备独立复现/改进论文的能力； 4、良好的代码工程能力，有大规模分布式训练经验优先。 专业方向（满足其中一项即可）： 1、有视频理解相关研究或工程经验（VideoLLM、MLLM、Video QA、时序建模等），能独立跟进前沿工作； 2、有长上下文/高效推理相关经验（KV Cache 优化、序列并行、量化、蒸馏等）； 3、有在线视频理解或流式系统相关经验，了解实时推理系统架构设计。 【加分项】： 1、在 CVPR、ICCV、NeurIPS、ICLR、ECCV、AAAI 等顶会发表过相关论文，有一作或重要贡献者优先； 2、有直播/视频平台内容理解落地经验（高光识别、精华切片、封面生成等具体场景）； 3、了解视频编解码基础（I/P/B 帧、码率、分辨率），能理解多媒体系统上下文； 4、熟悉 RL/RLHF 在多模态模型上的应用。