用于可流式自由视点视频的神经残余辐射场
翻译题名NEURAL RESIDUAL RADIANCE FIELDS FOR STREAMABLE FREE-VIEWPOINT VIDEOS
申请号WOCN23100938
2024-10-17
公开(公告)号WO2024212346A1
公开日期2024-10-17
摘要

残差辐射场(ReRF),作为一种高度紧凑的神经表示,以实现长时长动态场景的实时FVV渲染。ReRF显式地对时空特征空间中相邻时间戳之间的残差信息进行建模,使用基于全局坐标的紧凑MLP作为特征解码器。ReRF采用紧凑运动网格以及剩余特征网格来利用帧间特征相似性。还有一种顺序训练方案,以保持运动//残差网格的平滑性和稀疏性。基于ReRF,可以设计实现三个数量级压缩率的特殊FVV编解码器,并且可以实现配套的ReRF播放器以支持动态场景的长持续时间FVV的在线流传输。

翻译摘要

Residual Radiance Field (ReRF), as a highly compact neural representation to achieve real-time FVV rendering on long-duration dynamic scenes. ReRF explicitly models the residual information between adjacent timestamps in the spatial-temporal feature space, with a global coordinate-based compact MLP as the feature decoder. ReRF employs a compact motion grid along with a residual feature grid to exploit inter-frame feature similarities. Also a sequential training scheme to maintain the smoothness and the sparsity of the motion//residual grids. Based on ReRF, a special FVV codec may be designed that achieves three orders of magnitudes compression rate and a companion ReRF player may be implemented to support online streaming of long-duration FVVs of dynamic scenes.

当前权利人Shanghaitech University
专利代理人Shanghai Savvy Intellectual Property Agency
代理机构Shanghai Savvy Intellectual Property Agency
专利申请人Shanghaitech University
公开国别WO
公开国别简称WO
IPC 分类号G06N3//0455
专利有效性PCT-有效期内
专利类型发明申请
专利类型字典1
当前法律状态未进入国家阶段-PCT有效期内
简单同族WO2024212346A1
扩展同族WO2024212346A1
INPADOC 同族WO2024212346A1
文献类型专利
条目标识符https://kms.shanghaitech.edu.cn/handle/2MSLDSTB/433560
专题信息科学与技术学院_博士生
信息科学与技术学院_PI研究组_虞晶怡组
信息科学与技术学院_PI研究组_许岚组
作者单位
Shanghaitech University
推荐引用方式
GB/T 7714
Wang Liao,Yu Jingyi,Xu Lan,等. 用于可流式自由视点视频的神经残余辐射场. WOCN23100938[P]. 2024-10-17.
条目包含的文件
文件名称/大小 文献类型 版本类型 开放类型 使用许可
个性服务
查看访问统计
谷歌学术
谷歌学术中相似的文章
[Wang Liao]的文章
[Yu Jingyi]的文章
[Xu Lan]的文章
百度学术
百度学术中相似的文章
[Wang Liao]的文章
[Yu Jingyi]的文章
[Xu Lan]的文章
必应学术
必应学术中相似的文章
[Wang Liao]的文章
[Yu Jingyi]的文章
[Xu Lan]的文章
相关权益政策
暂无数据
收藏/分享
所有评论 (0)
暂无评论
 

除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。