已经使用 OpenGL 渲染出 13*13 个视角的图片现在想法是取四个角落的图片然后插值预测中间视角的图片和渲染出来的图片量化对比,越相似越好考虑使用光流法计算角落视角图片的像素位移,然后根据像素位移计算中间视角图片,考虑对比稠密和稀疏两种方式另外还有深度图,能否结合深度图来解决融合权重,来更好的处理像素 基本流程如下 OpenGL 渲染出来的视角图片 有没有大佬懂图片处理能够实现的,或者使用其他技术实现,绿泡泡:RHlsYW5fc3RyaXZl
四角的视角方向已知的话,深度图精度足够高的话,不考虑投射到空间点云然后投影插值么? 算了看到 C++,肯定是要性能,要么就是四角的摄影机角度不知道要自己算(空间卷积拟合运算量爆炸),要么就是深度图精度不够,估计不行…… 话说为什么有人会用 C++在干这种 Nvidia DLSS 插帧在干的事情…… 课设么?
我不是专家,但是如果不知道视角插帧的话,我知道的至少有两种。 一种是 AI 模型插帧,性能巨差但是显卡加速,本质是卷积或者偷懒或优化过的卷积,被遮挡的像素估计出来像一点 可能半开源 还有一种就纯 2D 位移缩放旋转,被遮挡的像素基本就糊成一片(随便填的),比较快,CPU 能实时 60 插 120 帧 1080P 之类 后一种你可以下个 SVP Project 看看选项,有各种优化,性能的,估计(搜索)方法的,遮挡像素怎么填充的,满足各种喜好和性能需求……