2023-6-29 23:56 /
---今日工作总结---
1. 阅读AnimeRun论文。文中提到
region-wise correspondence facilitates automatic colorization by propagating the color in a reference frame to corresponding segments in target frames, while pixel-wise correspondence (a.k.a optical flow) permits fine-grained image warping for frame interpolation
基于region相似度匹配和光流求解warp方程/correlation matrix是目前所有视频推理的基本思路。

2. 对照论文修改网络。去除了所有的BN层,缩减了resnext的卷积层数量,目前网络结果有输出,但是结果比较糟糕,而且会出现输出变成nan的情况,可能是由于输入(sketch)带有nan,或者模型colapse了?也有可能是CMFT模块的问题.... 从没遇见过这种情况,明天还需要进行深入的调试和改进。

复现这篇论文花的时间稍微有点久了,也没有来得及赶得上最新的论文,有些郁闷,,公司的工作进展也不顺利。今天早点休息了。