照亮星星的人们 @rainbowsea

今日工作总结 1. 敲定当前T2V的pipeline，并完成最后的推理，计算metrics. 2. 调查V2T的pipelines，目前, Video Captioning的模型和架构以VLM的形式存在，近期有LlaVa, Video-LlaMa, EILEV等。不过由 ... (more)

今日工作总结 1. 日常吹水。和动画佬聊AI在人设、人设需求上发展的场景，以及近期业内使用AI辅助工作流的一部分情况。此外，在B站上看到一个原画模型，从案例展示的生成结果来看效果不错，这几天有空测 ... (more)

今日の仕事のまとめ 1.プロジェクトの試験部分の仕事。DreamBoothとモデルの融合を行った、変なばぐをフィクスした。いま、AnimateDiffの表現はあまりよくないて、captionと関係がおあると思い ... (more)

一个词: Simplicity (1) API Simplicity. 尤其关注Return的简洁性。比如，dataloader的__getitem__必须返回原始数据结构(video, text)，而并非tokenized text, 或者vit_features, 最好连transform ... (more)

今日工作总结 1. 继续测试模型。这几天一直在跑实验，今天测试了ModelScopeT2V和VGen, MST2V虽然效果比较古神，但是好歹能跑起来，光是这一点就比Open-Sora和Open-Sora-Plan可靠...，不过虽然有个大致 ... (more)

今日工作总结 1. 推进实验部分工作。完成generation inference, 测试FID。 2. 继续了解HDR的标准和原理，明天查看一下现有的workflow. 3. 申请PhD... ... (more)

今日工作总结 1. 训练模型... 2. 申请Ph.D Program... 3. 了解HDR标准... (more)

今日工作总结 1. 推进项目实验部分、训练generation模型。. (more)

今日工作总结 1. 做实验。测试、微调generation的benchmarks模型。非常幸运地，两个pipelines都能一帆风顺地跑起来。 2. 论文修改，完善引用。 购入了一台mini pc以快速收集数据。 明天要处理一 ... (more)

今日工作总结 1. 和合作者对接实验进度、规划后续实验，训练variants subset 2. ts encoder的架构简化工作。昨天确定下来的结构稍微有点臃肿，做了一个简化，然后重新训练，并分析了可视化结果。 ... (more)