ProPainter(学术开源)
新加坡 NTU S-Lab 视频 inpainting 学术开源(**ICCV 2023,禁商业**)
简介
**chdh.me 必须明确**:ProPainter **是学术研究项目 + 开源代码,不是商业 SaaS**!应作为「开源研究工具」标签处理,不应与商业付费 SaaS 同框排序。**作者团队**:Shangchen Zhou(**周尚辰**)、Chongyi Li(李重仪)、Kelvin C.K. Chan、Chen Change Loy(**吕尘成**),来自 **新加坡南洋理工大学 NTU S-Lab**(Nanyang Technological University)。**ICCV 2023 论文**《ProPainter: Improving Propagation and Transformer for Video Inpainting》。**域名**:项目主页 shangchenzhou.com/projects/ProPainter/(一作个人学术页);代码仓库 **github.com/sczhou/ProPainter**。**License**:**NTU S-Lab License 1.0** —— 明确**禁止商业用途**;商业使用需邮件联系 [email protected] 和 Chen Change Loy 教授([email protected])单独授权。同组前作 CodeFormer(人脸修复)+ E2FGVI(视频补全)。
核心功能
- 视频 inpainting(补全 / 擦除 / 外扩)
- 改进的 propagation 模块
- 高效 Transformer 架构
- ICCV 2023 顶会论文
- NTU S-Lab License 1.0(禁商业)
优缺点
优点
- **ICCV 2023 顶会论文**,技术权威性高
- **完全开源** + 模型权重 + HuggingFace Demo
- NTU S-Lab 团队 + 同组前作 CodeFormer / E2FGVI 信誉积累
- 改进的 propagation + Transformer 架构是技术创新
缺点
- **License 禁商业用途**(NTU S-Lab License 1.0)
- **不是开箱即用工具**,需要 PyTorch + 深度学习能力
- 与商业 SaaS(Runway / CapCut)相比体验差距大
- chdh.me v2 中分类需明确"开源研究工具"标签
详细介绍
⚠️ 这是什么 + 关键性质澄清
**chdh.me 必须明确**:ProPainter **是学术研究项目 + 开源代码**,**不是商业 SaaS**!
- **作为"开源研究工具"标签处理**
- **不应和商业付费 SaaS 同框排序**
- 收录是为了 chdh.me 工具池的研究工具完整性
作者团队
- **Shangchen Zhou(周尚辰)**(一作)
- **Chongyi Li(李重仪)**
- **Kelvin C.K. Chan**
- **Chen Change Loy(吕尘成)**
机构
- **S-Lab, Nanyang Technological University(新加坡南洋理工大学 S-Lab)**
发表
- **ICCV 2023**(IEEE International Conference on Computer Vision)
- 论文标题:《**ProPainter: Improving Propagation and Transformer for Video Inpainting**》
域名 + 仓库
- **项目主页**:**shangchenzhou.com/projects/ProPainter/**(一作个人学术页)
- **代码仓库**:**github.com/sczhou/ProPainter**
当前状态
- **开源代码 + 模型权重持续可用**
- **HuggingFace Demo 在线**
核心功能
- **视频 inpainting**(视频补全 / 物体擦除 / 视频外扩 outpainting)
- **核心创新**:改进的 propagation 模块 + 高效 Transformer 架构
定价
- **完全免费下载使用**
- **仅限非商业用途!**
License(chdh.me 重要事实)
- **NTU S-Lab License 1.0**
- **明确禁止商业用途**
- **商业使用需邮件联系**:
- - **[email protected]**(周尚辰)
- - **[email protected]**(Chen Change Loy 教授)
- - 单独授权
适合谁
- AI / 视觉研究者做对比基线
- 开发者做视频 inpainting 技术研究
- 学习 propagation + Transformer 在视频任务上的应用
- 非商业项目(个人项目 / 学术研究)
不适合谁
- **任何商业 SaaS / 商业项目** —— License 明确禁商业,需单独授权
- 需要开箱即用的视频编辑工具(应使用 Runway Magic Erase / CapCut 移除工具 / Wonder Studio 等商业产品)
- 不熟悉 PyTorch / 深度学习的用户
与同领域学术 / 工程方案对比
- **E2FGVI**(同组前作)
- **DiffuEraser**(ProPainter 之后的)
- **Sora / Runway Gen-3 的 inpainting 能力**
- **商汤 PixVerse**
- **字节 Seaweed**
商业 SaaS 化产品(替代)
- **Runway Magic Erase**
- **CapCut 移除工具**
- **Wonder Studio**
一作背景
- **周尚辰**:NTU MMLab/S-Lab **博士**
- 同组前作:
- - **CodeFormer**(人脸修复)
- - **E2FGVI**(视频补全)
- - 都来自同一团队
注意事项
- **chdh.me 处理时建议作为"开源研究工具"标签**,而非和商业付费 SaaS 同框排序
- **License 明确禁商业**,商用需邮件单独授权
- 不是开箱即用的视频编辑工具,需要 PyTorch + 深度学习能力
- 学术影响力大但商用化程度低
常见问题
ProPainter 是商业产品吗?
**不是!** ProPainter 是**学术研究项目 + 开源代码**,**不是商业 SaaS**。来自新加坡 NTU S-Lab,ICCV 2023 论文。**License 明确禁止商业用途** —— 商业使用需邮件联系 [email protected] 和 [email protected] 单独授权。chdh.me 评测应明确这一性质,避免读者误用。
能商用吗?
**不能直接商用**。NTU S-Lab License 1.0 明确禁止商业用途。如果你想商用,需邮件联系:**周尚辰([email protected])+ Chen Change Loy 教授([email protected])** 单独授权。
和 Runway Magic Erase 怎么选?
**完全不同性质**。**Runway Magic Erase** 是商业 SaaS(Runway 公司),开箱即用 + 订阅付费 + 商业可用。**ProPainter** 是学术开源代码,需要 PyTorch 部署,但研究 / 学术对比基线场景免费 + 强大。**商业项目用 Runway,研究 / 个人项目用 ProPainter**。
ProPainter 作者是谁?
**4 位作者**:**Shangchen Zhou(周尚辰)**(一作,NTU MMLab/S-Lab 博士)、**Chongyi Li(李重仪)**、**Kelvin C.K. Chan**、**Chen Change Loy(吕尘成)**。同组前作还有 CodeFormer(人脸修复)和 E2FGVI(视频补全)。
如何使用 ProPainter?
需要 PyTorch + GPU。从 GitHub 仓库 (github.com/sczhou/ProPainter) 克隆代码,下载预训练模型权重,按 README 配置运行。也可以直接使用 HuggingFace 上的在线 Demo(无需自己部署)。**chdh.me 提醒:商用必须先获得授权**。