Brain-inspired Lab Peking University

PHM(Photo-realistic High-speed Motion)

PHM(Photo-realistic High-speed Motion)

optical flow simulate dataset

用途:作为测试集,包含逼真的高速场景。
场景类别:10类(如 Ball、Fan、Fly),共约 25,100 帧数据;光流标签覆盖所有像素(100% 密度)。
数据格式:与 SPIFT 相同,但场景更复杂。

可支持的任务:

  • 光流估计:利用脉冲流直接训练端到端模型(如 SCFlow)。
  • 运动去模糊:通过 FAW(Flow-guided Adaptive Window) 验证运动模糊的抑制效果。
  • 跨模态分析:研究脉冲流与重建图像/事件流的关联。

数据集链接:https://pan.baidu.com/s/1A5U9lsNyViGEQIyulSE8vg (password:5331).

每个场景脉冲数

场景 Ball Cook Dice Doll Fan Fly Hand Jump Poker Top
帧数 1000 4000 4000 3000 3000 4500 2000 1400 3200 1000
figure image
随机抽取示例如上(每隔10帧生成光流)
随机抽取示例如上(每隔10帧生成光流)

对于不同的时间间隔而言,以Poker为例:

我们故意放缓速度便于对比,可以看出Δt=10光流效果更加丝滑,而Δt=20略有卡顿。

Δt=10光流和Δt=20光流可视化与脉冲流可视化对比。
Δt=10光流和Δt=20光流可视化与脉冲流可视化对比。

特别注意: PHM 数据集中的 “Fly” 场景具有极其剧烈的运动特性,建议在研究中排除该场景。我们将在未来的工作中更新和重建该场景。